使用ClickHouse-Local迁移上云
当您需要优化数据管理、提高数据访问性能和降低数据库维护成本时，您可以将自建数据库迁移至云数据库ClickHouse企业版。云数据库ClickHouse企业版通过ClickHouse-Local工具为您的迁移任务提供了简便且可靠的解决方案。什么是ClickHouse-...
什么是RDS MySQL
RDS MySQL 阿里云关系型数据库服务RDS（Relational Database Service）支持MySQL引擎，RDS MySQL是基于阿里巴巴MySQL源码分支的在线数据库服务，经过双十一高并发、大数据量的考验，拥有优良的性能。RDS MySQL支持实例管理、账号管理、数据...
JSON_OBJECT
生成JSON OBJECT，要求key和value成对出现。命令格式 json json_object(,[,,])参数说明 key：最少需要存在1个key，也可以存在多个，支持的类型为STRING。value：最少需要存在1个value，也可以存在多个，支持的类型包括STRING、BIGINT、INT...
JSON_ARRAY
生成JSON ARRAY。将一个可能为空的JSON类型对象，转换为包含这些类型的数组。命令格式 json json_array()参数说明 element：必填。该参数支持的类型包括STRING、BIGINT、BOOLEAN和JSON。返回值说明 返回JSON类型。使用示例-生成json array ...
生成数据库脚本
平台提供两种数据库脚本生成方式：表结构生成语句和表结构变更语句。本文为您介绍如何生成数据库脚本。操作步骤 登录BizWorks，在 选择平台 下拉列表中选中 建模平台。单击页面右上角 图标或其文本框区域，在下拉列表中单击目标项目名称后...
RestAPI（HTTP形式）数据源
是 无 column 生成JSON数据对应的字段路径列表，type指定源数据的类型，name指定当前column数据放置的JSON路径。您可以指定column字段信息，配置如下。column":[{"type":"long","name":"a.b"/放置column数据到路径a.b},{"type":"string",...
预置卡片
设置卡片数据，此处为 Bundle 内置 Json 读取数据；也可以请求自身服务端接口获取数据，但要转换为 Json 字符串[cardConfig setData:[self dictionaryWithJsonString:strData]];创建卡片[[CubeEngine sharedInstance]createCard:cardConfig...
ElasticSearch
spark/读取oss数据 val path="oss:/your bucket/data/es_case.json"val data=spark.read.option("header","true").option("inferSchema","true").json(path)/数据处理展示 data.na.drop.show(10)/写入数据到ES data.write.format("org....
概述
为了实现读取能力的弹性扩展，分担数据库压力，您可以创建一个或多个只读实例，利用只读实例满足大量的数据库读取需求，增加应用的吞吐量。读写分离：读写分离功能是在只读实例的基础上，额外提供了一个读写分离地址，联动主实例及其所有...
JSON
支持JSON格式的连接器有：消息队列Kafka、Upsert Kafka、Elasticsearch、对象存储OSS，云数据库MongoDB 和 StarRocks 等。使用示例 利用Kafka以及JSON格式构建表的示例如下。CREATE TABLE Orders(orderId INT,product STRING,orderInfo MAP...
从OSS导入JSON数据文件
在HybridDB for MySQL中建立导出数据的真实存储表 在HybridDB for MySQL中建立一张外表映射到JSON文件 调用 INSERT INTO SELECT 来完成数据导入 操作步骤 登录HybridDB for MySQL数据库，具体的操作请参考 登录数据库。在HybridDB for ...
新建数据库
实例购买后会默认生成一个数据库postgres，但系统分配给该数据库的资源较少，仅供管理用途，实际业务需要新建数据库。本小节将会为您介绍如何在HoloStudio中创建新的数据库。操作步骤 新建数据库 您可以使用以下两种方式来新建数据库：...
GET_JSON_OBJECT
例如在某数据库的public Schema下创建了extension，则此数据库下其余的Schema不能再创建extension。可以将extension直接创建在pg_catalog系统Schema下，就会默认所有数据库的所有Schema都能使用该功能。需要Superuser创建extension。命令...
JSON与XML解析库
JSON 或 XML 格式的数据。函数原型 property_write(uint hanlder,int type)returns(string result);请求参数 参数 必选 类型 说明 handler 是 uint 处理 JSON 字符串函数返回的标识符 type 是 string 类型，0：JSON；1：XML 返回值 参数 必...
模板转换工具的常用命令
json yaml 例如：以下代码表示将Terraform模板转换为ROS模板，并在当前目录生成JSON格式的ROS模板文件 template.json。rostran transform templates/terraform/alicloud/main.tf-target-format json 转换模板示例如下：Terraform模板转换为...
Delta Lake 快速开始一
delta=spark.read.format("delta").load(deltaPath)events_delta.printSchema()重置数据库%pyspark spark.sql("DROP DATABASE IF EXISTS {} CASCADE".format(database))#注意{}是在pyspark里spark.sql()中使用的变量，参数在.format中指定...
文件分析
云数据库 SelectDB 版 支持表函数功能（Table-Value-Function或TVF），可以将S3、HDFS等常见远端存储中的文件数据，映射成 云数据库 SelectDB 版 中的表，从而对这些文件数据进行分析。S3表函数 S3表函数可以让您像访问关系型数据库一样，...
读取数据
重要 如果未记录自增主键列的值，您可以使用范围读取数据按照第一个主键列确定范围读取数据。读取单行数据 调用 GetRow 接口读取一行数据。适用于能确定完整主键且要读取行数较少的场景。读取单行数据时，您可以配置如下条件过滤所需数据。...
将AI模型推理结果写回数据库
本文描述了如何通过PolarDB for AI在数据库中生成含有AI模型推理列的数据表PolarDB for AI Augmented Table（下文简称AAT）。经过人工智能增强的数据表可广泛应用于Data+AI的多个场景，以协助用户进行数据洞察，并根据实际情况调整其决策。...
插件和流程编排应用
194,"OutputTokens":45,"ModelId":"bailian_nl2sql"}]},"RequestId":"f0a953cc-*-f32e606985d7"} 说明 在调用自然语言转SQL应用时，您可以在百炼控制台测试窗使用“表模式”来编辑数据库Schema信息，然后点击“Code模式”生成JSON格式数据...
JSON文件
在Spark中，我们提及的JSON文件是换行符分隔的JSON，每行必须包含一个单独的，独立有效的JSON对象。前提条件 通过主账号登录 阿里云 Databricks控制台。已创建集群，具体请参见 创建集群。已使用OSS管理控制台创建 非系统目录存储空间，...
快速入门
注意 说明 应用中同一配置的数据库应当只被创建一次并保持单例,严格避免重复创建相同配置的数据库实例不同配置的数据库实例可以共存数据库读写操作,数据变化事件和数据库事件的回调返回到数据库被创建时的线程上（需要该线程有 Looper）3.2...
复杂类型函数
您可以在MaxCompute SQL中使用复杂类型函数处理复杂数据类型，例如ARRAY、MAP、STRUCT、JSON。本文为您提供MaxCompute SQL支持的复杂类型函数的命令格式、参数说明及示例，指导您使用复杂类型函数完成开发。MaxCompute SQL支持的复杂类型...
GetRow
time_range TimeRange 否，和max_versions必须至少存在一个 读取数据的版本时间戳范围。时间戳的单位为毫秒，取值最小值为0，最大值为INT64.MAX。如果要查询一个范围，则指定start_time和end_time；如果要查询一个特定时间戳，则指定...
Kafka数据源
实时同步写入数据到Kafka时，写入的格式为内置的JSON格式，写入数据为包含数据库变更消息的数据、业务时间和DDL信息的所有数据，数据格式详情请参见 附录：消息格式。同步任务类型 写入Kafka value 的格式 源端字段类型 写入时的处理方式 ...
一键实时同步至Kafka
附录：写入Kafka消息格式定义 完成配置实时同步任务的操作后，执行同步任务会将源端数据库读取的数据，以JSON格式写入到Kafka topic中。除了会将设置的源端表中已有数据全部写入Kafka对应Topic中，还会启动实时同步将增量数据持续写入Kafka...
使用OSS Foreign Table进行数据湖分析
您可以使用CREATE USER MAPPING语句创建OSS User Mapping，用于定义 AnalyticDB PostgreSQL版 数据库用户与访问OSS Server用户的映射关系。更多介绍，请参见 CREATE USER MAPPING。语法 CREATE USER MAPPING FOR { username|USER|CURRENT_...
业务组件开发
├─index.js 模块文件├─mock.json 模块可配置的属性的 mock 测试数据└─schema.json 模块可配置的属性数据 您也可以在 src/components 下新增其他的目录或文件，根据资源、功能划分进行调整。组件调试 运行 npm start，可打开 ...
JSON索引（2.0版）
例如，以下示例中的 json_test 字段类型为JSON类型，建表成功后分析型数据库MySQL版自动为 json_test 列构建JSON索引。create tablegroup par2_group;CREATE TABLE json_tbl(id bigint COMMENT '',sid bigint COMMENT '',json_test json ...
JSON&JSONB 数据类型操作
JSON 类型几乎已成为互联网及物联网（IoT）的基础数据类型，AnalyticDB PostgreSQL 数据库对JSON数据类型做了完善的支持。并且 AnalyticDB PostgreSQL 6.0版 支持JSONB类型。这部分介绍对JSON&JSONB数据类型的操作，包括：JSON&JSONB的异同...
如何判断是否已生成清单文件？
在清单导出过程中会生成记录Object信息的一个或多个后缀为.csv.gz的清单报告文件。待清单报告文件生成后，会生成汇总清单报告文件的manifest文件。本文介绍判断清单文件是否已生成的两种方式。清单规则配置示例 假设您通过控制台设置清单...
数据结构设计
分布式文件存储数据库(MongoDB)关系型数据库(MySQL)数据库（database）数据库（database）表（collection）表（table）记录（document）行（row）域（field）列（column）索引（index）索引（index）自动将_id 字段作为主键 主键（primary ...
JSON类型
JSON 基本类型和相应的本数据库类型 JSON 基本类型 本数据库类型 注释 string text \u0000 是不允许的，因为 Unicode 转义表示数据库编码中不可用的字符 number numeric 不允许 NaN 和 infinity 值 boolean boolean 只接受小写 true 和 ...
如何对JSON类型进行高效分析
传统数据库解决方案 传统关系型数据库（MySQL、PostgreSQL与ClickHouse等）在处理JSON数据时经常将原始JSON数据编码成二进制数据并存储到表的JSON类型列中，查询时使用JSON函数对整个JSON列数据进行实时解析与计算等。JSON作为半结构化数据...
数据类型转换
ENUM ENUM SET SET JSON 类型 MySQL 数据库 OceanBase 数据库 MySQL 租户 JSON 依赖于 OceanBase 数据库 MySQL 租户的版本：3.2.3 以下版本会转换为 TEXT，3.2.3 及以上版本会转换为 JSON。GIS 类型 重要 OceanBase 数据库 3.2.4 和 4.1.0 ...
Kafka集群的数据存储格式
Canal Json：Canal 解析数据库增量日志，并将增量数据传输至Kafka集群，数据存储格式为Canal Json。DTS Avro DTS Avro 为默认存储格式。您需要根据DTS Avro的schema定义进行数据解析，schema定义详情请参见迁移或同步至Kafka集群中的数据均...
Kafka集群的数据存储格式
Canal Json：Canal 解析数据库增量日志，并将增量数据传输至Kafka集群，数据存储格式为Canal Json。DTS Avro DTS Avro 为默认存储格式。您需要根据DTS Avro的schema定义进行数据解析，schema定义详情请参见迁移或同步至Kafka集群中的数据均...
背景信息以及准备工作
您还可以在DLA中创建 云数据库 Redis 版（简称Redis）的数据库连接（映射数据库），然后通过MySQL客户端或者MySQL命令行工具连接DLA，使用标准SQL语句操作Redis数据库数据。本文档将以DLA读取Redis中CSV和JSON两中类型的数据为例，介绍如何...
逻辑解码（wal2json）
通过SQL获取JSON对象 通过DMS登录RDS数据库。执行如下命令建表及初始化插件。CREATE TABLE table2_with_pk(a SERIAL,b VARCHAR(30),c TIMESTAMP NOT NULL,PRIMARY KEY(a,c));CREATE TABLE table2_without_pk(a SERIAL,b NUMERIC(5,2),c ...
备份对数据库的影响
数据库备份DBS 对数据库执行备份时会造成一定影响，建议选择业务低峰期执行备份任务。备份原理与影响 类目 逻辑备份 物理备份 全量备份原理 对每张表数据进行切分，然后在数据库上执行SQL语句，多线程并行读取数据。在数据库所在服务器上...
- 产品推荐
- 这些文档可能帮助您