使用ClickHouse-Local迁移上云
当您需要优化数据管理、提高数据访问性能和降低数据库维护成本时，您可以将自建数据库迁移至云数据库ClickHouse企业版。云数据库ClickHouse企业版通过ClickHouse-Local工具为您的迁移任务提供了简便且可靠的解决方案。什么是ClickHouse-...
表格存储是否支持存储JSON数据？
当前表格存储未直接支持存储JSON格式的数据。但是您可以通过字符串方式存储JSON数据，然后通过多元索引中的数组和嵌套类型实现JSON数据的灵活查询。更多信息，请参见 数组和嵌套类型。
应用场景
云数据库MongoDB版支持单节点、副本集和分片集群三种部署架构，具备安全审计、时间点备份等多项企业能力。在互联网、物联网、游戏、金融等领域被广泛采用。读写分离应用 云数据库MongoDB采用三节点副本集的高可用架构，三个数据节点位于...
逻辑解码（wal2json）
通过SQL获取JSON对象 通过DMS登录RDS数据库。执行如下命令建表及初始化插件。CREATE TABLE table2_with_pk(a SERIAL,b VARCHAR(30),c TIMESTAMP NOT NULL,PRIMARY KEY(a,c));CREATE TABLE table2_without_pk(a SERIAL,b NUMERIC(5,2),c ...
什么是RDS MySQL
为了实现读取能力的弹性扩展，分担数据库压力，您可以创建一个或多个只读实例，利用只读实例满足大量的数据库读取需求，增加应用的吞吐量。读写分离：读写分离功能是在只读实例的基础上，额外提供了一个读写分离地址，联动主实例及其所有...
什么是RDS SQL Server
为了实现读取能力的弹性扩展，分担数据库压力，您可以创建一个或多个只读实例，利用只读实例满足大量的数据库读取需求，增加应用的吞吐量。读写分离：创建只读实例后，您可以开通只读地址，然后在应用程序中配置主实例地址和只读地址，可以...
概述
为了实现读取能力的弹性扩展，分担数据库压力，您可以创建一个或多个只读实例，利用只读实例满足大量的数据库读取需求，增加应用的吞吐量。读写分离：读写分离功能是在只读实例的基础上，额外提供了一个读写分离地址，联动主实例及其所有...
ElasticSearch
本文介绍如何使用Databricks数据洞察访问ElasticSearch数据源。前提条件 通过主账号登录 阿里云Databricks控制台。已创建 ElasticSearch实例，具体参见 创建阿里云Elasticsearch实例。已创建DDI集群，具体请参见 创建集群。创建集群并通过...
创建Redis表并读取数据
本文介绍如何创建Redis的CSV和JSON格式表并读取相关数据。创建CSV格式表 针对Redis中CSV格式的数据，本示例在 DMS for Data Lake Analytics 中创建表dla_person_csv。CREATE EXTERNAL TABLE dla_person_csv(id int,name varchar,age int)...
从OSS导入JSON数据文件
在HybridDB for MySQL中建立导出数据的真实存储表 在HybridDB for MySQL中建立一张外表映射到JSON文件 调用 INSERT INTO SELECT 来完成数据导入 操作步骤 登录HybridDB for MySQL数据库，具体的操作请参考 登录数据库。在HybridDB for ...
GET_JSON_OBJECT
GET_JSON_OBJECT用于解析JSON对象。本文为您介绍在交互式分析Hologres中GET_JSON_OBJECT的用法。使用限制 一个数据库只能在一个Schema下创建一次extension。例如在某数据库的public Schema下创建了extension，则此数据库下其余的Schema不能...
Apache Nifi
创建数据库和表 登录Hologres实例，并且建立数据库，命名为 demo，详情请参见 创建数据库。创建数据表。使用如下SQL创建数据表，之后会将数据写入该表中。DROP TABLE IF EXISTS user_info;CREATE TABLE IF NOT EXISTS user_info(id int,...
Delta Lake 快速开始一
delta=spark.read.format("delta").load(deltaPath)events_delta.printSchema()重置数据库%pyspark spark.sql("DROP DATABASE IF EXISTS {} CASCADE".format(database))#注意{}是在pyspark里spark.sql()中使用的变量，参数在.format中指定...
文件分析
云数据库 SelectDB 版 支持表函数功能（Table-Value-Function或TVF），可以将S3、HDFS等常见远端存储中的文件数据，映射成 云数据库 SelectDB 版 中的表，从而对这些文件数据进行分析。S3表函数 S3表函数可以让您像访问关系型数据库一样，...
Kafka数据源
实时同步写入数据到Kafka时，写入的格式为内置的JSON格式，写入数据为包含数据库变更消息的数据、业务时间和DDL信息的所有数据，数据格式详情请参见 附录：消息格式。同步任务类型 写入Kafka value 的格式 源端字段类型 写入时的处理方式 ...
管理服务
在 批量导入服务 对话框中选择 要导入的目标服务组，设置 导入选项，并将导出服务的JSON代码串粘贴到 导入服务的JSON串 区域，然后单击 确认。导入过程中如果一条服务导入失败，可以选择继续导入其他服务或者停止导入。说明 如果要导入的...
JSON数据从OSS迁移至MaxCompute
本文为您介绍如何通过DataWorks数据集成，将JSON数据从OSS迁移至MaxCompute，并使用MaxCompute内置字符串函数GET_JSON_OBJECT提取JSON信息。前提条件 开通MaxCompute。在DataWorks上完成创建业务流程，本例使用DataWorks简单模式。详情请...
JSON数据从OSS迁移至MaxCompute
本文为您介绍如何通过DataWorks数据集成，将JSON数据从OSS迁移至MaxCompute，并使用MaxCompute内置字符串函数GET_JSON_OBJECT提取JSON信息。前提条件 开通MaxCompute和DataWorks。新增MaxCompute数据源。详情请参见 创建MaxCompute数据源。...
附录：API调用示例
如果是Dev-Prod模式，PROD表示查生产库，PRE表示查开发库【区分大小写】env=json_obj["apiConfig"]["env"]#请求参数，必填 queryParam=json_obj["apiConfig"]["queryParamRequest"]#API是 GET 还是 LIST？【区分大小写】method=json_obj[...
预置卡片
设置卡片数据，此处为 Bundle 内置 Json 读取数据；也可以请求自身服务端接口获取数据，但要转换为 Json 字符串[cardConfig setData:[self dictionaryWithJsonString:strData]];创建卡片[[CubeEngine sharedInstance]createCard:cardConfig...
SQL组件概述
组件是一种带有多个输入参数和输出参数的SQL代码过程模板，而SQL代码过程可通过引入一个或多个源数据表，并进行过滤、连接、聚合等操作，加工出业务所需的目标表，因此，您可通过组件快速加工出符合业务需求的目标表。本文为您介绍组件的...
Kafka集群的数据存储格式
Canal Json：Canal 解析数据库增量日志，并将增量数据传输至Kafka集群，数据存储格式为Canal Json。DTS Avro DTS Avro 为默认存储格式。您需要根据DTS Avro的schema定义进行数据解析，schema定义详情请参见迁移或同步至Kafka集群中的数据均...
Kafka集群的数据存储格式
Canal Json：Canal 解析数据库增量日志，并将增量数据传输至Kafka集群，数据存储格式为Canal Json。DTS Avro DTS Avro 为默认存储格式。您需要根据DTS Avro的schema定义进行数据解析，schema定义详情请参见迁移或同步至Kafka集群中的数据均...
背景信息以及准备工作
您还可以在DLA中创建 云数据库 Redis 版（简称Redis）的数据库连接（映射数据库），然后通过MySQL客户端或者MySQL命令行工具连接DLA，使用标准SQL语句操作Redis数据库数据。本文档将以DLA读取Redis中CSV和JSON两中类型的数据为例，介绍如何...
数据类型
您在创建索引时，可将字段的数据类型设置为text、long、double或JSON。本文介绍各个数据类型的配置示例及注意事项。text类型 如果您要查询和分析字符串类型的字段，需在配置索引时，将字段的数据类型设置为text，并开启统计功能。说明 开启...
SelectObject
输出JSON的格式参数（可选）子节点：RecordDelimiter Type 枚举 指定输入JSON的类型：DOCUMENT、LINES OutputRawData bool，默认false 指定输出数据为纯数据（可选）子节点：None 父节点：OutputSerialization 说明 您在请求中指定...
数据表操作
创建数据表后，您可以使用表、查询表信息、列出表名称、更新表以及删除表。说明 关于宽表模型的更多信息，请参见 宽表模型。创建表 创建一张数据表，同时指定数据表的主键、数据生命周期（TimeToLive）等。您也可以通过导入JSON格式的配置...
PyMySQL 连接 OceanBase 数据库示例程序
本文将介绍如何使用 PyMySQL 库和 OceanBase 数据库构建一个应用程序，实现基本的数据库操作，包括创建表、插入数据、查询数据和删除表等。点击下载 python-pymysql 示例工程 前提条件 您已安装 Python 3.x 和 pip。您已安装 OceanBase ...
读取OSS数据
在成功创建了OSS外部表后，您可以访问和查询存储在OSS指定目录下的数据文件，实现高效的数据读取操作。背景信息 完成OSS外部表创建后，您可以根据需要选择如下方式之一对OSS外部表进行操作：（推荐）方式一：将OSS的开源格式数据导入...
备份对数据库的影响
数据库备份DBS 对数据库执行备份时会造成一定影响，建议选择业务低峰期执行备份任务。备份原理与影响 类目 逻辑备份 物理备份 全量备份原理 对每张表数据进行切分，然后在数据库上执行SQL语句，多线程并行读取数据。在数据库所在服务器上...
JSON&JSONB 数据类型操作
JSON 类型几乎已成为互联网及物联网（IoT）的基础数据类型，AnalyticDB PostgreSQL 数据库对JSON数据类型做了完善的支持。并且 AnalyticDB PostgreSQL 6.0版 支持JSONB类型。这部分介绍对JSON&JSONB数据类型的操作，包括：JSON&JSONB的异同...
GORM 连接 OceanBase 数据库示例程序
本文将介绍如何使用 GORM 和 OceanBase 数据库构建一个应用程序，实现创建表、插入数据和查询数据等基本操作。点击下载 gorm-oceanbase 示例工程 前提条件 安装 OceanBase 数据库、Go 语言和相关驱动，并确保已经正确配置了环境变量。说明 ...
JSON函数和操作符
本文描述了用于处理和创建JSON数据的函数和运算器，以及SQL/JSON路径语言。处理和创建JSON数据 json和jsonb操作符表展示了可以用于JSON数据类型的操作符。此外，比较操作符表所示的常用比较操作符也适用于 jsonb，但不适用于 json。比较...
TO_JSON
将给定的复杂类型 expr，以JSON字符串格式输出。命令格式 string to_json()参数说明 expr：必填。说明 如果输入为STRUCT类型（struct,key2:value2）：转换为JSON字符串时，Key会全部转为小写。value 如果为NULL，则不输出 value 本组的数据...
基础版Spark全密态计算引擎使用示例
说明 MySQL或PostgreSQL数据库可以是云数据库、自建数据库或第三方云数据库。全密态计算引擎尚不支持Decimal数据类型（可使用Float或Double数据类型作为替代）及嵌套数据类型。对于PostgreSQL数据库，全密态计算引擎暂不支持自动去除 Char...
部署与测试
数据库连接的环境信息添加完成后，回到 CloudIDE，点击「测试」看看效果，我们可以看到，这次没有再出现错误提示，在UI上看到了从数据库读取的数据，在「输出」栏也看到了数据库数据的输出日志。至此，我们通过测试功能，完成了一个数据库...
定义SQL组件
组件用于将SQL过程抽象为一个SQL模板，实现SQL代码的复用。使用组件前，您需先根据业务需要创建符合业务加工过程的组件。本文为您介绍在数据开发（DataStudio）的组件管理界面，如何创建组件，并进行组件的分享、升级、查看组件引用记录等...
使用paiio读写MaxCompute表数据
itemid（BIGINT）name（STRING）price（DOUBLE）virtual（BOOL）25"Apple"5.0 False 38"Pear"4.5 False 17"Watermelon"2.2 False 以下代码实现了使用TableRecordDataset接口读取test表itemid和price列的数据。import os import tensorflow ...
应用场景
一般的数据库根本无法承载这样的读取压力，可选用云数据库 Memcache 版存储。带有计数器的库存系统 云数据库 RDS 与云数据库 Memcache 版搭配使用。RDS 存储具体数据信息，数据库字段中存储具体计数信息。云数据库 Memcache 版来进行计数的...
配置数据保护规则
授予用户临时完全访问权限 出于易用性考虑，为方便用户进行临时明文数据运维，全密态数据库为用户提供了授权用户 fullAccess 权限访问的选择，被授予该权限的用户将以明文方式访问数据库：此时数据保护规则对用户不生效，被授权用户可以在...
- 产品推荐
- 这些文档可能帮助您