Vertica数据源
推荐 splitPk 用户使用表主键，因为表主键通常情况下比较均匀，因此切分出来的分片不容易出现数据热点。目前 splitPk 仅支持整型数据切分，不支持字符串、浮点、日期等其它类型。如果您指定其它非支持类型，Vertica Reader将报错。如果设置...
同步时源库为PolarDB-X 1.0的注意事项及限制
若您将列名仅大小写不同的字段写入到目标MySQL数据库的同一个表中，可能会因为MySQL数据库列名大小写不敏感，导致同步结果不符合预期。在数据同步完成后，建议使用 analyze table<表名>命令检查数据是否已写入目标表。例如，在MySQL触发HA...
概述
适用场景 使用订单表或日志表等业务场景 对于在使用订单表或日志表等业务场景下创建的分区表，通常会选择按照时间进行RANGE分区，但一般只对最新的一到两个分区进行频繁的查询，从需求角度来讲，仅在查询频繁的分区上创建对应的二级索引...
常见问题
支持的数据库部署位置（接入方式）阿里云实例 有公网IP的自建数据库 通过数据库网关DG接入的自建数据库 通过云企业网CEN接入的自建数据库 ECS上的自建数据库 通过专线/VPN网关/智能接入网关接入的自建数据库 阿里云实例 通过数据库网关DG接...
ApsaraDB For OceanBase数据源
推荐 splitPk 用户使用表主键，因为表主键通常情况下比较均匀，因此切分出来的分片也不容易出现数据热点。目前 splitPk 仅支持整型数据切分，不支持字符串、浮点和日期等其它类型。如果您指定其它非支持类型，ApsaraDB For OceanBase ...
DM（达梦）数据源
数据同步系统会启动并发任务进行数据同步，以提高数据同步的效能：推荐 splitPk 用户使用表主键，因为表主键通常情况下比较均匀，切分出来的分片也不容易出现数据热点。目前 splitPk 仅支持整型数据切分，不支持浮点、字符串和日期等其他...
恢复全量数据
其他引擎恢复数据请参见：恢复SQL Server数据 恢复PostgreSQL数据 恢复MariaDB数据 常见问题 误删除了一个或多个库，如何恢复？您可以进行库表恢复恢复一个或多个库表，详情请参见 恢复库表。对于不支持库表恢复的实例，您可以参见本文，将...
GBase8a数据源
推荐 splitPk 用户使用表主键，因为表主键通常情况下比较均匀，因此切分出来的分片也不容易出现数据热点。目前 splitPk 仅支持整型数据切分，不支持字符串、浮点和日期等其它类型。如果您指定其它非支持类型，则忽略 splitPk 功能，使用单...
DB2数据源
数据同步系统会启动并发任务进行数据同步，以提高数据同步的效能：推荐 splitPk 用户使用表主键，因为表主键通常情况下比较均匀，因此切分出来的分片也不容易出现数据热点。目前 splitPk 仅支持整型数据切分，不支持浮点、字符串和日期等...
StarRocks数据源
推荐splitPk用户使用表主键，因为表主键通常情况下比较均匀，因此切分出来的分片也不容易出现数据热点。否 无 Writer脚本Demo {"stepType":"starrocks","parameter":{"selectedDatabase":"didb1","loadProps":{"row_delimiter":"\\x02",...
什么是EMR Notebook
EMR Notebook是一个Serverless化的交互式数据分析和探索平台，满足大数据和AI融合下的数据处理需求，为数据工程师、数据分析师和数据科学家提供了可视化的应用程序开发环境。通过EMR Notebook可以完成对SQL、Python、Markdown等多种语言...
API概览
数据库管理 API 标题 API概述 CreateDatabase 创建数据库 在指定租户下创建一个新的数据库。DescribeDatabases 查询数据库列表 查询租户下的数据库列表。ModifyDatabaseDescription 修改数据库描述 修改数据库的描述信息。...
AnalyticDB for PostgreSQL数据源
通常表主键较为均匀，切分出的分片不易出现数据热点，所以推荐splitPk用户使用表主键。目前 splitPk 仅支持整型数据切分，不支持字符串、浮点、日期等其他类型。如果您指定其他非支持类型，忽略splitPk功能，使用单通道进行同步。如果不...
Oracle数据源
由于主备数据同步存在一定的时间差，在网络延迟等特定情况下，会导致备库同步恢复的数据与主库有较大差别，从备库同步的数据不是一份当前时间的完整镜像。一致性约束 Oracle在数据存储划分中属于RDBMS系统，对外可以提供强一致性数据查询...
PolarDB-X 1.0同步至RDS MySQL
在同步期间，请勿对源实例执行扩缩容（比如扩缩容其下挂载的 RDS MySQL，或者虽未扩缩容 RDS MySQL，但 RDS MySQL 中逻辑库表对应的物理库表的分布发生变化）、迁移热点表、变更拆分键操作和变更DDL等操作，否则数据同步任务会失败，或者...
SQL Server数据源
推荐splitPk用户使用表主键，因为表主键通常情况下比较均匀，因此切分出来的分片也不容易出现数据热点。目前splitPk仅支持整型数据切分，不支持字符串、浮点、日期等其他类型。如果您指定其他非支持类型，SQL Server Reader将报错。否 无 ...
AnalyticDB for MySQL 3.0数据源
推荐 splitPk 用户使用表主键，因为表主键通常情况下比较均匀，因此切分出来的分片也不容易出现数据热点。目前 splitPk 仅支持整型数据切分，不支持字符串、浮点和日期等其他类型。如果您指定其他非支持类型，忽略 splitPk 功能，使用单...
快速入门综述
大存储：以字母S开头的ECU为大存储集群，采用SSD或HDD分层存储架构，热点数据存储在SSD磁盘中，冷数据存储在HDD磁盘中。适用于并发稍低、性能要求不高（可接受数据查询响应时间受超过10秒以上）的业务场景。说明 AnalyticDB MySQL版 2.0 仅...
通过脚本模式配置离线同步任务
说明 推荐splitPk用户使用表主键，因为表主键通常情况下比较均匀，因此切分出来的分片也不容易出现数据热点。目前splitPk仅支持整型数据切分，不支持字符串、浮点和日期等其他类型。如果您指定其他非支持类型，将会忽略splitPk功能，使用单...
通过向导模式配置离线同步任务
说明 推荐splitPk用户使用表主键，因为表主键通常情况下比较均匀，因此切分出来的分片也不容易出现数据热点。目前splitPk仅支持整型数据切分，不支持字符串、浮点和日期等其他类型。如果您指定其他非支持类型，忽略splitPk功能，使用单通道...
如何设计Rowkey
相同的Rowkey在HBase中认为是同一条数据的多个版本，查询时默认返回最新版本的数据，所以通常Rowkey都需要保证唯一，除非用到多版本特性。最佳设计示例：Rowkey相当于数据库的主键。Rowkey表示一条记录。Rowkey可以是一个字段也可以是多个...
MariaDB数据源
推荐 splitPk 用户使用表主键，因为表主键通常情况下比较均匀，因此切分出来的分片也不容易出现数据热点。目前 splitPk 仅支持整型数据切分，不支持字符串、浮点和日期等其他类型。如果您指定其他非支持类型，忽略 splitPk 功能，使用单...
PolarDB-X 2.0数据源
通过表主键切分出的分片比较均匀，不容易出现数据热点。splitPk 仅支持整型数据切分，不支持字符串、浮点和日期等其他类型。若使用了不支持的类型，平台将忽略 splitPk 功能，使用单通道同步数据。若不配置 splitPk 参数（即Reader脚本中不...
PolarDB-X 1.0同步至DataHub
在同步期间，请勿对源实例执行扩缩容（比如扩缩容其下挂载的 RDS MySQL，或者虽未扩缩容 RDS MySQL，但 RDS MySQL 中逻辑库表对应的物理库表的分布发生变化）、迁移热点表、变更拆分键操作和变更DDL等操作，否则数据同步任务会失败，或者...
Tair（Redis企业版）简介
Tair（Redis企业版）作为一个高可用、高性能的分布式NoSQL数据库，从访问延时、持久化需求、整体成本这三个核心维度考量，基于DRAM、NVM和ESSD云盘存储介质，推出了多种不同形态的产品，为您提供更强的性能、更多的数据结构和更灵活的存储...
数据倾斜调优
数据倾斜示例 在下面这个表中，eleme_uid 中存在很多热点数据，容易发生数据倾斜。SELECT eleme_uid,.FROM(SELECT eleme_uid,.FROM)t1 LEFT JOIN(SELECT eleme_uid,.FROM)t2 on t1.eleme_uid=t2.eleme_uid;解决方案。可以通过如下四种方法...
缓冲区管理
背景信息 一写多读架构下，只读节点可能从共享存储中读到两类数据页：未来页 数据页中包含只读节点尚未回放到的数据。例如，只读节点回放LSN为200的WAL日志，但数据页中已经包含LSN为300的WAL日志对应的改动。此类数据页被称为未来页。过去...
离线同步常见问题
以MySQL Reader插件切分键配置为例：推荐splitPk用户使用表主键，因为表主键通常情况下比较均匀，因此切分出来的分片也不容易出现数据热点。目前splitPk仅支持整型数据切分，不支持字符串、浮点和日期等其他类型。如果指定其他非支持类型，...
PolarDB-X 1.0迁移至PolarDB-X 2.0
如果源或目标数据库是ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添到ECS的安全规则中，您还需确保自建数据库没有限制ECS的访问（若数据库是集群部署在多个ECS实例，您需要手动将DTS服务对应地区的IP地址添到其余每个ECS的安全...
PostgreSQL数据源
如果指定 splitPk，表示您希望使用 splitPk 代表的字段进行数据分片，数据同步会启动并发任务，以提高数据同步的效能：推荐 splitPk 用户使用表主键，因为表主键通常情况下比较均匀，因此切分出来的分片也不容易出现数据热点。splitPk 仅...
PolarDB-X 1.0同步至PolarDB-X 2.0
如果源或目标数据库是ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添到ECS的安全规则中，您还需确保自建数据库没有限制ECS的访问（若数据库是集群部署在多个ECS实例，您需要手动将DTS服务对应地区的IP地址添到其余每个ECS的安全...
Tair Proxy特性说明
云原生内存数据库Tair 的集群架构和读写分离架构中，代理服务器（Proxy）承担着路由转发、负载均衡与故障转移等职责，可以帮助您简化客户端的逻辑，同时支持多数据库（DB）、缓存热点数据等高级功能。通过了解Proxy的路由转发规则和特定...
PolarDB-X 1.0同步至云原生数据仓库 AnalyticDB MySQL...
在同步期间，请勿对源实例执行扩缩容（比如扩缩容其下挂载的 RDS MySQL，或者虽未扩缩容 RDS MySQL，但 RDS MySQL 中逻辑库表对应的物理库表的分布发生变化）、迁移热点表、变更拆分键操作和变更DDL等操作，否则数据同步任务会失败，或者...
PolarDB-X间的数据实时同步
注意事项 DTS在执行全量数据初始化时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升，在数据库性能较差、规格较低或业务量较大的情况下（例如源库有大量慢SQL、存在无主键表或目标库存在死锁等），可能会加重数据库压力，...
Redis Proxy特性说明
在 云数据库 Redis 版 集群架构和读写分离架构中，代理服务器（Proxy）承担着路由转发、负载均衡和故障转移等职责，可以帮助您简化客户端的逻辑，同时支持多数据库（DB）、缓存热点数据等高级功能。通过了解Proxy的路由转发规则和特定命令...
PolarDB-X 1.0迁移至云原生数据仓库 AnalyticDB ...
在迁移期间，请勿对源实例执行扩缩容（比如扩缩容其下挂载的 RDS MySQL，或者虽未扩缩容 RDS MySQL，但 RDS MySQL 中逻辑库表对应的物理库表的分布发生变化）、迁移热点表、变更拆分键操作和变更DDL等操作，否则数据迁移任务会失败，或者...
PolarDB-X 1.0迁移至RDS MySQL
若您将列名仅大小写不同的字段写入到目标MySQL数据库的同一个表中，可能会因为MySQL数据库列名大小写不敏感，导致迁移结果不符合预期。在数据迁移完成后，建议使用 analyze table<表名>命令检查数据是否已写入目标表。例如，在MySQL触发HA...
导入与导出
数据同步过程中，可以修改源表中的字段类型，目前仅支持整型数据类型之间、浮点数据类型之间的列类型更改，并且只能将取值范围小的数据类型更改为取值范围大的数据类型，或者将单精度数据类型更改为双精度数据类型。整型数据类型：支持...
迁移 PolarDB-X 2.0 数据库的数据至 OceanBase 数据库...
本文为您介绍如何使用数据传输迁移 PolarDB-X 2.0 数据库的数据至 OceanBase 数据库 MySQL 租户。重要 如果数据迁移项目长期处于非活跃状态（项目状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，项目可能无法恢复。数据传输...
PolarDB-X 1.0迁移至阿里云消息队列Kafka
若您将列名仅大小写不同的字段写入到目标MySQL数据库的同一个表中，可能会因为MySQL数据库列名大小写不敏感，导致迁移结果不符合预期。在数据迁移完成后，建议使用 analyze table<表名>命令检查数据是否已写入目标表。例如，在MySQL触发HA...
- 产品推荐
- 这些文档可能帮助您