DataStudio侧实时同步任务配置
完成数据源、网络、资源的准备配置后，您可创建实时同步节点，将多种输入及输出数据源搭配组成同步链路，进行单表或整库数据的实时增量同步。本文为您介绍如何创建单表或整库增量数据实时同步任务，并在创建完成后查看任务运行情况。前提...
启用或禁用SCIM同步
您可以从支持SCIM 2.0的外部IdP同步用户或用户组到云SSO。本文为您介绍在云SSO如何启用SCIM同步、获取SCIM服务端地址、禁用SCIM同步的具体操作。启用SCIM同步 启用SCIM同步后，您才能从外部IdP同步用户或用户组到云SSO。同时，您还需要创建...
迁移、同步或订阅对象说明
dml_op":"需增量迁移或同步的DML操作","ddl_op":"需增量迁移或同步的DDL操作"} } },"待迁移、同步或订阅的库3的名称":{"name":"迁移、同步或订阅的库3在目标实例中的名称","all":true（表示迁移、同步或订阅对象为整库）,"dml_op":"需增量...
API概览
修改DTS任务：ModifyDtsJob ModifySubscription ModifyDtsJobPassword ModifyDtsJobName UpgradeTwoWay TransferPayType TransferInstanceClass RenewInstance 修改DTS任务：修改同步任务的同步对象。修改DTS订阅任务的订阅对象及订阅数据...
RDS MySQL实例间的同步
支持的同步架构 一对一单向同步 一对多单向同步 级联单向同步 级联双向同步 多对一单向同步 一对一双向同步 关于各类同步架构的介绍及注意事项，请参见 数据同步拓扑介绍。支持同步的SQL 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE ...
数据同步模版
Flink CDC支持数据的实时同步和表结构变更的自动同步。您可以使用数据同步模版帮您快速生成数据同步的Flink SQL作业代码。本文为您介绍如何使用多库多表同步或者分库分表合并模版实现数据同步。背景信息 Flink全托管支持多库多表同步和分库...
一键MaxCompute数据同步节点
DataWorks支持使用DataStudio一键同步MaxCompute数据至Hologres，您可使用该方式快速查询MaxCompute表数据。本文为您介绍如何创建并使用一键MaxCompute数据同步节点。背景信息 使用一键同步MaxCompute数据至Hologres进行数据查询时，您需要...
2019年之前
从 PolarDB-X 同步至云原生数据仓库AnalyticDB MySQL 2018年7月5日 支持从DRDS实例间的数据同步。PolarDB-X 间的数据实时同步 2018年7月3日 支持从MySQL迁移至PolarDB MySQL。从自建MySQL迁移至PolarDB MySQL版 2018年6月12日 支持从DB2...
场景：配置增量数据离线同步任务
同时，过滤条件可以结合调度参数使用，实现过滤条件随任务调度时间的动态变化，进而实现增量数据的同步。该内容将向您介绍如何配置增量数据同步任务。使用说明 部分数据源暂无增量同步方案，例如HBase、OTSStream数据源等。具体数据源是否...
从PolarDB MySQL版同步至Datahub
通过数据传输服务（Data Transmission Service，简称DTS），您可以将 PolarDB MySQL版 同步至DataHub，帮助您快速实现使用流计算等大数据产品对数据实时分析。前提条件 DataHub实例的地域为华东1、华东2、华北2或华南1。DataHub实例中，已...
PolarDB PostgreSQL版同步至云原生数据仓库AnalyticDB...
支持的同步架构 一对一单向同步 一对多单向同步 多对一单向同步 关于各类同步架构的介绍及注意事项，请参见 数据同步拓扑介绍。支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE DDL 仅2020年10月01日后创建的数据同步...
从ECS上的Twemproxy Redis集群同步至Redis实例
支持的同步命令 APPEND BITOP、BLPOP、BRPOP、BRPOPLPUSH DECR、DECRBY、DEL EVAL、EVALSHA、EXEC、EXPIRE、EXPIREAT GEOADD、GETSET HDEL、HINCRBY、HINCRBYFLOAT、HMSET、HSET、HSETNX INCR、INCRBY、INCRBYFLOAT LINSERT、LPOP、LPUSH、...
PolarDB PostgreSQL版（兼容Oracle）集群同步至...
如果没有明确定义其精度，DTS默认对FLOAT的同步精度为38位，对DOUBLE的同步精度为308位，请确认同步精度是否符合业务预期。DTS会尝试自动恢复七天之内同步失败任务。因此业务切换至目标实例前，请务必结束或释放该任务，或者使用 REVOKE ...
PolarDB MySQL版间的单向同步
SQL操作语句 DML INSERT、UPDATE、DELETE、REPLACE DDL ALTER TABLE、ALTER VIEW CREATE FUNCTION、CREATE INDEX、CREATE PROCEDURE、CREATE TABLE、CREATE VIEW DROP INDEX、DROP TABLE RENAME TABLE TRUNCATE TABLE 支持的同步架构 ...
云数据库MongoDB版（分片集群架构）间的双向同步
当超出数量限制，任务提交后会显示请求报错，此时建议您拆分待同步的集合，分批配置多个任务，或者配置整库的同步任务。需开启Oplog日志。说明 DTS要求源数据库的Oplog日志至少保留7天以上，否则DTS可能因无法获取Oplog日志而导致任务失败...
云数据库MongoDB版（分片集群架构）间的双向同步
当超出数量限制，任务提交后会显示请求报错，此时建议您拆分待同步的集合，分批配置多个任务，或者配置整库的同步任务。需开启Oplog日志。说明 DTS要求源数据库的Oplog日志至少保留7天以上，否则DTS可能因无法获取Oplog日志而导致任务失败...
从ECS上的Twemproxy Redis集群同步至Redis实例
支持的同步命令 APPEND BITOP、BLPOP、BRPOP、BRPOPLPUSH DECR、DECRBY、DEL EVAL、EVALSHA、EXEC、EXPIRE、EXPIREAT GEOADD、GETSET HDEL、HINCRBY、HINCRBYFLOAT、HMSET、HSET、HSETNX INCR、INCRBY、INCRBYFLOAT LINSERT、LPOP、LPUSH、...
移除同步对象
在 已选择对象 区域框中，单击需要移除的同步对象，并单击 图标将其移动至 源库对象 区域框中。单击 预检查并启动。说明 在修改同步对象后，会对同步作业进行预检查。只有预检查通过后，才能成功启动同步作业。如果预检查失败，单击具体...
RDS PostgreSQL间的单向同步
若同步对象为表级别，且需进行编辑（如表列名映射），单次同步任务的表数量超过5000时，建议您拆分待同步的表，分批配置多个任务，或者配置整库的同步任务，否则任务提交后可能会显示请求报错。WAL日志：需开启，即设置 wal_level 参数的值...
数据同步拓扑介绍
数据同步功能支持多种同步拓扑，您可以根据业务需求规划您的同步实例。本文介绍DTS支持的同步拓扑类型和使用说明。单向同步 在单向同步的拓扑中，为保障同步数据的一致性，对目标实例中的同步对象应只进行读操作，请勿进行写操作。拓扑类型...
从ECS上的自建MySQL同步至PolarDB MySQL版
数据同步时，请勿对源库的同步对象使用gh-ost或pt-online-schema-change等类似工具执行在线DDL变更，否则会导致同步失败。全量初始化过程中，并发INSERT会导致目标集群的表碎片，全量初始化完成后，目标集群的表空间比源库的表空间大。如果...
RDS MySQL同步至AnalyticDB MySQL 3.0
当超出数量限制，任务提交后会显示请求报错，此时建议您拆分待同步的表，分批配置多个任务，或者配置整库的同步任务。Binlog日志：RDS MySQL默认已开启Binlog，您需确保binlog_row_image的值为full，否则预检查阶段提示报错，且无法成功...
RDS MySQL同步至AnalyticDB for PostgreSQL ...
如同步对象为单个或多个表（非整库），那么在数据同步时，勿对源库的同步对象使用pt-online-schema-change等类似工具执行在线DDL变更，否则会导致同步失败。您可以使用数据管理DMS（Data Management）来执行在线DDL变更，请参见 不锁表结构...
PolarDB-X 1.0间同步
如同步对象为表级别，且需进行编辑（如表列名映射），单次同步任务的表数量超过5000时，建议您拆分待同步的表，分批配置多个任务，或者配置整库的同步任务，否则任务提交后可能会显示请求报错。PolarDB-X 1.0 下面挂载的 RDS MySQL 的...
PolarDB-X 1.0同步至RDS MySQL
如同步对象为表级别，且需进行编辑（如表列名映射），单次同步任务的表数量超过5000时，建议您拆分待同步的表，分批配置多个任务，或者配置整库的同步任务，否则任务提交后可能会显示请求报错。PolarDB-X 1.0 下面挂载的 RDS MySQL 的...
Db2 for LUW同步至RDS MySQL
如同步对象为表级别，且需进行编辑（如表列名映射），单次同步任务的表数量超过5000时，建议您拆分待同步的表，分批配置多个任务，或者配置整库的同步任务，否则任务提交后可能会显示请求报错。需开启数据日志，否则预检查阶段提示报错，且...
RDS MySQL实例间的单向同步
数据同步时，请勿对源库的同步对象使用gh-ost或pt-online-schema-change等类似工具执行在线DDL变更，否则会导致同步失败。如果除DTS以外的数据没有写入目标库，您可以使用数据管理DMS（Data Management Service）来执行在线DDL变更，详情请...
商品管理
同步商品（批量全部同步）选中需要同步的商品，单击 同步商品（批量全部同步），系统将批量同步从猫淘店铺拉取的商品的信息，包括：商品信息、商品价格，商品SKU、商品图片等。单击 确定，系统开始自动同步商品信息。设置基准销量 商家如在...
使用DTS同步
说明 DTS会在Tablestore实例的同步目标表中增加_dts_data_source 列（类型为varchar）来存储数据来源。DTS将以数据同步实例ID>:<源数据库名>.<源表名>的格式写入列值用于区分表的来源，例如 dts*:dtstestdata.customer1。多表归并功能基于...
单向同步升级至双向同步
数据同步作业的同步拓扑为 单向同步。数据同步作业的状态为 运行中。注意事项 同步实例只能从单向同步升级为双向同步，不能从双向同步降级为单向同步。升级生效期间数据同步会出现5秒左右的延迟，请在业务低峰期操作。DTS会在目标库中建立...
自建MySQL同步至RDS MySQL
支持的同步架构 一对一单向同步 一对多单向同步 多对一单向同步 级联单向同步 支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE DDL ALTER TABLE、ALTER VIEW CREATE FUNCTION、CREATE INDEX、CREATE PROCEDURE、CREATE...
PolarDB-X 1.0同步至PolarDB MySQL版
如同步对象为表级别，且需进行编辑（如表列名映射），单次同步任务的表数量超过5000时，建议您拆分待同步的表，分批配置多个任务，或者配置整库的同步任务，否则任务提交后可能会显示请求报错。PolarDB-X 1.0 下面挂载的 RDS MySQL 的...
空库初始化
数据管理DMS 的空库初始化功能支持将源数据库的表结构同步至空数据库中（数据库中不存在任何表），实现快速同步数据库表结构，适用部署多区域、多单元的数据库环境。前提条件 支持的数据库类型如下：MySQL：RDS MySQL、PolarDB MySQL版、...
修改同步对象
若新增的同步对象是字段，则该字段的数据不会同步至目标库。在新增同步对象过程中，修改 同步类型 的操作仅对新增对象生效。在修改同步对象过程中，不支持新增或修改数据校验任务。在修改同步对象过程中，不支持修改 是否迁移账号 信息。若...
数据同步简介
基本原理 类似于 MySQL 的 binlog 机制，数据同步服务器和客户端 SDK 之间传递的基本数据单元为 oplog，当业务需要同步一个变更数据到指定的用户或设备时，业务调用数据同步接口，数据同步服务端会将业务需要同步的数据变更包装为一个 ...
自建PostgreSQL同步至RDS PostgreSQL
若同步对象为表级别，且需进行编辑（如表列名映射），单次同步任务的表数量超过5000时，建议您拆分待同步的表，分批配置多个任务，或者配置整库的同步任务，否则任务提交后可能会显示请求报错。WAL日志：需开启，即设置 wal_level 参数的值...
RDS MySQL实例间的单向同步
数据同步时，请勿对源库的同步对象使用gh-ost或pt-online-schema-change等类似工具执行在线DDL变更，否则会导致同步失败。如果除DTS以外的数据没有写入目标库，您可以使用数据管理DMS（Data Management）来执行在线DDL变更，详情请参见 不...
不同阿里云账号下RDS实例间的数据同步
数据同步时，请勿对源库的同步对象使用gh-ost或pt-online-schema-change等类似工具执行在线DDL变更，否则会导致同步失败。如果源库中待迁移的表没有主键或唯一约束，且所有字段没有唯一性，可能会导致目标数据库中出现重复数据。全量初始化...
从PolarDB MySQL版同步至Datahub
通过数据传输服务（Data Transmission Service，简称DTS），您可以将 PolarDB MySQL版 同步至DataHub，帮助您快速实现使用流计算等大数据产品对数据实时分析。前提条件 DataHub实例的地域为华东1、华东2、华北2或华南1。DataHub实例中，已...
Db2 for LUW同步至PolarDB MySQL版
如同步对象为表级别，且需进行编辑（如表列名映射），单次同步任务的表数量超过5000时，建议您拆分待同步的表，分批配置多个任务，或者配置整库的同步任务，否则任务提交后可能会显示请求报错。需开启数据日志，否则预检查阶段提示报错，且...
- 产品推荐
- 这些文档可能帮助您