单向同步升级至双向同步
前提条件 数据同步任务的源和目标数据库实例为支持双向同步的数据库类型和版本。例如，源和目标数据库均为8.0版本的 MySQL。更多信息，请参见 同步方案概览。数据同步任务的同步拓扑为 单向同步。数据同步任务的状态为 运行中。费用说明 如...
修改同步对象
本文介绍如何修改RDS全球多活数据库集群中双向同步实例的同步对象。操作步骤 访问 全球多活数据库集群 页面。在全球多活数据库集群列表页面，单击目标集群右侧 操作 列中的 更多>修改同步对象。如需新增同步对象，在 源库对象 区域框中，...
数据上云场景
数据库数据同步 数据库的数据同步到MaxCompute需要根据数据库的类型和同步策略来选择相应的工具。离线批量的数据库数据同步：可以选择DataWorks，支持的数据库种类丰富，包括MySQL、SQL Server、PostgreSQL等，详情请参见 通过向导模式配置...
调整链路规格
本文介绍如何调整RDS全球多活数据库集群中双向同步实例的链路规格。操作步骤 访问 全球多活数据库集群 页面。在全球多活数据库集群列表页面，单击目标集群右侧 操作 列中的 更多>DTS实例规格升降配。根据 RDS单元节点地域 定位至目标双向...
从ECS上的自建MySQL同步至PolarDB MySQL版
说明 如果源或目标数据库是阿里云数据库实例（例如 RDS MySQL、云数据库MongoDB版 等）或ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添加到阿里云数据库实例的白名单或ECS的安全规则中，您无需手动添加，请参见 DTS服务器的IP...
从ECS上的自建MySQL同步至PolarDB MySQL版
为避免该问题，您可以在数据同步配置时将该表所属的整个数据库作为同步对象，且确保RENAME TABLE操作前后的表所属的数据库均在同步对象中。TRUNCATE TABLE 功能限制 不兼容触发器 当同步对象为整个库，且库中的触发器（TRIGGER）会更新库内...
从通过专线、VPN网关或智能接入...同步至PolarDB MySQL版
说明 如果源或目标数据库是阿里云数据库实例（例如 RDS MySQL、云数据库MongoDB版 等）或ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添加到阿里云数据库实例的白名单或ECS的安全规则中，您无需手动添加，请参见 DTS服务器的IP...
PolarDB MySQL版间的单向同步
说明 如果源或目标数据库是阿里云数据库实例（例如 RDS MySQL、云数据库MongoDB版 等）或ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添加到阿里云数据库实例的白名单或ECS的安全规则中，您无需手动添加，请参见 DTS服务器的IP...
从通过专线、VPN网关或智能接入...同步至PolarDB MySQL版
为避免该问题，您可以在数据同步配置时将该表所属的整个数据库作为同步对象，且确保RENAME TABLE操作前后的表所属的数据库均在同步对象中。TRUNCATE TABLE 支持的同步架构 一对一单向同步 一对多单向同步 级联单向同步 多对一单向同步 关于...
PolarDB MySQL版间的单向同步
为避免该问题，您可以在数据同步配置时将该表所属的整个数据库作为同步对象，且确保RENAME TABLE操作前后的表所属的数据库均在同步对象中。TRUNCATE TABLE 支持的同步架构 一对一单向同步 一对多单向同步 级联单向同步 多对一单向同步 关于...
从RDS MySQL同步至PolarDB MySQL版
为避免该问题，您可以在数据同步配置时将该表所属的整个数据库作为同步对象，且确保RENAME TABLE操作前后的表所属的数据库均在同步对象中。TRUNCATE TABLE 支持的同步架构 一对一单向同步 一对多单向同步 级联单向同步 多对一单向同步 关于...
实时同步数据库的数据至Hologres
常见的支持实时数据同步的数据库包括：Oracle、Polar DB、PolarDB MySQL等。说明 如需查看更多支持的数据库，请参见 支持的数据源及同步方案。相关原理：MySQL Reader、Oracle数据源、PolarDB Reader、SQL Server Reader、Hologres数据源。...
迁移工具
将MySQL数据同步到表格存储 将Oracle数据同步到表格存储 DataWorks/DataX 使用DataWorks/DataX不仅可以将数据库迁移同步到表格存储，也可以实现表格存储表中数据的跨实例或者跨账号的迁移同步。将数据库数据迁移到表格存储 DataWorks/DataX...
云数据库MongoDB版（分片集群架构）同步至云数据库...
任务步骤说明 同步类型 说明 库表结构同步 将源 云数据库MongoDB版 中同步对象的结构同步到目标 云数据库MongoDB版 中。全量同步 将源 云数据库MongoDB版 同步对象的存量数据全部同步到目标 云数据库MongoDB版 中。说明 支持全量同步...
自建SQL Server同步至云原生数据仓库 AnalyticDB ...
如为增量同步任务，DTS要求源数据库的数据日志保存24小时以上，如为全量同步和增量同步任务，DTS要求源数据库的数据日志至少保留7天以上（您可在全量同步完成后将数据日志保存时间设置为24小时以上），否则DTS可能因无法获取数据日志而导致...
下载和导入同步对象配置
重要 数据库至数据库的数据同步项目中，仅选择 指定对象 方式时，支持导入对象。导入对象配置 数据传输支持通过导入 CSV 文件的方式进行设置行过滤条件、设置过滤列和设置分片列等操作。您可以下载已有项目的对象配置信息或 CSV 文件模板，...
PolarDB PostgreSQL版（兼容Oracle）集群间的单向同步
一个数据同步作业只能同步一个数据库，如有多个数据库需要同步，您需要为每个数据库配置数据同步作业。为保障同步延迟时间展示的准确性，DTS会在源库中新增一个表，表名为 dts_postgres_heartbeat，结构及内容如下图所示。在数据同步过程中...
数据同步拓扑介绍
Tair/Redis Tair/Redis MongoDB MongoDB 目前DTS仅支持两个数据库之间的双向同步，暂不支持多个数据库之间的双向同步。说明 关于双向同步的配置案例请参见 MySQL实例间的双向同步。您可以将现有的单向同步升级为双向同步，详情请参见 单向...
修复同步作业预检查失败的问题
数据库存在性检查 当待同步的数据库在目标实例中不存在，由DTS自动创建时，可能由于下述原因导致创建失败：数据库名包含小写字母、数字、下划线（_）或中划线（-）以外的其他特殊字符。数据库的字符集为utf8、GBK、latin1或utf8mb4以外的...
MongoDB（无分片键）同步至MongoDB（分片集群架构）
说明 不支持增量同步在任务开始运行后新建的数据库，支持同步的增量更新如下：CREATE COLLECTION、INDEX DROP DATABASE、COLLECTION、INDEX RENAME COLLECTION 在集合中插入、更新、删除文档的操作。数据库账号的权限要求 数据库 所需权限 ...
产品架构
数据实时同步：DTS同步正在进行的数据变更，并保持源数据库和目标数据库的同步。为了同步正在进行的数据变更，DTS使用两个处理事务日志的模块：事务日志读取模块：日志读取模块从源实例读取原始数据，经过解析、过滤及标准格式化，最终将...
云数据库MongoDB版（副本集架构）同步至云数据库...
源数据库 目标数据库 云数据库MongoDB版（副本集架构）云数据库MongoDB版（副本集架构、分片集群架构）ECS上的自建MongoDB数据库（副本集架构）ECS上的自建MongoDB数据库（副本集架构、分片集群架构）通过专线、VPN网关或智能网关接入的自...
云数据库MongoDB版（分片集群架构）同步至云数据库...
任务步骤说明 同步类型 说明 库表结构同步 将源 云数据库MongoDB版 中同步对象的结构同步到目标 云数据库MongoDB版 中。全量同步 将源 云数据库MongoDB版 同步对象的存量数据全部同步到目标 云数据库MongoDB版 中。说明 支持全量同步...
从RDS同步至自建Kafka集群
通过数据传输服务DTS（Data Transmission Service），您可以将 RDS MySQL 或RDS MySQL Serverless 的数据库同步至自建Kafka集群，扩展消息处理能力。前提条件 Kafka集群的版本为0.10.1.0~2.7.0版本。已创建 RDS MySQL实例 或 Serverless...
仓库同步
针对从其他平台导入至 Codeup 的代码库，支持快速触发三方源代码仓库数据的同步，在代码迁移阶段可以帮助企业循序渐进地将业务从旧系统迁移至云效Codeup。当企业切换代码平台的过程中，为了降低对日常业务的干扰，可以先迁移一部分敏感度低...
从PolarDB PostgreSQL版（兼容Oracle）集群同步至自建...
一个数据同步作业只能同步一个数据库，如有多个数据库需要同步，您需要为每个数据库配置数据同步作业。为保障同步延迟时间展示的准确性，DTS会在源库中新增一个表，表名为 dts_postgres_heartbeat，结构及内容如下图所示。若源库有长事务，...
从PolarDB MySQL版同步到Kafka
说明 如果源或目标数据库是阿里云数据库实例（例如 RDS MySQL、云数据库MongoDB版 等）或ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添加到阿里云数据库实例的白名单或ECS的安全规则中，您无需手动添加，请参见 DTS服务器的IP...
配置告警规则
本文介绍如何配置RDS全球多活数据库集群中双向同步链路的告警规则。操作步骤 访问 全球多活数据库集群 页面。在全球多活数据库集群列表页面，单击目标集群右侧 操作 列中的 更多>配置告警。在 配置告警 对话框中，对同步延迟、同步状态、全...
自建SQL Server同步至云原生数据仓库 AnalyticDB ...
如为增量同步任务，DTS要求源数据库的数据日志保存24小时以上，如为全量同步和增量同步任务，DTS要求源数据库的数据日志至少保留7天以上（您可在全量同步完成后将数据日志保存时间设置为24小时以上），否则DTS可能因无法获取数据日志而导致...
使用创建反向任务功能
注意事项 仅SQL Server数据库间或MySQL数据库间的同步实例支持创建反向实例，且该反向实例的 同步类型 只勾选了 增量同步。创建反向实例前直接写入到原同步实例目标库的数据，不会被同步。反向实例创建成功后会立即进行预检查，预检查通过...
自建SQL Server同步至PolarDB MySQL版
如为增量同步任务，DTS要求源数据库的数据日志保存24小时以上，如为全量同步和增量同步任务，DTS要求源数据库的数据日志至少保留7天以上（您可在全量同步完成后将数据日志保存时间设置为24小时以上），否则DTS可能因无法获取数据日志而导致...
从PolarDB MySQL版同步到Kafka
如果源或目标数据库是ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添到ECS的安全规则中，您还需确保自建数据库没有限制ECS的访问（若数据库是集群部署在多个ECS实例，您需要手动将DTS服务对应地区的IP地址添到其余每个ECS的安全...
一键建仓
数据管理DMS一键建仓功能可以实现一键创建实时同步的数据仓库，数据可在秒级的延迟下，同步至AnalyticDB MySQL版数据库中，帮助您更实时、准确地掌握业务情况，以便更好地进行业务分析和决策，提升业务效果。本文介绍如何在数据管理DMS中...
自建Oracle同步至PolarDB MySQL版
建议在执行数据同步前了解源库为Oracle时DTS支持的能力和限制条件，并使用ADAM（Advanced Database&Application Migration）进行数据库评估，以便您平滑地同步上云。更多信息，请参见 Oracle数据库的限制和准备工作 和 数据库评估概览。...
资源组操作及网络连通
同步ECS自建的数据库的数据时，如何保障数据库与DataWorks的网络连通？数据库和DataWorks不在同一个地域（Region）下，进行数据同步时如何保障数据库与DataWorks的网络连通？数据库和DataWorks不在同一个阿里云账号下，进行数据同步时如何...
新增数据同步任务
数据库：选择 RDS 数据源实例下需要同步的数据库。数据表：选择数据库中的一张表。填写 数据去向信息：数据源：选择云搜数据源。索引名称：默认选择 与源库表名相同 来创建索引；也支持以自定义的方式创建索引。说明：如果填写的索引名称在...
云数据库MongoDB版同步至云原生多模数据库Lindorm
数据传输服务DTS（Data Transmission Service）支持将MongoDB（副本集架构或分片集群架构）同步至云原生多模数据库Lindorm（宽表引擎）。Lindorm具有稳定、低成本、简单易用等优势，可以在元数据、订单、账单、画像、社交等场景中，为您...
RDS 同步到云搜
任务详情页 在 数据同步任务 页面，单击任务卡片中的任务名称，进入任务详情页，即可查看以下信息：上游数据抓取延迟：数据同步服务抓取数据写入存储的时间与数据实际写入至源数据库的时间差。下游数据写入延迟：同步到目标实例的最新数据...
自建Oracle同步至PolarDB PostgreSQL版（兼容Oracle）
建议在执行数据同步前了解源库为Oracle时DTS支持的能力和限制条件，并使用ADAM（Advanced Database&Application Migration）进行数据库评估，以便您平滑地完成Oracle同步上云。更多信息，请参见 Oracle数据库的限制和准备工作 和 数据库...
使用DataWorks（离线与实时）
最佳实践 数据库整库离线同步至MaxCompute 整库离线同步至MaxCompute OSS数据离线同步至MaxCompute EMR Hive数据整库离线同步至MaxCompute 数据库增量数据离线同步至MaxCompute RDS增量数据同步至MaxCompute Kafka增量数据同步至MaxCompute...
- 产品推荐
- 这些文档可能帮助您