AnalyticDB MySQL 2.0数据导入
如果业务存在实时写入流量，则需要在同步数据之前启动业务双写（即同时写入 AnalyticDB for MySQL 2.0和 数仓版（3.0）），以保证不会丢失数据同步期间产生的增量数据。通过MySQL客户端连接 AnalyticDB for MySQL 2.0集群。mysql-h host-P ...
RDS MySQL实例变配时长受哪些因素影响？
在数据库间数据完全同步后，才会进行数据库切换，因此，迁移变配时间受数据同步的延时影响，数据同步的延时与主库的写入压力、是否有DDL、是否有多表联合查询相关。否-当本地盘存储类型RDS MySQL实例变配不涉及跨机迁移时，变配时间较短，...
RDS MySQL实例变配时长受哪些因素影响？
在数据库间数据完全同步后，才会进行数据库切换，因此，迁移变配时间受数据同步的延时影响，数据同步的延时与主库的写入压力、是否有DDL、是否有多表联合查询相关。否-当本地盘存储类型RDS MySQL实例变配不涉及跨机迁移时，变配时间较短，...
启动和暂停数据同步项目
系统自动完成对数据同步项目的预检查后，启动数据同步项目。暂停数据同步项目 仅支持暂停 运行中 的数据同步项目。暂停数据同步项目后，数据传输会中止数据同步项目的调度，此时延迟会实时增长。登录 OceanBase 管理控制台。在左侧导航栏，...
一键创建OSS数据仓库
本文介绍如何通过向导将RDS、PolarDB for MySQL、MongoDB数据库或者ECS自建数据库数据同步到OSS中，即创建OSS数据仓库（创建Schema）。操作步骤 登录 Data Lake Analytics管理控制台。在页面左上角，选择DLA所在地域。在左侧导航栏单击 ...
概述
OceanBase 云数据库集群实例可以通过添加备实例，组成一主多备的集群网络，主备实例之间保持数据同步，进一步提升数据库的高可用能力。原理介绍 主备实例架构为一主（Primary）多备（Physical_Standby），备实例不支持级联添加备实例。主备...
从自建TiDB同步至云原生数据仓库AnalyticDB MySQL
说明 为保障正常通信和减少网络延迟对增量数据同步的影响，部署阿里云消息队列Kafka实例时，需配置和源库服务器相同的专有网络。在自建Kafka集群或阿里云消息队列Kafka实例中创建Topic。将DTS服务器的IP地址段加入至TiDB数据库的白名单安全...
一键克隆RDS MySQL至PolarDB MySQL版
说明 RDS MySQL 8.0版本、RDS MySQL云盘版本一键克隆至 PolarDB MySQL版，以及RDS MySQL跨版本一键克隆至 PolarDB MySQL版，都是通过逻辑迁移（DTS数据同步）方式实现。物理迁移和逻辑迁移对比 当前的一键克隆功能支持通过物理迁移（物理...
资源组操作及网络连通
数据同步网络连通问题 在做离线同步时，我们需要先了解哪些DataWorks及其网络能力？同步ECS自建的数据库的数据时，如何保障数据库与DataWorks的网络连通？数据库和DataWorks不在同一个地域（Region）下，进行数据同步时如何保障数据库与...
PolarDB PostgreSQL版（兼容Oracle）集群间的双向同步
重要 由于数据同步两端的系统时间可能存在差异、同步存在延时等多种因素，DTS无法完全保证冲突检测机制能够完全防止数据的冲突。在使用双向同步时，您需要在业务层面配合进行相应的改造，保证同一个主键、业务主键或唯一键的记录只在双向...
方案概述
逻辑迁移（DTS数据同步）方式：通过数据传输服务DTS，创建数据同步任务，将源RDS MySQL实例的库表结构和全量数据同步至创建的 PolarDB MySQL版 集群中，然后保持增量数据同步。物理迁移（物理复制）和逻辑迁移（DTS数据同步）方式区别如下...
数据集成：全领域数据汇聚
说明 运行数据集成任务时，可能会产生由数据同步任务相关配置引起的账单和费用，如同步上下游数据库、计算引擎系统计算和存储费用，所需网络服务费用（如高速通道、共享带宽、EIP）等等，此类收费不属于DataWorks相关收费范畴，账单也不会...
常见问题
主要用于两个数据源之间的数据实时同步，适用于异地多活、数据灾备、跨境数据同步、查询与报表分流、云BI及实时数据仓库等场景。支持的数据库 请参见 迁移方案概览。请参见 同步方案概览。支持的数据库部署位置（接入方式）阿里云实例 有...
DataWorks节点合集
类型 描述 数据集成同步类节点 DataWorks数据集成支持复杂网络环境下的数据同步，并提供用于离线（批量）数据周期性同步的离线同步节点，与用于单表或整库增量数据实时同步的实时同步节点。该节点可在数据开发（DataStudio）界面直接创建。...
方案概述
逻辑迁移（DTS数据同步）方式的使用限制如下：暂不支持跨地域迁移。迁移期间不允许对源RDS实例执行参数设置的操作。仅支持迁移库、表、视图、存储过程、函数这五类结构。对源库有如下限制：类型 说明 源库限制 待同步的表需具备主键或唯一...
升级步骤
查看数据同步任务详情（可选）在使用逻辑迁移（DTS数据同步）方式进行一键升级的过程中，若遇到迁移报错（如预检查失败）或者其他异常状态（如复制延迟异常高）时，您可以前往对应的DTS数据同步任务的详情页，查看数据同步任务的具体信息。...
同步时源库为PolarDB-X 2.0的注意事项及限制
如果同步的源实例为 PolarDB分布式版，您需要在配置具体的同步任务前，参考本文的注意事项及限制，以保障数据同步任务的正常运行。源库为PolarDB-X的同步方案概览 根据如下同步方案，查看同步任务的注意事项及限制：说明 DTS默认同步到目标...
异地备份方案概览
安全：系统后台通过专有网络进行跨地域传输，提高数据传输的安全性。备份性能：备份速度快。操作便捷：在RDS控制台打开 跨地域 开关即可。RDS MariaDB PolarDB MySQL引擎 自建MariaDB数据库 百GB级别的自建MySQL数据库 其他云厂商的MySQL...
迁移StarRocks数据至EMR Serverless StarRocks
启用后，系统将仅执行一次全量数据同步而不进行后续的增量数据更新，即每张表将只同步一次。source_fe_host 源集群FE的IP地址或FQDN。source_fe_query_port 源集群FE的查询端口（query_port）。source_cluster_user 用于登录源集群的用户名...
迁移说明
非阿里云服务存储数据迁移至云上NAS 如果您想将线下数据、IDC数据、本地数据等非阿里云服务存储数据迁移至阿里云文件存储NAS，可参照以下方式进行迁移：配置数据传输中转节点 迁移数据至阿里云NAS OSS和NAS之间的数据迁移 对于NAS与OSS之间...
修改数据库连接信息
当数据同步作业的源数据库或目标数据库发生了主备切换时，您可以调用SwitchSynchronizationEndpoint接口，将主备切换后新数据库的连接信息传给DTS，DTS将从断点处重新启动数据同步任务。如发生主备切换的源或目标实例是公网、ECS或专线接入...
跨阿里云账号同步RDS MySQL实例
因此您需要在执行数据同步前评估源库和目标库的性能，同时建议您在业务低峰期执行数据同步（例如源库和目标库的CPU负载在30%以下）。如果源库中待同步的表没有主键或唯一约束，且所有字段没有唯一性，可能会导致目标数据库中出现重复数据。...
使用DataWorks
通过向导模式配置并运行数据同步任务 配置网络与资源。选择数据来源。在 数据来源 下拉列表中选择数据源类型为 MaxCompute(ODPS)，并选择创建好的MaxCompute 数据源名称。选择独享数据集成资源组。选择已创建的独享数据集成资源组，详情请...
应用场景
数据异地灾备 传输方式：数据同步 如果您的应用程序部署在单个地域中，可能会因为断电、网络中断等不可抗因素而导致服务中断。针对这种情况，您可以在另一个地域构建灾备中心，以提高服务可用性。DTS会在业务中心和灾备中心之间持续同步...
MySQL实例间的双向同步
重要 由于数据同步两端的系统时间可能存在差异、同步存在延时等多种因素，DTS无法完全保证冲突检测机制能够完全防止数据的冲突。在使用双向同步时，您需要在业务层面配合进行相应的改造，保证同一个主键、业务主键或唯一键的记录只在双向...
跨云账号单向同步云数据库Redis实例
建议在执行数据同步前需评估源库和目标库的性能，同时建议业务低峰期执行数据同步。在DTS同步期间，不允许有除DTS外的数据写入目标库，否则会导致源库与目标库数据不一致。若目标实例的架构类型为集群版且某一个分片达到了内存上限，或目标...
全球多活同步延迟测试
通过数据同步通道将多个子实例组网成1个逻辑上的分布式实例，所有子实例均可读写并保持实时数据同步，可轻松支持异地多个站点同时对外提供服务的业务场景，助力企业快速复制阿里巴巴异地多活架构。更多详情，请参见 Tair全球多活简介。测试...
配置数据同步任务
数据同步功能帮助您实现数据源之间的数据实时同步，适用于数据异地多活、数据异地灾备、本地数据灾备、跨境数据同步、云BI及实时数据仓库等多种业务场景。本文以 RDS MySQL 同步至 RDS MySQL 为例为您介绍在DTS专属集群中配置数据同步任务...
DataWorks On CDP/CDH使用说明
数据同步的同步资源费用 运行数据同步任务时，除调度资源外，还需使用数据同步资源。您需按需购买数据同步所需的资源组（例如，包年包月的独享数据集成资源组、按量付费的公共数据集成（调试）资源组），支付相应的资源组费用。说明 ...
使用DataWorks或者DataX导入数据
云数据库HBase增强版提供LTS服务能够支持各种HBase版本之间相互迁移和实时同步，并且支持同步RDS、Loghub的实时数据到HBase，DataX是阿里巴巴集团内被广泛使用的离线数据同步工具，实现MySQL、Oracle、SqlServer、PostgreSQL、HDFS、Hive、...
日志服务通过数据集成投递数据
背景信息 日志服务支持以下数据同步场景：跨地域的LogHub与MaxCompute等数据源的数据同步。不同阿里云账号下的LogHub与MaxCompute等数据源间的数据同步。同一阿里云账号下的LogHub与MaxCompute等数据源间的数据同步。公共云与金融云账号下...
跨云账号单向同步云数据库Redis实例
建议在执行数据同步前需评估源库和目标库的性能，同时建议业务低峰期执行数据同步。在DTS同步期间，不允许有除DTS外的数据写入目标库，否则会导致源库与目标库数据不一致。若目标实例的架构类型为集群版且某一个分片达到了内存上限，或目标...
RDS MySQL与PolarDB MySQL版间的双向同步
重要 由于数据同步两端的系统时间可能存在差异、同步存在延时等多种因素，DTS无法完全保证冲突检测机制能够完全防止数据的冲突。在使用双向同步时，您需要在业务层面配合进行相应的改造，保证同一个主键、业务主键或唯一键的记录只在双向...
DataWorks On MaxCompute使用说明
数据同步的同步资源费用 运行数据同步任务时，除调度资源外，还需使用数据同步资源。您需按需购买数据同步所需的资源组（例如，包年包月的独享数据集成资源组、按量付费的公共数据集成（调试）资源组），支付相应的资源组费用。说明 ...
MySQL实例间的双向同步
重要 由于数据同步两端的系统时间可能存在差异、同步存在延时等多种因素，DTS无法完全保证冲突检测机制能够完全防止数据的冲突。在使用双向同步时，您需要在业务层面配合进行相应的改造，保证同一个主键、业务主键或唯一键的记录只在双向...
部分地域升级迁移指引
通过本文您可以了解到本次迁移的概要指引，包括如何获取您受影响的产品和实例、每一种产品迁移的方案、整体系统迁移的注意事项等。迁移背景 基于全球基础设施优化需要，以便更高效地为客户提供持续的优质服务，部分老旧地域和可用区的物理...
云数据库MongoDB版（副本集架构）间的双向同步
重要 由于数据同步两端的系统时间可能存在差异、同步存在延时等多种因素，DTS无法完全保证冲突检测机制能够完全防止数据的冲突。在使用双向同步时，您需要在业务层面配合进行相应的改造，保证同一个主键、业务主键或唯一键的记录只在双向...
云数据库MongoDB版（副本集架构）间的双向同步
重要 由于数据同步两端的系统时间可能存在差异、同步存在延时等多种因素，DTS无法完全保证冲突检测机制能够完全防止数据的冲突。在使用双向同步时，您需要在业务层面配合进行相应的改造，保证同一个主键、业务主键或唯一键的记录只在双向...
应用场景
传统的异地备份需要通过专线或公网来打通地域间的网络，从而将数据同步至异地，但往往存在安全性不足、备份速度有限、技术成本高、备份策略单一等不足。数据库备份DBS支持将数据和日志备份至另一个地域，通过配置跨地域备份后可轻松实现...
云数据库MongoDB版（分片集群架构）间的双向同步
重要 由于数据同步两端的系统时间可能存在差异、同步存在延时等多种因素，DTS无法完全保证冲突检测机制能够完全防止数据的冲突。在使用双向同步时，您需要在业务层面配合进行相应的改造，保证同一个主键、业务主键或唯一键的记录只在双向...
- 产品推荐
- 这些文档可能帮助您