购买同步实例
调用CreateSynchronizationJob接口购买一个数据同步实例。请确保在使用该接口前，已充分了解云数据库DTS产品的收费方式和 价格。购买完成后，需要调用接口 ConfigureSynchronizationJob 配置同步任务，才能成功启动同步任务。调试 您可以在...
实时数据同步
支持的同步链路 数据源端 数据目的端 支持的拓扑 备注 MySQL Zsearch（云搜）单向同步 已支持 OceanBase ODPS、DataHub 单向同步 已支持（仅专有云）ORACLE ODPS 单向同步 已支持（仅专有云）MySQL MySQL 单向同步 规划中 数据同步对象 ...
独享数据集成资源组
性能指标 规格 离线同步最大并发线程数 4c8g 8 8c16g 16 12c24g 24 16c32g 32 24c48g 48 规格 单任务建议需要的资源规格 MySQL来源实时同步数据库数1 4c8g MySQL来源实时同步数据库数[2-5]8c16g MySQL来源实时同步数据库数6以上 12c24g ...
应用场景
多源联合分析 该场景需要解决云上企业构建数据仓库时配置数据同步链路繁杂的问题，以及分库分表所带来的数据分析复杂性问题，让用户可以更专注于业务逻辑。该场景可实现：支持多数据源接入 支持数据库（RDS、PolarDB-X（原DRDS）、PolarDB...
RDS增量数据同步至MaxCompute
本文以同步业务RDS数据库的数据至MaxCompute为例，为您介绍如何对不同场景的数据进行增量同步。背景信息 根据需要同步的数据在写入后是否发生变化，分为恒定的存量数据（通常是日志数据）和持续更新的数据（例如人员表中，人员的状态会发生...
RDS增量数据同步至MaxCompute
本文以同步业务RDS数据库的数据至MaxCompute为例，为您介绍如何对不同场景的数据进行增量同步。背景信息 根据需要同步的数据在写入后是否发生变化，分为恒定的存量数据（通常是日志数据）和持续更新的数据（例如人员表中，人员的状态会发生...
调用链采样配置最佳实践
以下将从ARMS调用链采样规则、成本控制和链路价值最大化的角度分析几种典型业务场景下的采样策略：基于成本控制角度考虑，从链路入口应用维度调整采样率，控制整体链路数据量 头部采样的机制是由入口应用决定该条调用链是否被采样，如果...
数据同步链路规格说明
数据同步规格说明 数据同步根据同步链路的同步性能上限，定义了四种规格：micro、small、medium、large，当满足以下条件时，各个规格的同步性能上限才能达到下表中的性能上限。源实例的压力要大于等于各规格对应的性能上限。目标实例的写入...
升级任务的链路规格
若现有的迁移或同步任务的链路规格不能适应业务需求时，您可以考虑升级链路规格以提升传输数据的性能，确保任务的顺利执行并更好地支持不断增长的业务需求。前提条件 任务须处于 运行中、已暂停 或 运行失败 状态。任务需为数据迁移任务和...
配置数据层
杭州中心单元 创建同步任务方式 包括直接录入和手动创建的方式：直接录入：如果您在 数据传输控制台 已经创建一个状态为同步中（双向同步的反向同步链路状态也为同步中）的同步任务，则可以直接选择该同步任务进行录入。手动创建：如果您在...
配置数据层
DTS 同步架构 包括单向同步和双向同步：单向同步：在单向同步的拓扑中，为保障同步数据的一致性，对目标实例中的同步对象只进行读操作，不进行写操作。双向同步：目前DTS仅支持两个数据库之间的双向同步。说明 关于同步架构的更多信息，请...
使用数据传输同步数据
本文以同步 OceanBase 数据库的数据至 Kafka 为例，介绍如何使用数据传输同步数据。前提条件 在同步数据之前，您需要确认以下信息：数据传输已具备云资源访问权限。详情请参见 数据传输迁移角色授权。已为源端 OceanBase 数据库创建专用于...
升级实例配置
说明 关于链路的规格信息，请参见 数据迁移链路规格说明 和 数据同步链路规格说明。升级数据迁移任务时，选择 迁移链路规格。升级数据同步作业时，选择 同步链路规格。说明 本文介绍通用操作，实际页面可能有差异。如果需要更改同步拓扑，...
购买流程
目前跨境同步链路默认不开放购买，若您需要购买跨境同步任务，请先申请开通跨境数据同步的权限，详情请参见 申请跨境数据同步权限。进入同步任务的列表页面。登录 DMS数据管理服务。在顶部菜单栏中，单击 集成与开发（DTS）。在左侧导航栏...
实施步骤
通过DTS实时同步PolarDB for MySQL数据到分析型数据库MySQL版需要以下几个步骤：步骤一：创建DTS同步作业 步骤二：配置同步链路 步骤三：查看同步数据 步骤一：创建DTS同步作业 创建DTS同步作业需要用户支付一定的费用，DTS支持两种付费...
同步方案概览
源为自建MySQL或RDS MySQL的同步方案 源为PolarDB MySQL版的同步方案 源为PolarDB PostgreSQL版（兼容Oracle）的同步方案 源为PolarDB PostgreSQL版的同步方案 源为PolarDB-X的同步方案 源为Oracle的同步方案 源为自建PostgreSQL或RDS ...
安装Jaeger Agent
可观测链路 OpenTelemetry 版 支持使用OpenTelemetry、Jaeger、Zipkin和Skywalking客户端将应用链路数据上报至控制台。如果你需要通过Jaeger Agent上报数据请先安装Jaeger Agent。步骤一：获取接入点信息 登录 可观测链路 OpenTelemetry 版...
RDS PostgreSQL同步至AnalyticDB for PostgreSQL
预检查完成后，DTS会将源实例中待同步对象的存量数据同步至目标实例，作为后续增量同步数据的基线数据。目标已存在表的处理模式 清空目标表的数据 在预检查阶段跳过 目标表是否为空 的检查项目。全量初始化之前将目标表的数据清空。适用于...
从RDS PostgreSQL同步至云原生数据仓库AnalyticDB ...
预检查完成后，DTS会将源实例中待同步对象的存量数据同步至目标实例，作为后续增量同步数据的基线数据。目标已存在表的处理模式 清空目标表的数据 在预检查阶段跳过 目标表是否为空 的检查项目。全量初始化之前将目标表的数据清空。适用于...
从RDS PostgreSQL同步至云原生数据仓库AnalyticDB ...
预检查完成后，DTS会将源实例中待同步对象的存量数据同步至目标实例，作为后续增量同步数据的基线数据。目标已存在表的处理模式 清空目标表的数据 在预检查阶段跳过 目标表是否为空 的检查项目。全量初始化之前将目标表的数据清空。适用于...
查看同步链路状态和性能
DTS可以展示全量同步性能、显示并诊断 增量同步性能，使您可以了解数据同步作业的链路状态信息和多种性能指标，为您管理数据同步作业提供参考依据。操作步骤 登录 数据传输控制台。说明 若数据传输控制台自动跳转至数据管理DMS控制台，您...
ETL工具支持概览
支持的ETL工具见下，可以同时参见更详细的同步方案列表 数据迁移及同步方案综述：数据传输服务（DTS）：阿里云提供的实时数据同步服务，可以将其他数据源（RDS MySQL，ECS自建MySQL，PolarDB等）实时同步数据到 AnalyticDB PostgreSQL版，...
使用DTS同步RDS MySQL数据到AnalyticDB MySQL 2.0
本文以RDS MySQL数据源为例，介绍如何通过DTS将RDS MySQL数据...步骤三：查看同步数据 返回DTS控制台，在同步列表中的同步概况中查看同步延时和速度。进入 AnalyticDB MySQL版控制台，在 ads_DataBase 数据库中可以查看到同步过来的数据表。
基本概念
数据更新 数据更新是指仅修改数据，未修改结构定义的操作，例如INSERT、DELETE和UPDATE操作。结构更新 结构更新是指修改结构对象定义语法的操作，例如CREATE TABLE、ALTER TABLE、DROP VIEW等操作。数据范围 数据范围是指存储在数据订阅...
镜像同步加速
背景信息 跨境同步加速和自定义同步链路功能区别如下：跨境同步加速：基于调度策略与网络链路优化，提升中国内地与海外地域、中国内地与中国香港之间的同步速度。自定义同步链路：使用自定义的云企业网，为不同地域搭建私网通信通道，实现...
移除同步对象
DTS支持在数据同步的过程中移除同步对象，无需重新配置同步任务，以在降低对业务影响的情况下变更同步对象。本文将介绍移除同步对象的操作流程。重要 本文为旧版控制台的操作流程，若您使用的是新版控制台，操作...预检查完成后开始同步数据。
数据同步方案概览
源为自建MySQL或RDS MySQL的同步方案 源为PolarDB MySQL版的同步方案 源为PolarDB PostgreSQL版（兼容Oracle）的同步方案 源为PolarDB PostgreSQL版的同步方案 源为PolarDB-X的同步方案 源为Oracle的同步方案 源为自建PostgreSQL或RDS ...
新功能发布记录
2020年6月 新功能/特性 简要概述 类别 文档 支持同步数据到Hologres 支持同步数据到Hologres 数据同步 创建同步Hologres 兼容Kafka 可以使用原生Kafka客户端将数据写入DataHub 开发指南 兼容Kafka Canal插件 使用canal将MySql的增量数据...
产品架构
数据同步的工作原理 DTS可以在两个数据源之间同步正在进行的数据变更。数据同步通常用于OLTP到OLAP的数据传输。数据同步包括以下两个阶段：同步初始化：DTS先开始收集增量数据，然后将源数据库的结构和存量数据加载到目标数据库。数据实时...
云数据库MongoDB版（副本集架构）间的双向同步
支持的冲突检测 为保障同步数据的一致性，您需要确保同一个主键、业务主键或唯一键的记录只在双向同步的一个节点进行更新。如果同时更新则会按照您在数据同步作业中配置的冲突修复策略进行响应。DTS通过冲突检测和修复最大程度地维护双向...
云数据库MongoDB版（副本集架构）间的双向同步
支持的冲突检测 为保障同步数据的一致性，您需要确保同一个主键、业务主键或唯一键的记录只在双向同步的一个节点进行更新。如果同时更新则会按照您在数据同步作业中配置的冲突修复策略进行响应。DTS通过冲突检测和修复最大程度地维护双向...
DataWorks On MaxCompute使用说明
费用说明 DataWorks数据开发与运维中心提供MaxCompute数据同步、数据加工任务的周期调度，不仅包含DataWorks相关费用，同时会产生产品侧其他费用，具体如下。一、DataWorks相关费用 以下费用会体现在DataWorks产品相关账单中。DataWorks...
新增同步对象
DTS支持在数据同步的过程中新增同步对象，无需重新配置同步任务，以在降低对业务影响的情况下变更同步对象。本文将介绍新增同步对象的操作流程。重要 本文为旧版控制台的操作流程，若您使用的是新版控制台，操作...预检查完成后开始同步数据。
数据上云场景
数据库数据同步 数据库的数据同步到MaxCompute需要根据数据库的类型和同步策略来选择相应的工具。离线批量的数据库数据同步：可以选择DataWorks，支持的数据库种类丰富，包括MySQL、SQL Server、PostgreSQL等，详情请参见 通过向导模式配置...
PolarDB MySQL版间的双向同步
数据同步时，请勿对源库的同步对象使用gh-ost或pt-online-schema-change等类似工具执行在线DDL变更，否则会导致同步失败。不兼容触发器 当同步对象为整个库，且库中的触发器（TRIGGER）会更新库内某个表时，可能导致源和目标库的数据不一致...
PolarDB-X间的数据实时同步
云原生分布式数据库 PolarDB-X 是阿里巴巴致力于解决单机数据库服务瓶颈而自主研发的分布式数据库产品，高度兼容MySQL协议和语法，支持自动化水平拆分、在线平滑扩缩容、弹性扩展、透明读写分离，具备数据库全生命周期运维管控能力。...
从PolarDB-X同步至AnalyticDB for PostgreSQL
预检查完成后，DTS会将源实例中待同步对象的结构及数据在目标实例中初始化，作为后续增量同步数据的基线数据。目标已存在表的处理模式 清空目标表的数据 在预检查阶段跳过 目标表是否为空 的检查项目。全量初始化之前将目标表的数据清空。...
数据同步流程
数据传输提供数据同步功能，帮助您实现数据源之间的数据实时同步。适用于数据异地多活、数据异地灾备、数据聚合和实时数据仓库等多种业务场景。您可以参考以下流程进行同步前的准备工作、以及购买、配置和管理数据同步项目。完成准备工作。...
数据同步简介
基本原理 类似于 MySQL 的 binlog 机制，数据同步服务器和客户端 SDK 之间传递的基本数据单元为 oplog，当业务需要同步一个变更数据到指定的用户或设备时，业务调用数据同步接口，数据同步服务端会将业务需要同步的数据变更包装为一个 ...
场景：配置增量数据离线同步任务
配置增量同步 数据集成离线同步任务中，可以使用调度参数来指定同步源表及目标表的数据路径以及数据范围，调度参数的配置方式与其他类型任务一致，没有特殊限制。在同步任务运行时，任务中配置的占位符参数都会被替换为调度参数表达式所...
- 产品推荐
- 这些文档可能帮助您