控制台简介
数据同步控制台提供管理推送配置及执行业务数据推送的功能。一条推送配置相当于一个具体的数据推送的业务场景，而业务数据推送就是实现该配置所对应的业务场景。通过数据同步控制台，您可以进行以下操作：新增推送配置 发送业务数据 查看...
实时数据同步
支持的同步链路 数据源端 数据目的端 支持的拓扑 备注 MySQL Zsearch（云搜）单向同步 已支持 OceanBase ODPS、DataHub 单向同步 已支持（仅专有云）ORACLE ODPS 单向同步 已支持（仅专有云）MySQL MySQL 单向同步 规划中 数据同步对象 ...
使用 SDK
在监听同步业务之前，需要先定义好具体的同步业务的业务标识名称（对应数据同步控制台上的同步配置标识），该参数就是作为使用者的您和服务提供者联系的纽带。在以下示例中，业务标识名称为 SYNC-TRADE-DATA。import...
数据源概述
说明 数据同步基于数据源控制任务读写端数据库，您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库或数据仓库的相关信息，以便在同步过程中，可通过选择数据源名称来控制同步读取和写入的数据库或数据仓库。...
Oracle数据导入
您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，以便在同步任务配置过程中，可通过选择数据源名称来控制同步任务的读取和写入数据库。同步任务支持的数据源及其配置详情请参见 支持的数据源及同步方案。说明 数据...
通过DataWorks导入
您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，以便在同步任务配置过程中，可通过选择数据源名称来控制同步任务的读取和写入数据库。同步任务支持的数据源及其配置详情请参见 支持的数据源及同步方案。说明 数据...
常见问题
资源组操作及网络连通 在做离线同步时，我们需要先了解哪些DataWorks及其网络能力？同步ECS自建的数据库的数据时，如何保障数据库与DataWorks的网络连通？数据库和DataWorks不在同一个地域（Region）下，进行数据同步时如何保障数据库与...
MySQL一键实时同步至MaxCompute
您需要将数据库添加至DataWorks上，以便在同步任务配置时，可通过选择数据源名称来控制同步读取和写入的数据库。本实践中创建的数据源名为 doc_mysql1，详情请参见 配置MySQL数据源、配置MaxCompute数据源。说明 数据源相关能力介绍详情请...
MySQL一键实时同步至MaxCompute
您需要将数据库添加至DataWorks上，以便在同步任务配置时，可通过选择数据源名称来控制同步读取和写入的数据库。本实践中创建的数据源名为 doc_mysql1，详情请参见 配置MySQL数据源、配置MaxCompute数据源。说明 数据源相关能力介绍详情请...
同步时源库为PostgreSQL的注意事项及限制
源库为PostgreSQL的同步方案概览 根据同步方案，查看同步任务的注意事项及限制：说明 DTS默认同步到目标数据库中时会取消外键约束，因此源数据库的级联、删除等操作不会同步到如下目标数据库：RDS PostgreSQL 云原生数据仓库AnalyticDB ...
使用NimoShake将Amazon DynamoDB迁移至阿里云
target.db.exist=drop full.concurrency 全量同步阶段的表级别并发度，表示一次最多同步多少个表。默认值：4。full.concurrency=4 full.document.concurrency 全量同步阶段参数。表内document的并发度，表示使用多少个线程并发将一个表内的...
设置过滤条件
在配置同步或迁移任务对象时，您可以通过设置过滤条件，将源数据库中满足您需求的数据同步或迁移到目标数据库。该功能常应用于分库分表、同步或迁移部分数据等场景。前提条件 当前任务处于 配置任务对象及高级配置 阶段。进入此阶段的方法...
CREATE TABLE AS（CTAS）语句
通过CTAS语句，在实时同步数据的同时，还能实时将上游表结构（Schema）的变更同步到下游表，提高您在目标存储中创建表和维护源表结构变更的效率。本文为您介绍CREATE TABLE AS（CTAS）的使用方法，并提供了多种使用场景下的示例。前提条件 ...
BigQuery数据源
BigQuery数据源为您提供读取BigQuery的功能，方便您后续可以通过向导模式和脚本模式配置数据同步任务。本文为您介绍DataWorks的BigQuery数据同步能力支持情况。支持的版本及地域 BigQuery使用的SDK版本是 google-cloud-bigquery 2.29.0，...
Quick BI组合图中双Y轴刻度同步功能为什么同步垂直...
概述 Quick BI组合图中双Y轴刻度同步功能为什么同步垂直左轴的刻度，而不是同步垂直右轴的刻度。详细信息 当两个度量字段刻度差别较大时，大的刻度包含小的刻度，双Y轴刻度同步功能则会将小的刻度同步为大的刻度，以便展示数据。与垂直左轴...
RDS SQL Server同步至DataHub
支持的同步架构 一对一单向同步 一对多单向同步 多对一单向同步 关于各类同步架构的介绍及注意事项，请参见 数据同步拓扑介绍。支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE 数据库账号的权限要求 数据库 所需权限 ...
PolarDB PostgreSQL版同步至RDS PostgreSQL
支持的同步架构 一对一单向同步 一对多单向同步 多对一单向同步 关于各类同步架构的介绍及注意事项，请参见 数据同步拓扑介绍。支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE DDL 仅2020年10月01日后创建的数据同步...
PolarDB PostgreSQL版间的同步
支持的同步架构 一对一单向同步 一对多单向同步 多对一单向同步 关于各类同步架构的介绍及注意事项，请参见 数据同步拓扑介绍。支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE DDL 仅2020年10月01日后创建的数据同步...
RDS SQL Server同步至RDS MySQL
支持的同步架构 一对一单向同步 一对多单向同步 多对一单向同步 关于各类同步架构的介绍及注意事项，请参见 数据同步拓扑介绍。支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE DDL CREATE TABLE 说明 不支持分区、表...
自建SQL Server同步至云原生数据仓库 AnalyticDB ...
支持的同步架构 一对一单向同步 一对多单向同步 多对一单向同步 关于各类同步架构的介绍及注意事项，请参见 数据同步拓扑介绍。支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE DDL CREATE TABLE 说明 不支持分区、表...
自建SQL Server同步至云原生数据仓库 AnalyticDB ...
支持的同步架构 一对一单向同步 一对多单向同步 多对一单向同步 关于各类同步架构的介绍及注意事项，请参见 数据同步拓扑介绍。支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE DDL CREATE TABLE 说明 不支持分区、表...
PolarDB PostgreSQL版同步至云原生数据仓库AnalyticDB...
支持的同步架构 一对一单向同步 一对多单向同步 多对一单向同步 关于各类同步架构的介绍及注意事项，请参见 数据同步拓扑介绍。支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE DDL 仅2020年10月01日后创建的数据同步...
自建SQL Server同步至PolarDB MySQL版
支持的同步架构 一对一单向同步 一对多单向同步 多对一单向同步 关于各类同步架构的介绍及注意事项，请参见 数据同步拓扑介绍。支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE DDL CREATE TABLE 说明 不支持分区、表...
离线同步数据质量排查
这种情况一般多次运行同步任务每次同步的记录条数会有差异。错误的查询检查条件 以MySQL为例，可以配置数据抽取过滤where条件，在where条件中有调度参数变量，具体如 gmt_modify>=${bizdate}，常见的错误是调度参数没有合理的替换，比如...
RDS SQL Server间的同步
支持的同步架构 一对一单向同步 一对多单向同步 级联单向同步 多对一单向同步 关于各类同步架构的介绍及注意事项，请参见 数据同步拓扑介绍。支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE 说明 不支持同步仅更新...
PolarDB PostgreSQL版（兼容Oracle）集群同步至...
如同步对象为表级别，且需进行编辑（如表列名映射），则单次同步任务待同步的表数量超过1000时，建议您拆分待同步的表，分批配置为多个任务，或者配置整库的同步任务，否则任务提交后可能会显示请求报错。需开启WAL日志。如为增量同步任务...
PolarDB PostgreSQL版（兼容Oracle）集群间的双向同步
双向同步实例包含正向和反向同步任务，在配置或重置双向同步实例时，若其中一个任务的目标对象是另一个任务待同步的对象：仅允许其中一个任务同步全量和增量数据，另一个任务仅支持同步增量数据。当前任务的源数据仅支持同步到当前任务的...
Dataphin集成任务中多表同步是如何同步的
产品名称 Dataphin 产品模块 集成任务，多表同步 概述 本文为您介绍Dataphin管道集成任务中源表选择多表同步是怎样同步的 问题描述 集成任务同步数据中源表选择了多表同步，为什么右边的界面只显示了部分表的字段 问题原因 不清楚选择多表...
数据同步拓扑介绍
拓扑类型 拓扑图 说明 一对一单向同步 无 一对多单向同步 您需要购买多个同步实例来实现一对多单向同步。例如，从实例A同步到实例B、实例C和实例D，那么您需要购买三个同步实例。级联单向同步 您需要购买多个同步实例来实现级联单向同步。...
迁移任务同步
该文档描述了云迁移中心CMH的是如何完成...控制台->迁移->迁移工具->建立同步 当您首次建立同步时，CMH 将会需要您的角色授权，在通过您的授权后，CMH将根据您的同步开关，去往对应的云产品获取任务信息。相关阅读：云迁移中心服务关联角色
RDS 同步到云搜
支持功能 支持 RDS 数据表到 ZSearch 的实时数据同步 任务创建成功后支持修改同步对象 支持的 SQL 操作类型 RDS>云搜 实时同步支持以下 SQL 操作类型：Insert Delete Update 数据同步服务暂不支持 RDS 中表结构变更（DDL）到 云搜 的自动...
新增数据同步任务
本文以 RDS 数据源到分布式搜索服务（云搜 ZSearch）的实时同步为例，介绍如何新增数据同步任务。操作步骤 进入数据同步服务控制台，在左侧导航栏中，选择 数据同步任务。单击 添加任务，选择 RDS 数据源同步到分布式搜索服务 的场景。开始...
API概览
DescribeSynchronizationJobStatusList 查询一个或多个同步实例状态。DescribeSynchronizationJobStatus 查询一个同步实例状态。DeleteSynchronizationJob 释放同步实例。数据订阅 API 描述 CreateSubscriptionInstance 购买订阅实例。...
基本概念
多设备同步 指基于用户维度推送时，支持单个用户的多个设备之间的数据同步，即同一个用户在切换设备的情况下仍然会收到在上一个设备上已经收到过的数据。在设备上卸载客户端，重新安装并上线后，数据依然会再次推送。H 后台 指客户端 APP ...
PolarDB MySQL版同步至阿里云消息队列Kafka版
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将 PolarDB MySQL版 集群同步至 阿里云消息队列Kafka版，扩展消息处理能力。前提条件 已创建源 PolarDB MySQL版 集群，详情请参见 购买按量付费集群 和 购买包年包月集群。...
RDS全量同步和增量同步
本文主要介绍RDS全量同步和增量同步的操作过程。注意事项 RDS全量同步和增量同步功能于2023年3月10日下线。2023年3月10日后购买的LTS将无法使用RDS全量同步和增量同步功能，2023年3月10日前购买的LTS仍可正常使用此功能。使用场景 RDS低...
RDS全增量同步
本文主要介绍RDS全量同步和增量同步的操作过程。注意事项 RDS全增量同步功能于2023年3月10日下线。2023年3月10日后购买的LTS将无法使用RDS全增量同步功能，2023年3月10日前购买的LTS仍可正常使用此功能。使用场景 RDS低成本历史库。RDS数据...
计费常见问题
本文汇总了数据传输服务DTS（Data Transmission Service）计费的常见问题。常见问题 Q：按量付费的计费方式下，手动结束了数据迁移实例或数据同步实例，还会继续收费吗？A：不收费。数据迁移实例仅在增量数据迁移正常运行期间计费（包含...
2022年
功能名称 功能概述 变更分类 产品文档 新增多活容灾架构拓扑图展示 新增多活容灾拓扑图页面，支持拓扑图的形式可视化的呈现多活架构的全貌，包括多活流量划分、应用节点数量、微服务/消息/数据库部署情况、同步链路状态、多活控制台纳管...
自建Oracle同步至DataHub
本文介绍如何使用数据传输服务DTS（Data Transmission Service）将自建Oracle同步至 阿里云流式数据服务DataHub。前提条件 已创建源自建Oracle数据库和目标实例 阿里云流式数据服务DataHub，且自建Oracle数据库的版本为19c、18c、12c、11g...
- 产品推荐
- 这些文档可能帮助您