从通过专线、VPN网关或智能接入...同步至自建Kafka集群
配置同步通道的源实例及目标实例信息。类别 配置 说明 无 同步作业名称 DTS会自动生成一个同步作业名称，建议配置具有业务意义的名称（无唯一性要求），便于后续识别。源实例信息 实例类型 选择 通过专线/VPN网关/智能接入网关接入的自建...
从ECS上的自建MySQL同步至Elasticsearch
配置同步通道的源实例及目标实例信息。类别 配置 说明 无 同步作业名称 DTS会自动生成一个同步作业名称，建议配置具有业务意义的名称（无唯一性要求），便于后续识别。源实例信息 实例类型 选择 ECS上的自建数据库。实例地区 购买数据同步...
从通过专线、VPN网关或智能接入...同步至PolarDB MySQL版
配置同步通道的源实例及目标实例信息。类别 配置 说明 无 同步作业名称 DTS会自动生成一个同步作业名称，建议配置具有业务意义的名称（无唯一性要求），便于后续识别。源实例信息 实例类型 选择 通过专线/VPN网关/智能接入网关接入的自建...
从PolarDB MySQL版同步至云原生数据仓库 AnalyticDB ...
配置同步通道的源实例及目标实例信息。类别 配置 说明 无 同步作业名称 DTS会自动生成一个同步作业名称，建议配置具有业务意义的名称（无唯一性要求），便于后续识别。源实例信息 实例类型 固定为 PolarDB实例，不可变更。实例地区 购买...
从PolarDB MySQL版同步至云原生数据仓库AnalyticDB ...
配置同步通道的源实例及目标实例信息。类别 配置 说明 无 同步作业名称 DTS会自动生成一个同步作业名称，建议配置具有业务意义的名称（无唯一性要求），便于后续识别。源实例信息 实例类型 固定为 PolarDB实例，不可变更。实例地区 购买...
从RDS同步到云原生数据仓库 AnalyticDB MySQL 版
配置同步通道的源实例及目标实例信息。类别 配置 说明 无 同步作业名称 DTS会自动生成一个同步作业名称，建议配置具有业务意义的名称（无唯一性要求），便于后续识别。源实例信息 实例类型 选择 RDS实例。实例地区 购买数据同步实例时选择...
从RDS同步到云原生数据仓库AnalyticDB MySQL
配置同步通道的源实例及目标实例信息。类别 配置 说明 无 同步作业名称 DTS会自动生成一个同步作业名称，建议配置具有业务意义的名称（无唯一性要求），便于后续识别。源实例信息 实例类型 选择 RDS实例。实例地区 购买数据同步实例时选择...
从自建TiDB同步至云原生数据仓库AnalyticDB MySQL
配置同步通道的源实例及目标实例信息。配置同步任务的名称和源实例信息。配置 说明 同步任务名称 DTS会自动生成一个任务名称，建议配置具有业务意义的名称（无唯一性要求），便于后续识别。实例类型 根据源库的部署位置进行选择，本文以 ...
MySQL实例间的双向同步
配置同步通道的源实例及目标实例信息。类别 配置 说明 无 同步作业名称 DTS会自动生成一个同步作业名称，建议配置具有业务意义的名称（无唯一性要求），便于后续识别。源实例信息 实例类型 选择 RDS实例。实例地区 购买数据同步实例时选择...
从RDS同步至MaxCompute
配置同步通道的源实例及目标实例信息。类别 配置 说明 无 同步作业名称 DTS会自动生成一个同步作业名称，建议配置具有业务意义的名称（无唯一性要求），便于后续识别。源实例信息 实例类型 选择 RDS实例。实例地区 购买数据同步实例时选择...
从RDS同步至MaxCompute
配置同步通道的源实例及目标实例信息。类别 配置 说明 无 同步作业名称 DTS会自动生成一个同步作业名称，建议配置具有业务意义的名称（无唯一性要求），便于后续识别。源实例信息 实例类型 选择 RDS实例。实例地区 购买数据同步实例时选择...
离线同步日志分析
本文为您介绍如何查看离线同步任务执行过程中的日志详情。进入日志详情页 您可以在运维中心或DataStudio界面查看任务运行日志。...如果不填写 splitPk，包括不提供 splitPk 或者 splitPk 值为空，数据同步视作使用单通道同步该表数据。
通过向导模式配置离线同步任务
如果不填写splitPk，包括不提供splitPk或者splitPk值为空，数据同步视作使用单通道同步该表数据。并非所有插件均支持指定切分键配置任务切分逻辑，以上仅为示例，请以具体插件说明为准。详情请参见 支持的数据源与读写插件。写入端 操作 ...
通过脚本模式配置离线同步任务
如果不填写splitPk，包括不提供splitPk或者splitPk值为空，数据同步视作使用单通道同步该表数据。并非所有插件均支持指定切分键配置任务切分逻辑，以上仅为示例，请以具体插件说明为准。详情请参见 支持的数据源与读写插件。为目标字段赋值...
AnalyticDB for MySQL 3.0数据源
如果不填写 splitPk，包括不提供 splitPk 或者 splitPk 值为空，数据同步视作使用单通道同步该表数据。否 无 where 筛选条件，在实际业务场景中，往往会选择当天的数据进行同步，将 where 条件指定为 gmt_create>$bizdate。where 条件可以...
回执日志
event_type 回执事件类型，有以下几种类型：sent：送出 sent_fail：送出失败，指推送到通道时通道同步返回的错误信息 arrive：到达 arrive_fail：到达失败，指推送到通道时通道通过回执异步返回的错误信息 click：点击 clean：清除 说明 ...
HybridDB for MySQL数据源
如果 splitPk 不填写，包括不提供splitPk或者splitPk值为空，数据同步视作使用单通道同步该表数据。否 无 where 筛选条件，在实际业务场景中，往往会选择当天的数据进行同步，将where条件指定为 gmt_create>$bizdate。where条件可以有效地...
AnalyticDB for PostgreSQL数据源
如果不填写 splitPk，包括不提供splitPk或者splitPk值为空，数据同步视作使用单通道同步该表数据。否 无 where 筛选条件，AnalyticDB for PostgreSQLReader根据指定的 column、table 和 where 条件拼接SQL，并根据该SQL进行数据抽取。例如...
MariaDB数据源
如果不填写 splitPk，包括不提供 splitPk 或者 splitPk 值为空，数据同步视作使用单通道同步该表数据。否 无 where 筛选条件，在实际业务场景中，往往会选择当天的数据进行同步，将 where 条件指定为 gmt_create>$bizdate。where 条件可以...
PolarDB-X 2.0数据源
若不配置 splitPk 参数（即Reader脚本中不包含该参数）或 splitPk 参数取值为空，平台将使用单通道同步数据。否 无 where 筛选条件，在实际业务场景中，往往会选择当天的数据进行同步，将 where 条件指定为 gmt_create>$bizdate。where ...
MySQL数据源
MySQL数据源为您提供读取和写入MySQL的双向通道，本文为您介绍DataWorks的MySQL数据同步的能力支持情况。支持的MySQL版本 离线读写：支持MySQL 5.5.x、MySQL 5.6.x、MySQL 5.7.x、MySQL 8.0.x，兼容 Amazon RDS for MySQL、Azure MySQL。离...
DM（达梦）数据源
如果不填写 splitPk，将视作您不对单表进行切分，DM Reader使用单通道同步全量数据。否 空 where 筛选条件，DM Reader根据指定的 column、table 和 where 条件拼接SQL，并根据该SQL进行数据抽取。例如在做测试时，可以将 where 条件指定为...
PolarDB数据源
如果 splitPk 不填写，包括不提供splitPk或者splitPk值为空，数据同步视作使用单通道同步该表数据。否 无 splitFactor 切分因子，可以配置同步数据的切分份数，如果配置了多并发，会按照 并发数*splitFactor 份来切分。例如，并发数=5，...
PostgreSQL数据源
如果 splitPk 不填写，包括不提供 splitPk 或者 splitPk 值为空，数据同步视作使用单通道同步该表数据。否 无 where 筛选条件，PostgreSQL Reader根据指定的 column、table 和 where 条件拼接SQL，并根据该SQL进行数据抽取。例如在测试时，...
Oracle数据源
Oracle数据源为您提供读取和写入Oracle双向通道的功能，方便您后续可以通过向导模式和脚本模式配置数据同步任务。本文为您介绍DataWorks的Oracle数据同步能力支持情况。支持的版本 离线读写 版本 离线读（Oracle Reader）离线写（Oracle ...
离线同步常见问题
如果不填写splitPk，包括不提供splitPk或者splitPk值为空，数据同步视作使用单通道同步该表数据。可能原因2：等待数据集成任务执行资源 解决方案2：若日志出现长时间WAIT状态，说明当前任务运行所使用的独享数据集成资源组剩余可运行的并发...
查看索引同步状态
通道队列中的Log积压严重 如果观察到界面中的 写详情 和 读详情 速度都不慢，但是在 通道队列 中显示队列中的Log积压越来越多，则有可能是HBase写入过快，BDS同步能力已经跟不上，需要扩容BDS集群。也可能是Search服务的集群写入能力达到...
Dataphin将OSS文件通过管道任务同步到MaxCompute，...
目标Bucket与其他Bucket存在跨区域复制关系，其他Bucket中执行的删除操作被同步到目标Bucket中，此时Object也会被删除 解决方案 确保请求的Object命名符合规范。Object名称不能以正斜线（/）或者反斜线（\）开头，需使用UTF-8编码，且长度...
配置并管理实时同步任务
数据集成使用MaxCompute引擎同步数据通道进行数据上传和下载（同步数据通道SLA详情请参见 数据传输服务（上传）场景与工具），请根据MaxCompute引擎同步数据通道SLA评估数据同步业务技术选型。创建实时同步任务 创建整库实时同步节点。配置...
迁移工具
通道服务提供了增量、全量、增量加全量三种类型的分布式数据实时消费通道。通过为数据表建立数据通道，可以简单地实现对表中历史存量和新增数据的消费处理。更多信息，请参见 通道服务。将表格存储数据表中数据同步到另一个数据表 数据传输...
一键实时同步至MaxCompute
数据集成使用MaxCompute引擎同步数据通道进行数据上传和下载（同步数据通道SLA详情请参见 数据传输服务（上传）场景与工具），请根据MaxCompute引擎同步数据通道SLA评估数据同步业务技术选型。一键实时同步至MaxCompute，按实例模式同步时...
一键实时同步至MaxCompute
数据集成使用MaxCompute引擎同步数据通道进行数据上传和下载（同步数据通道SLA详情请参见 数据传输服务（上传）场景与工具），请根据MaxCompute引擎同步数据通道SLA评估数据同步业务技术选型。一键实时同步至MaxCompute，按实例模式同步时...
MaxCompute数据源
数据集成使用MaxCompute引擎同步数据通道进行数据上传和下载（同步数据通道SLA详情请参见 数据传输服务（上传）场景与工具），请根据MaxCompute引擎同步数据通道SLA评估数据同步业务技术选型。一键实时同步至MaxCompute，按实例模式同步时...
数据集成服务
在 通道控制 区域，配置任务运行参数，例如同步速率、脏数据同步策略等。关于参数配置的更多信息，请参见 配置通道。单击 图标，保存配置。说明 执行后续操作时，如果未保存配置，则系统会出现保存确认的提示，单击 确认 即可。执行同步...
使用MongoShake实现MongoDB实例间的单向同步
通过阿里云自研的MongoShake开源工具，您可以实现MongoDB数据库间的数据同步，该功能可用于数据分析、灾备和多活等业务场景。本文以云数据库MongoDB实例间的数据实时同步为例介绍配置流程。MongoShake介绍 MongoShake是阿里云以Golang语言...
GBase8a数据源
GBase8a数据源为您提供读取和写入GBase8a双向通道的功能，本文为您介绍DataWorks的GBase8a数据同步的能力支持情况。使用限制 目前Gbase8a Reader和Gbase8a Writer仅支持使用 新增和使用独享数据集成资源组。insert into.：当主键或唯一性...
同步专线网关ECR的跨域带宽
同步专线网关ECR（Express Connect Router）的各地域之间的转发带宽限制。接口说明 专线网关实例为 Active 状态时才允许更新。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以...
周界报警主机数据定义
数据类型 数据长度 通道ID channelID text（字符串）2048 输出参数：无 2.2.2 通道设置服务 功能类型 名称 标识符 调用方式 服务 通道设置 channelOperation 同步 输入参数：名称 标识符 数据类型 说明 通道ID channelID text（字符串）...
快速入门
在表格存储管理控制台快速体验通道服务...} 查看数据消费日志 数据消费后，可以查看增量数据消费日志，例如消费统计、增量通道分区最新同步时间等。在控制台或者使用describeTunnel接口也可以查看消费延迟、通道分区下的消费数据行数更新。
将表格存储数据表中数据同步到另一个数据表
使用通道服务、DataWorks或者DataX将表格存储数据表中的数据同步到另一个数据表。前提条件 已创建目标数据表，目标数据表的列必须与源数据表中待迁移的列一一对应。具体操作，请参见 创建数据表。说明 如果要实现跨账号、跨地域数据迁移，...
- 产品推荐
- 这些文档可能帮助您