增加或删除已运行任务的同步表
新增同步源表并更新源表至目标表的映射关系。在 设置同步来源和规则 页面的 选择同步的源表 区域，选中需要新增的同步 源端库表，单击 图标，将其移动至 已选库表。单击 下一步。在 设置目标表 页面，单击 刷新源表和Kafka Topic映射，更新...
概述
单个subtask的Watermark是递增的，多个subtask或者多个源表的Watermark取最小值。重要 如果源表中存在一条未来的乱序数据或者某个subtask或上游源表的某个分区中没有数据，则可能会无法触发窗口结束，从而导致结果数据异常。因此您需要根据...
PolarDB MySQL版同步至AnalyticDB MySQL 3.0
此类场景中，您可以借助DTS的多表归并功能将源库中多个表结构相同的表（即各分表）同步至目标库中的同一个表中。具体操作，请参见 开启多表归并。说明 选择源库的多个表后，您需要通过对象名映射功能，将其改为目标库中的同一个表名。关于...
整库离线同步至MaxCompute
单击 刷新源表和MaxCompute表映射 将根据您在步骤三配置的目标表名映射规则来生成目标表，若步骤三未配置映射规则，将默认写入与源表同名的目标表，若目标端不存在该同名表，将默认新建。同时，您可以修改表建立方式、为目标表在原有表字段...
整库离线同步至MaxCompute
单击 刷新源表和MaxCompute表映射 将根据您在步骤三配置的目标表名映射规则来生成目标表，若步骤三未配置映射规则，将默认写入与源表同名的目标表，若目标端不存在该同名表，将默认新建。同时，您可以修改表建立方式、为目标表在源有表字段...
同步时源库为MySQL的注意事项及限制
如同步对象为单个或多个表（非整库），那么在数据同步时，勿对源库的同步对象使用pt-online-schema-change等类似工具执行在线DDL变更，否则会导致同步失败。您可以使用数据管理DMS（Data Management）来执行在线DDL变更，请参见 不锁表结构...
Hive数据迁移
单个表的格式为 dbname.tablename，多个表之间以英⽂逗号分隔。单击页面底部的 提交。说明 如果所填的配置无误，且MMA所在服务器能够访问Metastore URL和JDBC URL，则MMA会通过Metastore URL拉取Hive的元数据，即库、表、分区信息。否则将...
配置并管理实时同步任务
在 选择同步的源表 区域，为您展示所选数据源下所有的表，您可以在 源端库表 区域选中需要同步的整库全表或部分表，并单击 图标，将其移动至 已选库表。重要 如果选中的表没有主键，将无法进行实时同步。在 设置表（库）名的映射规则 区域...
Db2 for LUW同步至AnalyticDB MySQL版 3.0
此类场景中，您可以借助DTS的多表归并功能将源库中多个表结构相同的表（即各分表）同步至目标库中的同一个表中。具体操作，请参见 开启多表归并。说明 选择源库的多个表后，您需要通过对象名映射功能，将其改为目标库中的同一个表名。关于...
从PolarDB MySQL版同步至Elasticsearch
如需将多个相同结构的源表同步到一个目标对象，您需要重复本步骤为这些表设置相同的索引名称和Type名称，否则会导致任务失败或数据丢失。Type名称 过滤条件 您可以设置SQL过滤条件，过滤待同步的数据，只有满足过滤条件的数据才会被同步到...
配置并管理实时同步任务
在 选择同步的源表 区域，为您展示所选数据源下所有的表，您可以在 源端库表 区域选中需要同步的整库全表或部分表，并单击 图标，将其移动至 已选库表。重要 如果选中的表没有主键，将无法进行实时同步。在 设置表（库）名的映射规则 区域...
一键实时同步至Hologres
单击 刷新源表和Hologres表映射，将根据您在步骤三配置的目标文件映射规则来生成目标表，若步骤三未配置映射规则，将默认写入与源表同名的目标表，若目标端不存在该同名表，将默认新建。同时，您可以修改表建立方式、为目标表在源有表字段...
MySQL分库分表同步至Hologres（方案2.0）
说明 您可以选中待同步表后，单击 批量刷新映射，未配置映射规则时，默认根据源表所在库和表，写入至与源库同名的Hologres schema；与源表同名的Hologres表，若目标端不存在同名库与表时，将自动新建。在进行自定义目标schema、表名和表...
DDL操作常见问题
您可以重新创建一张分区表，使用动态分区SQL将源表数据导入至新分区表，详情请参见 插入或覆写动态分区数据（DYNAMIC PARTITION）。如何查看指定的分区是否存在？可以使用函数PARTITION_EXISTS查看指定的分区是否存在，更多函数信息，请...
一键实时同步至Kafka
单击 刷新源表和Kafka Topic映射 将根据您在步骤三配置的 设置表名到Topic的映射规则 来生成目标Topic，若步骤三未配置映射规则，将默认写入与源表同名的目标Topic，若目标端不存在该同名Topic，将默认新建。同时，您可以修改Topic建立方式...
配置并管理实时同步任务
在 选择同步的源表 区域，为您展示所选数据源下所有的表，您可以在 源端库表 区域选中需要同步的整库全表或部分表，并单击 图标，将其移动至 已选库表。重要 如果选中的表没有主键，将无法进行实时同步。在选 择同步的源表 区域搜索框下方...
一键实时同步至MaxCompute
单击 刷新源表和MaxCompute表映射 将根据您在步骤三配置的目标表名映射规则来生成目标表，若步骤三未配置映射规则，将默认写入与源表同名的目标表，若目标端不存在该同名表，将默认新建。同时，您可以修改表建立方式，为目标表在源有表字段...
一键实时同步至MaxCompute
单击 刷新源表和MaxCompute表映射 将根据您在步骤三配置的目标表名映射规则来生成目标表，若步骤三未配置映射规则，将默认写入与源表同名的目标表，若目标端不存在该同名表，将默认新建。同时，您可以修改表建立方式，为目标表在源有表字段...
使用ETL分析实时订单
步骤 说明 准备工作 将实时交易数据、业务维度数据存储在源表中，并根据业务需求创建目标表。说明 本案例中实时交易、业务维度表、目标表均存储在RDS MySQL中。步骤一：配置源库信息 将实时交易数据配置为流表，业务维度数据配置为维表。...
数据集成侧同步任务能力说明
背景信息 实际业务场景下，数据同步通常不能通过一个或多个简单离线同步或者实时同步任务完成，而是由多个 离线同步、实时同步 和 数据处理 等任务组合完成，这就会导致数据同步场景下的配置复杂度非常高。为了解决上述问题，DataWorks提出...
RDS MySQL同步至AnalyticDB MySQL 3.0
如同步对象为单个或多个表（非整库），那么在数据同步时，勿对源库的同步对象使用pt-online-schema-change等类似工具执行在线DDL变更，否则会导致同步失败。您可以使用数据管理DMS（Data Management）来执行在线DDL变更，请参见 不锁表结构...
从RDS原生实时同步
支持一个任务同步多个表，节省资源。如果实例节点数较少，而同步任务数较多时，可能出现同步任务不运行的情况。操作步骤 在HybridDB for MySQL控制台开启引擎内部监控，操作如下：登录 HybridDB for MySQL管理控制台。找到目标实例，单击...
RDS数据源配置
支持单个或多个数据源表数据横向合并，要求这些源表结构及数据源插件配置必须完全相同，并且主键值均不重复（主键值重复会覆盖），主要支持以下2种场景：应用表中配有一个数据源，并且包含多个源表。应用表中配有多个数据源，并且各数据源...
RDS数据源配置
支持单个或多个数据源表数据横向合并，要求这些源表结构及数据源插件配置必须完全相同，并且主键值均不重复（主键值重复会覆盖），主要支持以下2种场景：应用表中配有一个数据源，并且包含多个源表。应用表中配有多个数据源，并且各数据源...
MySQL分库分表同步至MaxCompute
您可以在 时间自动分区设置 配置该任务写入MaxCompute分区表或是非分区表，并定义分区字段的名称，本案例中选择写入分区表，分区字段为 ds。说明 若选择写入分区表，可单击 图标定义目标表分区字段名称。刷新源表与目标表映射。单击 刷新源...
MySQL分库分表同步至MaxCompute
您可以在 时间自动分区设置 配置该任务写入MaxCompute分区表或是非分区表，并定义分区字段的名称，本案例中选择写入分区表，分区字段为 ds。说明 若选择写入分区表，可单击 图标定义目标表分区字段名称。刷新源表与目标表映射。单击 刷新源...
从ECS上的自建SQL Server同步至云原生数据仓库...
此类场景中，您可以借助DTS的多表归并功能将源库中多个表结构相同的表（即各分表）同步至云原生数据仓库AnalyticDB PostgreSQL中的同一个表中。说明 选择源库的多个表后，您需要通过对象名映射功能，将其改为云原生数据仓库AnalyticDB ...
从ECS上的自建SQL Server同步至云原生数据仓库...
此类场景中，您可以借助DTS的多表归并功能将源库中多个表结构相同的表（即各分表）同步至云原生数据仓库AnalyticDB PostgreSQL中的同一个表中。说明 选择源库的多个表后，您需要通过对象名映射功能，将其改为云原生数据仓库AnalyticDB ...
DML操作常见问题
由于DOUBLE类型本身是不精确的，虽然执行了ROUND操作，但是依然可能显示多个小数位。解决措施 建议使用显式转换方式，增加如下语句通过CAST显示转换为DECIMAL类型。case when pcm.abc is null then 0 else round(cast(pcm.abc as decimal),...
通过控制台使用时序模型
您可以自定义多个字符串类型的key-value对。属性 时间线的属性列，用于记录该时间线的一些属性信息。单击 确定。插入数据。单击 插入数据。在 插入数据 对话框，设置时间和属性列。单击 确定。步骤五：查询时序数据 当要查询某一时间线在...
从RDS SQL Server同步至云原生数据仓库AnalyticDB ...
此类场景中，您可以借助DTS的多表归并功能将源库中多个表结构相同的表（即各分表）同步至云原生数据仓库AnalyticDB PostgreSQL中的同一个表中。说明 选择源库的多个表后，您需要通过对象名映射功能，将其改为云原生数据仓库AnalyticDB ...
使用DTS同步
警告 如果选择 多表归并 为 是，选择源库的多个表后，您需要通过对象名映射功能，将其改为Tablestore实例中的同一个表名，否则将导致数据不一致。映射名称更改 如果需要更改同步对象在目标实例中的名称，请使用对象名映射功能。具体操作，...
整库离线同步至Elasticsearch
步骤四：设置目标索引 单击 刷新源表和Elasticsearch 索引映射 将根据您在步骤三配置的 设置表名到索引名的映射规则 来生成目标索引，若步骤三未配置映射规则，将默认写入与源表同名的目标索引，若目标端不存在该同名索引，将默认新建。...
从RDS SQL Server同步至云原生数据仓库AnalyticDB ...
此类场景中，您可以借助DTS的多表归并功能将源库中多个表结构相同的表（即各分表）同步至云原生数据仓库AnalyticDB PostgreSQL中的同一个表中。说明 选择源库的多个表后，您需要通过对象名映射功能，将其改为云原生数据仓库AnalyticDB ...
Db2 for LUW同步至云原生数据仓库 AnalyticDB ...
如同步对象为表级别，且需进行编辑（如表列名映射），单次同步任务的表数量超过5000时，建议您拆分待同步的表，分批配置多个任务，或者配置整库的同步任务，否则任务提交后可能会显示请求报错。需开启数据日志，否则预检查阶段提示报错，且...
查看及管理离线集成任务列表
离线管道：离线管道即处理离线集成任务的一条管道脚本，可以将一个或多个来源数据源的单表或多表同步到一个或多个目标数据源中。具体操作，请参见 通过单条管道创建集成任务。脚本任务：，可以通过直接编写数据同步的JSON脚本来完成数据...
PolarDB PostgreSQL版（兼容Oracle）集群同步至...
此类场景中，您可以借助DTS的多表归并功能将源库中多个表结构相同的表（即各分表）同步至目标库中的同一个表中。具体操作，请参见 开启多表归并。说明 选择源库的多个表后，您需要通过对象名映射功能，将其改为目标库中的同一个表名。关于...
查看及管理离线集成任务列表
离线管道：离线管道即处理离线集成任务的一条管道脚本，可以将一个或多个来源数据源的单表或多表同步到一个或多个目标数据源中。具体操作，请参见 通过单条管道创建集成任务。脚本任务：，可以通过直接编写数据同步的JSON脚本来完成数据...
表格
数据展示 页签左侧 数据源 显示已配置的数据源名称，维度 和 度量 显示从数据源中自动解析的属性字段。说明 数据源属性字段匹配规则：维度：布尔型、字符型、时间型字段。度量：数值型字段。（可选）单击左上角 数据表，查看已配置数据源的...
PolarDB-X 2.0同步至云原生数据仓库 AnalyticDB MySQL...
此类场景中，您可以借助DTS的多表归并功能将源库中多个表结构相同的表（即各分表）同步至目标库中的同一个表中。具体操作，请参见 开启多表归并。说明 选择源库的多个表后，您需要通过对象名映射功能，将其改为目标库中的同一个表名。关于...
- 产品推荐
- 这些文档可能帮助您