Memcache（OCS）数据源
Memcache（原名OCS）数据源为您提供其它数据源向Memcache写入数据的功能，目前仅支持脚本模式配置同步任务，本文为您介绍DataWorks的Memcache（OCS）数据同步的能力支持情况。使用限制 当前仅支持使用脚本模式将数据写入Memcache（OCS）。...
GenerateDISyncTaskConfigForUpdating
同步任务中的SelectedTables用于多库模式选择同步表，Tables用于单库模式选择同步表。当脚本中包含SelectedTables语句时，系统会使用SelectedTables语句中的表信息进行同步。当脚本中包含Tables语句时，系统会使用Tables的字段信息进行同步...
配置SQLServer数据源
SQLServer数据源为您提供读取和写入SQLServer双向通道的功能，您可以通过向导模式和脚本模式配置同步任务。前提条件 在配置SQLServer数据源之前，您需要在RDS for SQLServer端做好以下准备工作。创建RDS for SQLServer实例，请参见 快速...
离线同步并发和限流之间的关系
在一些数据同步场景，脏数据的出现会导致任务同步效率下降，以关系数据库写出为例，默认是执行batch批量写出模式，在遇到脏数据时会退化为单条写出模式（以找出batch批次数据具体哪一条是脏数据，保障正常数据正常写出），但单条写出效率会...
采集数据
重要 需确保至少一个资源组为 可连通 状态，否则此数据源无法使用向导模式创建同步任务。单击 完成。新建RDS数据源 在 数据源管理 页面，单击 新增数据源。在 新增数据源 对话框中，选择数据源类型为 MySQL。在 新增MySQL数据源 对话框中，...
PolarDB MySQL版间的单向同步
配置目标已存在表的处理模式和同步对象。配置项目 配置说明 目标已存在表的处理模式 预检查并报错拦截：检查目标数据库中是否有同名的表。如果目标数据库中没有同名的表，则通过该检查项目；如果目标数据库中有同名的表，则在预检查阶段...
GenerateDISyncTaskConfigForCreating
SelectedTables用于多库模式选择同步表，Tables用于单库模式选择同步表。当脚本中包含SelectedTables语句时，系统会使用SelectedTables语句中的表信息进行同步。当脚本中包含Tables语句时，系统会使用Tables的字段信息进行同步。同步MySQL...
从ECS上的Twemproxy Redis集群同步至Redis实例
配置 说明 目标已存在表的处理模式 DTS通过同步Twemproxy Redis集群中的每个Redis-Server来实现整体的数据同步。为第1个Redis-Server配置数据同步时，如果Redis实例暂无数据，请选择 预检查并报错拦截。为第2到N个Redis-Server配置数据同步...
从ECS上的Twemproxy Redis集群同步至Redis实例
配置 说明 目标已存在表的处理模式 DTS通过同步Twemproxy Redis集群中的每个Redis-Server来实现整体的数据同步。为第1个Redis-Server配置数据同步时，如果Redis实例暂无数据，请选择 预检查并报错拦截。为第2到N个Redis-Server配置数据同步...
PolarDB MySQL版间的单向同步
配置目标已存在表的处理模式和同步对象。配置项目 配置说明 目标已存在表的处理模式 预检查并报错拦截：检查目标数据库中是否有同名的表。如果目标数据库中没有同名的表，则通过该检查项目；如果目标数据库中有同名的表，则在预检查阶段...
从PolarDB MySQL版同步至RDS MySQL
配置目标已存在表的处理模式和同步对象。配置项目 配置说明 目标已存在表的处理模式 预检查并报错拦截：检查目标数据库中是否有同名的表。如果目标数据库中没有同名的表，则通过该检查项目；如果目标数据库中有同名的表，则在预检查阶段...
从ECS上的Codis集群同步至Redis实例
配置 说明 目标已存在表的处理模式 DTS通过依次同步Codis集群中的每个Codis-Group来实现整体的数据同步。为第1个Codis-Group配置数据同步时，如果Redis实例暂无数据，请选择 预检查并报错拦截。为第2到N个Codis-Group配置数据同步时，必须...
从ECS上的自建MySQL同步至PolarDB MySQL版
配置目标已存在表的处理模式和同步对象。配置项目 配置说明 目标已存在表的处理模式 预检查并报错拦截：检查目标数据库中是否有同名的表。如果目标数据库中没有同名的表，则通过该检查项目；如果目标数据库中有同名的表，则在预检查阶段...
从RDS MySQL同步至PolarDB MySQL版
配置目标已存在表的处理模式和同步对象。配置项目 配置说明 目标已存在表的处理模式 预检查并报错拦截：检查目标数据库中是否有同名的表。如果目标数据库中没有同名的表，则通过该检查项目；如果目标数据库中有同名的表，则在预检查阶段...
从ECS上的Codis集群同步至Redis实例
配置 说明 目标已存在表的处理模式 DTS通过依次同步Codis集群中的每个Codis-Group来实现整体的数据同步。为第1个Codis-Group配置数据同步时，如果Redis实例暂无数据，请选择 预检查并报错拦截。为第2到N个Codis-Group配置数据同步时，必须...
创建二级索引
indexUpdateMode:TableStore.IndexUpdateMode.IUM_SYNC_INDEX,/设置索引更新模式为同步更新（IUM_SYNC_INDEX）。当索引类型为本地二级索引时，索引更新模式必须为同步更新。indexType:TableStore.IndexType.IT_LOCAL_INDEX,/设置索引类型为...
从ECS上的自建MySQL同步至PolarDB MySQL版
配置目标已存在表的处理模式和同步对象。配置项目 配置说明 目标已存在表的处理模式 预检查并报错拦截：检查目标数据库中是否有同名的表。如果目标数据库中没有同名的表，则通过该检查项目；如果目标数据库中有同名的表，则在预检查阶段...
Tablestore Stream配置同步任务
通过脚本模式配置同步任务 如果您需要通过脚本模式配置此任务，单击工具栏中的 转换脚本，选择 确认 即可进入脚本模式。您可以根据自身进行配置，示例脚本如下。{"type":"job","version":"1.0","configuration":{"reader":{"plugin":...
Redis实例间的单向数据同步
配置目标已存在表的处理模式和同步对象。配置 说明 目标已存在表的处理模式 预检查并报错拦截：检查目标库是否为空。如果待同步的目标库为空，则通过该检查项目；如果不为空，则在预检查阶段提示错误，数据同步作业不会被启动。忽略报错并...
文档修订记录
关系图 2023.8.25 新增功能 数据集成 Amazon Redshift数据源为您提供读取和写入Amazon Redshift的双向通道，方便您后续可以通过向导模式和脚本模式配置数据同步任务。Amazon Redshift数据源 2023.8.24 新增功能 运维中心 在原有调度配置...
从ECS上的自建Redis同步至Redis实例
配置目标已存在表的处理模式和同步对象。配置 说明 目标已存在表的处理模式 预检查并报错拦截：检查目标库是否为空。如果待同步的目标库为空，则通过该检查项目；如果不为空，则在预检查阶段提示错误，数据同步作业不会被启动。忽略报错并...
从ECS上的自建MySQL同步至PolarDB MySQL版（金融云）
配置目标已存在表的处理模式和同步对象。配置项目 配置说明 目标已存在表的处理模式 预检查并报错拦截：检查目标数据库中是否有同名的表。如果目标数据库中没有同名的表，则通过该检查项目；如果目标数据库中有同名的表，则在预检查阶段...
从自建Redis集群同步至Redis集群实例
配置目标已存在表的处理模式和同步对象。配置 说明 目标已存在表的处理模式 预检查并报错拦截：检查目标库是否为空。如果待同步的目标库为空，则通过该检查项目；如果不为空，则在预检查阶段提示错误，数据同步作业不会被启动。忽略报错并...
从自建Redis集群同步至Redis集群实例
配置目标已存在表的处理模式和同步对象。配置 说明 目标已存在表的处理模式 预检查并报错拦截：检查目标库是否为空。如果待同步的目标库为空，则通过该检查项目；如果不为空，则在预检查阶段提示错误，数据同步作业不会被启动。忽略报错并...
从ECS上的自建Redis同步至Redis实例
配置目标已存在表的处理模式和同步对象。配置 说明 目标已存在表的处理模式 预检查并报错拦截：检查目标库是否为空。如果待同步的目标库为空，则通过该检查项目；如果不为空，则在预检查阶段提示错误，数据同步作业不会被启动。忽略报错并...
Redis实例间的单向数据同步
配置目标已存在表的处理模式和同步对象。配置 说明 目标已存在表的处理模式 预检查并报错拦截：检查目标库是否为空。如果待同步的目标库为空，则通过该检查项目；如果不为空，则在预检查阶段提示错误，数据同步作业不会被启动。忽略报错并...
PolarDB PostgreSQL版（兼容Oracle）集群间的单向同步
配置目标已存在表的处理模式和同步对象。配置项目 配置说明 目标已存在表的处理模式 预检查并报错拦截：检查目标数据库中是否有同名的表。如果目标数据库中没有同名的表，则通过该检查项目；如果目标数据库中有同名的表，则在预检查阶段...
日志服务通过数据集成投递数据
通过脚本模式配置离线同步节点 成功创建离线同步节点后，单击工具栏中的 转换脚本。单击 提示 对话框中的 确认，即可进入脚本模式进行开发。单击工具栏中的 导入模板。在 导入模板 对话框中，选择从来源端的LogHub数据源同步至目标端的ODPS...
从PolarDB MySQL版同步至Elasticsearch
配置索引名称、目标已存在表的处理模式和同步对象。配置 说明 索引名称 表名 选择为 表名 后，在目标Elasticsearch实例中创建的索引名称和表名一致，在本案例中即为customer。库名_表名 选择为 库名_表名 后，在目标Elasticsearch实例中...
使用MaxCompute访问
根据提示使用脚本模式配置同步任务。在配置脚本中，添加文件引擎配置参数。同步数据到文件引擎时，需要配置HDFS Writer，详情请参见 配置HDFS Writer。从文件引擎同步数据时，需要配置HDFS Reader，详情请参见 配置HDFS Reader。在配置HDFS...
从通过专线、VPN网关或智能接入...同步至PolarDB MySQL版
配置目标已存在表的处理模式和同步对象。配置项目 配置说明 目标已存在表的处理模式 预检查并报错拦截：检查目标数据库中是否有同名的表。如果目标数据库中没有同名的表，则通过该检查项目；如果目标数据库中有同名的表，则在预检查阶段...
从ECS上的自建MySQL同步至Elasticsearch
配置索引名称、目标已存在表的处理模式和同步对象。配置 说明 索引名称 表名 选择为 表名 后，在目标Elasticsearch实例中创建的索引名称和表名一致，在本案例中即为customer。库名_表名 选择为 库名_表名 后，在目标Elasticsearch实例中...
从通过专线、VPN网关或智能接入...同步至PolarDB MySQL版
配置目标已存在表的处理模式和同步对象。配置项目 配置说明 目标已存在表的处理模式 预检查并报错拦截：检查目标数据库中是否有同名的表。如果目标数据库中没有同名的表，则通过该检查项目；如果目标数据库中有同名的表，则在预检查阶段...
导出全量数据到OSS
您可以通过向导模式或者脚本模式配置同步任务，请根据实际需要选择。（推荐）向导模式 在 配置任务 步骤的 配置数据来源与去向 区域，根据实际配置数据来源和数据去向。数据来源配置 参数 说明 表 表格存储 中的数据表名称。主键区间分布...
从通过专线、VPN网关或智能接...同步至ECS上的自建Redis
配置目标已存在表的处理模式和同步对象。配置 说明 目标已存在表的处理模式 预检查并报错拦截：检查目标库是否为空。如果待同步的目标库为空，则通过该检查项目；如果不为空，则在预检查阶段提示错误，数据同步作业不会被启动。忽略报错并...
将Oracle数据同步到表格存储
通过Tapdata Cloud的可视化界面，您可以将Oracle数据实时同步到表格存储（Tablestore）中。前提条件 使用Tapdata Cloud同步Oracle数据到表格存储前，需要完成如下准备工作。已注册 Tapdata Cloud账号。已创建表格存储实例和表。具体操作，...
通过DataWorks数据集成迁移日志数据至MaxCompute
通过脚本模式配置离线同步节点 成功创建离线同步节点后，单击工具栏中的 转换脚本。单击 提示 对话框中的 确认，即可进入脚本模式进行开发。单击工具栏中的 导入模板。在 导入模板 对话框中，选择从来源端的LogHub数据源同步至目标端的ODPS...
使用Tapdata Cloud导入MySQL数据
增量数据处理模式 增量同步时，增量数据的处理模式。取值范围为 批量、逐条。agent设置 使用的Agent信息。取值范围如下：平台自动分配（默认）：由平台分配节点进行连接访问。用户手动指定：设置此参数为 用户手动指定 后，选择要使用的...
操作流程
创建同步任务 支持单个、批量配置同步任务，通过同步的Meta信息支持自动创建目标表，支持创建实时同步任务、离线同步任务两种模式。上线同步任务 同步任务上线后会按照创建同步任务中设置的调度周期执行，支持一次性运行和周期运行。任务...
操作流程
创建同步任务 支持单个、批量配置同步任务，通过同步的Meta信息支持自动创建目标表，支持创建实时同步任务、离线同步任务两种模式。上线同步任务 同步任务上线后会按照创建同步任务中设置的调度周期执行，支持一次性运行和周期运行。任务...
- 产品推荐
- 这些文档可能帮助您