RDS SQL Server迁移至RDS MySQL
SQLServer增量同步模式 非堆表用日志解析增量同步，堆表用CDC增量同步：优点：支持源库堆表、无主键表、压缩表、含计算列表等场景。链路稳定性较高。能拿到完整的DDL语句，DDL场景支持丰富。缺点：DTS会在源库中创建触发器dts_cdc_sync_ddl...
自建Oracle迁移至AnalyticDB MySQL 3.0
DTS支持结构迁移、全量数据迁移以及增量数据迁移，同时使用这三种迁移类型可以实现在本地应用不停服的情况下，平滑地完成Oracle数据库的数据迁移。前提条件 已创建存储空间大于源自建Oracle占用存储空间的目标 云原生数据仓库AnalyticDB ...
Db2 for LUW迁移至阿里云消息队列Kafka版
如为增量迁移任务，DTS要求源数据库的数据日志保存24小时以上，如为全量迁移和增量迁移任务，DTS要求源数据库的数据日志至少保留7天以上（您可在全量迁移完成后将数据日志保存时间设置为24小时以上），否则DTS可能因无法获取数据日志而导致...
PolarDB MySQL版迁移至AnalyticDB MySQL 3.0
实例级别选择所需同步的DDL和DML 按实例级别选择增量迁移的SQL操作，支持的操作，请参见 支持增量迁移的SQL操作。说明 如需按库或表级别选择增量迁移的SQL操作，请在 已选择对象 中右击同步对象，在弹跳框中勾选所需同步的SQL操作。多表...
RDS SQL Server迁移至PolarDB MySQL版
SQLServer增量同步模式 非堆表用日志解析增量同步，堆表用CDC增量同步：优点：支持源库堆表、无主键表、压缩表、含计算列表等场景。链路稳定性较高。能拿到完整的DDL语句，DDL场景支持丰富。缺点：DTS会在源库中创建触发器dts_cdc_sync_ddl...
三节点企业系列的RDS MySQL迁移到集群系列的RDS MySQL
如为增量迁移任务，DTS要求源数据库的本地Binlog日志保存24小时以上，如为全量迁移和增量迁移任务，DTS要求源数据库的本地Binlog日志至少保留7天以上（您可在全量迁移完成后将Binlog保存时间设置为24小时以上），否则DTS可能因无法获取...
RDS PostgreSQL同步至PolarDB PostgreSQL版
当源实例为自建PostgreSQL时 需要确保max_wal_senders和max_replication_slots的参数值，均大于当前数据库复制槽已使用数与需要以该自建PostgreSQL为源创建的DTS实例数的总和。当源实例为Google Cloud Platform Cloud SQL for PostgreSQL时...
PolarDB MySQL版迁移至RDS MySQL
增量迁移 DTS在全量迁移的基础上，将源库的增量更新数据迁移到目标库中。通过增量数据迁移可以实现在自建应用不停机的情况下，平滑地完成数据迁移。支持增量迁移的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE DDL ALTER ...
PolarDB-X 2.0迁移至Elasticsearch
是否限制增量迁移速率 您也可以根据实际情况，选择是否对增量迁移任务进行限速设置（设置 每秒增量迁移的行数RPS 和 每秒增量迁移的数据量(MB)BPS），以缓解目标库的压力。说明 仅当 迁移类型 选择了 增量迁移 时才可以配置。环境标签 您...
PolarDB MySQL版间迁移
增量迁移 DTS在全量迁移的基础上，将源库的增量更新数据迁移到目标库中。通过增量数据迁移可以实现在自建应用不停机的情况下，平滑地完成数据迁移。支持增量迁移的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE DDL ALTER ...
RDS SQL Server同步至RDS MySQL
重要 在混合式日志解析模式下（即 SQLServer增量同步模式 为 非堆表用日志解析增量同步，堆表用CDC增量同步 的实例），支持的源库有：Enterprise或Enterprise Evaluation版：2012、2014、2016、2019或2022版本。Standard版：2016、2019或...
全增量同步任务运维
对于分区表，全量数据会同步到业务日期对应的日期分区中。选择补数据端表。在左侧选择框，选择要执行全量同步的表，单击 图标，将其添加至右侧。单击 确定 按钮，开始全量补数据操作。重要 当前业务日期仅支持选择单日，如果要补多日的全量...
使用DTS迁移Redis
您可以根据实际情况，选择是否对增量迁移进行限速设置（设置每秒增量迁移的行数和数据量），以缓解目标端的压力。默认为 否。环境标签 您可以根据实际情况，选择用于标识实例的环境标签。延长目标库key的过期时间 在目标库中，对已设置过期...
PolarDB PostgreSQL版（兼容Oracle）集群同步至...
数据传输服务DTS（Data Transmission Service）支持将 PolarDB PostgreSQL版（兼容Oracle）...您可以根据实际情况，选择是否对全量同步任务进行限速设置（设置 每秒查询源库的速率QPS、每秒全量迁移的行数RPS 和 每秒全量迁移的数据量(MB)BPS ...
数据集成侧同步任务配置
设置任务运行资源 在此步骤中，您可以配置任务名称及任务执行所使用的资源组，同时，数据集成提供数据库最大连接数、并发数等配置的默认值，如果您需要对任务做精细化配置，您可通过 高级配置 进行修改。如果您选择一键实时同步方案，该...
PolarDB PostgreSQL版（兼容Oracle）集群间的单向同步
本文介绍如何使用数据传输服务DTS（Data Transmission Service）实现 PolarDB PostgreSQL版...您可以根据实际情况，选择是否对全量同步任务进行限速设置（设置 每秒查询源库的速率QPS、每秒全量迁移的行数RPS 和 每秒全量迁移的数据量(MB)BPS...
自建Oracle迁移至PolarDB PostgreSQL版（兼容Oracle）
如为增量迁移任务，DTS要求源数据库的Redo Log、Archive Log保存24小时以上，如为全量迁移和增量迁移任务，DTS要求源数据库的Redo Log、Archive Log至少保留7天以上（您可在全量迁移完成后将Redo Log、Archive Log保存时间设置为24小时以上...
V5.1.x系列实例版本说明
修复超长HINT报数组越界的问题。修复建表时TIMESTAMP类型的列指定为NULL DEFAULT NULL导致无法建表的问题。修正部分错误码的英文翻译。修复STR_TO_DATE()函数返回的时间类型与MySQL不一致的问题。修复通过PREPARE协议调用存储过程时传NULL...
ListProjects-分页查询项目列表
true IncrSyncConcurrency integer 增量同步的线程数，默认值为 64。64 EnableIncrSyncStatistics boolean 是否开启增量记录（DML、DDL）统计。true SourceConnectInfo object 源端节点的连接信息。Id string 连接信息的 ID。c_4w3aq*...
同步节点
其中日期的选择，支持选择当天及以后的日期。如果需要查看历史日期的调度结果，如前几天的调度数据结果，可以使用补数据功能，具体操作，请参见 新建补数据计划。调度周期 支持按月、周、天、小时和分钟调度。具体时间 根据选择的周期客户...
PolarDB MySQL版间的同步
双向同步实例包含正向和反向同步任务，在配置或重置双向同步实例时，若其中一个任务的目标对象是另一个任务待同步的对象：仅允许其中一个任务同步全量和增量数据，另一个任务仅支持同步增量数据。当前任务的源数据仅支持同步到当前任务的...
同步节点
其中日期的选择，支持选择当天及以后的日期。如果需要查看历史日期的调度结果，如前几天的调度数据结果，可以使用补数据功能，具体操作，请参见 新建补数据计划。调度周期 支持按月、周、天、小时和分钟调度。具体时间 根据选择的周期客户...
常见问题
源端数据为string"[1,2,3,4,5]"，如何以数组形式同步至ES中存储？自建的索引中nested的属性类型type为keyword，为什么自动生成之后类型会变成 keyword？（自动生成是指配置cleanup=true执行同步任务）向ES写入数据时，会做一次无用户名的...
通过控制台投递数据到OSS
Schema生成方式 指定需要投递的数据列，可以选择任意字段以任意顺序、名称写入列存文件，OSS的列存数据会按Schema数组中的数据列先后顺序分布。根据选择的Schema生成方式配置投递Schema。当 Schema生成方式 配置为 手动录入 时，需要手动...
补数据
产生原因 资源组可执行任务最大并发数有上限，如果当前任务执行并发数超过资源组所支持的最大并发数时，将会出现等待资源的情况。说明 等待资源排查，详情请参见 等待资源。为什么补数据报错调起的节点运行时间不在所选业务时间范围内？...
AnalyticDB for MySQL 3.0数据源
如果ADB数据源配置的实例从数仓版切换到了湖仓版，使用该数据源运行在公共资源组上的同步任务将会失败，建议切换前，确认是否有运行在公共资源组上的同步任务，并且将其切换到独享资源组运行。离线同步支持读取视图（VIEW）表。支持的字段...
定时任务概述
伸缩组内实例数量设置：您可以直接指定伸缩组的最大实例数、最小实例数或期望实例数，新指定的数值会覆盖伸缩组原来的设置，并在指定时间立即生效。说明 如果创建伸缩组时未开启期望实例数功能，则只能设置伸缩组的最大实例数和最小实例数...
新增离线数据同步任务
取数规则：只针对日期数据做取数规则，其中yyyy表示4位的年份、yy表示2位的年份、mm（MM）表示月、dd表示天、hh24表示小时（12进制使用hh）、mi表示分钟、ss表示秒。您可以任意组合参数，例如$[yyyymmdd]、$[yyyy-mm-dd]、$[hh24miss]、$...
新增离线数据同步任务
取数规则：只针对日期数据做取数规则，其中yyyy表示4位的年份、yy表示2位的年份、mm（MM）表示月、dd表示天、hh24表示小时（12进制使用hh）、mi表示分钟、ss表示秒。您可以任意组合参数，例如$[yyyymmdd]、$[yyyy-mm-dd]、$[hh24miss]、$...
离线同步能力说明
数据集成的离线同步功能为您提供数据读取（Reader）和写入插件（Writer），方便您通过定义来源与去向数据源，并结合DataWorks调度参数使用，将源端数据库中全量或增量数据的同步至目标数据库中。本文为您介绍离线同步的相关能力。使用限制 ...
新建同步节点并运行后上线
其中日期的选择，支持选择当天及以后的日期。如果需要查看历史日期的调度结果，如前几天的调度数据结果，可以使用补数据功能，具体操作，请参见 新建补数据计划。调度周期 支持按月、周、天、小时和分钟调度。具体时间 根据选择的周期客户...
新建同步节点并运行后上线
其中日期的选择，支持选择当天及以后的日期。如果需要查看历史日期的调度结果，如前几天的调度数据结果，可以使用补数据功能，具体操作，请参见 新建补数据计划。调度周期 支持按月、周、天、小时和分钟调度。具体时间 根据选择的周期客户...
报警任务概述
报警任务是弹性伸缩利用云监控服务（CMS）产品功能的一种动态管理伸缩组的方式。类似于定时任务，报警任务通过触发您指定的伸缩规则来执行伸缩活动，达到自动调整伸缩组内实例个数的目的。报警任务介绍 报警任务通过监控特定的监控指标，对...
常见问题
DTS按量付费仅会在增量任务正常运行期间进行计费（包含 增量同步 任务暂停期间，不包含 增量迁移 任务暂停期间）。更多信息，请参见 计费方式。DTS是否收取流量费用？部分DTS任务会收取公网流量和数据流量费用，与源库和目标库的地域无关。...
迁移 Oracle 数据库的数据至 OceanBase 数据库 Oracle...
由于中国曾经实行夏令时的历史原因，导致 Oracle 数据库至 OceanBase 数据库 Oracle 租户的增量同步中，1986 年~1991 年的夏令时开始和结束的日期，以及 1988 年 4 月 10 日~4 月 17 日，TIMESTAMP(6)WITH TIME ZONE 类型，源端和目标端...
DB2数据源
使用限制 DB2 Reader和DB2 Writer仅支持使用 新增和使用独享数据集成资源组，不支持使用 公共资源组 和 自定义资源组。DB2 Writer通过数据同步框架获取Reader生成的协议数据，通过 insert into（当主键/唯一性索引冲突时，冲突的行会写不...
表结构设计
语法 使用 column_name 的值做分区，语法如下：PARTITION BY VALUE(column_name)将 column_name 的值转换为%Y%m%d 的日期格式（类似 20210101）做分区，语法如下：PARTITION BY VALUE(DATE_FORMAT(column_name,'%Y%m%d'))将 column_name 的...
数组函数和运算符
本文介绍数组函数和运算符的基础语法及示例。日志服务支持如下数组函数和运算符。重要 在日志服务分析语句中，表示字符串的字符必须使用单引号（''）包裹，无符号包裹或被双引号（""）包裹的字符表示字段名或列名。例如：'status' 表示字符...
同步增量数据到OSS
如果需要将表格存储中新增和变化的数据定期同步到OSS中备份或者使用，您可以通过在DataWorks数据集成控制台新建和配置离线同步任务来实现周期性增量数据同步。注意事项 此功能适用于 表格存储 宽表模型和时序模型。宽表模型：导出 表格存储...
PolarDB MySQL版迁移至云原生数据仓库 AnalyticDB ...
是否限制增量迁移速率 您也可以根据实际情况，选择是否对增量迁移任务进行限速设置（设置 每秒增量迁移的行数RPS 和 每秒增量迁移的数据量(MB)BPS），以缓解目标库的压力。说明 仅当 迁移类型 选择了 增量迁移 时才可以配置。环境标签 您...
- 产品推荐
- 这些文档可能帮助您