单向同步升级至双向同步
升级生效期间数据同步会出现5秒左右的延迟，请在业务低峰期操作。DTS会在目标库中建立数据库 dts，以避免数据循环同步，您需要确保任务使用的目标端数据库账号具有数据库 dts 的读写权限。费用说明 包年包月实例 升级费用=（升级后实例每天...
升级实例配置
升级生效期间增量数据迁移与数据同步会出现5秒左右的延迟，请在业务低峰期操作。费用说明 包年包月实例 升级费用=（升级后实例每天的价格-升级前实例每天的价格）×升级当天到服务到期日的剩余天数。说明 升级后实例每天的价格根据升级当天...
升级单向同步至双向同步
升级生效期间数据同步会出现5秒左右的延迟，请在业务低峰期操作。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述...
RDS 同步到云搜
同步过程中，如果 RDS 中某个表进行了 DDL 操作，数据同步服务会跳过这个 DDL，此后同步到这个表的相关 DML 操作时，会出现同步失败。此时，需要重新修改任务，再重启即可。前置条件 请确保您已经提前购买了 RDS 源端数据库，以及目的端...
修改持久内存型实例的同步模式
当备实例不可用或者主备实例间出现网络异常时，半同步会退化为异步。异步（默认）：使用Redis原生异步复制。退化阈值 仅 半同步 支持配置该参数，单位为ms，取值范围为10~60000，默认为500。当同步延迟超出该阈值时，同步模式 会自动转为 ...
修改持久内存型实例的同步模式
当备实例不可用或者主备实例间出现网络异常时，半同步会退化为异步。异步（默认）：使用Redis原生异步复制。退化阈值 仅 半同步 支持配置该参数，单位为ms，取值范围为10~60000，默认为500。当同步延迟超出该阈值时，同步模式 会自动转为 ...
采集数据
本文为您介绍如何新建OSS和RDS数据源来访问本教程所提供的用户信息与网站日志数据，配置数据同步链路至私有OSS数据源，并通过EMR Hive节点建表去查询同步后的数据，完成数据同步的操作过程。前提条件 开始本文的操作前，请准备好需要使用的...
离线同步读取MongoDB数据
DataWorks的数据集成为您提供MongoDB Reader插件，可从MongoDB中读取数据，并将数据同步至其他数据源。本文以一个具体的示例，为您演示如何通过数据集成将MongoDB的数据离线同步至MaxCompute。背景信息 本实践的来源数据源为MongoDB，去向...
修改数据同步的附加列规则
背景信息 在修改数据同步的附加列规则前，您需要评估附加列和目标表中已有的列是否会出现名称冲突。关于附加列名称及其定义请参见下表。重要 使用旧版附加列规则时，DTS也会给目标中的源库原有业字段加前缀（dts_）；使用新版附加列规则时...
配置ECI Pod在ClusterIP同步后再创建
由于ECI Pod和负责同步Service的组件是并行启动运行的，当集群中存在大量Service和Endpoint时，可能会出现因ClusterIp未同步而导致Pod访问超时的情况。本文介绍如何配置ECI Pod在ClusterIP同步后再创建，确保Pod中的容器在访问Service时，...
三个实例相互进行双向同步后出现数据缺失
通过数据传输服务（DTS）进行三个实例间的相互双向同步后，出现数据缺失。本文介绍如何避免这种情况的发生。问题描述 通过DTS配置三个实例之间的...同理，DB3同步至DB2的数据，会出现DB1缺少数据的情况。解决方法 请勿配置成上述同步场景。
数据同步链路规格说明
使用DTS可实现数据秒级同步到目标实例，但受限于源实例的运行负载、传输网络的带宽、网络延时、目标实例写入性能等多种因素的影响，DTS同步任务会出现延迟增大的情况，无法绝对保证秒级延迟。名词解释 规格：数据传输服务为用户提供了不同...
网络时间同步助手
本文介绍如何通过函数计算部署网络时间同步助手，实现设备本地时间与网络时间同步。如果您的设备上已经安装了NTP服务，有和云端服务器周期性同步系统时间的能力，则无需操作本文内容。前提条件 本示例仅适用于Link IoT Edge专业版，在开始...
DescribeDBInstanceDiagnosisSummary-查看节点详情
No sync required：无需同步，仅协调节点会出现该模式。Synced NodeCID string 分组 ID。1 MasterStatusInfo object 协调节点状态统计信息。NormalNodeNum integer 正常状态节点数量。2 ExceptionNodeNum integer 异常状态节点数量。0 ...
PolarDB MySQL版间的双向同步
如果数据同步的源集群没有主键或唯一约束，且记录的全字段没有唯一性，可能会出现重复数据。如双向同步任务的源实例或目标实例位于海外地域，则仅支持同地域的双向同步，不支持跨地域的双向同步。例如，支持日本地域间的双向同步，不支持...
PolarDB MySQL版间的双向同步
如果数据同步的源集群没有主键或唯一约束，且记录的全字段没有唯一性，可能会出现重复数据。如双向同步任务的源实例或目标实例位于海外地域，则仅支持同地域的双向同步，不支持跨地域的双向同步。例如，支持日本地域间的双向同步，不支持...
通过对接外部LDAP登录云原生AI控制台
常见问题 问题现象 当配置Keycloak对接OpenLDAP，并同步用户至Keycloak时，出现以下报错：keycloak sync faild Failed during import user from LDAP:org.keycloak.models.ModelException:User returned from LDAP has null username!...
数据传输规格说明
但是受限于源端实例的运行负载、传输网络的带宽、网络延时和目标端实例写入性能等多种因素的影响，迁移或同步项目会出现延迟增大的情况，无法绝对保证秒级延迟。名词解释 规格：OceanBase 数据传输服务为用户提供了不同性能的规格，以同步...
通过DTS采集数据
选择同步对象，单击>图标按钮，此时需要同步的对象会出现在 已选择对象 列表中。本案例的同步对象为 datav_test 数据库中的 mytable 表，如下图所示。单击 预检查并启动，预检查成功后，系统会自动跳转回数据同步页面。正常情况下，可以...
全增量同步任务运维
一键全量同步会同步源表和目标表的共同列，以及全增量同步任务中定义的附加列。执行全量补数据前，需要确认补数据的业务日期，是否可能和正在运行或者即将运行的Merge任务实例产生冲突（同时运行时，如果业务日期相同，分区数据或者表数据...
从ECS上的自建MySQL同步至PolarDB MySQL版
如果数据同步的源库没有主键或唯一约束，且记录的全字段没有唯一性，可能会出现重复数据。费用说明 同步类型 链路配置费用 库表结构同步和全量数据同步 不收费。增量数据同步 收费，详情请参见 计费概述。支持同步的SQL操作 操作类型 SQL...
从RDS MySQL同步至PolarDB MySQL版
如果数据同步的源库没有主键或唯一约束，且记录的全字段没有唯一性，可能会出现重复数据。费用说明 同步类型 链路配置费用 库表结构同步和全量数据同步 不收费。增量数据同步 收费，详情请参见 计费概述。支持同步的SQL操作 操作类型 SQL...
从ECS上的自建MySQL同步至PolarDB MySQL版
如果数据同步的源库没有主键或唯一约束，且记录的全字段没有唯一性，可能会出现重复数据。费用说明 同步类型 链路配置费用 库表结构同步和全量数据同步 不收费。增量数据同步 收费，详情请参见 计费概述。支持同步的SQL操作 操作类型 SQL...
同步时源库为SQL Server的注意事项及限制
当超出数量限制，会出现稳定性和性能问题的风险，此时建议您拆分待同步的表，分批配置任务。不支持同步内存优化表。DTS是用fn_log函数获取源库日志，而该函数有一定的性能瓶颈，请不要过早清理源库日志，否则可能会导致任务失败。数据日志...
从自建Oracle同步至DataHub
注意事项 类型 说明 源库限制 同步对象要求：待同步的表需具备主键或唯一约束，且字段具有唯一性，否则可能会导致目标数据库中出现重复数据。如果您的自建Oracle版本为12c及以上，待同步表的名称长度需不超过30个字节。如同步对象为表级别...
同步时源库为PolarDB MySQL版的注意事项及限制
X 1.0 PolarDB MySQL版同步至云原生数据仓库 AnalyticDB MySQL 版 2.0 PolarDB MySQL版同步至云原生数据仓库 AnalyticDB MySQL 版 3.0 PolarDB MySQL版同步至阿里云流式数据服务DataHub PolarDB MySQL版同步至Elasticsearch PolarDB ...
从RDS同步至MaxCompute
警告 在选择附加列规则前，您需要评估附加列和目标表中已有的列是否会出现名称冲突，否则可能会导致任务失败或数据丢失。关于附加列的规则和定义说明，请参见 附加列名称和定义说明。映射名称更改 如需更改同步对象在目标实例中的名称，请...
从RDS同步至MaxCompute
警告 在选择附加列规则前，您需要评估附加列和目标表中已有的列是否会出现名称冲突，否则可能会导致任务失败或数据丢失。关于附加列的规则和定义说明，请参见 附加列名称和定义说明。映射名称更改 如需更改同步对象在目标实例中的名称，请...
同步时源库为MySQL的注意事项及限制
云原生数据仓库AnalyticDB MySQL 2.0 云原生数据仓库AnalyticDB MySQL 3.0 云原生数据仓库AnalyticDB PostgreSQL Elasticsearch Tablestore PolarDB-X 2.0 Oracle PostgreSQL MySQL间的同步 MySQL同步至PolarDB MySQL版 MySQL同步至云原生...
同步 API
同步 API 可将当前环境中的 API 同步至其他环境中。为保证系统稳定性，只同步目标环境不存在的 API 配置。同步后，会自动加载配置使其生效。...在 基础信息 栏，选择要从当前环境...结果 同步成功后，当前页面上方会出现提示，显示同步的结果。
同步时源库为PolarDB-X 2.0的注意事项及限制
源库为PolarDB-X的同步方案概览 根据如下同步方案，查看同步任务的注意事项及限制：说明 DTS默认同步到目标数据库中时会取消外键约束，因此源数据库的级联、删除等操作不会同步到如下目标数据库：MySQL（RDS MySQL、自建MySQL）PolarDB ...
应用场景
当出现这些故障时，如果用户业务部署在单个地区，那么就会因为地区故障导致服务不可用，且不可用时间完全依赖故障恢复时间。通过构建灾备库，使用数据同步服务实时增量同步主库数据以确保主库与灾备库数据的完全一致，当业务中心发生地区...
迁移 TiDB 数据库的数据至 OceanBase 数据库 MySQL ...
如果源端和目标端的表结构不完全一致，可能会出现数据不一致的情况。目前已知场景如下：用户手动创建表结构时，因超出数据传输的支持范围，可能产生隐式的转换问题，导致源端和目标端列的类型不一致。目标端的数据长度小于源端的数据长度时...
一键实时同步至Kafka
当在 设置目标Topic 页面未勾选 支持源表无主键同步，则无主键的表同步时会出现异常，您需要在同步任务中删除无主键的表或者选择单击 图标自定义主键才能继续执行同步任务。选择Topic建立方式 支持 自动建Topic 和 使用已有Topic：当 Topic...
迁移 OceanBase 数据库 Oracle 租户的数据至 Oracle ...
对于无主键且包含 LOB 类型字段的表，反向增量会出现数据质量问题。如果源端字符集为 UTF-8，建议目标端使用兼容源端的字符集（例如，UTF-8、UTF-16 等），避免产生因字符集不兼容导致目标端出现乱码等问题。节点之间的时钟不同步，或者...
OceanBase 数据库之间的数据迁移
仅适用于 OceanBase 数据库 Oracle 租户的注意事项：如果您在迁移过程中，跳过"源端-主库-数据库 ROW_MOVEMENT 检查"预检查项，同步 ROW_MOVEMENT 为 enable 的表，会出现数据不一致的情况。支持的源端和目标端实例类型 下表中，OceanBase ...
通过image-syncer工具迁移容器镜像
除了使用重传机制规避同步过程中可能出现的偶发问题之外，image-syncer会在运行结束时统计最后同步失败的镜像个数，并且打印出详细的日志，帮助使用者定位同步过程中出现的问题。准备工作 使用image-syncer时，您只需要提供一个配置文件，...
通过image-syncer工具迁移容器镜像
除了使用重传机制规避同步过程中可能出现的偶发问题之外，image-syncer会在运行结束时统计最后同步失败的镜像个数，并且打印出详细的日志，帮助使用者定位同步过程中出现的问题。准备工作 使用image-syncer时，您只需要提供一个配置文件，...
DTS任务中配置ETL典型应用
但是仍然会出现不可避免的数据不兼容，比如MySQL同步到Oracle，源实例 varchar(10)NOT NULL 列的空字符串无法写入目标实例的非空列，因为Oracle会将空字符串等同于NULL。将会导致同步中断。此类问题不能简单地跳过数据，因为会造成数据不...
迁移 Oracle 数据库的数据至 OceanBase 数据库 Oracle...
转换后可以确保源端不同字符集中的数据能成功迁移至目标端，但割接后反向增量可能会出现数据超长无法写回源端的问题。如果源端存在包含时区信息的数据类型（例如 TIMESTAMP WITH TIME ZONE），请您确保目标端数据库支持并存在源端对应的...
- 产品推荐
- 这些文档可能帮助您