数据同步概述

背景说明 如果您是在 2020年4月之后 购买的Dataphin,则数据同步能力通过数据集成功能实现(即系统 不再提供数据同步的功能入口)。数据集成为您提供简单高效、安全可靠的数据同步平台。更多信息,请参见 数据集成概述。重要 因数据同步...

数据同步概述

背景说明 如果您是在 2020年4月之后 购买的Dataphin,则数据同步能力通过数据集成功能实现(即系统 不再提供数据同步的功能入口)。数据集成为您提供简单高效、安全可靠的数据同步平台。更多信息,请参见 数据集成概述。重要 因数据同步...

离线同步数据质量排查

背景信息 讲述数据集成数据同步的原理机制,理解数据同步的过程,进而对数据同步的执行效果有判断能力,判断数据同步效果具体包括:数据同步的数据量、目标端数据实际数量等。同步原理 DataWorks数据集成的同步任务在执行时称之为一个Job,...

什么是数据传输服务DTS

功能特性 功能 介绍 相关文档 数据同步 实现数据源之间的数据实时同步,适用于数据异地多活、数据异地灾备、本地数据灾备、跨境数据同步、查询与报表分流、云BI及实时数据仓库等多种业务场景。同步方案概览 数据同步功能特性 数据迁移 实现...

单向同步升级至双向同步

前提条件 数据同步作业的源实例和目标实例的数据库类型均为 MySQL。数据同步作业的同步拓扑为 单向同步。数据同步作业的状态为 运行中。注意事项 同步实例只能从单向同步升级为双向同步,不能从双向同步降级为单向同步。升级生效期间数据...

同步任务修改

具体步骤如下:在数据同步页签,点击查看connector 2.选择需要同步的字段,选择完成后点击更新即可,无需重启 3.更新成功后再次查看同步详情,字段修改同点位重置 同步任务点位重置 步骤 :暂停同步任务 步骤 二:点击重置,选择重置时间...

MongoDB(无分片键)同步至MongoDB(分片集群架构)

数据传输服务DTS(Data Transmission Service)支持在源端MongoDB的数据中分片键字段缺失的情况下,将数据同步至分片集群架构的MongoDB中,并指定分片键的默认值。本文以 云数据库MongoDB版(副本集架构)为源且 云数据库MongoDB版(分片...

MongoDB(无分片键)同步至MongoDB(分片集群架构)

数据传输服务DTS(Data Transmission Service)支持在源端MongoDB的数据中分片键字段缺失的情况下,将数据同步至分片集群架构的MongoDB中,并指定分片键的默认值。本文以 云数据库MongoDB版(副本集架构)为源且 云数据库MongoDB版(分片...

PolarDB-X 1.0同步至Elasticsearch

如为增量数据同步任务,DTS要求源数据库的本地Binlog日志保存24小时以上,如为全量数据同步和增量数据同步任务,DTS要求源数据库的本地Binlog日志至少保留7天以上(您可在全量同步完成后将Binlog保存时间设置为24小时以上),否则DTS可能因...

数据管理DMS逻辑库同步至云原生数据仓库 AnalyticDB ...

支持的同步架构 一对单向同步 一对多单向同步 多对单向同步 关于各类同步架构的介绍及注意事项,请参见 数据同步拓扑介绍。支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE 操作步骤 进入同步任务的列表页面。登录...

云数据库MongoDB版(副本集架构)间的双向同步

重要 由于数据同步两端的系统时间可能存在差异、同步存在延时等多种因素,DTS无法完全保证冲突检测机制能够完全防止数据的冲突。在使用双向同步时,您需要在业务层面配合进行相应的改造,保证同一个主键、业务主键或唯一键的记录只在双向...

云数据库MongoDB版(副本集架构)间的双向同步

重要 由于数据同步两端的系统时间可能存在差异、同步存在延时等多种因素,DTS无法完全保证冲突检测机制能够完全防止数据的冲突。在使用双向同步时,您需要在业务层面配合进行相应的改造,保证同一个主键、业务主键或唯一键的记录只在双向...

创建反向实例

本文为您介绍在数据库容灾场景使用数据传输服务DTS(Data Transmission Service)键创建反向增量同步实例的操作步骤。此功能在业务中的应用流程,请参见 使用创建反向任务功能。背景信息 DTS支持为正常运行的同步实例键创建反向增量...

PolarDB MySQL版同步至MaxCompute

支持的同步架构 一对单向同步 一对多单向同步 级联单向同步 多对单向同步 关于各类同步架构的介绍及注意事项,请参见 数据同步拓扑介绍。支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE DDL ADD COLUMN 操作步骤 ...

RDS MariaDB同步至RDS MySQL

数据传输服务DTS(Data Transmission Service)支持将MariaDB的数据同步至 RDS MySQL 实例,本文以 RDS MariaDB 为源数据库为您介绍同步操作的步骤。前提条件 已创建存储空间大于 RDS MariaDB 的目标 RDS MySQL 实例。创建方式,请参见 ...

RDS MariaDB实例间的同步

数据传输服务DTS(Data Transmission Service)支持 RDS MariaDB 实例间的数据同步。前提条件 已创建目标 RDS MariaDB 实例,创建方式,请参见 快速创建RDS MariaDB实例。目标 RDS MariaDB 实例的存储空间须大于源 RDS MariaDB 实例占用的...

云数据库MongoDB版同步至云原生多模数据库Lindorm

为实时保持数据一致性,建议选择结构同步、全量数据同步和增量数据同步。暂不支持同步包含TTL(Time To Live)索引的集合。若待同步的数据库中包含TTL索引,则可能会由于源库和目标库时区、时钟等的不一致,导致数据不一致。请确保分片集群...

PolarDB-X 1.0间同步

支持的同步架构 一对单向同步 一对多单向同步 级联单向同步 多对单向同步 关于各类同步架构的介绍及注意事项,请参见 数据同步拓扑介绍。支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE 数据库账号的权限要求 ...

RDS MySQL同步至RDS PostgreSQL

支持的同步架构 11单向同步 1对多单向同步 多对1单向同步 支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE 操作步骤 进入同步任务的列表页面。登录 DMS数据管理服务。在顶部菜单栏中,单击 集成与开发(DTS)。在...

RDS MySQL实例间的同步

数据传输服务DTS(Data Transmission Service)支持 RDS MySQL 实例间的数据同步。支持的源和目标数据库 MySQL间同步支持以下源或目标数据库。本文以 RDS MySQL 实例为源和目标数据库介绍配置流程,其他数据源配置流程与本案例类似。源数据...

RDS MySQL同步至Tair/Redis

缓存数据映射模式:数据同步到Redis后数据的格式。将鼠标悬停在选项后的 图标上,可以查看相关提示信息。当 缓存数据映射模式 选择为 库-表-主键的KV模型 时,还要设置 value数据分割方式。说明 Schema名称和表名称不支持映射功能。如需按...

RDS MySQL同步至MaxCompute

本文介绍如何使用数据传输服务DTS(Data Transmission Service),将 RDS MySQL 的数据同步至MaxCompute,帮助您快速搭建数据实时分析系统。前提条件 已开通MaxCompute并创建MaxCompute项目。更多信息,请参见 开通MaxCompute和DataWorks ...

RDS MariaDB同步至RDS PoatgreSQL

由于DTS的延迟时间是根据同步到目标库最后数据的时间戳和当前时间戳对比得出,源库长时间未执行DML操作可能导致延迟信息不准确。如果任务显示的延迟时间过大,您可以在源库执行一个DML操作来更新延迟信息。说明 如果同步对象选择为整库...

RDS MySQL同步至阿里云消息队列Kafka版

目标实例 阿里云消息队列Kafka版 中已创建用于接收同步数据的Topic,请参见 步骤一:创建Topic。目标实例 阿里云消息队列Kafka版 的存储空间须大于源实例 RDS MySQL 占用的存储空间。注意事项 说明 DTS不会将源数据库中的外键同步到目标...

云数据库MongoDB版(副本集架构)同步至云数据库...

支持的同步架构 一对单向同步 一对多单向同步 多对单向同步 级联单向同步 关于各类同步架构的介绍及注意事项,请参见 数据同步拓扑介绍。任务步骤说明 同步类型 说明 库表结构同步 将源 云数据库MongoDB版 中同步对象的结构同步到目标 ...

云数据库MongoDB版(副本集架构)同步至云数据库...

支持的同步架构 一对单向同步 一对多单向同步 多对单向同步 级联单向同步 关于各类同步架构的介绍及注意事项,请参见 数据同步拓扑介绍。任务步骤说明 同步类型 说明 库表结构同步 将源 云数据库MongoDB版 中同步对象的结构同步到目标 ...

自建SQL Server同步至PolarDB MySQL版

支持的同步架构 一对单向同步 一对多单向同步 多对单向同步 关于各类同步架构的介绍及注意事项,请参见 数据同步拓扑介绍。支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE DDL CREATE TABLE 说明 不支持分区、表...

PolarDB MySQL版同步至Elasticsearch

本文介绍如何使用数据传输服务DTS(Data Transmission Service),将 PolarDB MySQL版 集群的数据同步至 Elasticsearch 实例。前提条件 已创建存储空间大于源 PolarDB MySQL版 的目标 Elasticsearch 实例。具体操作,请参见 创建阿里云...

RDS SQL Server同步至RDS MySQL

支持的同步架构 一对单向同步 一对多单向同步 多对单向同步 关于各类同步架构的介绍及注意事项,请参见 数据同步拓扑介绍。支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE DDL CREATE TABLE 说明 不支持分区、表...

自建MySQL同步至RDS MySQL

执行数据同步前需评估源库和目标库的性能,同时建议业务低峰期执行数据同步。否则全量数据初始化时将占用源库和目标库一定的读写资源,可能会导致数据库的负载上升。全量初始化会并发执行INSERT操作,导致目标数据库的表产生碎片,因此全量...

专线、VPN网关或智能网关接入的自建MySQL同步至RDS ...

执行数据同步前需评估源库和目标库的性能,同时建议业务低峰期执行数据同步。否则全量数据初始化时将占用源库和目标库一定的读写资源,可能会导致数据库的负载上升。全量初始化会并发执行INSERT操作,导致目标数据库的表产生碎片,因此全量...

RDS SQL Server间的同步

通过数据传输服务DTS(Data Transmission Service),可以实现 RDS SQL Server 间的数据同步。前提条件 已创建源和目标 RDS SQL Server 实例。支持的版本,请参见 同步方案概览。创建方式,请参见 快速创建RDS SQL Server实例。重要 在混合...

RDS MySQL同步至Elasticsearch

其他限制 执行数据同步前需评估源库和目标库的性能,同时建议业务低峰期执行数据同步。否则全量数据初始化时将占用源库和目标库一定的读写资源,可能会导致数据库的负载上升。全量初始化会并发执行INSERT操作,导致目标数据库的表产生碎片...

场景:配置增量数据离线同步任务

配置增量数据同步时:时间类型增量字段同步:可以通过调度参数来实现时间类型数据的动态替换,调度参数将在任务调度时自动根据业务时间替换为具体的值。关于调度参数的使用,详情请参见:调度参数支持的格式。非时间类型增量字段同步:可以...

云数据库MongoDB版(分片集群架构)同步至函数计算FC

数据传输服务DTS(Data Transmission Service)支持将 云数据库MongoDB版(分片集群架构)实例的增量数据同步至函数计算FC的指定函数。您可以编写函数代码,结合同步至函数中的数据,对数据进行二次加工。前提条件 已创建源 云数据库...

申请跨境数据同步权限

数据传输服务DTS(Data Transmission Service)默认仅支持非跨境的数据同步任务,若您需要创建跨境(跨国家或地区)的数据同步任务,需要申请开通跨境同步的权限。例如,创建从中国内地到非中国内地地域的同步任务时,需要申请跨境同步的...

重置DTS实例

在左侧导航栏,选择 数据传输(DTS)>数据同步。说明 实际操作可能会因DMS的模式和布局不同,而有所差异。更多信息,请参见 极简模式 和 自定义DMS界面布局与样式。您也可以登录 新版DTS同步任务的列表页面。在 同步任务 右侧,选择同步...

结束DTS实例

在左侧导航栏,选择 数据传输(DTS)>数据同步。说明 实际操作可能会因DMS的模式和布局不同,而有所差异。更多信息,请参见 极简模式 和 自定义DMS界面布局与样式。您也可以登录 新版DTS同步任务的列表页面。在 同步任务 右侧,选择同步...

配置AnalyticDB for MySQL输出

前提条件 配置 AnalyticDB for MySQL 输出节点前,您需要先配置好相应的输入或转换数据源,详情请参见 实时同步支持的数据源。操作步骤 进入 数据开发 页面。登录 DataWorks控制台。在左侧导航栏,单击 工作空间列表。选择工作空间所在地域...

暂停DTS实例

在左侧导航栏,选择 数据传输(DTS)>数据同步。说明 实际操作可能会因DMS的模式和布局不同,而有所差异。更多信息,请参见 极简模式 和 自定义DMS界面布局与样式。您也可以登录 新版DTS同步任务的列表页面。在 同步任务 右侧,选择同步...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据传输服务 云服务器 ECS Web应用防火墙 DDoS防护 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用