数据同步流程

数据传输提供数据同步功能,帮助您实现数据源之间的数据实时同步。适用于数据异地多活、数据异地灾备、数据聚合...确认数据同步项目成功,并再需要同步源库目标库的数据后,您可以结束当前的数据同步项目。详情请参见 结束数据同步项目。

云数据库MongoDB版(副本集架构)

如为全量同步和增量同步任务,DTS要求源数据库的Oplog日志至少保留7天以上(您可在全量同步完成后将Oplog日志保存时间设置为24小时以上),否则DTS可能因无法获取Oplog日志而导致任务失败,极端情况下甚至可能会导致数据一致或丢失。...

云数据库MongoDB版(分片集群架构)

您可以在数据传输服务DTS(Data Transmission Service)控制台创建数据同步任务,实时或定时将 云数据库 MongoDB 版 的分片集群架构实例的增量数据同步至 函数计算 的指定函数。然后结合同步至函数中的数据,在 函数计算 编写相应的代码,...

云数据库MongoDB版(副本集架构)同步至函数计算FC

如为全量同步和增量同步任务,DTS要求源数据库的Oplog日志至少保留7天以上(您可在全量同步完成后将Oplog日志保存时间设置为24小时以上),否则DTS可能因无法获取Oplog日志而导致任务失败,极端情况下甚至可能会导致数据一致或丢失。...

云数据库MongoDB版(分片集群架构)同步至函数计算FC

其他限制 支持同步adminlocal库中的数据。支持全量同步任务。支持跨地域的同步任务。支持映射功能。在任务开始后,待同步的数据在使用INSERT命令时必须包含分片键,使用UPDATE命令时支持更改分片键。请避免多个DTS任务同步到同...

使用创建反向任务功能

支持为跨国家跨境的同步实例创建反向实例。请确保待同步的表具备主键或唯一约束,并且字段具有唯一性,否则可能会导致部分数据重复。请根据业务数据库出现异常后的预估恢复时间,合理设置数据库Binlog的保存时间。若原实例为Serverless...

MySQL实例间的双向同步

费用说明 同步类型 链路配置费用 库表结构同步全量数据同步 收费。增量数据同步 收费,详情请参见 计费概述。支持的冲突检测 为保障同步数据的一致性,您需要确保同一个主键、业务主键或唯一键的记录只在双向同步的一个节点进行更新。...

RDS PostgreSQL间的双向同步

费用说明 同步类型 链路配置费用 库表结构同步全量数据同步 收费。增量数据同步 收费,详情请参见 计费概述。支持的双向同步架构 目前DTS仅支持两个PostgreSQL数据库之间的双向同步,暂不支持多个PostgreSQL数据库之间的双向同步。支持...

RDS MySQL与PolarDB MySQL版间的双向同步

费用说明 同步类型 链路配置费用 库表结构同步全量数据同步 收费。增量数据同步 收费,详情请参见 计费概述。支持的冲突检测 为保障同步数据的一致性,您需要确保同一个主键、业务主键或唯一键的记录只在双向同步的一个节点进行更新。...

创建反向实例

支持为跨国家跨境的同步实例创建反向实例。操作步骤 进入同步任务的列表页面。登录 DMS数据管理服务。在顶部菜单栏中,单击 集成与开发(DTS)。在左侧导航栏,选择 数据传输(DTS)>数据同步。说明 实际操作可能会因DMS的模式布局...

2023年

2023年12月 类型 重点内容 相关文档 新增 新增支持将MongoDB(副本集架构或分片集群架构)的数据同步到Lindorm(宽表引擎),以帮助您的应用开发更加敏捷、灵活高效。云数据库MongoDB版同步至云原生多模数据库Lindorm 新增 新增支持将...

MySQL实例间的双向同步

费用说明 同步类型 链路配置费用 库表结构同步全量数据同步 收费。增量数据同步 收费,详情请参见 计费概述。支持的冲突检测 为保障同步数据的一致性,您需要确保同一个主键、业务主键或唯一键的记录只在双向同步的一个节点进行更新。...

RDS PostgreSQL间的双向同步

费用说明 同步类型 链路配置费用 库表结构同步全量数据同步 收费。增量数据同步 收费,详情请参见 计费概述。支持的双向同步架构 目前DTS仅支持两个PostgreSQL数据库之间的双向同步,暂不支持多个PostgreSQL数据库之间的双向同步。支持...

同步 OceanBase 数据库的数据至 DataHub

本文为您介绍如何同步 OceanBase 数据库(MySQL Oracle 租户)的数据至 DataHub。前提条件 数据传输已具备云资源访问权限。详情请参见 数据传输迁移角色授权。已为源端 OceanBase 数据库创建专用于数据同步项目的数据库用户,并为其赋予...

2022年

本章节介绍了2022年数据传输服务DTS(Data Transmission Service)产品功能对应的文档动态。更多新功能介绍 详情请参见 数据传输服务产品动态。2022年11月 类型 重点内容 相关文档 新增 实例支持体验3次规格升级。体验实例规格升级 2022...

常见问题

说明 对于某些数据同步不支持的数据库(例如MongoDB实例),您可以通过增量数据迁移的方式来实现数据同步。数据同步的工作原理是什么?数据同步的工作原理,请参见 产品架构及功能原理。如何计算同步延迟?同步延迟是指同步到目标数据库中...

数据引入概述

Dataphin支持通过数据集成数据同步的方式,将业务数据源的数据引入Dataphin平台。背景信息 如果您是在 2020年4月之后 购买的Dataphin,则数据同步能力通过数据集成功能实现(即系统 不再提供数据同步的功能入口)。数据集成为您提供简单...

数据引入概述

Dataphin支持通过数据集成数据同步的方式,将业务数据源的数据引入Dataphin平台。背景信息 如果您是在 2020年4月之后 购买的Dataphin,则数据同步能力通过数据集成功能实现(即系统 不再提供数据同步的功能入口)。数据集成为您提供简单...

Kafka增量数据同步至MaxCompute

开发环境生产环境的表结构一致,同步任务提交发布后,同步任务实际调度运行时的列对应关系,可能与此处离线同步节点配置的列对应关系一致,最终导致数据写入正确。如果待写入的MaxCompute表未生成,您可以使用 一键生成目标表结构 ...

Kafka增量数据同步至MaxCompute

开发环境生产环境的表结构一致,同步任务提交发布后,同步任务实际调度运行时的列对应关系,可能与此处离线同步节点配置的列对应关系一致,最终导致数据写入正确。如果待写入的MaxCompute表未生成,您可以使用 一键生成目标表结构 ...

一键克隆RDS MySQL至PolarDB MySQL版

物理迁移(物理复制)逻辑迁移(DTS数据同步)方式区别如下:对比项 物理迁移(物理复制)逻辑迁移(DTS数据同步)是否需要DTS工具 需要 需要 是否支持迁移或同步增量数据 支持 支持 是否影响源RDS操作 影响 影响 源目标的...

OSS数据离线同步至MaxCompute

开发环境生产环境的表结构一致,同步任务提交发布后,同步任务实际调度运行时的列对应关系,可能与此处离线同步节点配置的列对应关系一致,最终导致数据写入正确。分区信息 如果表为分区表,您可以填入分区列的取值。取值可以是...

OSS数据离线同步至MaxCompute

开发环境生产环境的表结构一致,同步任务提交发布后,同步任务实际调度运行时的列对应关系,可能与此处离线同步节点配置的列对应关系一致,最终导致数据写入正确。分区信息 如果表为分区表,您可以填入分区列的取值。取值可以是...

仓库同步

通过网页端导入的代码库以及通过 自建Gitlab迁移工具(BETA)导入的Gitlab仓库支持同步,其他来源新建的库支持同步功能。如何通过网页端导入三方代码库,请参见 网页端导入三方代码库。步骤一:查看同步入口 作为仓库管理员,前往代码库...

极速同步

您可以使用极速同步功能,将OSS Bucket中的数据变化极速同步至所有通过文件网关连接至该Bucket的本地客户端。前提条件 已创建文件网关并添加缓存。具体操作,请参见 创建文件网关 及 添加缓存。已创建OSS Bucket。具体操作,请参见 创建...

MaxCompute数据离线同步至ClickHouse

开发环境生产环境的表结构一致,同步任务提交发布后,同步任务实际调度运行时的列对应关系,可能与此处离线同步节点配置的列对应关系一致,最终导致数据写入正确。分区信息 您可以填入分区列的取值。取值可以是固定值,如 ds=...

使用DTS同步

否:不同步Online DDL变更产生的临时表数据,只同步源库的原始DDL数据。说明 该方案会导致目标库锁表。源、目标库无法连接重试时间 当源、目标库无法连接时,DTS默认重试720分钟(即12小时),您也可以自定义重试时间。如果DTS在设置的时间...

数据迁移、同步和恢复区别

数据迁移和同步的区别 数据迁移主要用于上云迁移,在勾选增量迁移时,可以实现数据同步的部分功能,但是不如数据同步灵活,例如支持在线修改同步对象、支持双向同步等。数据迁移属于一次性任务,迁移完成后即可释放实例。数据同步主要...

数据迁移、同步和恢复区别

数据迁移和同步的区别 数据迁移主要用于上云迁移,在勾选增量迁移时,可以实现数据同步的部分功能,但是不如数据同步灵活,例如支持在线修改同步对象、支持双向同步等。数据迁移属于一次性任务,迁移完成后即可释放实例。数据同步主要...

数据迁移、同步和恢复区别

数据迁移和同步的区别 数据迁移主要用于上云迁移,在勾选增量迁移时,可以实现数据同步的部分功能,但是不如数据同步灵活,例如支持在线修改同步对象、支持双向同步等。数据迁移属于一次性任务,迁移完成后即可释放实例。数据同步主要...

数据迁移、同步和恢复区别

数据迁移和同步的区别 数据迁移主要用于上云迁移,在勾选增量迁移时,可以实现数据同步的部分功能,但是不如数据同步灵活,例如支持在线修改同步对象、支持双向同步等。数据迁移属于一次性任务,迁移完成后即可释放实例。数据同步主要...

账户同步-应用同步给 IDaaS

企业可能希望使用应用作为账号管理源,并将信息即时同步给 IDaaS。​ 具体支持方式请参考:账户/组织同步。IDaaS 对企业的应用开发者开放 API 供调用,以实现账户/组织信息的导入和同步,详情请参考 应用 API 开放。​

修改持久内存型实例的同步模式

Tair(Redis企业版)持久内存型实例的默认同步模式为异步,若业务场景对数据持久化要求较高,您可以在控制台将其同步模式修改为半同步,提高数据安全性。前提条件 实例为持久内存型,且版本为1.2.4及以上。说明 低版本的持久内存型实例可在...

修改持久内存型实例的同步模式

云原生内存数据库Tair 持久内存型实例的默认同步模式为异步,若业务场景对数据持久化要求较高,您可以在控制台将其同步模式修改为半同步,提高数据安全性。前提条件 实例为持久内存型,且版本为1.2.4及以上。说明 低版本的持久内存型实例可...

查看项目告警信息

本文为您介绍如何查看数据迁移项目、数据同步项目等待发送、已发送需要重试等告警监控信息。背景信息 数据传输支持自动监控迁移项目失败、迁移项目延时、同步项目失败和同步项目延时等项目告警事件,并通过对接的告警通道发送项目告警...

Oracle数据库的限制准备工作

当您使用DTS传输Oracle的数据,或者将数据转储到Oracle数据库时,需要了解DTS支持的能力、功能限制接入DTS的准备工作,以便您平稳地完成数据同步或迁移。数据库限制 自建 Oracle为源 限制项 说明 支持的版本 支持10g、11g、12c、18c、19c...

CreateRDSToClickhouseDb-创建同步任务

调用CreateRDSToClickhouseDb接口创建云数据库ClickHouse社区兼容版同步任务。接口说明 说明 该接口仅适用于云数据库 ClickHouse 的社区兼容版集群。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,...

PolarDB-X 2.0间的双向同步

费用说明 同步类型 链路配置费用 库表结构同步全量数据同步 收费。增量数据同步 收费,详情请参见 计费概述。支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE 数据库账号的权限要求 源目标 PolarDB-X 2.0 实例所...

选型推荐

功能特性 基础型 标准型 增强型 性能型 归档存储 不支持 支持 支持 支持 极速同步 支持 支持 支持 支持 带宽 1 Gbps 2 Gbps~2.5 Gbps 4.5 Gbps~5 Gbps 10 Gbps 容量 128 TB 256 TB 512 TB 1 PB 推荐缓存 高效云盘/SSD云盘/ESSD云盘 SSD云...

MySQL实例间的双向同步

费用说明 同步类型 链路配置费用 库表结构同步全量数据同步 收费。增量数据同步 收费,详情请参见 计费概述。支持的同步架构 目前DTS仅支持两个MySQL数据库之间的双向同步,暂不支持多个MySQL数据库之间的双向同步。支持的数据源 MySQL...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据传输服务 混合云存储 闪电立方 弹性公网IP 短信服务 人工智能平台 PAI
新人特惠 爆款特惠 最新活动 免费试用