同步方案概览
全量数据同步 增量数据同步 单向同步 RDS MySQL同步至自建Oracle PolarDB-X 1.0 全量数据同步 增量数据同步 单向同步 从RDS MySQL同步至PolarDB-X PolarDB-X 2.0 库表结构同步 全量数据同步 增量数据同步 单向同步 RDS MySQL同步至PolarDB-...
全球数据库常见问题
GDN主从数据路由的逻辑是什么？GDN的跨地域读写分离功能需要依赖 PolarDB 集群的集群连接地址实现。从集群的读请求通常情况下会直接发往本地，而写请求则被转发至主集群。详情请参见 技术架构。如果开启了 会话一致性 功能，则集群地址的读...
常见问题
离线同步常见问题 离线同步任务运维常见问题 为什么数据源测试连通性成功，但是离线同步任务执行失败？如何切换数据集成任务执行资源组？脏数据如何排查和定位？如何查看脏数据？如果离线同步传输数据时，脏数据超出限制，是否所有数据都...
计费常见问题
本文汇总了数据传输服务DTS（Data Transmission Service）...Q：为什么数据同步实例的价格普遍高于数据迁移实例？A：数据同步具备更多的高级特性，例如在线调整同步对象和MySQL双向同步，且数据同步基于内网传输，可以保证更低的网络延时。
操作指南FAQ
开启版本控制的OSS Bucket在使用极速同步时需要注意什么？其他：如何解决在windows2019操作系统挂载SMB共享失败的问题？混合云存储网关的传输加速是什么？如何使用云存储网关设置MIME类型？文件网关支持哪些字符集？文件网关延迟上传的使用...
通过DTS将PolarDB MySQL数据同步至阿里云Elastic...
当您在使用PolarDB MySQL遇到查询慢的问题时，可以通过数据传输服务DTS（Data Transmission Service），将企业线上的PolarDB MySQL中的生产数据实时同步到阿里云Elasticsearch中进行搜索分析。本文介绍具体的实现方法。背景信息 本案例需要...
入仓解决方案
源为自建MySQL或RDS MySQL的同步方案 源为PolarDB MySQL版的同步方案 源为PolarDB PostgreSQL版（兼容Oracle）的同步方案 源为PolarDB PostgreSQL版的同步方案 源为PolarDB-X的同步方案 源为Oracle的同步方案 源为自建PostgreSQL或RDS ...
将MaxCompute数据同步到表格存储
如果需要将MaxCompute计算分析后的数据同步到表格存储中存储或者使用，您可以通过在DataWorks数据集成控制台新建和配置离线同步任务来实现全量数据导出。全量数据导出到表格存储后，您可以使用表格存储查询与分析数据。背景信息 表格存储...
查询子实例间的同步延迟
常见问题 Q：binlog同步延迟突然增高或同步状态为异常是什么原因，应该怎么排查？A：如果子实例自动触发高可用切换，或对其执行重启、变更配置等操作，会引起同步延迟上升，属于正常波动，通常维持一段时间后会降低。相关文档 为子实例设置...
查询子实例间的同步延迟
常见问题 Q：binlog同步延迟突然增高或同步状态为异常是什么原因，应该怎么排查？A：如果子实例自动触发高可用切换，或对其执行重启、变更配置等操作，会引起同步延迟上升，属于正常波动，通常维持一段时间后会降低。相关文档 为子实例设置...
常见问题
云存储网关中的数据没有同步上传到OSS Bucket的原因是什么？如何配置文件网关的NFS v4共享路径？文件网关忽略删除的使用场景及配置是什么？文件网关如何加入AD域？块网关FAQ 如何使用块网关创建文件系统并刷新缓存到iSCSI盘？块网关的数据...
配置同步任务（新控制台）
数据传输服务DTS（Data Transmission Service）提供的数据同步功能简单易用，您只需在新版控制台上进行简单操作，即可完成整个数据同步作业的配置。注意事项 本文仅简单介绍数据同步任务的通用配置流程，不同的同步链路在配置数据同步任务...
跨云账号单向同步云数据库Redis实例
说明 目标云数据库Redis支持的版本为4.0或5.0版本，如需跨版本同步（仅支持从低版本同步到高版本）请提前确认兼容性。例如创建按量付费的云数据库Redis来测试，测试完成后可将该实例释放或转为包年包月。跨云账号同步Redis实例支持集群架构...
使用MongoShake实现MongoDB实例间的单向同步
通过阿里云自研的MongoShake开源工具，您可以实现MongoDB数据库间的数据同步，该功能可用于数据分析、灾备和多活等业务场景。本文以云数据库MongoDB实例间的数据实时同步为例介绍配置流程。MongoShake介绍 MongoShake是阿里云以Golang语言...
2022年
什么是全球多活数据库集群 新增 PolarDB O引擎集群间的单向同步的场景中，新增支持增量同步DDL操作：CREATE TABLE、DROP TABLE ALTER TABLE（包括RENAME TABLE、ADD COLUMN、ADD COLUMN DEFAULT、ALTER COLUMN TYPE、DROP COLUMN、ADD ...
快速入门
本文为您介绍如何创建一个阿里云Logstash实例，并通过Logstash的管道配置，完成阿里云Elasticsearch实例间的数据同步。背景信息 在开始本文操作前，请先了解以下背景信息：什么是阿里云Elasticsearch 什么是阿里云Logstash 前提条件 注册...
Tair实例间的双向同步
数据传输服务DTS（Data Transmission Service）支持 云原生内存数据库 Tair 实例间的双向同步，适用于异地多活、数据容灾等多种应用场景，本文介绍数据同步作业的配置流程。本文通过控制台来完成配置，您也可以通过调用OpenAPI来完成配置，...
CREATE TABLE AS（CTAS）语句
通过CTAS语句，在实时同步数据的同时，还能实时将上游表结构（Schema）的变更同步到下游表，提高您在目标存储中创建表和维护源表结构变更的效率。本文为您介绍CREATE TABLE AS（CTAS）的使用方法，并提供了多种使用场景下的示例。前提条件 ...
迁移工具
将MySQL数据同步迁移到表格存储 将HBase数据同步到表格存储 将MaxCompute数据同步到表格存储 将表格存储数据同步到MaxCompute 将表格存储数据同步迁移到OSS 将表格存储数据表中数据同步到另一个数据表 将表格存储时序表中数据同步到另一个...
Redis实例间的单向数据同步
数据传输服务DTS（Data Transmission Service）支持Redis数据库的单向同步，适用于异地多活、数据异地容灾等多种应用场景。本文以Redis实例间的单向数据同步为例，介绍数据同步作业的配置流程。功能概述 全量迁移 DTS将源库的存量数据全部...
配置数据同步任务
支持的同步架构 一对一单向同步 一对多单向同步 级联单向同步 多对一单向同步 一对一双向同步 关于各类同步架构的介绍及注意事项，请参见 数据同步拓扑介绍。支持同步的SQL 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE DDL ALTER ...
数据传输自定义权限策略参考
如果RAM提供的系统策略无法...DescribeSynchronizationJobs 查看同步作业详情 DescribeSynchronizationJobs DescribeSynchronizationJobStatus 修改同步作业名称 DescribeSynchronizationJobs ModifySynchronizationObject 查看同步作业配置 ...
PolarDB-X 1.0同步至DataHub
支持的同步架构 一对一单向同步 一对多单向同步 级联单向同步 多对一单向同步 关于各类同步架构的介绍及注意事项，请参见 数据同步拓扑介绍。支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE DDL ADD COLUMN 数据库...
概述
Tablestore中的增量数据及全量数据可以通过DataWorks的数据集成同步到MaxCompute中。背景信息 表格存储（Tablestore）面向海量结构化数据提供Serverless表存储服务，同时针对物联网场景深度优化提供一站式的IoTstore解决方案。适用于海量...
LTS（原BDS）服务介绍
什么场景会导致“不消费数据”：没有终止任务的前提下直接释放LTS集群，同步任务暂停。使用日志订阅的任务类型：HBase/Lindorm增量同步、数据归档、数据备份和数据订阅。典型场景 集群迁移 使用范围 HBase迁移Lindorm。集群网络的切换，...
PolarDB-X 1.0同步至PolarDB-X 2.0
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将 PolarDB-X 1.0 同步至 PolarDB-X 2.0 实例。前提条件 源 PolarDB-X 1.0 的存储类型支持为RDS MySQL（包括私有定制RDS和单独购买的RDS），暂不支持为 PolarDB MySQL版。...
PolarDB PostgreSQL版间的同步
若DTS正向和反向同步任务均同步了某个表，且正向同步任务同步了该表的全量和增量数据，则反向同步任务只同步该表的增量数据。同步期间，DTS会在源库中创建前缀为 dts_sync_的replication slot用于复制数据。通过该replication slot，DTS...
PolarDB PostgreSQL版同步至RDS PostgreSQL
支持的同步架构 一对一单向同步 一对多单向同步 多对一单向同步 关于各类同步架构的介绍及注意事项，请参见 数据同步拓扑介绍。支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE DDL 仅2020年10月01日后创建的数据同步...
PolarDB-X 1.0间同步
支持的同步架构 一对一单向同步 一对多单向同步 级联单向同步 多对一单向同步 关于各类同步架构的介绍及注意事项，请参见 数据同步拓扑介绍。支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE 数据库账号的权限要求 ...
PolarDB-X 1.0同步至云原生数据仓库 AnalyticDB ...
数据传输服务DTS（Data Transmission Service）支持将 PolarDB-X 1.0 同步至 云原生数据仓库AnalyticDB PostgreSQL版，帮助您轻松实现数据的流转，将企业数据集中分析。前提条件 PolarDB-X 1.0 的存储类型需为RDS MySQL，暂不支持为PolarDB...
PolarDB-X 1.0同步至Elasticsearch
本文介绍如何使用数据传输服务DTS（Data Transmission Service）将数据从PolarDB-X 1.0同步至Elasticsearch。前提条件 源 PolarDB-X 1.0 的存储类型支持为RDS MySQL（包括私有定制RDS和单独购买的RDS），暂不支持为PolarDB MySQL。已创建...
Db2 for LUW同步至AnalyticDB MySQL版 3.0
支持的同步架构 一对一单向同步 一对多单向同步 级联单向同步 多对一单向同步 关于各类同步架构的介绍及注意事项，请参见 数据同步拓扑介绍。支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE 准备工作 创建账号并授予...
PolarDB PostgreSQL版（兼容Oracle）集群间的双向同步
双向同步实例包含正向和反向同步任务，在配置或重置双向同步实例时，若其中一个任务的目标对象是另一个任务待同步的对象：仅允许其中一个任务同步全量和增量数据，另一个任务仅支持同步增量数据。当前任务的源数据仅支持同步到当前任务的...
全增量数据同步
本文主要介绍全增量数据同步的使用场景，功能列表，迁移优势，使用限制以及创建数据同步任务等操作。使用场景 大版本升级：HBase1.x升级HBase2.x。跨地域迁移：例如从青岛机房迁移到北京机房。跨账号迁移：支持不同账号迁移数据。集群升配...
PolarDB-X 1.0同步至RDS MySQL
支持的同步架构 一对一单向同步 一对多单向同步 级联单向同步 多对一单向同步 关于各类同步架构的介绍及注意事项，请参见 数据同步拓扑介绍。支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE 数据库账号的权限要求 ...
PolarDB-X 2.0同步至阿里云消息队列Kafka
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将 PolarDB-X 2.0 同步至阿里云消息队列Kafka，实现增量数据的实时同步。前提条件 已创建源 PolarDB-X 2.0 实例，且兼容MySQL 5.7版本。目标Kafka实例的版本请参见 数据库...
RDS PostgreSQL同步至PolarDB PostgreSQL版
支持的同步架构 一对一单向同步 一对多单向同步 级联单向同步 多对一单向同步 关于各类同步架构的介绍及注意事项，请参见 数据同步拓扑介绍。支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE DDL 仅2020年10月01日后...
PolarDB-X 1.0同步至阿里云消息队列Kafka
支持的同步架构 一对一单向同步 一对多单向同步 级联单向同步 多对一单向同步 关于各类同步架构的介绍及注意事项，请参见 数据同步拓扑介绍。支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE 数据库账号的权限要求 ...
PolarDB PostgreSQL版同步至云原生数据仓库AnalyticDB...
支持的同步架构 一对一单向同步 一对多单向同步 多对一单向同步 关于各类同步架构的介绍及注意事项，请参见 数据同步拓扑介绍。支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE DDL 仅2020年10月01日后创建的数据同步...
PolarDB PostgreSQL版（兼容Oracle）集群同步至...
您可以购买指定规格的专属集群来运行DTS同步任务，详情请参见 什么是DTS专属集群。源库、目标库无法连接后的重试时间 在同步任务启动后，若源库或目标库连接失败则DTS会报错，并会立即进行持续的重试连接，默认持续重试时间为720分钟，您也...
- 产品推荐
- 这些文档可能帮助您