RDS MariaDB迁移至RDS PostgreSQL
数据传输服务DTS（Data Transmission Service）支持将RDS MariaDB迁移至RDS PostgreSQL。前提条件 已创建存储空间大于源RDS MariaDB实例已占用存储空间的目标RDS PostgreSQL实例。具体操作，请参见 快速创建RDS PostgreSQL实例。已在目标...
RDS MariaDB同步至RDS PoatgreSQL
已在目标RDS PostgreSQL实例中创建用于接收数据的数据库。具体操作，请参见 创建账号和数据库。注意事项 说明 在库表结构同步过程中，DTS会将源数据库中的外键同步到目标数据库。在全量同步和增量同步过程中，DTS会以Session级别暂时禁用...
实时同步任务告警设置最佳实践
告警规则指标 您可以在DataWorks的运维中心对实时同步任务设置报警规则，其中包含的报警指标包括：任务状态、业务延迟、Failover、DDL不支持、DDL通知、脏数据。指标1：任务状态 指标报警场景 配置建议 任务状态告警指标通过任务心跳状态来...
资源组操作及网络连通
数据库和DataWorks不在同一个地域（Region）下，进行数据同步时如何保障数据库与DataWorks的网络连通？数据库和DataWorks不在同一个阿里云账号下，进行数据同步时如何保障数据库与DataWorks的网络连通？访问VPC环境下的数据库测试连通性...
PolarDB-X 1.0同步至云原生数据仓库 AnalyticDB ...
数据传输服务DTS（Data Transmission Service）支持将 PolarDB-X 1.0 同步至 云原生数据仓库AnalyticDB PostgreSQL版，帮助您轻松实现数据的流转，将企业数据集中分析。前提条件 PolarDB-X 1.0 的存储类型需为RDS MySQL，暂不支持为PolarDB...
自建Oracle同步至PolarDB PostgreSQL版（兼容Oracle）
已选择对象 若您使用的不是高权限账号或待同步的数据库名称不符合 PolarDB MySQL版 的定义规范，您需要右击 已选择对象 中待同步对象所属的Schema，在 编辑Schema 对话框中，将 Schema名称 修改为 PolarDB MySQL版 集群中用于接收数据的...
Db2 for LUW迁移至云原生数据仓库 AnalyticDB ...
数据传输服务DTS（Data Transmission Service）支持将 Db2 for LUW 迁移至 云原生数据仓库AnalyticDB PostgreSQL版。前提条件 已创建存储空间大于源 Db2 for LUW 数据库占用存储空间的目标 云原生数据仓库AnalyticDB PostgreSQL版 实例。...
概述
OceanBase 云数据库集群实例可以通过添加备实例，组成一主多备的集群网络，主备实例之间保持数据同步，进一步提升数据库的高可用能力。原理介绍 主备实例架构为一主（Primary）多备（Physical_Standby），备实例不支持级联添加备实例。主备...
从自建TiDB同步至云原生数据仓库AnalyticDB MySQL
本文介绍如何使用数据传输服务DTS（Data Transmission Service），结合Kafka集群与TiDB数据库的Pump、Drainer组件，将自建TiDB数据库同步至 云原生数据仓库AnalyticDB MySQL。前提条件 已创建 云原生数据仓库AnalyticDB MySQL 3.0版本，...
PolarDB MySQL版迁移至ClickHouse集群
数据传输服务DTS（Data Transmission Service）支持将 PolarDB MySQL版 集群迁移至ClickHouse集群，帮助您实现数据地流转，将企业数据集中分析。前提条件 已创建20.8及以上版本的目标ClickHouse集群，详情请参见 新建集群。说明 ClickHouse...
PolarDB-X 1.0同步至阿里云消息队列Kafka
已创建Kafka实例，并已创建用于接收同步数据的Topic，请参见 概述。目标Kafka实例的存储空间须大于PolarDB-X 1.0实例占用的存储空间。注意事项 类型 说明 源库限制 待同步的表需具备主键或唯一约束（仅具有唯一约束的表不支持库表结构同步...
Flink数据导入
当 sink.buffer-flush.max-rows 和 sink.buffer-flush.interval 配置均不为 0 时，批量写入功能生效规则如下：若Flink接收到的数据量已达到 sink.buffer-flush.max-rows 所设的值，但最大时间间隔还未到达 sink.buffer-flush.interval 所设...
从自建MySQL同步至阿里云消息队列Kafka版
目标Kafka实例中已创建用于接收同步数据的Topic，详情请参见 创建Topic。背景信息 消息队列Kafka版 是阿里云提供的分布式、高吞吐、可扩展的消息队列服务，针对开源的Apache Kafka提供全托管服务，彻底解决开源产品长期以来的痛点，您只需...
RDS MySQL迁移至ClickHouse集群
数据传输服务DTS（Data Transmission Service）支持将MySQL数据库（例如自建MySQL或 RDS MySQL）迁移至ClickHouse集群，帮助您轻松实现数据的流转，将企业数据集中分析。本文以 RDS MySQL 实例为例，介绍从 RDS MySQL 迁移至ClickHouse集群...
PolarDB-X 1.0迁移至云原生数据仓库 AnalyticDB ...
数据传输服务DTS（Data Transmission Service）支持将 PolarDB-X 1.0 迁移至 云原生数据仓库AnalyticDB PostgreSQL版，帮助您轻松实现数据的流转，将企业数据集中分析。前提条件 PolarDB-X 1.0 的存储类型需为RDS MySQL，暂不支持为PolarDB...
云数据库MongoDB版（分片集群架构）同步至函数计算FC
数据传输服务DTS（Data Transmission Service）支持将 云数据库MongoDB版（分片集群架构）实例的增量数据同步至函数计算FC的指定函数。您可以编写函数代码，结合同步至函数中的数据，对数据进行二次加工。前提条件 已创建源 云数据库...
PolarDB-X 2.0迁移至自建Oracle
前提条件 已创建用于接收数据的自建Oracle，且Oracle可用的存储空间需要大于源 PolarDB-X 2.0 已使用的存储空间。自建Oracle中已创建用于接收数据的Schema。说明 创建用户时会自动创建一个对应的Schema。注意事项 说明 在库表结构迁移过程...
重要组件
由于多个主机的数据库实例需要访问块存储上的同一份数据，常用的Ext4等文件系统不支持多点挂载，PolarDB数据库团队自行研发了专用的用户态文件系统，提供常见的文件读写查看接口，支持类似O_DIRECT的非缓存方式读写数据，还支持数据页原子...
云数据库MongoDB版（副本集架构）同步至函数计算FC
数据传输服务DTS（Data Transmission Service）支持将 云数据库MongoDB版（副本集架构）实例的增量数据同步至函数计算FC的指定函数。您可以编写函数代码，结合同步至函数中的数据，对数据进行二次加工。前提条件 已创建源 云数据库MongoDB...
PolarDB-X 2.0同步至自建Oracle
前提条件 已创建用于接收数据的自建Oracle，且Oracle可用的存储空间需要大于源 PolarDB-X 2.0 已使用的存储空间。自建Oracle中已创建用于接收数据的Schema。说明 创建用户时会自动创建一个对应的Schema。注意事项 说明 在库表结构同步过程...
PolarDB MySQL版同步至ClickHouse集群
数据传输服务DTS（Data Transmission Service）支持将 PolarDB MySQL版 集群同步至ClickHouse集群，帮助您轻松实现数据的流转，将企业数据集中分析。前提条件 已创建20.8及以上版本的目标ClickHouse集群，详情请参见 新建集群。说明 ...
PolarDB MySQL版迁移至Kafka
说明 若目标实例为 阿里云消息队列Kafka版，请确保已创建用于接收同步数据的Topic，然后将其作为自建Kafka进行配置。创建Topic的方法，请参见 步骤一：创建Topic。目标Kafka集群实例的存储空间须大于源 PolarDB MySQL版 集群实例占用的存储...
PolarDB-X 1.0同步至PolarDB-X 2.0
已创建目标 PolarDB-X 2.0 实例，且已创建用于接收数据的 DRDS模式 的数据库。更多信息，请参见 创建实例 和 创建数据库。目标实例的存储空间须大于源实例占用的存储空间。注意事项 说明 在库表结构同步过程中，DTS会将源数据库中的外键...
RDS MySQL迁移至Tair/Redis
数据传输服务DTS（Data Transmission Service）支持将MySQL数据库（例如自建MySQL或RDS MySQL）迁移至 云原生内存数据库Tair 或 云数据库Redis，降低后端关系型数据库的负载，从而提升用户体验。本文以 RDS MySQL 实例为源，云数据库Redis ...
云数据库Redis间的单向同步
数据传输服务DTS（Data Transmission Service）支持Redis数据库的单向同步，适用于异地多活、数据异地容灾等多种应用场景。本文以Redis实例间的单向数据同步为例，介绍数据同步作业的配置流程。前提条件 已创建目标Redis实例，创建方式，请...
云数据库Redis间的迁移
本文介绍如何使用数据传输服务DTS（Data Transmission Service，简称DTS），实现 云数据库Redis 间的迁移。前提条件 已创建源和目标 云数据库Redis。说明 源和目标 云数据库Redis 的创建方式，请参见 创建Redis实例。支持的版本，请参见 ...
从自建Redis迁移至Tair实例
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将自建Redis迁移至 云原生内存数据库Tair 实例。DTS支持全量数据迁移以及增量数据迁移，同时使用这两种迁移类型可以实现在自建应用不停服的情况下，平滑地完成自建Redis...
RDS MySQL同步至ClickHouse集群
云数据库ClickHouse是面向联机分析处理的列式数据库，基于大宽表的聚合分析查询性能非常优异，比其他分析型数据库速度快一个数量级，通过数据传输服务DTS（Data Transmission Service），您可以将MySQL数据库（例如自建MySQL或RDS MySQL）...
从自建TiDB增量迁移至RDS MySQL
本文介绍如何使用数据传输服务DTS（Data Transmission Service），结合Kafka集群与TiDB数据库的Pump、Drainer组件，完成增量数据迁移，实现在应用不停服的情况下，平滑地完成数据库的迁移上云。前提条件 说明 增量迁移前，您可先将自建TiDB...
RDS MySQL同步至ClickHouse集群
云数据库ClickHouse是面向联机分析处理的列式数据库，基于大宽表的聚合分析查询性能非常优异，比其他分析型数据库速度快一个数量级，通过数据传输服务DTS（Data Transmission Service），您可以将MySQL数据库（例如自建MySQL或RDS MySQL）...
跨云账号迁移云数据库Redis实例
如果目标数据库内存不足，触发数据逐出时，由于 云数据库Redis版 的默认数据逐出策略（maxmemory-policy）为 volatile-lru，会导致目标库与源库数据不一致的情况，但不会影响任务的正常运行。为避免该情况发生，建议将目标库的数据逐出策略...
RDS SQL Server迁移至DataHub
数据传输服务DTS（Data Transmission Service）支持将 RDS SQL Server 迁移至 阿里云流式数据服务DataHub。前提条件 确认DTS是否支持该版本的 RDS SQL Server 实例。支持的版本，请参见 迁移方案概览。已开通 DataHub 服务，并且已创建用作...
RDS SQL Server迁移至云原生数据仓库 AnalyticDB ...
数据传输服务DTS（Data Transmission Service）支持将 RDS SQL Server 的数据迁移至 云原生数据仓库AnalyticDB PostgreSQL版，帮助您轻松实现数据的传输。通过 AnalyticDB PostgreSQL版 提供的数据在线分析服务和离线数据处理功能，您可以...
RDS SQL Server同步至云原生数据仓库 AnalyticDB ...
数据传输服务DTS（Data Transmission Service）支持将 RDS SQL Server 实例的数据同步至 云原生数据仓库AnalyticDB PostgreSQL版，帮助您轻松实现数据的流转。通过 AnalyticDB PostgreSQL版 提供的数据在线分析服务和离线数据处理功能，您...
RDS MySQL同步至函数计算FC
数据传输服务DTS（Data Transmission Service）支持将 RDS MySQL 实例的全量或增量数据同步至函数计算FC的指定函数。您可以编写函数代码，结合同步至函数中的数据，对数据进行二次加工。前提条件 已创建源 RDS MySQL 实例。创建方式，请...
PolarDB-X 1.0迁移至阿里云消息队列Kafka
已创建Kafka实例，并已创建用于接收迁移数据的Topic，关于Kafka实例的更多信息，请参见 概述。目标Kafka实例的存储空间须大于PolarDB-X 1.0实例占用的存储空间。注意事项 类型 说明 源库限制 待迁移的表需具备主键或唯一约束，且字段具有...
RDS MySQL同步至Tair/Redis
数据传输服务DTS（Data Transmission Service）支持将MySQL数据库（例如自建MySQL或RDS MySQL）同步至 云原生内存数据库Tair 或 云数据库Redis，降低后端关系型数据库的负载，从而提升用户体验。本文以 RDS MySQL 实例为源，云数据库Redis ...
查看运行分析
字节（Byte）每秒远端读取网络缓冲区的数据的字节数（numBuffersIn Remote PerSecond）每秒远端读取网络缓冲区的数据的字节数。字节（Byte）每秒输出字节总数。（numBytesOut PerSecond）可查看上游吞吐输出情况，协助您观察作业流量表现。...
PolarDB-X 2.0迁移至阿里云消息队列Kafka
目标Kafka实例中已创建用于接收迁移数据的Topic，请参见 步骤一：创建Topic。源和目标实例支持的版本，请参见 数据库版本。目标Kafka实例的存储空间须大于 PolarDB-X 2.0 实例占用的存储空间。注意事项 说明 DTS不会将源数据库中的外键迁移...
Kafka单表实时入湖OSS（HUDI）
准备独享数据集成资源组并与数据源网络连通 在进行数据同步前，需要完成您的独享数据集成资源组和数据源的网络连通，详情请参见 配置资源组与网络连通。说明 OSS数据源在下一步新增OSS数据源时，指定Endpoint地址，即可实现OSS数据源与独享...
- 产品推荐
- 这些文档可能帮助您