PolarDB PostgreSQL版（兼容Oracle）迁移至自建Oracle
通过使用数据传输服务DTS（Data Transmission Service），您可以实现 PolarDB PostgreSQL版（兼容Oracle）集群迁移至自建Oracle。前提条件 已创建源 PolarDB PostgreSQL版（兼容Oracle）集群，详情请参见 创建PolarDB PostgreSQL版（兼容...
PolarDB PostgreSQL版（兼容Oracle）间迁移
通过使用数据传输服务DTS（Data Transmission Service），您可以实现 PolarDB PostgreSQL版（兼容Oracle）集群间的数据迁移。前提条件 已创建源和目标 PolarDB PostgreSQL版（兼容Oracle）集群，详情请参见 创建PolarDB PostgreSQL版（兼容...
PolarDB-X 2.0迁移至MaxCompute
本文介绍如何使用数据传输服务DTS（Data Transmission Service）将 PolarDB-X 2.0 迁移至MaxCompute。前提条件 已创建源 PolarDB-X 2.0 实例。具体操作，请参见 创建实例。已开通MaxCompute服务，并已创建MaxCompute项目。具体操作，请参见...
RDS PostgreSQL迁移至RDS MySQL
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将 RDS PostgreSQL 迁移至 RDS MySQL。DTS支持全量数据迁移和增量数据迁移，同时使用这两种迁移类型可以实现在业务不停服的情况下，平滑地完成数据库的迁移。支持的源和...
PolarDB-X 2.0迁移至云原生数据仓库 AnalyticDB MySQL...
是否限制增量迁移速率 您也可以根据实际情况，选择是否对增量迁移任务进行限速设置（设置 每秒增量迁移的行数RPS 和 每秒增量迁移的数据量(MB)BPS），以缓解目标库的压力。说明 仅当 迁移类型 选择了 增量迁移 时才可以配置。配置ETL功能 ...
RDS PostgreSQL间的数据迁移
本文介绍如何使用数据传输服务DTS（Data Transmission Service），实现 RDS PostgreSQL 间的结构迁移、全量数据迁移以及增量数据迁移。同时使用这三种迁移类型可以实现在业务不停服的情况下，平滑地完成数据库的迁移。前提条件 已创建源和...
RDS MySQL迁移至AnalyticDB MySQL 3.0
如需进行增量迁移，Binlog日志：需开启，并且binlog_format为row、binlog_row_image为full。否则预检查阶段提示报错，且无法成功启动数据迁移任务。重要 如源实例自建MySQL是双主集群（两者互为主从），为保障DTS能获取全部的Binlog日志，...
全增量数据同步
本文主要介绍全增量数据同步的使用场景，功能列表，迁移优势，使用限制以及创建数据同步任务等操作。使用场景 大版本升级：HBase1.x升级HBase2.x。跨地域迁移：例如从青岛机房迁移到北京机房。跨账号迁移：支持不同账号迁移数据。集群升配...
配置增量扫描任务
本文介绍如何配置增量扫描设置，对指定OSS Bucket中新增的图片、视频自动进行违规检测（每当Bucket中有新增内容，将自动触发扫描），并在检测完成后查看扫描结果和统计数据。背景信息 关于OSS违规检测的使用限制（例如支持的OSS Bucket、...
使用前缀列表提高安全组规则管理的效率
本文介绍如何使用前缀列表，来更高效地进行安全组规则的管理。背景信息 前缀列表是一些网络前缀（即CIDR地址块）的集合，您可以在配置安全组规则时引用前缀列表。对前缀列表条目的修改，等效于直接修改安全组规则。通过将一些常用地址放入...
PolarDB MySQL版迁移至AnalyticDB MySQL 3.0
如需进行增量迁移，需开启Binlog日志，并且需要将loose_polar_log_bin参数设置为on。否则预检查阶段提示报错，且无法成功启动数据迁移任务。开启Binlog日志和修改参数的方法，请参见 开启Binlog 和 修改参数值。说明 PolarDB MySQL版 开启...
从自建Redis迁移至阿里云Redis
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将自建Redis迁移至阿里云Redis实例。DTS支持全量数据迁移以及增量数据迁移，同时使用这两种迁移类型可以实现在自建应用不停服的情况下，平滑地完成自建Redis数据库的迁移...
RDS SQL Server迁移至DataHub
是否限制增量迁移速率 请根据实际情况，选择是否对增量迁移任务进行限速设置（设置 每秒增量迁移的行数RPS 和 每秒增量迁移的数据量MB），以缓解目标库的压力。说明 仅当 迁移类型 选择了 增量迁移 时才可以配置。环境标签 您可以请根据...
PolarDB MySQL版同步至PolarDB-X 2.0
是否限制增量同步速率 您也可以根据实际情况，选择是否对增量同步任务进行限速设置（设置 每秒增量同步的行数RPS 和 每秒增量同步的数据量(MB)BPS），以缓解目标库的压力。环境标签 您可以根据实际情况，选择用于标识实例的环境标签。本...
通过脚本模式配置离线同步任务
当您需要实现更精细化的配置管理时，您可以使用脚本模式配置离线同步任务，通过编写数据同步的JSON脚本并结合DataWorks调度参数使用，将源端单表或分库分表的全量或增量数据周期性同步至目标数据表。本文为您介绍脚本模式配置离线同步任务...
自建PostgreSQL迁移至PolarDB PostgreSQL版
本文介绍如何使用数据传输服务DTS（Data Transmission Service）将自建PostgreSQL迁移至 PolarDB PostgreSQL版。前提条件 已创建目标 PolarDB PostgreSQL版 数据库集群，详情请参见 创建PolarDB PostgreSQL版数据库集群。目标 PolarDB ...
迁移 Oracle 数据库的数据至 OceanBase 数据库 Oracle...
本文为您介绍如何使用数据传输迁移 Oracle 数据库的数据至 OceanBase 数据库 Oracle 租户。重要 如果数据迁移项目长期处于非活跃状态（项目状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，项目可能无法恢复。数据传输将主动...
自建PostgreSQL迁移至云原生数据仓库 AnalyticDB ...
本文介绍如何使用数据传输服务DTS（Data Transmission Service）将自建PostgreSQL迁移至 云原生数据仓库AnalyticDB PostgreSQL版。前提条件 已创建目标 AnalyticDB PostgreSQL 实例，详情请参见 创建实例。目标 AnalyticDB PostgreSQL 实例...
自建Oracle迁移至DataHub
是否限制增量迁移速率 您也可以根据实际情况，选择是否对增量迁移任务进行限速设置（设置 每秒增量迁移的行数RPS 和 每秒增量迁移的数据量(MB)BPS），以缓解目标库的压力。说明 仅当 迁移类型 选择了 增量迁移 时才可以配置。环境标签 您...
方案概述
本章节介绍了一键升级RDS PostgreSQL至 PolarDB PostgreSQL版 的方案简介、升级方式及其优势、升级前提条件、使用限制、收费规则等。升级方案概述 PolarDB 支持将RDS PostgreSQL一键升级至 PolarDB PostgreSQL版，升级后的 PolarDB 集群...
使用SDK
使用SDK进行数据投递前，您需要了解使用数据湖投递功能的注意事项、接口等信息。创建投递任务后，表格存储数据表中的数据会自动投递到OSS Bucket中存储。注意事项 目前支持使用数据湖投递功能的地域有华东1（杭州）、华东2（上海）、华北2...
一键实时同步至DataHub
一键实时同步至DataHub方案支持全增量一体化同步，先进行全量数据迁移，然后再实时同步增量数据至目标端。本文为您介绍如何创建一键实时同步至DataHub任务。前提条件 已完成数据源配置。您需要在数据集成同步任务配置前，配置好您需要同步...
自建PostgreSQL迁移至PolarDB PostgreSQL版（兼容...
通过使用数据传输服务DTS（Data Transmission Service），您可以实现自建PostgreSQL迁移至 PolarDB PostgreSQL版（兼容Oracle）集群。前提条件 已创建目标 PolarDB PostgreSQL版（兼容Oracle）集群，详情请参见 创建PolarDB PostgreSQL版...
自建PostgreSQL迁移至RDS PostgreSQL
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将自建PostgreSQL迁移至RDS PostgreSQL。DTS支持结构迁移、全量数据迁移和增量数据迁移，同时使用这三种迁移类型可以实现在自建应用不停服的情况下，平滑地完成自建...
MySQL
本文为您介绍如何使用MySQL连接器。背景信息 MySQL连接器支持所有兼容MySQL协议的数据库，包括RDS MySQL、PolarDB for MySQL或者自建MySQL。重要 建议使用本连接器，而不要采用RDS MySQL连接器，后续我们将下线连接器中的云数据库RDS ...
使用DTS将自建PostgreSQL迁移至RDS PostgreSQL
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将自建PostgreSQL迁移至RDS PostgreSQL。DTS支持结构迁移、全量数据迁移和增量数据迁移，同时使用这三种迁移类型可以实现在自建应用不停服的情况下，平滑地完成自建...
云数据库Redis间的迁移
本文介绍如何使用数据传输服务DTS（Data Transmission Service，简称DTS），实现 云数据库Redis 间的迁移。前提条件 已创建源和目标 云数据库Redis。说明 源和目标 云数据库Redis 的创建方式，请参见 创建Redis实例。支持的版本，请参见 ...
云数据库Redis实例间单向数据迁移
增量迁移会根据使用时长产生费用（与迁移的数据量无关），更多信息请参见 计费项。说明 为保障正常执行增量迁移，建议您关闭源库复制输出缓冲区的限制，设置方法：连接源库，执行 CONFIG SET client-output-buffer-limit 'slave 0 0 0'。...
备份大规模文件系统
添加完备份数据源，需要新建备份计划进行数据备份任务。本文介绍新建备份计划的操作步骤。备份计划创建后，云备份按照备份间隔周期性进行备份。前提条件 已开通阿里云 云备份 服务。开通 云备份 不收取任何费用，使用 云备份 的备份功能将...
通过整库迁移配置集成任务
如需将全量历史数据写入对应的不同分区，可在单次同步后使用SQL任务处理写入目标表相应分区，或者选择每日同步增量数据，然后进行补数据操作补全历史分区。数据过滤 来源库非 MaxCompute 每日同步时的过滤条件：如配置了 ds=${bizdate}，...
数据集成侧同步任务配置
背景信息 数据集成基于源端数据库与目标端数据库类型为您提供丰富的数据同步任务，同步类型包括：整库离线同步（一次性全量同步、周期性全量同步、离线全增量同步、一次性增量同步、周期性增量同步）、一键实时同步（一次性全量同步，实时...
功能概述
SQL查询 使用控制台 使用SDK 使用JDBC JDBC连接表格存储 通过Hibernate使用 通过MyBatis使用 使用Go语言驱动 通道服务 表格存储 提供了增量、全量、增量加全量三种类型的分布式数据实时消费通道，可以实现对表中历史存量和新增数据的消费...
跨云账号迁移云数据库Redis实例
本文介绍如何使用数据传输服务DTS（Data ...是否限制增量迁移速率 您也可以根据实际情况，选择是否对增量迁移任务进行限速设置（设置 每秒增量迁移的行数RPS 和 每秒增量迁移的数据量(MB)BPS），以缓解目标库的压力。说明 仅当 迁移类型...
SLS的OSS投递数据源
本文介绍如何通过向导创建SLS的OSS投递数据源发现任务，自动发现您当前区域下所有的Logstore投递到OSS的日志数据（包括新增的投递到OSS的日志数据，以及增量的分区及数据），并自动创建DLA库表映射到投递的OSS日志数据上。前提条件 当前...
PolarDB MySQL版同步至AnalyticDB MySQL 3.0
使用数据传输服务DTS（Data Transmission Service），可以帮助您将 PolarDB MySQL版 集群同步至 云原生数据仓库AnalyticDB MySQL版 3.0，帮助您快速构建企业内部BI、交互查询、实时报表等系统。前提条件 已创建源 PolarDB MySQL版 集群，...
Delta Lake参数
本文介绍一些Delta中比较重要的参数。Delta的设置参数分为三类：Spark SQL设置，即设置SQL运行时的参数。运行时参数，即可以在Session中动态设置的参数，以 spark.databricks.delta.前缀开头。非运行时参数，只能够在Spark的配置文件中配置...
文件存储CPFS（NFS协议）备份
您可以使用 云备份 备份文件存储CPFS（NFS协议）的数据，并在数据丢失或损坏时及时恢复。本文介绍使用本地NAS方式备份CPFS的操作方法。前提条件 已创建文件存储CPFS，并已获取挂载地址（例如 file-system-id.region.cpfs.aliyuncs....
通过整库迁移配置集成任务
如需将全量历史数据写入对应的不同分区，可在单次同步后使用SQL任务处理写入目标表相应分区，或者选择每日同步增量数据，然后进行补数据操作补全历史分区。数据过滤 来源库非 HIve、MaxCompute 每日同步时的过滤条件：如配置了 ds=${...
新功能发布记录
数据库代理 数据库代理计费说明 自动扩缩容优化 针对存储空间的自动扩容机制进行了优化升级：支持客户根据实际业务需求自定义存储空间自动扩容步长。引入扩容上限提示与告警功能。展示系统对存储空间使用情况的监控频率。支持查看自动扩容...
同步时源库为PostgreSQL的注意事项及限制
如为增量同步任务，DTS要求源数据库的WAL日志保存24小时以上，如为全量同步和增量同步任务，DTS要求源数据库的WAL日志至少保留7天以上（您可在全量同步完成后将WAL日志保存时间设置为24小时以上），否则DTS可能因无法获取WAL日志而导致任务...
- 产品推荐
- 这些文档可能帮助您