数据迁移操作指导
背景知识 迁移方案概览 介绍数据迁移功能支持的数据库、数据库版本和迁移类型。异构数据库间的数据类型映射关系 由于不同的数据库支持的数据类型不一样，数据类型无法完全对应。DTS在执行结构迁移时，会根据目标库支持的数据类型进行类型...
Teradata应用迁移至AnalyticDB PostgreSQL
历史数据迁移，首先从TD数据库按规定分隔符及字符编码将历史数据导成文本文件，存放于 AnalyticDB PostgreSQL 数据库网络相通的ECS服务器本地磁盘或云存储OSS上，确保 AnalyticDB PostgreSQL 数据库通过gpfdist协议的外部表后 AnalyticDB ...
DTS数据迁移过程中在预检查阶段目标数据库权限检查...
不同类型数据库和不同的数据迁移类型所需的权限不同，详情请参见 迁移方案概览。当您的数据迁移任务在结构迁移阶段或全量数据迁移阶段，出现 迁移失败 的提示时，您可以使用DTS的在线修复功能手动修复该任务，详情请参见 修复迁移失败的...
任务编排
本文介绍如何使用 数据管理DMS 任务编排的单实例SQL节点，将源表中6个月前的数据（历史数据）迁移（归档）至目标表中，并删除源表中已迁移的数据。应用场景 DMS 的任务编排功能提供了强大的自动化编排和调度能力，满足数据同步、数据归档、...
DTS数据迁移过程中在预检查阶段源库权限检查失败
不同类型数据库和不同的数据迁移类型所需的权限不同，详情请参见 迁移方案概览。当您的数据迁移任务在结构迁移阶段或全量数据迁移阶段，出现 迁移失败 的提示时，您可以使用DTS的在线修复功能手动修复该任务，详情请参见 修复迁移失败的...
淘宝万亿级交易订单背后的存储引擎
基于X-Engine引擎的历史订单数据库方案 交易订单系统在在线库和历史库分离的架构下迭代了十年时间，很多业务代码对这套分离架构做了兼容，考虑到对业务代码改造以及迁移的风险，我们在初期延续了分离架构，只是将原有HBase集群替换成...
数据迁移方案概览
源为自建MySQL或RDS MySQL的迁移方案 源为PolarDB MySQL版的迁移方案 源为PolarDB PostgreSQL版（兼容Oracle）的迁移方案 源为PolarDB-X的迁移方案 源为OceanBase（MySQL）的迁移方案 源为Oracle的迁移方案 源为自建PostgreSQL或RDS ...
通过DTS导入数据
说明 DTS数据同步通常包含存量数据的迁移和增量数据的实时同步，数据迁移通常用于存量历史数据的迁移。详细的区别介绍请参考 常见问题。单机 创建同步任务，配置源库及目标库信息。类别 配置 说明 任务信息 任务名称 DTS会自动生成一个任务...
数据库改造迁移
源为自建MySQL或RDS MySQL的迁移方案 源为RDS MariaDB的迁移方案 源为RDS PPAS的迁移方案 源为PolarDB MySQL的迁移方案 源为PolarDB O引擎的迁移方案 源为PolarDB-X的迁移方案 源为PolarDB PostgreSQL的迁移方案 源为MaxCompute的迁移方案 ...
数据迁移和同步方案概览
云数据库ClickHouse提供了多种数据迁移和同步方案，可满足不同业务场景下数据库的数据迁移和同步需求。使用场景 数据源 文档链接 从Kafka同步 Kafka 从Kafka同步 从Flink导入 Flink 从JDBC connector导入 从Flink SQL导入 从大数据导入/...
迁移方案概览
源为自建MySQL或RDS MySQL的迁移方案 源为MariaDB的迁移方案 源为RDS PPAS的迁移方案 源为PolarDB MySQL版的迁移方案 源为PolarDB PostgreSQL版（兼容Oracle）的迁移方案 源为PolarDB-X的迁移方案 源为PolarDB PostgreSQL版的迁移方案 源为...
ECS实例自建数据库间迁移
其他类型数据库的迁移方案，请参见 迁移方案概览。参数名称 参数值 数据库类型 源ECS实例上自建数据库的类型。本示例中，数据库类型为 MySQL。接入方式 根据源库的部署位置进行选择，本示例中选择有公网IP的 ECS自建数据库。实例地区 源ECS...
使用DTS迁移副本集架构的自建MongoDB数据库上云
DTS支持全量数据迁移和增量数据迁移，同时使用这两种迁移类型可以实现在不停服的情况下，平滑地完成数据库的迁移上云。除本方法外，您也可以 使用MongoDB工具将自建数据库迁移至副本集实例。更多数据迁移或数据同步场景的解决方案，请参见 ...
使用DTS迁移副本集架构的自建MongoDB数据库上云
DTS支持全量数据迁移和增量数据迁移，同时使用这两种迁移类型可以实现在不停服的情况下，平滑地完成数据库的迁移上云。除本方法外，您也可以 使用MongoDB工具将自建数据库迁移至副本集实例。更多数据迁移或数据同步场景的解决方案，请参见 ...
本地自建数据库迁移到ECS
其他类型数据库的迁移方案，请参见 迁移方案概览。参数名称 参数值 数据库类型 本地数据库的类型。在本示例中，数据库类型为 MySQL。接入方式 有公网IP的自建数据库。选择 公网IP。实例地区 本地数据库所在的地域。本示例中，地域选择 华东...
使用DTS迁移单节点架构的自建MongoDB数据库上云
前提条件 自建MongoDB和云数据库MongoDB支持的版本，请参见 迁移方案概览。建议云数据库MongoDB的存储空间比自建MongoDB数据库占用的存储空间大10%。注意事项 单节点架构的自建MongoDB数据库默认不支持开启oplog，如果将单节点配置成“只有...
使用DTS迁移单节点架构的自建MongoDB数据库上云
前提条件 自建MongoDB和云数据库MongoDB支持的版本，请参见 迁移方案概览。建议云数据库MongoDB的存储空间比自建MongoDB数据库占用的存储空间大10%。注意事项 单节点架构的自建MongoDB数据库默认不支持开启oplog，如果将单节点配置成“只有...
使用DTS迁移分片集群架构的自建MongoDB数据库上云
前提条件 自建MongoDB和云数据库MongoDB支持的版本，请参见 迁移方案概览。确保目标分片集群实例中的Shard节点具备充足的存储空间。说明 例如自建数据库中有三个Shard节点，其中第二个Shard节点占用的存储空间最多（500GB），那么分片集群...
使用DTS迁移分片集群架构的自建MongoDB数据库上云
前提条件 自建MongoDB和云数据库MongoDB支持的版本，请参见 迁移方案概览。确保目标分片集群实例中的Shard节点具备充足的存储空间。说明 例如自建数据库中有三个Shard节点，其中第二个Shard节点占用的存储空间最多（500GB），那么分片集群...
MMA概述
数据迁移原理 Hive数据迁移原理 Hive数据迁移包含通过Hive UDTF迁移数据到MaxCompute、通过OSS迁移Hive数据到MaxCompute，本文为您介绍两种数据迁移方式的原理。通过Hive UDTF迁移数据到MaxCompute。该场景通过Hive的分布式能⼒，实现Hive...
2020年
迁移方案概览 支持将云原生分布式数据库PolarDB-X（原DRDS）中基于私有RDS实例创建的数据库作为同步的源库或目标库。同步方案概览 2020年5月 支持从TiDB增量迁移至RDS MySQL、PolarDB MySQL或自建MySQL数据库。从自建TiDB增量迁移至RDS ...
政务云迁移实践
结构化数据迁移：常见的结构化数据迁移为数据库迁移，结构化数据迁移需考虑底层平台，可能需要进行转换才能导入。非结构化数据迁移：常见的非结构化数据迁移为视频、照片等通用文件数据迁移。非结构化数据只要在云端找到合适的存储架构就...
入仓解决方案
源为自建Redis或云数据库Tair/Redis的迁移方案 源为Db2 for LUW的迁移方案 源为Db2 for i（AS/400）的迁移方案 源为Teradata的迁移方案 源为自建HBase的迁移方案 跨阿里云账号实例间迁移 数据迁移和数据同步的区别是什么？对比项 数据迁移 ...
支持的数据库
数据同步 数据同步功能帮助您实现数据源之间的数据实时同步，适用于数据异地多活、数据异地灾备、本地数据灾备、跨境数据同步、查询与报表分流、云BI及实时数据仓库等多种业务场景。同步支持的数据库、版本和同步类型以及配置文档，请参见...
自建Greenplum迁移到AnalyticDB PostgreSQL版
采购AnalyticDB PostgreSQL版测试实例，验证迁移方案（包含数据迁移验证和应用迁移验证）。采购AnalyticDB PostgreSQL版生产实例，迁移自建Greenplum集群生产库。将业务切换到AnalyticDB PostgreSQL版生产实例，验证业务。注意事项 目前仅...
从自建PostgreSQL（10.1~13版本）增量迁移至RDS ...
DTS支持结构迁移、全量数据迁移和增量数据迁移，同时使用这三种迁移类型可以实现在自建应用不停服的情况下，平滑地完成数据库迁移。本文介绍自建PostgreSQL增量迁移至RDS PostgreSQL的配置方式。前提条件 自建PostgreSQL的数据库版本为10.1...
Serverless模式
您的历史数据无需再迁移到其他存储介质上，让数据分析更简单、高效、低成本，一站式解决金融、互联网等行业快速增长的数据分析需求。对高吞吐写入场景和高性能跑批业务进行了设计优化，同时提供了弹性伸缩能力，适合业务数据量大、并具有...
数据迁移流程
数据传输提供数据迁移功能，帮助您实现同构或异构数据源之间的数据迁移。适用于数据库升级、跨实例数据迁移、数据库拆分、扩容等业务场景。您可以参考以下流程进行迁移前的准备工作、以及购买、配置和管理数据迁移项目。完成准备工作。数据...
启动和暂停数据迁移项目
启动数据迁移项目 配置数据迁移项目时，如果在预检查完成后仅保存该数据迁移项目，未进行启动，则需要在迁移项目列表中手动启动数据迁移项目。登录 OceanBase 管理控制台。在左侧导航栏，单击 数据传输>数据迁移。在 数据迁移 页面，单击未...
Kafka Partition迁移策略说明
在配置迁移到Kafka的数据迁移任务时，为提升迁移的性能，您可以调整Kafka Partition（分区）迁移策略，例如根据Hash结果将数据迁移至不同的Partition。Hash算法 DTS采用Java默认的hashcode算法来计算Hash值。配置方法 您需要在配置数据迁移...
数据迁移常见计费问题
DTS数据迁移只对增量迁移的正常运行时间计费，结构迁移及全量数据迁移免费。当数据迁移任务处于未配置、未启动、结构迁移中、全量迁移中、失败及完成状态不计费。数据迁移按照增量数据迁移的正常运行时间计费，不同规格单价参考 产品定价。
引用和清空数据迁移项目配置
本文为您介绍如何引用和清空已有数据迁移项目的配置。引用项目配置 重要 目前处于 未配置 状态的数据迁移项目支持 引用配置 操作。登录 OceanBase 管理控制台。在左侧导航栏，单击 数据传输>数据迁移。在 数据迁移 页面，单击未配置的目标...
结束和释放数据迁移项目
本文为您介绍如何结束和释放不再需要维护源端和目标端的数据迁移项目。结束数据迁移项目 结束数据迁移项目后，数据传输仍保留当前项目的源端、目标端、迁移对象、监控和告警等配置信息。您可以根据业务需求，选择清空项目配置后重新配置...
背景信息
本教程讲解如何将阿里云对象存储OSS的数据迁移至LocalFS。概述 阿里云在线迁移服务是阿里云提供的存储产品数据通道。使用在线迁移服务，您可以将第三方数据轻松迁移至阿里云对象存储OSS，也可以在LocalFS与OSS之间、LocalFS之间和对象存储...
迁移示例
本文为您介绍MaxCompute相关迁移案例，为您执行数据迁移操作提供指导。本文档已为您提供相关数据迁移最佳实践，请参见 数据迁移。
查看数据迁移进度
在数据迁移任务执行的过程中，您通过控制台查看结构迁移、全量数据迁移或增量数据迁移的执行情况和具体进度。前提条件 已启动数据迁移任务。操作步骤 登录 数据传输控制台。说明 若数据传输控制台自动跳转至数据管理DMS控制台，您可以在...
准备用于数据迁移的数据库账号
全量数据迁移：待迁移对象的SELECT权限。增量数据迁移：待迁移对象的SELECT权限。REPLICATION CLIENT、REPLICATION SLAVE、SHOW VIEW。建库建表的权限，以允许DTS创建库dts，用于记录迁移期间的心跳数据。为自建MySQL创建账号并设置binlog ...
数据迁移、同步和恢复区别
数据迁移、同步和恢复的区别如下：数据迁移和恢复的区别 数据迁移和恢复都可以将数据复制到新实例，但是它们之间还有一定的区别：数据迁移主要用于上云迁移，通过数据传输服务DTS将本地数据库、ECS上的自建数据库或第三方云数据库迁移至...
数据迁移、同步和恢复区别
数据迁移、同步和恢复的区别如下：数据迁移和恢复的区别 数据迁移和恢复都可以将数据复制到新实例，但是它们之间还有一定的区别：数据迁移主要用于上云迁移，通过数据传输服务DTS将本地数据库、ECS上的自建数据库或第三方云数据库迁移至...
数据迁移、同步和恢复区别
数据迁移、同步和恢复的区别如下：数据迁移和恢复的区别 数据迁移和恢复都可以将数据复制到新实例，但是它们之间还有一定的区别：数据迁移主要用于上云迁移，通过数据传输服务DTS将本地数据库、ECS上的自建数据库或第三方云数据库迁移至...
- 产品推荐
- 这些文档可能帮助您