背景信息
本教程讲解如何将阿里云对象存储OSS的数据迁移至LocalFS。概述 阿里云在线迁移服务是阿里云提供的存储产品数据通道。使用在线迁移服务，您可以将第三方数据轻松迁移至阿里云对象存储OSS，也可以在LocalFS与OSS之间、LocalFS之间和对象存储...
自定义配置 DDL/DML
如果需要同步的表涉及不支持的 DDL 类型，数据迁移或数据同步项目可能会中断并造成数据问题，且无法恢复。请勿在结构迁移/结构同步、全量迁移/全量同步阶段执行库或者表结构变更的 DDL 操作，否则可能导致数据迁移或数据同步项目中断。操作...
查看数据迁移进度
在数据迁移任务执行的过程中，您通过控制台查看结构迁移、全量数据迁移或增量数据迁移的执行情况和具体进度。前提条件 已启动数据迁移任务。操作步骤 登录 数据传输控制台。说明 若数据传输控制台自动跳转至数据管理DMS控制台，您可以在...
过滤待迁移数据
该功能可应用于数据的定期迁移、拆分数据表等多种应用场景。功能限制 仅支持过滤当前表的字段，不支持跨表过滤。如有需要，您可以在多个表中分别填写过滤条件。操作步骤 说明 新版控制台的操作步骤，请参见 设置过滤条件。配置数据迁移任务...
聚合支付：Ping+
PolarDB-X 专注解决海量数据存储、超高并发吞吐、大表瓶颈以及复杂计算效率等数据库瓶颈问题，历经各届天猫双十一及阿里云各行业客户业务的考验，助力企业加速完成业务数字化转型。本文介绍Ping+如何通过 PolarDB-X 应对业务挑战。所属行业...
Amazon Redshift数据迁移至MaxCompute
登录 OSS管理控制台，创建保存迁移数据的Bucket，详情请参见 控制台创建存储空间。创建RAM用户并授予相关权限。登录 RAM访问控制台，创建RAM用户，详情请参见 创建RAM用户。选中新创建的用户登录名称，单击 添加权限，为新创建的RAM用户...
迁移实施
步骤四：校验数据 迁移服务仅负责数据的迁移，无法保证数据的一致性和完整性。迁移任务完成后，请您全量校验迁移的数据，务必自行做好源端和目的端数据一致性校验。警告 请您务必在迁移任务完成后，校验目的端迁移数据。您在删除源数据前，...
功能发布记录 2022年之前
同时，实时同步已经自动支持源端增加列时，目标端接收同步数据的表也会增加相应列。2021.05.25 全部地域。实时同步数据至 AnalyticDB for MySQL 3.0 开放消息服务（Open Message）开启公测。DataWorks为您提供了开放消息能力。您可以在...
生态集成
云原生数据仓库AnalyticDB PostgreSQL版 具备完善和开放的生态系统，支持无缝对接业界以及阿里云生态的数据管理工具，BI报表可视化工具，ETL工具，数据迁移工具，同时可以与业界流行的流式处理系统，日志类系统，大数据类系统，传统数仓及...
2023年
SkewJoin Hint可以通过自动或手动方式获取两张表的热点key，分别计算热点数据和非热点数据的Join结果并合并，加快Join的执行速度。SKEWJOIN HINT 2023年11月更新记录 时间 特性 类别 描述 产品文档 2023-11-24 新增迁移服务（MMA）新说明 ...
Teradata迁移至云原生数据仓库 AnalyticDB PostgreSQL...
由于全量数据迁移会并发执行INSERT操作，导致目标数据库的表产生碎片，因此全量迁移完成后目标数据库的表存储空间会比源实例的表存储空间大。请确认DTS对数据类型为FLOAT或DOUBLE的列的迁移精度是否符合业务预期。DTS会通过 ROUND(COLUMN,...
数据迁移、同步和恢复区别
数据迁移、同步和恢复的区别如下：数据迁移和恢复的区别 数据迁移和恢复都可以将数据复制到新实例，但是它们之间还有一定的区别：数据迁移主要用于上云迁移，通过数据传输服务DTS将本地数据库、ECS上的自建数据库或第三方云数据库迁移至...
数据迁移、同步和恢复区别
数据迁移、同步和恢复的区别如下：数据迁移和恢复的区别 数据迁移和恢复都可以将数据复制到新实例，但是它们之间还有一定的区别：数据迁移主要用于上云迁移，通过数据传输服务DTS将本地数据库、ECS上的自建数据库或第三方云数据库迁移至...
数据迁移、同步和恢复区别
数据迁移、同步和恢复的区别如下：数据迁移和恢复的区别 数据迁移和恢复都可以将数据复制到新实例，但是它们之间还有一定的区别：数据迁移主要用于上云迁移，通过数据传输服务DTS将本地数据库、ECS上的自建数据库或第三方云数据库迁移至...
数据迁移、同步和恢复区别
数据迁移、同步和恢复的区别如下：数据迁移和恢复的区别 数据迁移和恢复都可以将数据复制到新实例，但是它们之间还有一定的区别：数据迁移主要用于上云迁移，通过数据传输服务DTS将本地数据库、ECS上的自建数据库或第三方云数据库迁移至...
启动和暂停数据迁移项目
启动数据迁移项目 配置数据迁移项目时，如果在预检查完成后仅保存该数据迁移项目，未进行启动，则需要在迁移项目列表中手动启动数据迁移项目。登录 OceanBase 管理控制台。在左侧导航栏，单击 数据传输>数据迁移。在 数据迁移 页面，单击未...
结束和释放数据迁移项目
结束数据迁移项目 结束数据迁移项目后，数据传输仍保留当前项目的源端、目标端、迁移对象、监控和告警等配置信息。您可以根据业务需求，选择清空项目配置后重新配置或者释放当前项目。重要 数据传输支持结束处于 已暂停、失败 和 已完成 ...
迁移实施
步骤四：校验数据 迁移服务仅负责数据的迁移，无法保证数据的一致性和完整性。迁移任务完成后，请您全量校验迁移的数据，务必自行做好源端和目的端数据一致性校验。警告 请您务必在迁移任务完成后，校验目的端迁移数据。您在删除源数据前，...
迁移实施
步骤四：校验数据 迁移服务仅负责数据的迁移，无法保证数据的一致性和完整性。迁移任务完成后，请您全量校验迁移的数据，务必自行做好源端和目的端数据一致性校验。警告 请您务必在迁移任务完成后，校验目的端迁移数据。您在删除源数据前，...
DataWorks模块使用说明
使用流程概览：参考文档：数据集成概述 数据建模与开发 子模块：数据建模 功能说明：数据建模是全链路数据治理的第一步，沉淀阿里巴巴数据中台建模方法论，从数仓规划、数据标准、维度建模、数据指标四个方面，以业务视角对业务的数据进行...
迁移实施
步骤四：校验数据 迁移服务仅负责数据的迁移，无法保证数据的一致性和完整性。迁移任务完成后，请您全量校验迁移的数据，务必自行做好源端和目的端数据一致性校验。警告 请您务必在迁移任务完成后，校验目的端迁移数据。您在删除源数据前，...
迁移实施
步骤四：校验数据 迁移服务仅负责数据的迁移，无法保证数据的一致性和完整性。迁移任务完成后，请您全量校验迁移的数据，务必自行做好源端和目的端数据一致性校验。警告 请您务必在迁移任务完成后，校验目的端迁移数据。您在删除源数据前，...
客户案例
客户简介 公司的第一代数据湖是基于Hadoop+OSS搭建的，同时引入的数据中台的执行引擎和存储是 MaxCompute，两套异构的执行引擎带来存储冗余、元数据不统一、权限不统一、湖仓计算不能自由流动的问题。客户需求 如架构图所示，MaxCompute和...
迁移实施
步骤四：校验数据 迁移服务仅负责数据的迁移，无法保证数据的一致性和完整性。迁移任务完成后，请您全量校验迁移的数据，务必自行做好源端和目的端数据一致性校验。警告 请您务必在迁移任务完成后，校验目的端迁移数据。您在删除源数据前，...
迁移实施
步骤四：校验数据 迁移服务仅负责数据的迁移，无法保证数据的一致性和完整性。迁移任务完成后，请您全量校验迁移的数据，务必自行做好源端和目的端数据一致性校验。警告 请您务必在迁移任务完成后，校验目的端迁移数据。您在删除源数据前，...
迁移实施
步骤四：校验数据 迁移服务仅负责数据的迁移，无法保证数据的一致性和完整性。迁移任务完成后，请您全量校验迁移的数据，务必自行做好源端和目的端数据一致性校验。警告 请您务必在迁移任务完成后，校验目的端迁移数据。您在删除源数据前，...
迁移实施
步骤四：校验数据 迁移服务仅负责数据的迁移，无法保证数据的一致性和完整性。迁移任务完成后，请您全量校验迁移的数据，务必自行做好源端和目的端数据一致性校验。警告 请您务必在迁移任务完成后，校验目的端迁移数据。您在删除源数据前，...
迁移实施
步骤四：校验数据 迁移服务仅负责数据的迁移，无法保证数据的一致性和完整性。迁移任务完成后，请您全量校验迁移的数据，务必自行做好源端和目的端数据一致性校验。警告 请您务必在迁移任务完成后，校验目的端迁移数据。您在删除源数据前，...
迁移实施
步骤四：校验数据 迁移服务仅负责数据的迁移，无法保证数据的一致性和完整性。迁移任务完成后，请您全量校验迁移的数据，务必自行做好源端和目的端数据一致性校验。警告 请您务必在迁移任务完成后，校验目的端迁移数据。您在删除源数据前，...
迁移实施
步骤四：校验数据 迁移服务仅负责数据的迁移，无法保证数据的一致性和完整性。迁移任务完成后，请您全量校验迁移的数据，务必自行做好源端和目的端数据一致性校验。警告 请您务必在迁移任务完成后，校验目的端迁移数据。您在删除源数据前，...
迁移实施
步骤四：校验数据 迁移服务仅负责数据的迁移，无法保证数据的一致性和完整性。迁移任务完成后，请您全量校验迁移的数据，务必自行做好源端和目的端数据一致性校验。警告 请您务必在迁移任务完成后，校验目的端迁移数据。您在删除源数据前，...
升级评估
源实例无主键表校验 源PolarDB集群存在没有主键的表，同步数据后可能会导致目标数据库中出现重复数据。您可以通过在源PolarDB集群上通过高权限账号连接数据库，并执行如下SQL，查询没有主键的表：SELECT t1.table_schema,t1.table_name ...
引用和清空数据迁移项目配置
本文为您介绍如何引用和清空已有数据迁移项目的配置。引用项目配置 重要 目前处于 未配置 状态的数据迁移项目支持 引用配置 操作。登录 OceanBase 管理控制台。在左侧导航栏，单击 数据传输>数据迁移。在 数据迁移 页面，单击未配置的目标...
RDS MySQL迁移至MaxCompute
RDS MySQL实例 MySQL自建数据库：有公网IP的自建数据库 ECS上的自建数据库 通过数据库网关接入的自建数据库 通过云企业网CEN接入的自建数据库 通过专线、VPN网关或智能网关接入的自建数据库 说明 本文以RDS MySQL实例为源数据库介绍配置...
使用DTS将华为云分布式缓存服务Redis迁移至阿里云
说明 为保证迁移数据的一致性，建议选择全量数据迁移+增量数据迁移。全量数据迁移暂不收费，增量数据迁移根据链路规格按小时收费。目前 DTS 只支持对Redis实例的整库迁移，只能选择要迁移的库，无法选择部分Key迁移。单击 预检查并启动，...
迁移实施
步骤四：校验数据 迁移服务仅负责数据的迁移，无法保证数据的一致性和完整性。迁移任务完成后，请您全量校验迁移的数据，务必自行做好源端和目的端数据一致性校验。警告 请您务必在迁移任务完成后，校验目的端迁移数据。您在删除源数据前，...
迁移实施
阿里云OSS之间迁移数据的属性说明如下：支持迁移的属性：x-oss-meta-*、LastModifyTime，Content-Type，Cache-Control，Content-Encoding，Content-Disposition、Content-Language、Expires。不支持迁移的属性（包括但不限于）：...
库表列映射
表名映射 在弹出的 编辑表 对话框中，设置该数据表在目标实例中的名称。列名映射 在弹出的 编辑表 对话框中，设置对应的列在目标实例中的名称。说明 在此步骤中，您还可以通过取消对应列的复选框来过滤不需要迁移的列。单击 确定。根据提示...
迁移实施
OSS清单迁移数据的属性说明如下：支持迁移的属性：x-oss-meta-*、LastModifyTime，Content-Type，Cache-Control，Content-Encoding，Content-Disposition、Content-Language、Expires。不支持迁移的属性（包括但不限于）：StorageClass、...
新建 TiDB 数据源
重要 您在 TiDB 数据库中配置的待订阅库表，需要和数据传输的数据迁移项目中配置的库表名保持一致。操作步骤 登录 OceanBase 管理控制台。在左侧导航栏，单击 数据传输>数据源管理。在 数据源列表 页面，单击右上角的 新建数据源。在 新建...
- 产品推荐
- 这些文档可能帮助您