准备工作
本文介绍数据迁移之前的准备工作。步骤一：连通网络 NAS文件系统之间进行数据迁移时，需要迁移服务可以同时访问源NAS和目的NAS。因此，您需要确保通过同一个阿里云专有网络VPC可以同时访问两个NAS。注意事项 当源数据地址或目的数据地址为...
EMR Kafka磁盘故障运维
注意事项 注意限流：分区数据迁移将产生较大的数据迁移流量，需要对流量进行限制以避免对正常业务产生影响。迁移时长：如果需要迁移的数据较多，相应的迁移时长也会加大。限流阈值：应根据磁盘IO能力、正常业务流量来评估迁移时的限流阈值...
客户案例
价值体现 通过MMA工具，15天完成400TB+历史数据迁移，同时保证了迁移的准确性，让客户拥有平滑高效的上云体验。基于飞天大数据平台产品DataWorks+MaxCompute大大提高了数据业务的开发效率，构建大润发的数据中台体系。新金融行业：某互联网...
概述
EMR数据开发于2022年2月21日停止功能更新，2023年9月30日停止全面支持。如果您在2022年2月21日21点前未使用过数据开发功能，推荐您通过EMR Workflow进行...您也可以迁移到大数据开发治理平台DataWorks，详情请参见 EMR数据开发停止更新公告。
数据迁移
本文为您介绍数据迁移的最佳实践，包含将其他业务平台的业务数据或日志数据迁移至MaxCompute，或将MaxCompute的数据迁移至其它业务平台。背景信息 传统关系型数据库不适合处理海量数据，如果您的数据存放在传统的关系型数据库且数据量庞大...
迁移MySQL或Doris数据到StarRocks
通过MySQL协议的外部表进行同步，在目标集群创建目标表，在源集群创建外部表，将数据插入外部表实现数据迁移。适用场景 适用于单表数据迁移的场景。如果表数量大，则操作会比较繁琐，耗时较高。操作步骤 创建StarRocks外部表。CREATE ...
Hadoop集群迁移至DataLake集群
数据迁移 在新集群创建完成后，根据新旧集群不同的存储方式，提供以下迁移方式，以确保旧集群数据能够顺利且准确地迁移到新集群中。旧集群存储 新平台存储 迁移方式 OSS OSS 无需迁移数据。OSS OSS-HDFS 使用 JindoDistCp使用说明 工具进行...
迁移ClickHouse数据到StarRocks
通过JDBC方式，在目标集群创建目标表，在源集群创建外部表，将数据插入外部表实现数据迁移。适用场景 适用于单表数据迁移的场景。如果表数量大，则操作会比较繁琐，耗时较高。操作步骤 创建JDBC资源。create external resource ck_jdbc ...
EMR元数据迁移DLF最佳实践
通过EMR+DLF数据湖方案，可以为企业提供数据湖内的统一的元数据管理，统一的权限管理，支持多源数据入湖以及一站式数据探索的能力。...参考资料 最佳实践详细步骤（包括环境搭建），参考：EMR元数据迁移数据湖DLF最佳实践
概述
数据迁移：数据迁移属于一次性任务，迁移完成后即可释放项目资源。您可以通过数据迁移功能，实现同构或异构数据源之间的数据迁移，适用于数据库升级、跨实例数据迁移、数据库拆分、扩容等业务场景。数据迁移项目是数据迁移功能的基本单元。...
从自建MySQL迁移至PolarDB-X
DTS在执行全量数据迁移时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升，在数据库性能较差、规格较低或业务量较大的情况下（例如源库有大量慢SQL、存在无主键表或目标库存在死锁等），可能会加重数据库压力，甚至导致数据...
从自建MySQL迁移至RDS实例
注意事项 DTS在执行全量数据迁移时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升，在数据库性能较差、规格较低或业务量较大的情况下（例如源库有大量慢SQL、存在无主键表或目标库存在死锁等），可能会加重数据库压力，...
HoloStudio一键迁移至DataStudio
数据开发迁移 我们会将HoloStudio数据开发中的目录及其文件按照默认迁移策略一同迁移至DataStudio（数据开发）的调度业务流程中，调度业务流程详情请参见 创建业务流程。迁移策略：HoloStudio数据开发中已设置调度的任务不用迁移，未设置...
从自建TiDB增量迁移至RDS MySQL
注意事项 DTS在执行全量数据迁移时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升，在数据库性能较差、规格较低或业务量较大的情况下（例如源库有大量慢SQL、存在无主键表或目标库存在死锁等），可能会加重数据库压力，...
从通过专线、VPN网关或智能接入网关接入...迁移至RDS实例
注意事项 DTS在执行全量数据迁移时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升，在数据库性能较差、规格较低或业务量较大的情况下（例如源库有大量慢SQL、存在无主键表或目标库存在死锁等），可能会加重数据库压力，...
从通过专线、VPN网关或智能接入网关接入...迁移至RDS实例
注意事项 DTS在执行全量数据迁移时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升，在数据库性能较差、规格较低或业务量较大的情况下（例如源库有大量慢SQL、存在无主键表或目标库存在死锁等），可能会加重数据库压力，...
通过专线、VPN网关或智能接...迁移至其他账号下的RDS实例
注意事项 DTS在执行全量数据迁移时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升，在数据库性能较差、规格较低或业务量较大的情况下（例如源库有大量慢SQL、存在无主键表或目标库存在死锁等），可能会加重数据库压力，...
通过专线、VPN网关或智能接...迁移至其他账号下的RDS实例
注意事项 DTS在执行全量数据迁移时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升，在数据库性能较差、规格较低或业务量较大的情况下（例如源库有大量慢SQL、存在无主键表或目标库存在死锁等），可能会加重数据库压力，...
名词解释
迁移任务 迁移任务在云迁移中心（CMH）中指代在各个迁移工具中的任务引用，真实的数据迁移并不是发生在云迁移中心，而是发生在诸如 服务器迁移中心（SMC），数据传输（DTS）等迁移工具中，云迁移中心（CMH）同步到迁移组大盘进行展示。
迁移EMR项目至DataWorks
背景信息 DataWorks为您提供了以下两种方式，将EMR集群下的工作流（节点和调度配置）、手动任务、资源、数据源迁移至DataWorks工作空间中：方式一：通过DataWorks迁移助手导出EMR项目并导入至DataWorks 方式二：通过工具打包EMR项目，再...
升级内核大版本
本文介绍如何通过集群间的数据迁移升级内核大版本。前提条件 源集群和目标集群均为社区兼容版集群。源集群和目标集群已具备数据库账号和密码。源集群和目标集群的副本需一致。源集群和目标集群需在同一地域，且使用相同的VPC。源集群和目标...
迁移Oracle数据至MaxCompute最佳实践
本文为您介绍如何通过DataWorks的数据集成功能，迁移Oracle数据至MaxCompute。前提条件 准备DataWorks环境 开通MaxCompute。创建工作空间（本文以简单模式的工作空间为例）。在DataWorks上创建业务流程。详情请参见 创建业务流程。准备...
使用ossimport迁移数据
对于大规模的数据迁移，请使用分布式模式。此需求需要使用ossimport分布式配置进行数据迁移。说明 您也可以使用在线迁移服务进行数据的迁移，迁移过程更加简单，详情请参见 在线迁移服务。准备工作 开通OSS，并创建华东1（杭州）地域的存储...
PolarDB MySQL版迁移至云数据库SelectDB版
为实时保持数据一致性，建议选择结构迁移、全量数据迁移和增量数据迁移。其他限制 不支持迁移源 PolarDB MySQL版 只读节点。目前只支持将数据迁移到SelectDB实例的Unique引擎表。在数据迁移期间，请勿在目标SelectDB实例中新建集群，否则会...
从Amazon Aurora MySQL迁移至PolarDB MySQL版
注意事项 DTS在执行全量数据迁移时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升，在数据库性能较差、规格较低或业务量较大的情况下（例如源库有大量慢SQL、存在无主键表或目标库存在死锁等），可能会加重数据库压力，...
RDS MySQL迁移至云数据库SelectDB版
为实时保持数据一致性，建议选择结构迁移、全量数据迁移和增量数据迁移。其他限制 目前只支持将数据迁移到SelectDB实例的Unique引擎表。在数据迁移期间，请勿在目标SelectDB实例中新建集群，否则会导致任务失败。由于SelectDB实例仅支持以...
通过日志服务迁移日志数据至MaxCompute
本文为您介绍如何通过日志服务的直接投递功能迁移日志数据至MaxCompute。前提条件 执行本操作的账号为主账号。已开通日志服务，详情请参见 开通日志服务。背景信息 日志服务提供将实时采集的日志数据投递至MaxCompute的功能。如果启用该...
迁移助手与迁云服务
DataWorks迁移助手支持将开源调度引擎的作业迁移至DataWorks，支持作业跨云、跨Region、跨账号迁移，实现DataWorks作业快速克隆部署，同时DataWorks团队联合大数据专家服务团队，上线迁云服务，帮助您快速实现数据与任务的上云。...
从Amazon Aurora MySQL迁移至PolarDB MySQL版
注意事项 DTS在执行全量数据迁移时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升，在数据库性能较差、规格较低或业务量较大的情况下（例如源库有大量慢SQL、存在无主键表或目标库存在死锁等），可能会加重数据库压力，...
迁移Oracle数据至MaxCompute最佳实践
本文为您介绍如何通过DataWorks的数据集成功能，迁移Oracle数据至MaxCompute。前提条件 准备DataWorks环境 开通MaxCompute。创建工作空间（本文以简单模式的工作空间为例）。在DataWorks上创建业务流程。详情请参见 创建业务流程。准备...
从Amazon Aurora MySQL迁移至阿里云
注意事项 DTS在执行全量数据迁移时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升，在数据库性能较差、规格较低或业务量较大的情况下（例如源库有大量慢SQL、存在无主键表或目标库存在死锁等），可能会加重数据库压力，...
EMR数据开发停止更新公告
作为一站式大数据开发治理平台，DataWorks沉淀阿里巴巴十多年大数据建设方法论，为客户完成从入湖、建模、开发、调度、治理、安全等全链路数据湖开发治理能力，帮助客户提升数据的应用效率。迁移流程 阿里云DataWorks on EMR团队提供了完善...
DataWorks HoloStudio下线公告
尊敬的DataWorks用户：为给您提供一致...如您仍未手动迁移文件，平台将按照 默认迁移逻辑，将HoloStudio中的开发成果自动迁移至数据开发（DataStudio）。联系我们 如您存在相关疑问，请扫码加入DataWorks公共服务钉钉群进行反馈，二维码如下：
产品简介
跨地域迁移支持服务 面向云上用户提供阿里云公有云、金融云中国区域同一账号跨地域的DataWorks调度作业和MaxCompute数据迁移方案支持服务。（仅限公共云）AI算法专家服务 AI算法建模咨询 针对用户提供算法架构方案，数据梳理和建模方案规划...
使用CLONE TABLE实现同地域MaxCompute跨项目数据迁移
本文为您介绍如何通过CLONE TABLE功能实现同Region的MaxCompute项目数据迁移，包含两种使用场景：同Region同云账号内不同项目的数据迁移和同Region不同云账号间的项目数据迁移。CLONE TABLE功能介绍 CLONE TABLE功能可以高效地将源表中的...
RDS MySQL实例变配时长受哪些因素影响？
存储类型 是否涉及跨机迁移 影响因素 补充说明 本地盘存储 是 全量数据大小 全量数据的大小会影响数据迁移的时长，同时迁移的速度受备份速度、网络带宽的影响。Redo Log大小 当Redo Log较大时，会导致实际备份数据量超出预估。此情况下，...
RDS MySQL实例变配时长受哪些因素影响？
存储类型 是否涉及跨机迁移 影响因素 补充说明 本地盘存储 是 全量数据大小 全量数据的大小会影响数据迁移的时长，同时迁移的速度受备份速度、网络带宽的影响。Redo Log大小 当Redo Log较大时，会导致实际备份数据量超出预估。此情况下，...
业务迁移大盘
迁移组创建 迁移组定义 在云迁移中心（CMH）中，迁移组是一个非常重要的概念，特指具备一定业务属性的一组资源，它们在真实的业务系统中可以是一个应用，可以是一组应用，甚至是一个大数据集群。迁移组代表着一个云迁移项目最小单位的迁移...
迁移ECS自建MySQL数据库至MaxCompute
本文为您介绍如何使用独享数据集成资源，将您在ECS上自建的MySQL数据库中的数据，迁移到MaxCompute。前提条件 已拥有至少一个绑定专有网络VPC的ECS（请勿使用经典网络），并在ECS上安装好MySQL数据库，数据库中已创建好用户和测试数据。...
JSON数据从MongoDB迁移至MaxCompute
本文为您介绍如何通过DataWorks的数据集成功能，将从MongoDB提取的JSON字段迁移至MaxCompute。前提条件 开通MaxCompute。在DataWorks上完成创建业务流程，本例使用DataWorks简单模式。详情请参见 创建业务流程。在MongoDB上准备测试数据 ...
- 产品推荐
- 这些文档可能帮助您