查看数据同步项目的详情
运行中：表示数据同步项目在运行中，您可以查看数据同步的运行计划和当前进度，并在操作列进行相应操作。修改中：表示数据同步项目正在被修改同步对象。合并中：表示被修改同步对象的数据同步项目与修改同步对象任务进行合并的过程。已暂停...
2021年
PolarDB-X 2.0同步至Elasticsearch 2021年7月 类别 功能描述 相关文档 新增 自建PostgreSQL间的双向同步，RDS PostgreSQL间的双向同步（新版控制台）。说明 目前仅支持在华东1（杭州）、华东2（上海）、华北1（青岛）地域配置。RDS ...
数据同步方案概览
为简化数据同步的操作，建议在配置数据同步任务时，同时勾选 库表结构同步 和 全量同步。增量数据同步 同步任务固定支持增量数据同步，将源库产生的增量数据实时同步至目标库。同步拓扑说明 请参见 数据同步拓扑介绍。同步方案概览 DTS支持...
下载和导入同步对象配置
重要 数据库至数据库的数据同步项目中，仅选择 指定对象 方式时，支持导入对象。导入对象配置 数据传输支持通过导入 CSV 文件的方式进行设置行过滤条件、设置过滤列和设置分片列等操作。您可以下载已有项目的对象配置信息或 CSV 文件模板，...
申请跨境数据同步权限
数据传输服务DTS（Data Transmission Service）默认仅支持非跨境的数据同步任务，若您需要创建跨境（跨国家或地区）的数据同步任务，需要申请开通跨境同步的权限。例如，创建从中国内地到非中国内地地域的同步任务时，需要申请跨境同步的...
数据引入概述
Dataphin支持通过数据集成和数据同步的方式，将业务数据源的数据引入Dataphin平台。背景信息 如果您是在 2020年4月之后 购买的Dataphin，则数据同步能力通过数据集成功能实现（即系统 不再提供数据同步的功能入口）。数据集成为您提供简单...
数据引入概述
Dataphin支持通过数据集成和数据同步的方式，将业务数据源的数据引入Dataphin平台。背景信息 如果您是在 2020年4月之后 购买的Dataphin，则数据同步能力通过数据集成功能实现（即系统 不再提供数据同步的功能入口）。数据集成为您提供简单...
购买数据同步项目
本文为您介绍如何购买云数据库 OceanBase 数据传输服务提供的数据同步项目。背景信息 目前数据同步项目仅支持预付费模式，即包年包月计费模式。您可以根据本文操作购买相应类型的数据同步项目后，再对项目进行具体配置和管理。数据同步项目...
数据同步概述
Dataphin支持通过数据同步的方式，将业务数据源的数据引入Dataphin平台。背景说明 如果您是在 2020年4月之后 购买的Dataphin，则数据同步能力通过数据集成功能实现（即系统 不再提供数据同步的功能入口）。数据集成为您提供简单高效、安全...
数据同步概述
Dataphin支持通过数据同步的方式，将业务数据源的数据引入Dataphin平台。背景说明 如果您是在 2020年4月之后 购买的Dataphin，则数据同步能力通过数据集成功能实现（即系统 不再提供数据同步的功能入口）。数据集成为您提供简单高效、安全...
操作流程
本文介绍数据同步的操作流程。流程图 流程说明 流程 说明 配置数据源 配置数据同步的源端和目标端。数据同步的源端，是数据同步任务的起点。数据同步目标端是同步的终点，支持自定义创建目标端。同步元数据 获取、更新源端和目标端的物理表...
操作流程
本文介绍数据同步的操作流程。流程图 流程说明 流程 说明 配置数据源 配置数据同步的源端和目标端。数据同步的源端，是数据同步任务的起点。数据同步目标端是同步的终点，支持自定义创建目标端。同步元数据 获取、更新源端和目标端的物理表...
批量操作数据同步项目
不同状态的数据同步项目支持不同的批量操作。数据同步项目的状态 支持的批量操作 未配置 无 未启动 批量启动、批量修改告警配置 运行中 批量暂停、批量修改告警配置 修改中 批量修改告警配置 合并中 批量修改告警配置 已暂停 批量恢复、...
结束数据同步项目
使用限制 数据传输支持结束处于 已暂停、失败 和 已完成 状态的数据同步项目。操作步骤 项目结束后，仍保留当前项目的配置信息，您可以根据需要选择清空项目配置后重新配置。详情请参见 清空项目配置。登录 OceanBase 管理控制台。在左侧...
通过一键建仓同步至数仓版
您可以通过一键建仓将PolarDB MySQL实例中的数据同步到 AnalyticDB MySQL 集群中，快速创建PolarDB MySQL数据仓库。适用范围 一键创建数据仓库仅适用于 AnalyticDB MySQL版 数仓版（3.0）集群。前提条件 已创建PolarDB MySQL集群。更多信息...
通过一键建仓同步至数仓版
您可以在 AnalyticDB MySQL版 控制台上通过一键建仓将一个或多个RDS MySQL实例中的数据同步到 AnalyticDB MySQL 集群中，快速创建RDS MySQL数据仓库。适用范围 一键创建数据仓库仅适用于 AnalyticDB MySQL版 数仓版（3.0）集群。前提条件 ...
通过DTS采集数据
通过阿里数据传输中的数据同步（DTS），将RDS的数据实时传输至DataHub中。创建DataHub项目。登录 DataHub控制台。在 项目管理 中，选择区域，本案例选择 华东1 区。单击 创建Project，输入 名称 和 描述，创建一个DataHub项目。本案例的...
数据集成概述
数据集成是基于Dataphin构建的简单高效的数据同步平台，致力于提供具有强大的数据预处理能力、丰富的异构数据源之间数据高速稳定的同步能力。背景信息 面对各行各业对大数据的应用，数据集成会有很多的诉求，包括能够简单高效的配置大量...
获取物理表
数据同步支持获取、更新当前云计算资源下最新物理表及元数据Meta信息，以便进行数据源之间的数据同步。本文介绍如何在数据同步中获取物理表。前提条件 已准备好相应的数据源，具体操作，请参见 新建数据源。操作步骤 登录 数据资源平台控制...
获取物理表
数据同步支持获取、更新当前云计算资源下最新物理表及元数据Meta信息，以便进行数据源之间的数据同步。本文介绍如何在数据同步中获取物理表。前提条件 已准备好相应的数据源，具体操作，请参见 新建数据源。操作步骤 登录企业数据智能平台...
更改 Topic
适用场景 创建数据库至消息队列的数据同步项目时，数据传输支持您在选择需要同步的 Topic 类型后，通过 更改 Topic 功能重新选择 Topic 名称。操作步骤 将数据同步项目配置至 选择同步对象 步骤。详情请参见相应类型的 数据同步 项目文档。...
使用DTS同步RDS MySQL数据到AnalyticDB MySQL 2.0
背景信息 数据传输（Data Transmission）DTS的数据同步功能旨在帮助用户实现两个数据源之间的数据实时同步。数据同步功能可应用于异地多活、数据异地灾备、本地数据灾备、数据异地多活、跨境数据同步、查询与报表分流、云BI及实时数据仓库...
数据集成
DataWorks数据集成支持复杂网络环境下的数据同步，您可在数据开发（DataStudio）界面直接 创建离线同步节点，用于离线（批量）数据周期性同步；实时同步任务运维，用于单表或整库增量数据实时同步。本文为您介绍数据同步的相关内容。背景...
创建同步OSS
准备OSS Bucket DataHub支持将数据同步到对象存储OSS中，在创建同步任务前，用户首先需要在OSS管控台创建OSS Bucket，作为DataHub数据同步的目标Bucket。2.服务关联角色授权 用户配置同步任务时，账号可以选择使用 AccessId/AccessKey 静态...
移除同步对象
DTS支持在数据同步的过程中移除同步对象，无需重新配置同步任务，以在降低对业务影响的情况下变更同步对象。本文将介绍移除同步对象的操作流程。重要 本文为旧版控制台的操作流程，若您使用的是新版控制台，操作流程请参见 修改同步对象。...
列过滤
详情请参见相应类型的 数据同步 项目文档。选择同步对象和映射方式后，在 选择同步范围 区域右侧的 目标端对象 列表中，鼠标悬停至目标对象，单击显示的 设置。在 设置 对话框的 选择列 区域，勾选您需要同步的列。重要 全选或不勾选任何列...
数据库库表重命名
说明 多表聚合功能主要用于将 DRDS、MyCat 等分库分表的数据同步至目标端的同一张表。使用限制 数据传输仅支持配置数据迁移或数据同步项目时，在设置选择迁移/同步对象步骤执行重命名操作。一旦启动数据迁移或数据同步项目，请勿再执行重...
新建 PostgreSQL 数据源
用户名 用于数据迁移或数据同步的 RDS PostgreSQL 实例用户名称。密码 数据库用户的密码。Database Name RDS PostgreSQL 数据库的名称。说明 当数据源作为源端时，数据迁移或数据同步项目仅支持选择指定 Database Name 下的迁移或同步对象...
数据上云场景
数据库数据同步 数据库的数据同步到MaxCompute需要根据数据库的类型和同步策略来选择相应的工具。离线批量的数据库数据同步：可以选择DataWorks，支持的数据库种类丰富，包括MySQL、SQL Server、PostgreSQL等，详情请参见 通过向导模式配置...
数据传输作业：数据集成
实时同步 DataWorks提供的实时数据同步功能，使用单表或整库同步方式，将源端数据库中部分或全部表的数据变化实时同步至MaxCompute中，实现MaxCompute实时保持和源库的数据对应。一个实时同步任务支持多个转换插件进行数据清洗，并支持多个...
BigQuery数据源
BigQuery数据源为您提供读取BigQuery的功能，方便您后续可以通过向导模式和脚本模式配置数据同步任务。本文为您介绍DataWorks的BigQuery数据同步能力支持情况。...数据同步系统会启动并发任务进行数据同步，以提高数据同步的效能。否 无
场景：配置增量数据离线同步任务
离线同步任务支持您通过配置类似的数据过滤功能来决定同步全量数据还是增量数据，配置过滤条件时，将只同步满足过滤条件的数据。同时，过滤条件可以结合调度参数使用，实现过滤条件随任务调度时间的动态变化，进而实现增量数据的同步。该...
概览
AnalyticDB PostgreSQL版 提供多种数据迁移方案，可满足不同的数据同步或迁移的业务需求，您可以在不影响业务的情况下，平滑地与各种类型的数据库实例进行迁移或数据同步。迁移数据到AnalyticDB PostgreSQL版 迁移类型 文档 简介 是否支持...
新功能发布记录
用户指南 Topic操作 DataHub服务管理角色 创建OSS/OTS/FC的数据同步时，选择STS鉴权方式，则会自动创建DataHub服务管理角色（之前为页面上手动授权）数据同步 DataHub服务关联角色 Schema新建时支持添加注释 创建Scheme表结构支持添加字段...
离线同步数据质量排查
背景信息 讲述数据集成数据同步的原理机制，理解数据同步的过程，进而对数据同步的执行效果有判断能力，判断数据同步效果具体包括：数据同步的数据量、目标端数据实际数量等。同步原理 DataWorks数据集成的同步任务在执行时称之为一个Job，...
新增同步对象
DTS支持在数据同步的过程中新增同步对象，无需重新配置同步任务，以在降低对业务影响的情况下变更同步对象。本文将介绍新增同步对象的操作流程。重要 本文为旧版控制台的操作流程，若您使用的是新版控制台，操作流程请参见 修改同步对象。...
批量新增离线数据同步任务
数据同步支持离线同步任务的批量创建，并支持一键启动多个上云任务，实现全量任务自动建表。本文以同步MySQL数据源到MaxCompute目标端为例，介绍如何批量新增离线数据同步任务。前提条件 已存在对应数据源，具体操作，请参见 新建数据源。...
批量新增离线数据同步任务
数据同步支持离线同步任务的批量创建，并支持一键启动多个上云任务，实现全量任务自动建表。本文以同步MySQL数据源到MaxCompute目标端为例，介绍如何批量新增离线数据同步任务。前提条件 已存在对应数据源，具体操作，请参见 新建数据源。...
配置同步任务中的数据来源和去向
表 选择分析型数据库MySQL版中的一张表，将SQLServer中的数据同步至该表中。导入模式 根据分析型数据库MySQL版中表的更新方式设置导入模式，本例为实时导入。字段映射配置信息：重要 注意列与列之间映射的字段类型是否有做数据兼容。配置项...
新建 Oracle 数据源
用户名 用于数据迁移或数据同步的 Oracle 数据库用户名称。建议您为迁移或同步项目创建单独的数据库用户。密码 数据库用户的密码。Schema Name Oracle 数据库的 Schema 名称。说明 如果您配置了 Schema Name，当数据源作为源端时，数据迁移...
- 产品推荐
- 这些文档可能帮助您