通过DataWorks导入数据
DataWorks提供了可视化的数据导入方式，相对于通过外表导入，DataWorks导入的方式更为轻量化，适合数据量相对较小的数据导入场景。本文介绍如何通过DataWorks将RDS MySQL数据导入至 AnalyticDB MySQL版 湖仓版（3.0）或 数仓版（3.0）。...
添加RDS for PostgreSQL数据源
在 我的数据 页签中选择 数据源管理，单击 添加数据。从 类型 列表中，选择 RDS for PostgreSQL。在列表中选择 内网，并选择RDS实例所在的区域。选择内网数据库的网络类型（包括 专有网络 和 经典网络）。专有网络 打开 VPC 开关，进入 ...
配置数据源网络
背景信息 Serverless Spark进程（Driver和Executor）运行在安全容器中，安全容器可以动态挂载用户VPC网络的虚拟网卡，就如同运行在用户VPC网络内的ECS上一样，可以直接访问用户的数据源网络。虚拟网卡的生命周期跟Spark进程的生命周期一致...
迁移 PolarDB-X 1.0 数据库的数据至 OceanBase 数据库...
本文为您介绍如何使用数据传输迁移 PolarDB-X 1.0 数据库的数据至 OceanBase 数据库 MySQL 租户。重要 如果数据迁移项目长期处于非活跃状态（项目状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，项目可能无法恢复。数据传输...
添加RDS for MySQL数据源
在 我的数据 页签中选择 数据源管理，单击 添加数据。从 类型 列表中，选择 RDS for MySQL。在列表中选择 内网，并选择RDS实例所在的区域。选择内网数据库的网络类型（包括 专有网络 和 经典网络）。专有网络 打开 VPC 开关，进入 专有网络...
ClickHouse整库数据离线同步至Hologres
本文以ClickHouse离线同步写入Hologres场景为例，为您介绍如何一次性把ClickHouse整个数据库的数据离线同步至Hologres。使用限制 ClickHouse离线同步仅支持阿里云ClickHouse 20.8、21.8版本。ClickHouse离线同步仅支持使用独享数据集成资源...
添加RDS for SQLServer数据源
在 我的数据 页签中选择 数据源管理，单击 添加数据。从 类型 列表中，选择 RDS for SQLServer。在列表中选择 内网，并选择RDS实例所在的区域。选择内网数据库的网络类型（包括 专有网络 和 经典网络）。专有网络 打开 VPC 开关，进入 专有...
管理数据源
数据源列表 页面为您展示所有已创建的数据源及其基本信息，包括 数据源标识、数据源类型、数据源来源、用户名 和数据源的 创建时间。您可以在操作列单击 测试连接，检查数据库的网络连接情况。以及进行复制、编辑和删除数据源的操作。在 ...
Stage级别诊断结果
上游Stage的数据通过网络传输到当前Stage时存在倾斜。建议 建表时选择合适的分布字段。更多详情，请参见 分布字段合理性诊断。查看上游Stage是否存在Stage输出数据倾斜问题。更多详情，请参见 Stage输出数据倾斜。Stage输出数据倾斜 问题 ...
Kafka单表实时入湖OSS（HUDI）
配置完成后，单击 测试连通性，选择您已经完成与OSS网络联通的数据集成独享资源组，确保连通状态为 可连通，即可实现OSS与对应数据集成独享资源组的网络联通。创建同步任务 进入 数据集成主站，单击 同步任务 进入同步任务页面，在页面中...
概述
通过全球数据库网络的跨地域低延迟同步、跨地域读写分离、本地就近读取等特性，可以确保各地域的应用访问数据库时的延迟小于2秒。异地灾备 不论业务部署在一个或多个地域，都能通过全球数据库网络实现异地容灾。当主集群出现地域级别的故障...
准备工作概览
当您在使用DTS执行数据迁移、数据同步或数据订阅...专有网络 添加DTS服务器的IP地址到自建库的白名单 说明 此场景中，DTS会自动将DTS服务器的IP地址添加到ECS的安全规则中，无需手动添加（集群部署在多个ECS实例的数据库除外）。ECS自建数据库
使用数据传输迁移数据
您可以通过数据迁移功能实时迁移其他数据源的数据至 OceanBase 数据库，以及迁移 OceanBase 数据库的数据至其他数据源。本文以迁移 MySQL 数据库的数据至 OceanBase 数据库为例，介绍如何使用数据传输迁移数据。前提条件 在迁移数据之前，...
常见问题
由于DTS的传输性能受DTS内部、源端和目标端数据库实例的负载、待传输的数据量、DTS实例是否存在增量任务、网络等多种因素影响，所以无法预估DTS任务所需的时间，若对性能有较高要求，建议选择性能上限较大的规格。关于规格的更多信息，请...
新建 ADB 数据源
OceanBase 数据库 MySQL 租户至 ADB 的数据类型映射规则请参见 数据类型映射表格。操作步骤 登录 OceanBase 管理控制台。在左侧导航栏，单击 数据传输>数据源管理。在 数据源列表 页面，单击右上角的 新建数据源。在 新建数据源 对话框中，...
OceanBase 数据库之间的数据迁移
本文为您介绍如何使用数据传输迁移 OceanBase 数据库的数据至 OceanBase 数据库同类型租户中。重要 如果数据迁移项目长期处于非活跃状态（项目状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，项目可能无法恢复。数据传输将...
迁移 PolarDB-X 2.0 数据库的数据至 OceanBase 数据库...
本文为您介绍如何使用数据传输迁移 PolarDB-X 2.0 数据库的数据至 OceanBase 数据库 MySQL 租户。重要 如果数据迁移项目长期处于非活跃状态（项目状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，项目可能无法恢复。数据传输...
迁移 TiDB 数据库的数据至 OceanBase 数据库 MySQL ...
本文为您介绍如何使用数据传输迁移 TiDB 数据库的数据至 OceanBase 数据库 MySQL 租户。重要 如果数据迁移项目长期处于非活跃状态（项目状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，项目可能无法恢复。数据传输将主动释放...
独享资源组
独享资源组使用场景 独享调度资源组使用场景 独享数据集成资源组使用场景 独享资源组网络配置 独享资源组访问VPC环境下数据的前提条件是什么？如何查看数据源的网络环境？添加独享资源组白名单 独享资源组商业化行为 如何对资源组进行续费...
添加RDS for PostgreSQL数据源
本文为您介绍在DataV中添加RDS for PostgreSQL数据源的方法。前提条件 已准备好待添加的RDS for PostgreSQL数据源。通过内网添加数据源操作步骤 登录 DataV控制台。在 工作台 页面，单击 数据准备>...新添加的数据源会自动列在数据源列表中。
采集数据
背景信息 数据集成 是稳定高效、弹性伸缩的数据同步平台，致力于提供复杂网络环境下、丰富的异构数据源之间高速稳定的数据移动及同步能力，提供离线同步、增量同步、全增量数据实时同步等多种同步方案。本教程采用离线同步方案，DataWorks...
新建 MySQL 数据源
建议您为迁移或同步项目创建单独的数据库用户。密码 数据库用户的密码。Database Name MySQL 数据库的名称。说明 如果您配置了 Database Name，当数据源作为源端时，数据迁移项目仅支持选择指定 Database Name 下的迁移对象。备注 数据源的...
一键MaxCompute数据同步节点
访问公网或VPC网络的MySQL数据源，请选择与MySQL数据源网络连通的调度资源组，作为周期调度任务使用的资源组。详情请参见 配置资源组与网络连通。保存并运行节点。在节点编辑页面的顶部菜单栏，单击 图标，保存节点配置。在节点编辑页面的...
新建 Oracle 数据源
建议您为迁移或同步项目创建单独的数据库用户。密码 数据库用户的密码。Schema Name Oracle 数据库的 Schema 名称。说明 如果您配置了 Schema Name，当数据源作为源端时，数据迁移或数据同步项目仅支持选择指定 Schema Name 下的迁移或同步...
添加RDS for MySQL数据源
新添加的数据源会自动列在数据源列表中。通过外网添加数据源操作步骤 登录 DataV控制台。在 工作台 页面，单击 数据准备>数据源，进入 数据源 页面，单击 新建数据源。从 类型 列表中，选择 RDS for MySQL。在列表中选择 外网。如果需要...
采集数据
背景信息 数据集成 是稳定高效、弹性伸缩的数据同步平台，致力于提供复杂网络环境下、丰富的异构数据源之间高速稳定的数据移动及同步能力，提供离线同步、增量同步、全增量数据实时同步等多种同步方案。本教程采用离线同步方案，DataWorks...
迁移 OceanBase 数据库 MySQL 租户的数据至 MySQL ...
本文为您介绍如何使用数据传输迁移 OceanBase 数据库 MySQL 租户的数据至 MySQL 数据库。重要 如果数据迁移项目长期处于非活跃状态（项目状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，项目可能无法恢复。数据传输将主动...
新建 DataHub 数据源
配置好数据源是创建数据迁移或数据同步项目的前提。本文为您介绍如何在数据传输中新建 DataHub 数据源。操作步骤 登录 OceanBase 管理控制台。...单击 测试连接，测试数据传输和数据库的网络连接。待数据源测试连接成功，单击 确定。
迁移 OceanBase 数据库 Oracle 租户的数据至 Oracle ...
本文为您介绍如何使用数据传输迁移 OceanBase 数据库 Oracle 租户的数据至 Oracle 数据库。重要 如果数据迁移项目长期处于非活跃状态（项目状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，项目可能无法恢复。数据传输将主动...
添加RDS for SQLServer数据源
本文为您介绍在DataV中通过内网和外网添加RDS for SQLServer数据源的方法。前提条件 已准备好待添加的RDS for SQLServer数据源。通过内网添加数据源操作步骤 登录 DataV控制台。...新添加的数据源会自动列在数据源列表中。
迁移 MySQL 数据库的数据至 OceanBase 数据库 MySQL ...
本文为您介绍如何使用数据传输迁移 MySQL 数据库的数据至 OceanBase 数据库 MySQL 租户。重要 如果数据迁移项目长期处于非活跃状态（项目状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，项目可能无法恢复。数据传输将主动...
迁移 RDS PostgreSQL 实例的数据至 OceanBase 数据库 ...
本文为您介绍如何使用数据传输迁移 RDS PostgreSQL 实例 的数据至 OceanBase 数据库 Oracle 租户。重要 如果数据迁移项目长期处于非活跃状态（项目状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，项目可能无法恢复。数据传输...
OSS数据离线同步至MaxCompute
配置完成后，单击 测试连通性，选择您已经完成与OSS网络联通的数据集成独享资源组，确保连通状态为 可连通，即可实现OSS与对应数据集成独享资源组的网络联通。新增MaxCompute数据源 新增MaxCompute数据源。详情请参见 创建MaxCompute数据源...
OSS数据离线同步至MaxCompute
配置完成后，单击 测试连通性，选择您已经完成与OSS网络联通的数据集成独享资源组，确保连通状态为 可连通，即可实现OSS与对应数据集成独享资源组的网络联通。新增MaxCompute数据源 新增MaxCompute数据源。详情请参见 创建MaxCompute数据源...
迁移 OceanBase 数据库 Oracle 租户的增量数据至 ...
目标端的数据长度小于源端的数据长度时，可能出现数据截断的情况，导致源端和目标端的数据不一致。创建数据迁移项目时，您仅配置了 增量同步，数据传输要求源端数据库的本地增量日志保存 48 小时以上。支持的源端和目标端实例类型 下表中，...
数据集成侧同步任务配置
同步任务支持的数据源及其配置详情请参见 支持的数据源与读写能力。说明 数据源相关能力介绍详情请参见：数据源概述。已完成数据源环境准备。您可以基于您需要进行的同步配置，在同步任务执行前，授予数据源配置的账号在数据库进行相应操作...
整库离线同步至MaxCompute
同步任务支持的数据源及其配置详情请参见 支持的数据源及同步方案。说明 数据源相关能力介绍详情请参见：数据源概述。已完成数据源环境准备。您可以基于您需要进行的同步配置，在同步任务执行前，授予数据源配置的账号在数据库进行相应操作...
文档修订记录
QueryPublicModelEngine 2023.10.20 新增功能 上传与下载 DataWorks的上传与下载模块，提供了便捷的数据上传功能，支持将多种来源（例如，本地文件、OSS文件）的数据上传至MaxCompute大数据引擎中进行分析处理及相关管理操作，致力于为您...
Echarts 网络图
数据项配置 说明 数据源 组件的数据源中通过 代码编辑 或 可视化编辑 展示了组件所包含的数据字段。也可以修改 数据类型，灵活配置组件数据。数据映射 当您需要自定义图表字段配置时，可以在 数据映射 模块设置不同的字段映射内容，将这些...
同阿里云主账号访问
在进行数据同步前，您需要确保用于执行同步任务的独享数据集成资源组与您将要同步的数据来源端与目的端数据源的网络连通性。本文为您介绍数据源与DataWorks工作空间同阿里云主账号时如何进行网络连通。背景信息 网络连通方案选择取决于数据...
- 产品推荐
- 这些文档可能帮助您