数据传输作业：数据集成
离线同步 离线（批量）的数据通道通过定义数据来源和去向的数据源和数据集，提供一套抽象化的数据抽取插件（Reader）、数据写入插件（Writer），并基于此框架设计一套简化版的中间数据传输格式，从而实现任意结构化、半结构化数据源之间...
通过DTS采集数据
通过阿里数据传输中的数据同步（DTS），将RDS的数据实时传输至DataHub中。创建DataHub项目。登录 DataHub控制台。在 项目管理 中，选择区域，本案例选择 华东1 区。单击 创建Project，输入 名称 和 描述，创建一个DataHub项目。本案例的...
项目管理（新版）
开启：表示该项目默认提交的数据传输任务会使用 数据传输服务资源组 绑定的数据传输服务资源组。关闭：表示该项目默认提交的数据传输任务会使用数据传输服务共享资源组。超级管理员 成员 查看或编辑项目的 super_administrator 角色成员，...
设置告警
数据传输支持对数据迁移和数据同步项目进行监控项的配置。项目创建完成后，您可以对单个项目设置告警监控，也可以选择多个项目进行批量操作。本文以数据迁移项目为例，为您介绍如何设置告警监控。背景信息 告警监控功能是数据传输重要的运...
新建 PostgreSQL 数据源
本文为您介绍如何在数据传输中新建 PostgreSQL 数据源。前提条件 已创建 RDS PostgreSQL 实例。详情请参见 创建 RDS PostgreSQL 实例。重要 数据传输不支持 Serverless 模式实例和只读实例。操作步骤 登录 OceanBase 管理控制台。在左侧...
购买数据同步项目
本文为您介绍如何购买云数据库 OceanBase 数据传输服务提供的数据同步项目。背景信息 目前数据同步项目仅支持预付费模式，即包年包月计费模式。您可以根据本文操作购买相应类型的数据同步项目后，再对项目进行具体配置和管理。数据同步项目...
如何确认数据是否正常消费
如果数据正常消费，那么数据传输控制台的消费位点就会正常往前走。
新建 ADB 数据源
本文为您介绍如何在数据传输中新建云原生数据仓库 AnalyticDB MySQL 版（简称 ADB）数据源。背景信息 ADB 的基本介绍请参见 基础数据类型。ADB 的建表、分区表和分布表的详情请参见 CREATE TABLE。OceanBase 数据库 MySQL 租户至 ADB 的...
购买数据迁移项目
本文为您介绍如何购买云数据库 OceanBase 数据传输服务提供的数据迁移项目。背景信息 目前数据迁移项目仅支持后付费模式，即按量付费计费模式。当前为限时免费阶段，具体收费时间另行通知。您可以根据本文操作购买相应类型的数据迁移项目后...
新建 DataHub 数据源
本文为您介绍如何在数据传输中新建 DataHub 数据源。操作步骤 登录 OceanBase 管理控制台。在左侧导航栏，单击 数据传输>数据源管理。在 数据源列表 页面，单击右上角的 新建数据源。在 新建数据源 对话框中，选择 数据源类型 为 DataHub。...
公共云与金融云间的数据迁移
本小节介绍如何利用DTS实现将公共云的RDS实例的数据迁移到金融云的RDS实例中。迁移账号创建 在正式迁移之前，需要先在源实例及目标实例中创建迁移账号，不同的数据库类型，要求的迁移账号权限不同，具体权限请参见相关的数据迁移配置文档，...
新建 PolarDB-X 1.0 数据源
本文为您介绍如何在数据传输中新建 PolarDB 数据源。背景信息 PolarDB-X 1.0 是由阿里巴巴自主研发的 PolarDB 分布式版数据库，融合分布式 SQL 引擎和分布式自研存储 X-DB，基于云原生一体化架构设计。PolarDB-X 1.0 可以支撑千万级并发...
批量操作数据同步项目
本文为您介绍如何使用数据传输对数据同步项目进行批量操作。背景信息 数据传输支持在 同步项目列表 页面，对数据同步项目进行批量操作。不同状态的数据同步项目支持不同的批量操作。数据同步项目的状态 支持的批量操作 未配置 无 未启动 ...
新建 MySQL 数据源
本文为您介绍如何在数据传输新建 MySQL 数据源。操作步骤 登录 OceanBase 管理控制台。在左侧导航栏，单击 数据传输>数据源管理。在 数据源列表 页面，单击右上角的 新建数据源。在 新建数据源 对话框中，选择 数据源类型 为 MySQL。配置...
新建 Oracle 数据源
本文为您介绍如何在数据传输中新建 Oracle 数据源。操作步骤 登录 OceanBase 管理控制台。在左侧导航栏，单击 数据传输>数据源管理。在 数据源列表 页面，单击右上角的 新建数据源。在 新建数据源 对话框中，选择 数据源类型 为 Oracle。...
新建 PolarDB-X 2.0 数据源
本文为您介绍如何在数据传输中新建 PolarDB-X 2.0 数据源。背景信息 云原生数据库 PolarDB 分布式版（简称 PolarDB-X）是由阿里巴巴自主研发的云原生分布式数据库，为您提供高吞吐、大存储、低延时、易扩展和超高可用的云时代数据库服务。...
产品优势
实时数据传输 多种数据传输方式：基于DTS的实时数据传输，提供数据迁移、数据同步、数据订阅功能，满足不同的传输需求。高性能：支持分布式集成架构，突破单机瓶颈。同时提供限流手段，按需限流保护数据源。运维简单：通过性能监控、端到端...
批量操作数据迁移项目
本文为您介绍如何使用数据传输对数据迁移项目进行批量操作。背景信息 数据传输支持在 迁移项目列表 页面，对数据迁移项目进行批量操作。不同状态的数据迁移项目支持不同的批量操作。数据迁移项目的状态 支持的批量操作 未配置 无 未启动 ...
同步 OceanBase 数据库的数据至 DataHub
数据传输支持字符集配置为 UTF-8 和 GBK 的数据同步。待同步的表名和其中的列名不能包含中文字符。数据传输仅支持迁移库名、表名和列名为 ASCII 码且不包含特殊字符（包括换行、空格，以及.|"'`()=;的对象。数据传输不支持 OceanBase 备库...
新建 OceanBase 数据源
本文为您介绍如何在数据传输中新建 OceanBase 数据源。操作步骤 登录 OceanBase 管理控制台。在左侧导航栏，单击 数据传输>数据源管理。在 数据源列表 页面，单击右上角的 新建数据源。在 新建数据源 对话框中，数据源类型 默认为 ...
通过标签管理数据迁移项目
本文为您介绍数据传输如何通过标签功能实现对数据迁移项目的管理。使用限制 每个数据迁移项目最多支持添加 4 个标签。所有数据迁移项目的标签总数不得超过 100 个。标签的名称是数据传输系统内的唯一标记。用户只能查看并管理当前账号的...
通过标签管理数据同步项目
本文为您介绍数据传输如何通过标签功能实现对数据同步项目的管理。使用限制 每个数据同步项目最多支持添加 4 个标签。所有数据同步项目的标签总数不得超过 100 个。标签的名称是数据传输系统内的唯一标记。用户只能查看并管理当前账号创建...
数据质量：全流程的质量监控
DataWorks的全流程数据质量监控功能为您提供35种预设表级别、...数据质量为您解决以下问题：数据库频繁变更问题 业务频繁变化问题 数据定义问题 业务系统的脏数据问题 系统交互导致质量问题 数据订正引发的问题 数据仓库自身导致的质量问题
配置RDS MySQL间的数据集成任务
本文以配置RDS MySQL间的数据集成任务为例，介绍数据集成任务的配置流程和注意事项。说明 新版DTS控制台暂不支持数据集成功能，您可以在数据管理DMS控制台配置离线集成任务，详情请参见 离线集成概述。支持全量数据迁移的数据源均支持数据...
应用采集
集中收集各应用Agent传输过来的数据，并进行脱敏、加工。应用采集可以完成：采集应用访问的SQL与调用栈信息。收集应用运行性能信息。应用采集不能完成：非Oracle数据库或非Java应用暂不能采集。无数据库请求的监控不到，比如采集周期内未...
使用DTS进行增量迁移时没有同步数据
问题描述 使用阿里云数据传输服务DTS的增量迁移功能时出现延迟，或者使用数据同步功能时很长时间没有同步数据。问题原因 增量迁移没有同步数据的原因如下：目标或者源端实例运行状态异常。源或者目标实例上进程被阻塞。源实例以及目标实例...
修复迁移失败的任务
当您的数据迁移任务在结构迁移阶段或全量数据迁移阶段，出现 迁移失败 的提示时，您可以使用DTS的在线修复功能手动修复该任务。修复结构迁移失败的任务 DTS支持异构数据源之间的迁移，对于一些不支持的数据类型，在进行结构迁移时，如果...
购买流程
数据传输服务DTS（Data Transmission Service）支持先配置再购买和先购买再配置两种创建任务方式。若您需要随用随配，建议您选择先配置再购买的方式；若您需要先锁定财务预算而不需要配置任务，建议您选择先购买再配置的方式。本文介绍数据...
数据库改造迁移
ADAM的数据库改造迁移功能已与数据传输服务DTS的数据迁移功能全面融合，请您前往新版DTS控制台进行迁移操作。迁移方案概览 DTS支持以下迁移方案，您可以根据业务需求单击具体方案，来查看支持的版本、迁移类型和配置步骤。迁移方案的详细...
传输加密
SSL通过使用数字证书和加密算法（如TLS）在Hologres实例和客户端之间建立加密连接，以保护数据传输过程中的机密性和完整性。适用场景 SSL传输加密适用于以下场景：数据库远程访问：当客户端需要从远程位置访问数据库时，SSL传输加密可以...
应用场景
本地IDC/跨云数据库上云迁移 数据传输服务 DTS 支持RDBMS、NoSQL、OLAP等数据源间的数据交互，集数据迁移/订阅/同步于一体，助您构建安全、可扩展、高可用的数据架构。通过数据库网关，可将本地或第三方云的数据库低成本地接入至阿里云。...
应用场景
本地IDC/跨云数据库上云迁移 数据传输服务 DTS 支持RDBMS、NoSQL、OLAP等数据源间的数据交互，集数据迁移/订阅/同步于一体，助您构建安全、可扩展、高可用的数据架构。通过数据库网关，可将本地或第三方云的数据库低成本地接入至阿里云。...
数据传输系统权限策略参考
本文描述数据传输支持的所有系统权限策略及其对应的权限描述，供您授权 RAM 身份时参考。什么是系统权限策略 权限策略是用语法结构描述的一组权限的集合，可以精确地描述被授权的资源集、操作集以及授权条件。阿里云访问控制（RAM）产品...
数据安全
多可用区实例具备更高的容灾能力，同时Lindorm实例可以实现多个可用区之间数据的强一致，也可以在数据最终一致的情况下发出请求，快速返回访问结果，达到高可用和降低读写毛刺的效果，从而提高在线业务的服务质量。详细介绍，请参见 多可用...
云原生内存数据库Tair间的双向同步
数据传输服务DTS（Data Transmission Service）支持Redis企业版（Tair）实例或Tair（云盘版）实例间的双向同步，适用于异地多活、数据容灾等多种应用场景，本文介绍数据同步任务的配置流程。前提条件 已创建源库目标Redis企业版（Tair）...
云数据库Redis间的单向同步
数据传输服务DTS（Data Transmission Service）支持Redis数据库的单向同步，适用于异地多活、数据异地容灾等多种应用场景。本文以Redis实例间的单向数据同步为例，介绍数据同步作业的配置流程。前提条件 已创建目标Redis实例，创建方式，请...
从RDS PostgreSQL同步至云原生数据仓库AnalyticDB ...
数据传输服务DTS（Data Transmission Service）支持将RDS PostgreSQL同步至 云原生数据仓库AnalyticDB PostgreSQL。通过DTS提供的数据同步功能，可以轻松实现数据的流转，将企业数据集中分析。前提条件 RDS PostgreSQL中待同步的数据表必须...
从ECS上的自建Redis同步至云数据库Redis实例
数据传输服务DTS（Data Transmission Service）支持Redis数据库的单向同步，适用于异地多活、数据异地容灾等多种应用场景。本文以ECS上的自建Redis同步至Redis实例为例，介绍数据同步作业的配置流程。警告 完成数据同步作业的配置后，请勿...
RDS MySQL修改字符集（平滑方案）
步骤二 将源实例中表的数据迁移至新的实例 登录 数据传输控制台。说明 若数据传输控制台自动跳转至数据管理DMS控制台，您可以在右下角的 中单击，返回至旧版数据传输控制台。若您登录的是新版数据传输控制台，您可以单击右下角的，返回至旧...
从ECS上的自建Redis同步至Tair实例
数据传输服务DTS（Data Transmission Service）支持从ECS上的自建Redis同步至 云原生内存数据库Tair。警告 完成数据同步作业的配置后，请勿变更源数据库或目标数据库的架构类型，否则会导致数据同步失败。前提条件 已创建源自建Redis实例和...
- 产品推荐
- 这些文档可能帮助您