迁移 Oracle 数据库的数据至 OceanBase 数据库 Oracle...
本文为您介绍如何使用数据传输迁移 Oracle 数据库的数据至 OceanBase 数据库 Oracle 租户。重要 如果数据迁移项目长期处于非活跃状态（项目状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，项目可能无法恢复。数据传输将主动...
数据质量：全流程的质量监控
DataWorks的全流程数据质量监控功能为您提供35种预设表级别、...数据质量为您解决以下问题：数据库频繁变更问题 业务频繁变化问题 数据定义问题 业务系统的脏数据问题 系统交互导致质量问题 数据订正引发的问题 数据仓库自身导致的质量问题
配置匹配规则
如果在项目运行过程中新出现库表汇聚的场景，则不会被数据传输拦截，可能出现反向增量无法正确识别库表映射关系，导致数据质量问题。数据传输暂不支持 CREATE DATBASE 的 DDL 语句。如果新建的库名在迁移/同步的匹配规则内，您需要手动在...
迁移 PolarDB-X 2.0 数据库的数据至 OceanBase 数据库...
数据传输仅支持迁移库名、表名和列名为 ASCII 码且不包含特殊字符（包括换行、空格，以及.|"'`()=;的对象。目标端是数据库的情况下，数据传输不支持目标端存在触发器（Trigger）。如果存在，可能导致数据迁移失败。数据迁移过程中，源端...
迁移 RDS PostgreSQL 实例的数据至 OceanBase 数据库 ...
本文为您介绍如何使用数据传输迁移 RDS PostgreSQL 实例 的数据至 OceanBase 数据库 Oracle 租户。重要 如果数据迁移项目长期处于非活跃状态（项目状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，项目可能无法恢复。数据传输...
同步 RDS PostgreSQL 实例的数据至 OceanBase 数据库 ...
前提条件 数据传输已具备云资源访问权限。详情请参见 数据传输迁移角色授权。已为源端 RDS PostgreSQL 实例创建专用于数据同步项目的高权限账号。详情请参见 PostgreSQL 数据源。已为目标端 OceanBase 数据库 Oracle 租户创建专用于数据...
迁移 OceanBase 数据库 Oracle 租户的数据至 Oracle ...
本文为您介绍如何使用数据传输迁移 OceanBase 数据库 Oracle 租户的数据至 Oracle 数据库。重要 如果数据迁移项目长期处于非活跃状态（项目状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，项目可能无法恢复。数据传输将主动...
使用慢日志排查超时问题
慢请求引起的连接超时等问题是影响Redis服务质量的常见问题，云数据库Redis的慢日志系统能够帮助您快速找到慢请求问题发生的位置，定位发出请求的客户端IP，为彻底解决超时问题提供可靠的依据。背景信息 Tair 的慢日志会记录执行时间超过...
使用慢日志排查超时问题
慢请求引起的连接超时等问题是影响Redis服务质量的常见问题，云数据库Redis的慢日志系统能够帮助您快速找到慢请求问题发生的位置，定位发出请求的客户端IP，为彻底解决超时问题提供可靠的依据。功能简介 Redis 的慢日志会记录执行时间超过...
同步 OceanBase 数据库的数据至 RocketMQ
有序性：由于存在并发写入可能导致的无序问题，数据传输确保在分片列的值相同的情况下，用户接收到的消息是有序的。此处的有序是指变更顺序（DML 对于一列的执行顺序）。在 选择列 区域，选择需要同步的列。详情请参见 列过滤。移除/全部...
同步 OceanBase 数据库的数据至 Kafka
有序性：由于存在并发写入可能导致的无序问题，数据传输确保在分片列的值相同的情况下，用户接收到的消息是有序的。此处的有序是指变更顺序（DML 对于一列的执行顺序）。在 选择列 区域，选择需要同步的列。详情请参见 列过滤。移除/全部...
调度集群管理概述
Dataphin支持连接不同调度集群，并将所有集群可用于调度的资源进行统一管理，使每个租户可以使用不同集群的资源用于创建自定义资源组，从而解决跨Region数据传输以及资源隔离等问题。使用限制 当前仅支持基于最新架构部署的客户使用调度...
离线同步并发和限流之间的关系
在一些数据同步场景，脏数据的出现会导致任务同步效率下降，以关系数据库写出为例，默认是执行batch批量写出模式，在遇到脏数据时会退化为单条写出模式（以找出batch批次数据具体哪一条是脏数据，保障正常数据正常写出），但单条写出效率会...
SDK概述
解决添加OSS数据源时部分hadoop命令不可用问题。解决“java.text.ParseException:Unparseable date”问题。优化emr-core支持本地调试运行。兼容老版本的产生的“_$folder$”文件，解释成目录，不再当作普通文件处理。Hadoop和Spark读写OSS...
报错“不同名账号存在性检查失败”
问题描述 预检查包括检测项目“不同名账号存在性检查“，该项目检查出现失败，如下图：可能原因 同一个实例上的迁移同步任务是由多个账号配置的，从而...解决办法 请登录数据传输产品（DTS）控制台，重新配置任务，确保同一账号发起多个任务。
SDK正常下载数据过程中突然暂停且不能订阅到数据
问题描述 通过SDK正常下载数据过程中，突然暂停且不能订阅到数据。问题原因 SDK代码中没有调用ackAsConsumed接口汇报消费位点。解决方案 SDK内部设置了8192个Record的缓存空间，如果不调用ackAsConsumed汇报位点，...适用于 数据传输服务DTS
DTS数据迁移过程中在预检查阶段源库权限检查失败
问题描述 阿里云数据传输服务DTS在进行数据迁移过程中，“源库权限检查”检查项预检查失败。问题原因 源数据库的数据库账号没有足够的权限进行数据迁移任务。解决方案 为保障数据迁移任务的顺利执行，DTS在预检查阶段会对数据迁移任务中...
DTS数据迁移过程中在预检查阶段目标数据库权限检查...
问题描述 阿里云数据传输服务DTS在进行数据迁移过程中，检查目的数据库的账号权限是否满足迁移要求时，“目的库权限检查”检查项预检查失败。问题原因 目标数据库的账号没有足够的权限进行数据迁移任务。解决方案 为保障数据迁移任务的顺利...
三个实例相互进行双向同步后出现数据缺失
通过数据传输服务（DTS）进行三个实例间的相互双向同步后，出现数据缺失。本文介绍如何避免这种情况的发生。问题描述 通过DTS配置三个实例之间的双向同步后，发现数据出现缺失。例如下图所示的配置场景：可能原因 双向同步场景的关键在于...
使用DTS进行增量迁移时没有同步数据
问题描述 使用阿里云数据传输服务DTS的增量迁移功能时出现延迟，或者使用数据同步功能时很长时间没有同步数据。问题原因 增量迁移没有同步数据的原因如下：目标或者源端实例运行状态异常。源或者目标实例上进程被阻塞。源实例以及目标实例...
项目管理（新版）
开启成默认数据传输服务资源组 的值为开启时，该项目默认提交的数据传输服务会自动使用数据传输服务（包年包月）资源组。开启成默认数据传输服务资源组 的值为关闭时，该项目默认提交的数据传输服务会自动使用Default资源组。说明 如果需要...
创建迁移任务时报获取迁移结构失败
问题原因 一般是由于数据传输服务连接不上源Oracle数据库。解决方案 当遇到此问题时，需要在安装Oracle的服务器上执行 netstat-ano 命令，查看Oracle数据库的端口是否配置了内外网IP监听。如果没有配置，那么需要修改Oracle的监听服务，...
同步Redis后出现数据不一致
问题描述 使用数据传输服务（DTS）同步Redis后，出现了源端和目标端数据不一致的现象。问题示例 使用数据传输服务（DTS）同步完Redis后，使用Redis的 info keyspace 命令查看源端和目标端的keys情况，出现源端和目标端数据不一致，且含过期...
DTS预检查时出现schema存在性检查错误处理
问题描述 使用DTS进行RDS的数据迁移时，在预检查时出现 schema存在性检查 错误，如下图所示。问题原因 如错误提示所述，该错误是由于目标库不存在或不匹配导致的。解决方案 您需要在目标RDS实例下先创建与源库同名的...适用于 数据传输服务DTS
使用数据订阅SDK出现“client partition is empty,...
问题描述 数据订阅SDK无法订阅到消息，且客户端一直提示“client partition is empty,wait partition balance”错误。问题原因 客户端报错的原因如下。数据订阅启动比较慢，一般需要几分钟，此时客户端会提示...适用于 数据传输服务 DTS
跨阿里云账号迁移RDS实例
在 购买配置确认 页面，选择 链路规格 并选中 数据传输（按量付费）服务条款。单击 购买并启动，迁移任务正式开始。全量数据迁移 请勿手动结束迁移任务，否则可能导致数据不完整。您只需等待迁移任务完成即可，迁移任务会自动结束。增量...
流式数据通道概述
支持自动创建分区：解决数据同步服务并发创建分区导致的并发抢锁问题。支持增量数据异步聚合（Merge）：提升数据存储效率。MaxCompute流式数据通道服务可以解决流式服务使用批量数据通道写入数据引发的各种问题，优势如下：更优化的数据...
离线同步数据质量排查
本文将为您列举一些常见数据质量方面的场景，方便您排查是否存在符合的场景，根据对应解决方案解决数据同步质量问题。背景信息 讲述数据集成数据同步的原理机制，理解数据同步的过程，进而对数据同步的执行效果有判断能力，判断数据同步...
应用场景
数据传输服务DTS（Data Transmission Service）支持数据迁移、数据订阅和数据实时同步功能，帮助您实现多种典型应用场景。不停机迁移数据库 传输方式：数据迁移 为了保证数据的一致性，传统的迁移过程需要您在迁移数据时停止向源数据库写入...
功能特性
计费项 创建RDS MySQL数据订阅任务 任务管理 DTS任务管理 功能集 功能 功能描述 参考文档 任务管理 任务创建与配置 支持创建多种数据源之间的数据传输任务，且支持先配置再购买和先购买再配置两种创建任务方式。支持的数据库 购买流程 任务...
不同阿里云账号下RDS实例间的数据同步
说明 若数据传输控制台自动跳转至数据管理DMS控制台，您可以在右下角的 中单击，返回至旧版数据传输控制台。在左侧导航栏，单击 数据同步。在 同步作业列表 页面顶部，选择同步的目标实例所属地域。定位至已购买的数据同步实例，单击该实例...
从RDS SQL Server同步至云原生数据仓库AnalyticDB ...
数据传输服务DTS（Data Transmission Service）支持将SQL Server同步至云原生数据仓库AnalyticDB PostgreSQL，帮助您轻松实现数据的流转，集中分析企业数据。前提条件 快速创建RDS SQL Server实例，支持的版本，请参见 同步方案概览。重要 ...
从ECS上的自建MySQL同步至RDS
数据传输服务DTS（Data Transmission Service）支持ECS上的自建MySQL同步至 RDS MySQL 或RDS MySQL Serverless 实例，实现增量数据的实时同步。前提条件 自建MySQL数据库版本为5.1、5.5、5.6、5.7或8.0版本。已创建 RDS MySQL实例 或 ...
查看并管理治理工作台
您可以在治理工作台查看数据质量在校验过程中的出错情况及针对该质量校验问题发起整改、忽略、通知等治理操作，从而实现资产质量从制定计划到实现整改的PDCA完整流程，有效提升数据质量。本文为您介绍如何查看并管理治理工作台。权限说明 ...
PolarDB MySQL版间的单向同步
通过数据传输服务DTS（Data Transmission Service），您可以实现 PolarDB MySQL版 集群间的单向数据同步。前提条件 已购买源和目标 PolarDB MySQL版 集群，详情请参见 购买按量付费集群。支持的数据库版本，请参见 同步方案概览。源 ...
从PolarDB MySQL版同步至RDS MySQL
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将 PolarDB MySQL版 同步至RDS MySQL，实现增量数据的实时同步。前提条件 已购买 PolarDB MySQL版 集群，详情请参见 创建PolarDB MySQL集群。PolarDB MySQL版 集群已开启...
从RDS MySQL同步至PolarDB MySQL版
通过数据传输服务DTS（Data Transmission Service），您可以将RDS MySQL同步至 PolarDB MySQL版。前提条件 已创建 PolarDB MySQL版 集群，详情请参见 购买按量付费集群。注意事项 DTS在执行全量数据初始化时将占用源库和目标库一定的读写...
从通过专线、VPN网关或智能接入网关接入的自建MySQL...
数据传输服务DTS（Data Transmission Service）支持将通过专线、VPN网关或智能接入网关接入的自建MySQL同步至 RDS MySQL 或RDS MySQL Serverless，实现增量数据的实时同步。前提条件 已创建 RDS MySQL实例 或 Serverless实例。自建MySQL...
2019年
本章节介绍了2019年数据传输服务DTS（Data Transmission Service）产品功能和对应的文档动态。更多新功能介绍 详情请参见 数据传输服务产品动态。2019年 发布时间 发布内容 相关文档 2019年12月 支持迁移PostgreSQL 11版本数据库。从自建...
从ECS上的自建MySQL同步至PolarDB MySQL版
通过数据传输服务DTS（Data Transmission Service），您可以将自建的MySQL数据库同步至 PolarDB MySQL版，本文以ECS上的自建MySQL为例介绍配置流程。前提条件 已创建 PolarDB MySQL版 集群，详情请参见 购买按量付费集群。注意事项 DTS在...
- 产品推荐
- 这些文档可能帮助您