概述
数据传输是 OceanBase 数据库提供的一种支持同构或异构数据源与 OceanBase 数据库之间进行数据交互的服务，具备在线迁移存量数据和实时同步增量数据的能力。产品功能 数据传输提供可视化的集中管控平台，您只需要进行简单的配置即可实时...
查看数据迁移项目的详情
正向切换是数据迁移必不可少的一个流程，通过正向切换，数据传输可以确保完成了数据正向迁移的相关工作，并且您可以根据业务需求启动反向增量组件。正向切换主要涉及的工作如下：您需要自行确认已完成数据迁移，并等待正向同步延迟被追平。...
购买与使用独享数据传输服务资源组
独享数据传输服务资源组可以提供更高的数据传输速度和更好的网络条件，以减少传输时间并提高效率。本文为您介绍如何购买、使用独享数据传输服务资源组。背景信息 MaxCompute当前在各个地域均为您提供了免费的 公共数据传输服务资源组，为该...
数据传输规格说明
不同的实例规格对应了增量同步的不同 RPS 性能表现，以及建议迁移或同步的最大表对象数量，通过 OceanBase 数据传输服务可以实现数据秒级同步至目标端。但是受限于源端实例的运行负载、传输网络的带宽、网络延时和目标端实例写入性能等多种...
数据集成概述
限速 限速是数据集成同步任务可以达到的传输速度限制。脏数据 脏数据是对于业务没有意义，格式非法或者同步过程中出现异常的数据。单条数据写入目标数据源过程中发生了异常，则此条数据为脏数据。因此只要是写入失败的数据均被归类于脏数据...
迁移 OceanBase 数据库 Oracle 租户的数据至 Oracle ...
本文为您介绍如何使用数据传输迁移 OceanBase 数据库 Oracle 租户的数据至 Oracle 数据库。重要 如果数据迁移项目长期处于非活跃状态（项目状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，项目可能无法恢复。数据传输将主动...
资源观测
数据传输服务 您可以查看数据传输服务共享资源组与包年包月独享资源组的资源使用情况，并根据项目和需要观测的时间区间观测各个指标的使用情况。操作步骤 登录 MaxCompute控制台，在左上角选择地域。在左侧导航栏单击 资源观测。在 资源...
OceanBase 数据库之间的数据迁移
背景信息 您可以在数据传输控制台创建从 OceanBase 数据库迁移数据至 OceanBase 数据库同类型租户的数据迁移项目，通过结构迁移、全量迁移和增量同步，无缝迁移源端数据库中的存量业务数据和增量数据至目标端数据库。前提条件 数据传输已...
配置匹配规则
开启同步 DDL 功能后，当您使用 DDL 语句在源端创建一张新表或者修改一张表结构时，如果对应的表名在迁移/同步对象规则和排除对象规则的差集内，则该 DDL 语句可以被数据传输同步至目标端。库表汇聚场景下：建议您使用导入对象或匹配规则的...
数据库库表重命名
适用场景 默认情况下，被迁移或同步的对象（例如数据库、表等）在源端和目标端的名称相同，您可以通过数据传输提供的对象名称重命名功能，设置被迁移或同步的对象在目标端的名称，实现源端和目标端之间数据库的库名、表名的映射。...
从Oracle迁移应用至阿里云PolarDB全流程指南
数据传输DTS：数据传输服务（Data Transmission Service）DTS支持关系型数据库、NoSQL、大数据（OLAP）等数据源间的数据传输。它是一种集数据迁移、数据订阅及数据实时同步于一体的数据传输服务。数据传输致力于在公共云、混合云场景下，...
传输加密
适用场景 SSL传输加密适用于以下场景：数据库远程访问：当客户端需要从远程位置访问数据库时，SSL传输加密可以提升数据传输过程中的安全性。符合安全合规要求：许多行业标准和法规要求在数据传输过程中使用加密技术，使用SSL传输加密可以...
数据传输服务概述
数据传输服务是MaxCompute数据进出的最重要通道，其中包括适用于批量操作的普通Tunnel和适用于流式写入的Stream Tunnel，同时在所有Region提供免费限量使用的数据传输服务共享资源组，也提供数据传输服务（包年包月）独享资源组，供您采购...
数据传输迁移角色授权
（可选）主账号授予 RAM 用户数据传输迁移角色授权权限 RAM 用户需要具备数据传输迁移角色 AliyunOceanbaseMigrationServiceRolePolicy，才可以正常访问数据传输。如果 RAM 用户未具备该角色，则需要主账号先登录 RAM 控制台，手动给数据...
评估迁移时间与测试传输速度
部分场景中出现的问题原因及处理方式如下所示：数据传输速度小于实际测出的速度时，可能原因及处理方式如下表所示。可能原因 处理方式 源服务器和中转实例处于不同地域或不同国家。跨地域、跨国际的网络传输相比同地域传输有时较慢。测试源...
区块概述
区块可以定义内部外部的数据传输，对内可以封装业务相关的组件样式、组件布局、默认数据（不包含除静态数据和API外的数据源）和蓝图逻辑，对外可定义业务相关的区块数据接口。说明 区块功能为 专业版 及以上版本功能，如果您需要使用此功能...
计费项与计费方式概述
数据传输独享资源费用（包年包月）MaxCompute为所有用户提供免费的 公共数据传输服务资源组，您也可以购买 独享数据传输服务资源组，以独享数据传输服务，可使用更多数据传输并发数，保障资源的独享性的同时提高了输出传输的稳定性。数据...
同步 OceanBase 数据库的数据至 RocketMQ
数据传输的数据同步功能可以帮助您实现 OceanBase 数据库的物理表和 RocketMQ 数据源之间的数据实时同步，扩展消息处理能力。同步 OceanBase 数据库的数据至 RocketMQ 时，两种租户对应的数据格式请参见 数据库传输到文本协议的格式说明。...
数据传输服务（上传）场景与工具
本文为您介绍如何将数据上传至MaxCompute或从MaxCompute下载数据，包括服务连接、SDK、工具和数据导入导出、上云等常见操作。背景信息 MaxCompute提供了多种数据上传下载的...相关文档 关于数据传输服务详情介绍，请参见 数据传输服务概述。
数据传输费用（按时计费）
如果您已购买包年包月规格的独享数据传输服务资源组，并想要在业务高峰期临时扩容部分并发资源满足资源供给，可使用按时计费规格。本文为您介绍按时计费规格的计费说明、使用说明及资源价格。背景信息 MaxCompute支持对数据传输服务的独享...
数据订阅启动SDK报如下的错误“keep alive error”
问题原因 SDK运行的服务器没有公网IP，不能连接数据传输服务的服务器，或者因为订阅通道的消费时间点不在订阅通道的数据范围之内。解决方案 创建公网IP，建立SDK的公网连接，或者重新修改消费位点，具体的修改方法详见 修改订阅通道消费...
如何确认数据是否正常消费
如果数据正常消费，那么数据传输控制台的消费位点就会正常往前走。
报错“不同名账号存在性检查失败”
本文介绍不同名账号存在性检查失败的处理办法。...说明 当前阿里云数据传输产品（DTS）不支持同一实例上多账号配置多迁移任务的模式。解决办法 请登录数据传输产品（DTS）控制台，重新配置任务，确保同一账号发起多个任务。
列过滤
本文为您介绍如何使用数据传输提供的列过滤功能。操作步骤 将数据同步项目配置至 选择同步对象 步骤。详情请参见相应类型的 数据同步 项目文档。选择同步对象和映射方式后，在 选择同步范围 区域右侧的 目标端对象 列表中，鼠标悬停至目标...
数据上云工具
Kettle（Tunnel通道系列）Kettle是一款开源的ETL工具，纯Java实现，可以在Windows、Unix和Linux上运行，提供图形化的操作界面，可以通过拖拽控件的方式，方便地定义数据传输的拓扑。详情请参见 基于Kettle的MaxCompute插件实现数据上云。...
DCDN性能拨测数据参考
阿里云DCDN不定期更新拨测数据，拨测的数据是针对同一个访问资源，通过DCDN和直接访问源站的数据差别，您可以通过数据了解到，DCDN加速的数据效果。拨测数据 拨测时间 2023年03月01日 00:00~2023年03月02日 00:00 拨测工具 博睿数据 源站...
计费常见问题
本文汇总了数据传输服务DTS（Data Transmission Service）计费的常见问题。常见问题 Q：按量付费的计费方式下，手动结束了数据迁移实例或数据同步实例，还会继续收费吗？A：不收费。数据迁移实例仅在增量数据迁移正常运行期间计费（包含...
创建迁移任务时报获取迁移结构失败
问题原因 一般是由于数据传输服务连接不上源Oracle数据库。解决方案 当遇到此问题时，需要在安装Oracle的服务器上执行 netstat-ano 命令，查看Oracle数据库的端口是否配置了内外网IP监听。如果没有配置，那么需要修改Oracle的监听服务，...
使用数据订阅功能传输数据后日期数据格式发生变化
概述 本文主要介绍MySQL中数据类型为Date的数据，通过数据订阅传输数据后，数据格式由 YYYY-MM-DD 格式变化为 YYYY:MM:DD 的原因。详细信息 DTS默认数据存储格式为 YYYY:MM:DD，YYYY-MM-DD 是展现出来的格式，实际...适用于 数据传输服务 DTS
RDS MySQL同步至ClickHouse集群
云数据库ClickHouse是面向联机分析处理的列式数据库，基于大宽表的聚合分析查询性能非常优异，比其他分析型数据库速度快一个数量级，通过数据传输服务DTS（Data Transmission Service），您可以将MySQL数据库（例如自建MySQL或RDS MySQL）...
DTS迁移任务显示锁定中
问题描述 DTS控制台数据迁移页面，迁移任务显示锁定中。问题原因 阿里云账号欠费，同时未及时续费。解决方案 正常续费即可，如何续费DTS请参考如下文档。续费包年包月实例 适用于 数据传输服务 DTS
网络资源
网络资源是指用于节点之间通信和数据传输的硬件和软件资源，除了包括广域网、局域网、交换机、路由器，还包括常用到的专有网络、虚拟交换机、负载均衡、弹性公网、VPN、DNS、CDN等资源。在分布式系统中，网络资源的主要作用是支持节点之间...
应用场景
数据传输服务DTS（Data Transmission Service）支持数据迁移、数据订阅和数据实时同步功能，帮助您实现多种典型应用场景。不停机迁移数据库 传输方式：数据迁移 为了保证数据的一致性，传统的迁移过程需要您在迁移数据时停止向源数据库写入...
RDS MySQL如何实现数据灾备？
RDS MySQL通过数据传输服务（DTS）可以实现主实例和异地灾备实例之间的实时同步。主实例和灾备实例均搭建主备高可用架构，当主实例所在区域发生突发性自然灾害等状况，主实例（Master）和备实例（Slave）均无法连接时，可将异地灾备实例...
订阅通道无法修改消费位点
问题描述 订阅通道无法修改消费位点。问题原因 因为订阅通道还有下游消费。解决方案 登录 DTS控制台 查看消费来源IP，查看是否还有下游SDK在消费数据，如果有，那么需要先停止下游消费后，重新修改消费位点。...适用于 数据传输服务DTS
到期或欠费说明
DTS实例到期或欠费后，数据传输任务将停止服务，如果7天内还未充值成功，系统将释放并删除该任务。警告 实例到期或欠费后有停机风险，系统会通知您，请及时续费或充值，避免对您的服务造成影响。实例计费类型 到期或欠费的影响 包年包月 ...
PolarDB-X 2.0同步至云原生数据仓库 AnalyticDB MySQL...
使用数据传输服务DTS（Data Transmission Service），可以帮助您将 PolarDB-X 2.0 同步至 云原生数据仓库AnalyticDB MySQL版 3.0，帮助您快速构建企业内部BI、交互查询、实时报表等系统。前提条件 已创建源 PolarDB-X 2.0 实例，且兼容...
DTS启动订阅SDK时提示“get guid info failed”
DTS启动订阅SDK时提示“get guid info failed”。问题原因 这是由于您在SDK中设置的订阅通道ID错误导致。解决方案 需要将示例代码中的client.askForGUID替换成您要订阅的订阅通道对应的ID即可。适用于 数据传输服务DTS
迁移任务一直卡在增量数据迁移阶段
概述 本文介绍迁移任务一直卡在增量数据迁移阶段的处理方法。详细信息 增量数据迁移阶段，会进行源实例跟目标实例增量数据实时同步，不会自动结束。建议增量数据迁移无延迟时，业务在目标实例验证通过后，将业务...适用于 数据传输服务 DTS
PolarDB MySQL版同步至AnalyticDB MySQL 3.0
使用数据传输服务DTS（Data Transmission Service），可以帮助您将 PolarDB MySQL版 集群同步至 云原生数据仓库AnalyticDB MySQL版 3.0，帮助您快速构建企业内部BI、交互查询、实时报表等系统。前提条件 已创建源 PolarDB MySQL版 集群，...
- 产品推荐
- 这些文档可能帮助您