SDK正常下载数据过程中突然暂停且不能订阅到数据
问题描述 通过SDK正常下载数据...解决方案 SDK内部设置了8192个Record的缓存空间，如果不调用ackAsConsumed汇报位点，那么这缓存空间数据就不会删除，当缓存满时，就不能拉取新的数据，就会出现SDK暂停不能订阅数据。适用于 数据传输服务DTS
概述
当源库不断有业务写入时，数据传输会在全量数据迁移启动前，启动增量拉取模块，以拉取源实例中的增量更新数据，对其进行解析、封装，并存储至数据传输中。当全量数据迁移完成后，数据传输会启动增量数据回放模块，从增量数据拉取模块中获取...
迁移 Oracle 数据库的数据至 OceanBase 数据库 Oracle...
如果数据迁移项目已启用正向切换，数据传输会根据数据迁移项目的类型，自动删除隐藏列和唯一索引。详情请参见 数据迁移服务隐藏列机制说明。对于 Oracle 数据库至 OceanBase 数据库 Oracle 租户的增量同步，如果有新增的无主键表迁移，数据...
MTU配置说明
在您使用IPsec-VPN时，IPsec协议会对数据包进行加密，加密过程会扩大数据包长度，扩大后的数据包长度可能会超过网络中设置的最大数据传输单元MTU（Maximum Transmission Unit），影响数据包的正常传输。本文介绍如何设置MTU以确保数据包的...
迁移 PolarDB-X 1.0 数据库的数据至 OceanBase 数据库...
数据传输会自动创建 PolarDB-X 1.0 数据库下挂载的 MySQL 数据库至 OceanBase 数据库 MySQL 租户的数据迁移项目，其项目个数取决于 PolarDB-X 1.0 数据库底层的 MySQL 实例个数。建议您使用标签或项目名称作为过滤条件对这些项目进行批量...
数据传输服务概述
常见问题 数据传输服务变慢一般由什么原因导致？受服务构架限制，MaxCompute Tunnel服务在以下几种场景中会出现偶发的请求延迟问题（单次上传、下载10MB数据耗时从秒级增长到分钟级）。共享Tunnel服务资源用满（CPU/网络带宽）持续时间：几...
迁移 MySQL 数据库的数据至 OceanBase 数据库 MySQL ...
迁移类型 描述 结构迁移 结构迁移任务开始后，数据传输会迁移源库中的数据对象定义（表、索引、约束、注释和视图等）至目标端数据库中，并自动过滤临时表。MySQL 数据库至 OceanBase 数据库 MySQL 租户的结构迁移支持自动创建目标端不存在...
迁移 OceanBase 数据库 Oracle 租户的数据至 Oracle ...
如果不满足该要求，数据传输会报错。主键列在源端表中必须存在。目标表中的列，可以存在源端不存在的列。前提条件 数据传输已具备云资源访问权限。详情请参见 数据传输迁移角色授权。已在目标端 Oracle 数据库创建对应的 Schema。已为源端 ...
迁移 OceanBase 数据库 MySQL 租户的数据至 MySQL ...
迁移类型 描述 结构迁移 结构迁移任务开始后，数据传输会迁移源库中的数据对象定义（表、索引、约束、注释和视图等）至目标端数据库中，并自动过滤临时表。全量迁移 全量迁移任务开始后，数据传输会迁移源端库表的存量数据至目标端数据库...
迁移 TiDB 数据库的数据至 OceanBase 数据库 MySQL ...
迁移类型 描述 结构迁移 结构迁移任务开始后，数据传输会迁移源库中的数据对象定义（表、索引、约束、注释和视图等）至目标端数据库中，并自动过滤临时表。全量迁移 全量迁移任务开始后，数据传输会迁移源端库表的存量数据至目标端数据库...
OceanBase 数据库之间的数据迁移
执行索引时，如果目标端 OceanBase 数据库 MySQL 租户遇到 Duplicate key name 报错，或 OceanBase 数据库 Oracle 租户遇到 name is already used by an existing object 报错，数据传输会进行忽略，默认为索引创建成功，不会再重复创建。...
迁移 RDS PostgreSQL 实例的数据至 OceanBase 数据库 ...
执行索引时，如果目标端 OceanBase 数据库 Oracle 租户遇到 name is already used by an existing object 报错，数据传输会进行忽略，默认为索引创建成功，不会再重复创建。允许索引后置的情况下，建议您根据 OceanBase 数据库的硬件条件和...
使用数据传输迁移数据
迁移类型 描述 结构迁移 结构迁移任务开始后，数据传输会迁移源库中的数据对象定义（表、索引、约束、注释和视图等）至目标端数据库中，并自动过滤临时表。MySQL 数据库至 OceanBase 数据库 MySQL 租户的结构迁移支持自动创建目标端不存在...
如何解决全量迁移慢或迁移卡住
问题现象 DTS在全量数据同步或迁移阶段时，可能会出现耗时很久的现象，或者出现任务卡住的迹象。可能原因 源库待同步或迁移的数据量大或无主键。源库创建了多个DTS任务。源或目标库连接异常。例如，数据库设置了白名单、账号权限不足、账号...
数据传输规格说明
本文为您介绍 OceanBase 数据传输服务的规格说明及性能测试情况。注意事项 本文的规格说明参考的是测试数据，仅供您在选择规格时进行参考，不作为产品 SLA（服务等级协议）的评判依据。不同的实例规格对应了增量同步的不同 RPS 性能表现，...
结束和释放数据迁移项目
释放数据迁移项目 释放数据迁移项目后，数据传输会清空当前项目的配置信息，并自动删除该项目，请谨慎操作。重要 数据传输支持释放处于 未配置、未启动 和 已结束 状态的数据迁移项目。登录 OceanBase 管理控制台。在左侧导航栏，单击 数据...
多表归并任务中执行Online DDL操作导致目标库数据丢失
问题描述 在通过DTS进行多表归并任务时，若在源库进行Online DDL操作，对源库的表结构等进行了调整修改，则同步到目标库时，会出现数据丢失的情况。说明 多表归并任务指将不同源库的表进行归并，继而同步或迁移到目标库。例如：当用户配置...
购买流程
数据传输服务DTS（Data Transmission Service）支持先配置再购买和先购买再配置两种创建任务方式。若您需要随用随配，建议您选择先配置再购买的方式；若您需要先锁定财务预算而不需要配置任务，建议您选择先购买再配置的方式。本文介绍数据...
启动和暂停数据同步项目
暂停数据同步项目后，数据传输会中止数据同步项目的调度，此时延迟会实时增长。登录 OceanBase 管理控制台。在左侧导航栏，单击 数据传输>数据同步。在 同步项目列表 页面，单击运行中的目标项目后的 暂停。您也可以在 同步项目列表 页面，...
创建迁移任务时报获取迁移结构失败
问题原因 一般是由于数据传输服务连接不上源Oracle数据库。解决方案 当遇到此问题时，需要在安装Oracle的服务器上执行 netstat-ano 命令，查看Oracle数据库的端口是否配置了内外网IP监听。如果没有配置，那么需要修改Oracle的监听服务，...
启动和暂停数据迁移项目
暂停数据迁移项目后，数据传输会中止编排任务列表中正在运行状态的子任务，并自动终止其后面所有子任务的调度。登录 OceanBase 管理控制台。在左侧导航栏，单击 数据传输>数据迁移。在 数据迁移 页面，单击运行中的目标项目后的 暂停。您也...
购买与使用独享数据传输服务资源组
当您在MaxCompute中需要对大规模数据进行传输且对传输稳定性和延迟有要求时，您可以使用独享数据传输服务资源组。独享数据传输服务资源组可以提供更高的数据传输速度和更好的网络条件，以减少传输时间并提高效率。本文为您介绍如何购买、...
列过滤
本文为您介绍如何使用数据传输提供的列过滤功能。操作步骤 将数据同步项目配置至 选择同步对象 步骤。详情请参见相应类型的 数据同步 项目文档。选择同步对象和映射方式后，在 ...重要 全选或不勾选任何列，数据传输会同步全部列。单击 确定。
同步Redis后出现数据不一致
问题描述 使用数据传输服务（DTS）同步Redis后，出现了源端和目标端数据不一致的现象。问题示例 使用数据传输服务（DTS）同步完Redis后，使用Redis的 info keyspace 命令查看源端和目标端的keys情况，出现源端和目标端数据不一致，且含过期...
数据同步链路规格说明
使用DTS可实现数据秒级同步到目标实例，但受限于源实例的运行负载、传输网络的带宽、网络延时、目标实例写入性能等多种因素的影响，DTS同步任务会出现延迟增大的情况，无法绝对保证秒级延迟。名词解释 规格：数据传输服务为用户提供了不同...
网络资源
网络资源是指用于节点之间通信和数据传输的硬件和软件资源，除了包括广域网、局域网、交换机、路由器，还包括常用到的专有网络、虚拟交换机、负载均衡、弹性公网、VPN、DNS、CDN等资源。在分布式系统中，网络资源的主要作用是支持节点之间...
什么是DTS Serverless实例
DTS Serverless实例是数据传输服务DTS（Data Transmission Service）提供的资源规格可以弹性变化的实例。Serverless实例可以适应不断变化的业务需求，使实例资源能够随业务规模的变化自动调整，从而避免资源浪费和控制运维成本。背景信息 ...
DTS数据迁移过程中在预检查阶段源库权限检查失败
问题描述 阿里云数据传输服务DTS在进行数据迁移过程中，“源库权限检查”检查项预检查失败。问题原因 源数据库的数据库账号没有足够的权限进行数据迁移任务。解决方案 为保障数据迁移任务的顺利执行，DTS在预检查阶段会对数据迁移任务中...
设置告警
数据传输会通过您在云监控平台添加的联系方式发送至接收人，该接收人也需要在云监控平台添加。云监控的详情请参见 什么是云监控。操作步骤 登录 OceanBase 管理控制台。在左侧导航栏，单击 数据传输>数据迁移。如果您需要设置数据同步项目...
配置Serverless实例
本文介绍如何配置数据传输服务DTS（Data Transmission Service）Serverless实例，帮助您创建一个高弹性、低成本、无需手动变配的实例。前提条件 您的目标任务可以配置为Serverless实例。Serverless实例的使用限制和支持的地域，请参见 什么...
添加 OceanBase 数据源的白名单
IP 地址 在 数据传输>新建数据源 对话框中，复制显示的 OceanBase 数据传输服务器的 IP 地址，添加在此处即可。请注意以下规则：支持填写 IP 地址（例如 192.168.0.1）或 IP 段（例如 192.168.0.0/24）。多个 IP 需要用英文逗号（,）分隔。...
DTS数据迁移过程中在预检查阶段目标数据库权限检查...
问题描述 阿里云数据传输服务DTS在进行数据迁移过程中，检查目的数据库的账号权限是否满足迁移要求时，“目的库权限检查”检查项预检查失败。问题原因 目标数据库的账号没有足够的权限进行数据迁移任务。解决方案 为保障数据迁移任务的顺利...
使用限制
在使用云数据传输CDT前，请先了解CDT的使用限制。开通限制 CDT是服务开通型产品，资源创建与账单解耦，仅开通CDT不收取任何费用。资源使用、管理操作由云产品实现，CDT提供统一计费和出账功能。开通CDT后，默认所有的存量实例和新增的按...
使用数据订阅SDK消费数据时报“failed to get master ...
在数据传输控制台，检查对应的订阅通道的消费时间点，一般消费时间点设置太早会没有数据，容易导致报错。详细报错信息如下。0[Thread-1]INFO com.aliyun.drc.clusterclient.partition.PartitionPool - client partition is empty,wait ...
新建 Kafka 数据源
背景信息 数据传输的安全问题，贯穿服务连通性验证、链路创建和数据传输过程。基于 Kafka 服务提供的安全体系，数据传输在数据加密和用户认证上均有一定的支持，以满足绝大部分安全需求。数据传输支持的 Kafka 认证方式包括：GSSAPI GSSAPI...
同步 OceanBase 数据库的数据至 RocketMQ
在 预检查 环节，数据传输会检测和目标端的连接情况。如果预检查报错：您可以在排查并处理问题后，重新执行预检查，直至预检查成功。您也可以单击错误预检查项操作列中的 跳过，会弹出对话框提示您跳过本操作的具体影响，确认可以跳过后，...
DTS预检查时出现schema存在性检查错误处理
问题描述 使用DTS进行RDS的数据迁移时，在预检查时出现 schema存在性检查 错误，如下图所示。问题原因 如错误提示所述，该错误是由于目标库不存在或不匹配导致的。解决方案 您需要在目标RDS实例下先创建与源库同名的目标库。注意事项如下：...
计费常见问题
本文汇总了数据传输服务DTS（Data Transmission Service）计费的常见问题。常见问题 Q：按量付费的计费方式下，手动结束了数据迁移实例或数据同步实例，还会继续收费吗？A：不收费。数据迁移实例仅在增量数据迁移正常运行期间计费（包含...
三个实例相互进行双向同步后出现数据缺失
通过数据传输服务（DTS）进行三个实例间的相互双向同步后，出现数据缺失。本文介绍如何避免这种情况的发生。问题描述 通过DTS配置三个实例之间的双向同步后，发现数据出现缺失。例如下图所示的配置场景：可能原因 双向同步场景的关键在于...
迁移 OceanBase 数据库 Oracle 租户的增量数据至 ...
在 预检查 环节，数据传输会检查数据库用户的读写权限、数据库的网络连接等是否符合要求。全部检查项目均通过后才能启动数据迁移项目。如果预检查报错：您可以在排查并处理问题后，重新执行预检查，直至预检查成功。您也可以单击错误预检查...
- 产品推荐
- 这些文档可能帮助您