数据传输服务概述
数据传输服务是MaxCompute数据进出的最重要通道，其中包括适用于批量操作的普通Tunnel和适用于流式写入的Stream Tunnel，同时在所有Region提供免费限量使用的数据传输服务共享资源组，也提供数据传输服务（包年包月）独享资源组，供您采购...
查询诊断
您也可以根据需求选择按照占用内存、磁盘读取数据量、磁盘读取数据耗时、网络传输数据量、网络传输数据耗时对算子排序以及计算整体比例。算子统计信息介绍如下：名称 说明 算子名称 算子名称与编号，在计划树中唯一。类型ID 算子类型编号。...
购买同步实例
networkType String 否 Intranet 数据传输网络类型，固定取值为 Intranet（专线）。AccountId String 否 12323344*阿里云主账号ID，无需设置，该参数即将下线。DBInstanceCount Integer 否 3 当 SourceEndpoint.InstanceType传入 DRDS时，...
网络资源
数据缓存：对于网络闪断导致的数据传输中断，可以使用数据缓存机制，将数据暂时缓存起来，并在网络恢复后进行重传，确保数据传输的完整性和准确性。重新建连：系统服务要具备重新建立连接的能力，网络闪断后可自动重新建立新连接，恢复通信...
常见问题
数据在传输的过程中，对于MTU即一个数据包的最大字节数是有限制的，例如以太网的MTU是1500字节。如果IP层需要传输数据包，而且数据包的长度超过了MTU，那么IP层就要对数据包进行分片操作，使每一片的长度都小于或等于MTU。如果数据包传送时...
分组聚合查询优化
因为数据已经经过了局部聚合，所以需要网络传输的数据较少，网络压力较小。数据重分布完成后，执行最终聚合，在最终聚合节点，需要把一个分组的值及其聚合状态维护在内存中，直到所有数据处理完成，以确保某个特定的分组值没有新的数据需要...
购买与使用独享数据传输服务资源组
独享数据传输服务资源组可以提供更高的数据传输速度和更好的网络条件，以减少传输时间并提高效率。本文为您介绍如何购买、使用独享数据传输服务资源组。背景信息 MaxCompute当前在各个地域均为您提供了免费的 公共数据传输服务资源组，为该...
数据传输规格说明
本文为您介绍 OceanBase 数据传输服务的规格说明及性能测试情况。注意事项 本文的规格说明参考的是测试数据，仅供您在选择规格时进行参考，不作为产品 SLA（服务等级协议）的评判依据。不同的实例规格对应了增量同步的不同 RPS 性能表现，...
跨云账号迁移云数据库Redis实例
在左侧导航栏，选择 数据传输（DTS）>数据迁移。说明 实际操作可能会因DMS的模式和布局不同，而有所差异。更多信息。请参见 极简模式控制台 和 自定义DMS界面布局与样式。您也可以登录 新版DTS迁移任务的列表页面。在 迁移任务 右侧，选择...
准备工作概览
背景信息 DTS支持将自建的数据库作为数据传输的源库或目标库，在不同的场景下，您需要执行相应的 准备工作，然后在配置任务时选择对应的实例类型。例如待迁移的本地数据库具备公网地址（即数据库服务开放至公网），执行完对应的准备工作后...
新建 PostgreSQL 数据源
本文为您介绍如何在数据传输中新建 PostgreSQL 数据源。前提条件 已创建 RDS PostgreSQL 实例。详情请参见 创建 RDS PostgreSQL 实例。重要 数据传输不支持 Serverless 模式实例和只读实例。操作步骤 登录 OceanBase 管理控制台。在左侧...
查看增量迁移链路状态和性能
功能 说明 增量迁移链路拓扑 增量迁移链路展示链路中各模块间的数据传输情况和网络延迟信息，模块包含：源库、DTS采集模块、DTS缓存模块、DTS写入模块、目标库。相关参数解释如下：BPS：链路中模块间每秒传输的数据量，单位为MB/s。RPS：...
新建 ADB 数据源
本文为您介绍如何在数据传输中新建云原生数据仓库 AnalyticDB MySQL 版（简称 ADB）数据源。背景信息 ADB 的基本介绍请参见 基础数据类型。ADB 的建表、分区表和分布表的详情请参见 CREATE TABLE。OceanBase 数据库 MySQL 租户至 ADB 的...
新建 TiDB 数据源
本文为您介绍如何在数据传输中新建 TiDB 数据源。前提条件 已获取相关数据库的 IP 地址和端口号。已存在用于数据迁移的数据库用户。建议您为数据迁移项目创建一个专属的数据库用户，该用户必须具备相关的数据操作权限。详情请参见 创建 ...
新建 DataHub 数据源
配置好数据源是创建数据迁移或数据同步项目的前提。本文为您介绍如何在数据传输中新建 DataHub 数据源。操作步骤 登录 OceanBase 管理控制台。...单击 测试连接，测试数据传输和数据库的网络连接。待数据源测试连接成功，单击 确定。
新建 Kafka 数据源
背景信息 数据传输的安全问题，贯穿服务连通性验证、链路创建和数据传输过程。基于 Kafka 服务提供的安全体系，数据传输在数据加密和用户认证上均有一定的支持，以满足绝大部分安全需求。数据传输支持的 Kafka 认证方式包括：GSSAPI GSSAPI...
监控任务性能
功能 说明 增量同步链路拓扑 增量同步链路主要展示链路中各模块间的数据传输情况和网络延迟信息，模块包含：源库、DTS采集模块、DTS缓存模块、DTS写入模块、目标库。相关参数解释如下：BPS：链路中模块间每秒传输的数据量，单位为MB/s。RPS...
新建 PolarDB-X 1.0 数据源
本文为您介绍如何在数据传输中新建 PolarDB 数据源。背景信息 PolarDB-X 1.0 是由阿里巴巴自主研发的 PolarDB 分布式版数据库，融合分布式 SQL 引擎和分布式自研存储 X-DB，基于云原生一体化架构设计。PolarDB-X 1.0 可以支撑千万级并发...
数据传输独享资源费用（包年包月）
数据传输服务（包年包月）资源组是MaxCompute为满足部分客户数据传输的需求推出的独享资源组，保障了数据传输资源的独享性，并提高了数据传输的稳定性。本文为您介绍MaxCompute的数据传输服务（包年包月）资源组的计费规则。背景信息 ...
查看同步链路状态和性能
功能 说明 增量同步链路拓扑 增量同步链路拓扑主要展示链路中各模块间的数据传输情况和网络延迟信息，模块包含：源库、DTS采集模块、DTS缓存模块、DTS写入模块、目标库。相关参数解释如下：BPS：链路中模块间每秒传输的数据量，单位为MB/s...
数据缓存概述
对于一些数据量较大的业务数据，例如训练模型等，ECI支持创建数据缓存（DataCache）来提前拉取数据，将数据缓存到本地，以便在创建ECI实例时可以直接挂载使用，从而减少实例启动耗时，避免数据重复下载，节约使用成本。本文为您介绍什么是...
数据缓存概述
对于一些数据量较大的业务数据，例如训练模型等，ECI支持创建数据缓存（DataCache）来提前拉取数据，将数据缓存到本地，以便在创建ECI实例时可以直接挂载使用，从而减少实例启动耗时，避免数据重复下载，节约使用成本。本文为您介绍什么是...
新建 MySQL 数据源
本文为您介绍如何在数据传输新建 MySQL 数据源。操作步骤 登录 OceanBase 管理控制台。在左侧导航栏，单击 数据传输>数据源管理。在 数据源列表 页面，单击右上角的 新建数据源。在 新建数据源 对话框中，选择 数据源类型 为 MySQL。配置...
新建 Oracle 数据源
本文为您介绍如何在数据传输中新建 Oracle 数据源。操作步骤 登录 OceanBase 管理控制台。在左侧导航栏，单击 数据传输>数据源管理。在 数据源列表 页面，单击右上角的 新建数据源。在 新建数据源 对话框中，选择 数据源类型 为 Oracle。...
【功能发布】数据缓存
对于一些数据量较大的业务数据，例如训练模型等，ECI支持创建数据缓存（DataCache）来提前拉取数据，将数据缓存到本地，以便在创建ECI实例时可以直接挂载使用，从而减少实例启动耗时，避免数据重复下载，节约使用成本。功能介绍 为了解决...
新建 PolarDB-X 2.0 数据源
本文为您介绍如何在数据传输中新建 PolarDB-X 2.0 数据源。背景信息 云原生数据库 PolarDB 分布式版（简称 PolarDB-X）是由阿里巴巴自主研发的云原生分布式数据库，为您提供高吞吐、大存储、低延时、易扩展和超高可用的云时代数据库服务。...
新建 RocketMQ 数据源
单击 测试连接，测试数据传输和数据库的网络连接。重要 如果您未创建 oms_test_topic，将无法通过测试连接。测试连接通过后，单击 确定。创建 Group 新建 RocketMQ 数据源时，您需要提前创建 defaultGroup，才能够通过测试连接。阿里云 ...
结束和释放数据迁移项目
结束数据迁移项目 结束数据迁移项目后，数据传输仍保留当前项目的源端、目标端、迁移对象、监控和告警等配置信息。您可以根据业务需求，选择清空项目配置后重新配置或者释放当前项目。重要 数据传输支持结束处于 已暂停、失败 和 已完成 ...
查看账单
本文介绍如何查看数据传输服务DTS（Data Transmission Service）的账单明细。操作步骤 登录 用户中心。在左侧导航栏，选择 账单管理>账单详情。单击 明细账单 页签。在 产品 中选择 数据传输服务。单击 搜索。说明 您也可以根据需求，按...
账单查询
产品 选择 云数据传输，统计项 选择 计费项，统计周期 选择 明细，即可看到云数据传输小时级别实例粒度的消费信息，包括实例、单价、用量、价格及资源包抵扣等。以 云数据传输-公网 明细账单为例，您可以查看流量消耗的具体云产品、云产品...
数据缓存计费
本文介绍数据缓存的计费规则，并给出计费示例。计费说明 数据缓存用于提前拉取业务所需的大量数据（例如训练模型等），以便在创建ECI实例时可以直接挂载使用数据。一个数据缓存对应一个快照，创建和使用数据缓存涉及的计费项及其计费规则...
新建 OceanBase 数据源
本文为您介绍如何在数据传输中新建 OceanBase 数据源。操作步骤 登录 OceanBase 管理控制台。在左侧导航栏，单击 数据传输>数据源管理。在 数据源列表 页面，单击右上角的 新建数据源。在 新建数据源 对话框中，数据源类型 默认为 ...
数据传输费用（按时计费）
如果您已购买包年包月规格的独享数据传输服务资源组，并想要在业务高峰期临时扩容部分并发资源满足资源供给，可使用按时计费规格。本文为您介绍按时计费规格的计费说明、使用说明及资源价格。背景信息 MaxCompute支持对数据传输服务的独享...
续费实例
数据传输服务DTS（Data Transmission Service）包年包月实例在到期后，请在7天内进行续费，否则链路会被释放且不可恢复。为避免影响您的业务，请在实例到期前及时续费或者开通自动续费。说明 按量付费是根据实际使用情况实时产生账单，无需...
数据传输迁移角色授权
（可选）主账号授予 RAM 用户数据传输迁移角色授权权限 RAM 用户需要具备数据传输迁移角色 AliyunOceanbaseMigrationServiceRolePolicy，才可以正常访问数据传输。如果 RAM 用户未具备该角色，则需要主账号先登录 RAM 控制台，手动给数据...
购买数据同步项目
本文为您介绍如何购买云数据库 OceanBase 数据传输服务提供的数据同步项目。背景信息 目前数据同步项目仅支持预付费模式，即包年包月计费模式。您可以根据本文操作购买相应类型的数据同步项目后，再对项目进行具体配置和管理。数据同步项目...
使用数据缓存创建实例
创建数据缓存后，您可以使用数据缓存创建ECI实例，将缓存好的数据直接挂载到ECI实例中，免去拉取数据的等待时间，加速业务启动。本文介绍如何使用数据缓存创建ECI实例。前提条件 已创建数据缓存。具体操作，请参见 创建数据缓存。配置说明 ...
数据订阅启动SDK报如下的错误“keep alive error”
问题原因 SDK运行的服务器没有公网IP，不能连接数据传输服务的服务器，或者因为订阅通道的消费时间点不在订阅通道的数据范围之内。解决方案 创建公网IP，建立SDK的公网连接，或者重新修改消费位点，具体的修改方法详见 修改订阅通道消费...
Quick BI数据集和仪表板数据显示不一致
问题描述 Quick BI在查看仪表板的时候图表显示的数据和数据集或者数据源中查询的结果不一致。问题原因 当前打开的仪表板长时间未刷新导致的数据显示延迟。本地浏览器缓存数据导致显示延迟。Quick BI数据集缓存未清理。PostgreSQL加速导致...
启动和暂停数据同步项目
在左侧导航栏，单击 数据传输>数据同步。在 同步项目列表 页面，单击目标项目后的 启动。您也可以在 同步项目列表 页面，单击项目名称进入详情页面，单击右上角的 启动。系统自动完成对数据同步项目的预检查后，启动数据同步项目。暂停数据...
- 产品推荐
- 这些文档可能帮助您