配置流程

数据库传输服务DTS为数据同步过程提供了流式的ETL功能,您可以在源库和目标库之间添加各种转换组件,实现丰富的转换操作,并将处理后的数据实时写入目标库。例如将两张流表做JOIN操作后形成一张大表,写入目标库;或者给源表新增一个字段,...

通过Flink SQL模式配置ETL任务

数据库传输服务DTS为数据同步过程提供了流式的ETL功能,您可以在源库和目标库之间添加各种转换组件,实现丰富的转换操作,并将处理后的数据实时写入目标库。例如将两张流表做JOIN操作后形成一张大表,写入目标库;或者给源表新增一个字段,...

配置转换组件

本文介绍数据库传输服务DTS提供的ETL功能支持的转换组件及其配置方法。背景信息 ETL支持的转换组件如下:表JOIN 字段计算器 表记录过滤 使用限制 ETL支持的转换组件存在如下限制:表JOIN:仅支持两个表之间做JOIN操作。字段计算器 和 表...

DescribePropertyScaDetail-查询资产指纹调查中间件...

取值:sca:中间件 sca_database数据库 sca_web:Web 服务 说明 不设置此参数时,默认取值为 sca,表示查询中间件类型的资产指纹信息。sca SearchItem string 否 设置查询条件的类型。取值:name:中间件、数据库Web 服务的名称。type...

购买数据同步项目

本文为您介绍如何购买云数据库 OceanBase 数据传输服务提供的数据同步项目。背景信息 目前数据同步项目仅支持预付费模式,即包年包月计费模式。您可以根据本文操作购买相应类型的数据同步项目后,再对项目进行具体配置和管理。数据同步项目...

购买数据迁移项目

本文为您介绍如何购买云数据库 OceanBase 数据传输服务提供的数据迁移项目。背景信息 目前数据迁移项目仅支持后付费模式,即按量付费计费模式。当前为限时免费阶段,具体收费时间另行通知。您可以根据本文操作购买相应类型的数据迁移项目后...

跨阿里云账号任务如何配置RAM授权

数据库实例 阿里云数据库 自建数据库 源库 RDS MySQL、RDS MariaDB、RDS PostgreSQL、PolarDB-X 1.0、PolarDB-X 2.0、PolarDB PostgreSQL版、PolarDB PostgreSQL版(兼容Oracle)、PolarDB MySQL版、云数据库Redis、云原生内存数据库Tair、...

使用数据订阅功能传输数据后日期数据格式发生变化

概述 本文主要介绍MySQL中数据类型为Date的数据,通过数据订阅传输数据后,数据格式由 YYYY-MM-DD 格式变化为 YYYY:MM:DD 的原因。详细信息 DTS默认数据存储格式为 YYYY:MM:DD,YYYY-MM-DD 是展现出来的格式,实际存储是 YYYY:MM:DD 格式。...

应用场景

云上云下数据库同步 通过数据库传输服务DTS的数据同步功能,可以使本地IDC或其他云厂商的数据库与阿里云数据库内容进行同步,详情请参见 数据同步的工作原理,架构图如下所示。本地IDC/跨云数据库备份上云 数据库备份 DBS 是阿里云提供的低...

购买与使用独享数据传输服务资源组

当您在MaxCompute中需要对大规模数据进行传输且对传输稳定性和延迟有要求时,您可以使用独享数据传输服务资源组。独享数据传输服务资源组可以提供更高的数据传输速度和更好的网络条件,以减少传输时间并提高效率。本文为您介绍如何购买、...

查看账单

本文介绍如何查看数据传输服务DTS(Data Transmission Service)的账单明细。操作步骤 登录 用户中心。在左侧导航栏,选择 账单管理>账单详情。单击 明细账单 页签。在 产品 中选择 数据传输服务。单击 搜索。说明 您也可以根据需求,按...

数据传输独享资源费用(包年包月)

目前支持购买的地域为:华东1(杭州)华北2(北京)华东2(上海)华南1(深圳)升级与降配 您可以对已购买的独享数据服务传输资源组进行升级和降配操作,升级与降配的策略如下。升级策略 适用场景:如果当前的独享数据传出服务资源组的并发...

数据传输服务概述

数据传输服务是MaxCompute数据进出的最重要通道,其中包括适用于批量操作的普通Tunnel和适用于流式写入的Stream Tunnel,同时在所有Region提供免费限量使用的数据传输服务共享资源组,也提供数据传输服务(包年包月)独享资源组,供您采购...

联系我们

如果您在使用数据传输服务DTS(Data Transmission Service)的过程中有任何疑问或建议,可以 通过钉钉(钉钉通讯客户端下载地址)进入到DTS客户交流钉钉群(群号:68325004196或68640008972),进行咨询。

数据传输系统权限策略参考

本文描述数据传输支持的所有系统权限策略及其对应的权限描述,供您授权 RAM 身份时参考。什么是系统权限策略 权限策略是用语法结构描述的一组权限的集合,可以精确地描述被授权的资源集、操作集以及授权条件。阿里云访问控制(RAM)产品...

资源观测

资源观测提供某段时间内,数据传输服务资源组(包括共享资源组和独享资源组)与计算资源组内各类CPU、内存、并发数等资源的使用情况,您可通过观测各指标的曲线图,优化和调整作业的执行计划及资源配置,提高作业的效率和性能。开通地域 ...

升级实例配置

选择链路规格并勾选 数据传输服务协议。说明 关于链路的规格信息,请参见 数据迁移链路规格说明 和 数据同步链路规格说明。升级数据迁移任务时,选择 迁移链路规格。升级数据同步作业时,选择 同步链路规格。说明 本文介绍通用操作,实际...

使用OpenAPI

本文为您介绍使用数据传输服务DTS(Data Transmission Service)OpenAPI时的基本信息及注意事项。关于使用阿里云OpenAPI的详细介绍,请参见 使用OpenAPI概述。基本信息 版本说明 版本号 说明 2020-01-01 推荐使用。2019-09-01 该版本Open...

数据传输费用(按时计费)

如果您已购买包年包月规格的独享数据传输服务资源组,并想要在业务高峰期临时扩容部分并发资源满足资源供给,可使用按时计费规格。本文为您介绍按时计费规格的计费说明、使用说明及资源价格。背景信息 MaxCompute支持对数据传输服务的独享...

数据库可用性检查失败

数据库可用性检查失败的详细检测结果如下:问题原因 目标数据库中待迁入的数据库没有创建,而DTS又不会自动创建,因此会导致数据库可用性检查失败。解决方案 在RDS控制台的数据库管理页面中,检查相应的源和目标对应的数据库对象是否创建。...

计费常见问题

本文汇总了数据传输服务DTS(Data Transmission Service)计费的常见问题。常见问题 Q:按量付费的计费方式下,手动结束了数据迁移实例或数据同步实例,还会继续收费吗?A:不收费。数据迁移实例仅在增量数据迁移正常运行期间计费(包含...

数据订阅启动SDK报如下的错误“keep alive error”

问题原因 SDK运行的服务器没有公网IP,不能连接数据传输服务的服务器,或者因为订阅通道的消费时间点不在订阅通道的数据范围之内。解决方案 创建公网IP,建立SDK的公网连接,或者重新修改消费位点,具体的修改方法详见 修改订阅通道消费...

配置Serverless实例

本文介绍如何配置数据传输服务DTS(Data Transmission Service)Serverless实例,帮助您创建一个高弹性、低成本、无需手动变配的实例。前提条件 您的目标任务可以配置为Serverless实例。Serverless实例的使用限制和支持的地域,请参见 什么...

退款说明

本文介绍数据传输服务DTS(Data Transmission Service)的退款说明。计费方式 退款条件 退款方式 包年包月 如果您业务调整不再需要使用包年包月实例,且实例数据已完成备份和迁移,可申请退款。在您确保充分了解 退订规则说明 后,可通过...

订阅通道无法修改消费位点

问题描述 订阅通道无法修改消费位点。问题原因 因为订阅通道还有下游消费。解决方案 登录 DTS控制台 查看消费来源IP,查看是否还有下游SDK在消费数据,如果有,那么需要先停止下游消费后,重新修改消费位点。...适用于 数据传输服务DTS

查询任务日志

数据传输服务DTS(Data Transmission Service)支持在任务日志页签查看任务时间轴和运行日志信息。任务时间轴以时间线的维度展示购买、配置、运行、故障、运行完成等关键节点的任务状态信息;运行日志可根据时间范围或任务的状态信息进行...

通过云监控平台为DTS任务设置报警规则

在 产品 中配置待监控的DTS实例类型,DTS支持的类型如下所示:数据传输服务 DTS(Migration):数据迁移实例。数据传输服务 DTS(Change_tracking):数据订阅实例。数据传输服务 DTS(Synchronization):数据同步实例。说明 您也可以在...

DTS迁移任务显示锁定中

问题描述 DTS控制台数据迁移页面,迁移任务显示锁定中。问题原因 阿里云账号欠费,同时未及时续费。解决方案 正常续费即可,如何续费DTS请参考如下文档。续费包年包月实例 适用于 数据传输服务 DTS

计费项与计费方式概述

数据传输独享资源费用(包年包月)MaxCompute为所有用户提供免费的 公共数据传输服务资源组,您也可以购买 独享数据传输服务资源组,以独享数据传输服务,可使用更多数据传输并发数,保障资源的独享性的同时提高了输出传输的稳定性。数据...

数据库 OceanBase 版数据传输服务等级协议

版本生效日期:2023年12月25日 本服务等级协议(Service Level Agreement,以下简称“SLA”)规定了阿里云向客户提供的云数据库 OceanBase 版数据传输服务(以下简称“OceanBase 数据传输服务”)的服务可用性等级指标及赔偿方案。...

Binlog检查

在启动MySQL之间的增量数据迁移任务时,DTS将在预检查阶段对源数据库进行Binlog检查。本文将介绍源库Binlog检查涉及的检查项及修复方法。源库Binlog是否开启检查 该检查项主要检查源数据库是否开启Binlog功能。如果检查失败,请参考下述...

迁移任务一直卡在增量数据迁移阶段

概述 本文介绍迁移任务一直卡在增量数据迁移阶段的处理方法。详细信息 增量数据迁移阶段,会进行源实例跟目标实例增量数据实时同步,不会自动结束。建议增量数据迁移无延迟时,业务在目标实例验证通过后,将业务...适用于 数据传输服务 DTS

数据订阅启动SDK报错

问题描述 数据订阅启动SDK报错提示如下。Exception in thread"main...解决方案 建议重新生成新的AccessKeyID/AccessKeySecret后,使用新的AK重启SDK。适用于 数据传输服务DTS

管理环境标签

数据传输服务DTS(Data Transmission Service)支持为DTS实例设置用于标识实例的环境标签,以便您快速区分DTS实例。您可以在任务列表页面为目标实例添加、修改、删除环境标签,并以环境标签维度对DTS实例进行筛选。背景信息 DTS提供的环境...

DTS启动订阅SDK时提示“get guid info failed”

DTS启动订阅SDK时提示“get guid info failed”。问题原因 这是由于您在SDK中设置的订阅通道ID错误导致。解决方案 需要将示例代码中的client.askForGUID替换成您要订阅的订阅通道对应的ID即可。适用于 数据传输服务DTS

计费概述

本文介绍数据传输服务DTS(Data Transmission Service)的计费项、计费方式和价格说明等计费信息。产品定价 DTS提供数据迁移、数据同步、数据订阅及数据校验四种功能,每种功能的计费方式略有不同。数据迁移:仅支持按量付费模式,收取配置...

创建迁移任务时报获取迁移结构失败

问题原因 一般是由于数据传输服务连接不上源Oracle数据库。解决方案 当遇到此问题时,需要在安装Oracle的服务器上执行 netstat-ano 命令,查看Oracle数据库的端口是否配置了内外网IP监听。如果没有配置,那么需要修改Oracle的监听服务,...

产品架构

对于异构数据库之间的迁移,DTS会解析源数据库的DDL代码,将代码转换成目标数据库的语法,然后在目标数据库中重新创建结构对象。全量数据迁移:在全量数据迁移阶段,DTS会将源数据库的存量数据全部迁移到目标数据库。源数据库保持运行状态...

数据连接管理

数据传输服务DTS(Data Transmission Service)支持录入数据库信息。在配置任务时,您可以直接选择已录入的数据库,DTS将自动填入数据库信息而无需您手动输入,避免了重复输入数据库信息的繁琐步骤。本文介绍如何录入、保存、编辑或删除...

三个实例相互进行双向同步后出现数据缺失

通过数据传输服务(DTS)进行三个实例间的相互双向同步后,出现数据缺失。本文介绍如何避免这种情况的发生。问题描述 通过DTS配置三个实例之间的双向同步后,发现数据出现缺失。例如下图所示的配置场景:可能原因 双向同步场景的关键在于...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据传输服务 数据库自治服务 云数据库 RDS 云数据库 Redis 版 数据库备份 DBS 弹性公网IP
新人特惠 爆款特惠 最新活动 免费试用