DTS的迁移条件不支持LIMIT子句

问题描述 如果DTS通过过滤条件使用LIMIT子句的方式指定迁移条数则无效。问题原因 DTS不支持指定的迁移条数和LIMIT子句的过滤条件。解决方案 由于DTS产品的迁移条件不支持LIMIT子句,提供以下解决方法供您参考。...适用于 数据传输 DTS

报错:DTS-30019:Can not find column

方法二:重要 双向同步任务、目标表有除DTS以外的数据写入、目标端的表为多对一单向同步架构的目标表(包括一个任务的多张表映射到同一张表和多个任务的表映射到同一张表的场景)时不能使用此方法。将报错的表从同步对象移除,然后启动任务...

DTS任务中配置ETL典型应用

本文介绍在DTS任务中如何通过配置ETL,解决源实例与目标实例的数据不兼容问题和数据脱敏问题。前提条件 已创建源和目标数据库实例,本文以RDS MySQL间同步为例,创建方法,请参见 创建RDS MySQL实例。目标实例的存储空间须大于原实例占用的...

使用flink-dts-connector消费订阅数据

完成数据订阅通道的配置后,您可以使用flink-dts-connector文件消费通道中的数据,用于Flink客户端消费。本文介绍如何flink-dts-connector文件的使用说明。注意事项 仅支持Flink客户端使用DataStream API、Table API和SQL。如您的Flink客户...

获取DTS任务迁移表的信息

调用SummaryJobDetail接口获取DTS数据迁移或同步任务中迁移表的信息。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 ...

通过CEN实现本地IDC与DTS云服务互通

背景信息 云服务指使用阿里云云服务地址段100.64.0.0/10提供服务的云产品,例如对象存储OSS(Object Storage Service)、日志服务SLS(Log Service)、数据传输服务DTS(Data Transmission Service)等。如果本地网络需要访问云服务,您...

使用flink-dts-connector消费订阅数据

完成数据订阅通道的配置后,您可以使用flink-dts-connector文件消费通道中的数据,用于Flink客户端消费。本文介绍如何flink-dts-connector文件的使用说明。注意事项 仅支持Flink客户端使用DataStream API、Table API和SQL。如您的Flink客户...

【通知】DTS旧版OpenAPI即将停止维护

自2022年1月1日起,DTS将停止维护旧版OpenAPI,为保证业务正常运行,建议您尽快使用新版OpenAPI。内容 自2022年1月1日起,DTS将停止维护旧版OpenAPI。影响及建议 为避免对业务产生影响,建议您使用更为全面规范的 新版OpenAPI。新旧版Open...

使用DTS进行增量迁移时没有同步数据

问题描述 使用阿里云数据传输服务DTS的增量迁移功能时出现延迟,或者使用数据同步功能时很长时间没有同步数据。问题原因 增量迁移没有同步数据的原因如下:目标或者源端实例运行状态异常。源或者目标实例上进程被阻塞。源实例以及目标实例...

修改DTS任务的源或目标库实例

说明 数据库实例被替换后,DTS会回退位点拉取Binlog。若同步或迁移的数据没有主键,则可能会出现重复数据。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。...

通过云监控平台为DTS任务设置报警规则

在 产品 中配置待监控的DTS实例类型,DTS支持的类型如下所示:数据传输服务 DTS(Migration):数据迁移实例。数据传输服务 DTS(Change_tracking):数据订阅实例。数据传输服务 DTS(Synchronization):数据同步实例。说明 您也可以在...

DTS跨账号迁移时报获取结构对象失败

问题描述 使用DTS将其他阿里云账号...问题原因 DTS连接源RDS实例失败,可能由如下两个原因造成。配置连接信息不正确。RDS配置了白名单,并未对当前DTS添加相应规则。...参考 RDS设置白名单,为当前DTS添加相应白名单规则。适用于 数据传输服务DTS

查询一个DTS任务详情

Port String 3306 目标实例的数据服务端口。InstanceType String RDS 目标实例类型。UserName String dtstest 目标实例的数据库账号。EngineName String MySQL 目标实例的数据库类型。CanModifyPassword Boolean false 是否可以修改密码...

修改DTS任务源或目标库的账号密码

返回数据 名称 类型 示例值 描述 Code String 200 错误码,本参数即将下线。DynamicMessage String DtsJobId 动态错误信息,用于替换返回参数 ErrMessage错误信息中的%s。说明 如果 ErrMessage返回 The Value of Input Parameter%s is not ...

DTS增量数据迁移时MySQL存储引擎检查失败

问题描述 在启动MySQL之间的增量数据迁移任务时,DTS将在预检查阶段对源数据库中的表进行存储引擎检查。本文将介绍源存储引擎检查失败对应的修复方法。问题原因 这个检查项主要检查源数据库中是否存在增量迁移不...适用于 数据传输服务 DTS

查询DTS子任务执行状态

调用DescribePreCheckStatus查询DTS任务的子任务执行详情,包括预检查(含迁移评估)、库表结构迁移或初始化、全量迁移或初始化、增量迁移或同步。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,Open...

【通知】2021年6月11日DTS升级集群资源

为了给您带来更优质的产品体验,保障DTS实例高效稳定运行,DTS自2021年6月11日起将升级集群资源。升级时间 2021年6月11日生效。升级内容 本次升级主要涉及以下两个方面:优化DTS资源调度策略。严格隔离各个DTS实例的硬件资源。影响 升级...

使用DTS迁移副本集架构的自建MongoDB数据库上云

使用数据传输服务DTS(Data Transmission Service),将副本集架构的自建MongoDB数据库迁移至云数据库MongoDB中。DTS支持全量数据迁移和增量数据迁移,同时使用这两种迁移类型可以实现在不停服的情况下,平滑地完成数据库的迁移上云。除本...

配置DTS迁移、同步或校验任务

Reserve String 否 {"srcInstanceId":"cen-9kqshqum*"} DTS预留参数,格式为JSON字符串,您可以传入本参数完善源目库信息(如目标Kafka数据库的数据存储格式、云企业网CEN的实例ID)。更多信息,请参见 Reserve参数说明。Checkpoint String...

如何解决使用CEN将数据库实例接入DTS时报错?

本文介绍在使用云企业网CEN将源或目标数据库实例,接入到DTS时报错的解决方法。注意事项 若您在解决报错过程中对云企业网CEN有其他疑问或需求,请联系CEN的技术支持。更多关于云企业网CEN的信息,请参见 什么是云企业网。操作步骤 收集报错...

使用DTS进行数据迁移是否会覆盖掉已存在数据

概述 本文介绍使用DTS进行数据迁移是否会覆盖掉已存在数据。详细信息 如果配置迁移任务时,只迁移几个表,那么预检查时,会要求目标库中这些表必须没有数据,如果含有数据库的,那么预检查的“目标库是否为空”项会...适用于 数据传输服务 DTS

DTS预检查时出现schema存在性检查错误处理

问题描述 使用DTS进行RDS的数据迁移时,在预检查时出现 schema存在性检查 错误,如下图所示。问题原因 如错误提示所述,该错误是由于目标库不存在或不匹配导致的。解决方案 您需要在目标RDS实例下先创建与源库同名的...适用于 数据传输服务DTS

DTS 是否支持 VPC 内的 ECS 上的自建数据库迁移到 RDS...

支持,对于源 ECS 实例和目标 RDS 实例在相同 Region 的情况,DTS 可以直接访问 VPC 内 ECS 实例上的自建数据库;对于源 ECS 实例和目标 RDS 实例在不同 Region 的情况,ECS 实例需要挂载弹性公网 IP,配置迁移任务时,源实例选择 ECS 实例...

使用DTS将MongoDB Atlas数据库迁移至阿里云

本文介绍如何使用数据传输服务DTS(Data Transmission Service),将MongoDB Atlas数据库增量迁移至阿里云。DTS支持全量数据迁移和增量数据迁移,同时选择这两种迁移类型可以实现在不停服的情况下,平滑地完成MongoDB Atlas数据库的迁移。...

如何通过DTS实现同实例下的数据库复制和改名

概述 本文主要介绍如何通过DTS实现同实例下的数据库复制和改名。详细信息 进入 DTS管理控制台。创建迁移任务,源库和目标库都选择同一个RDS实例。...选择要复制和改名的数据库,移动到已选择对象框后,单击 编辑,进行...适用于 数据传输服务 DTS

如何解决使用VPN将数据库实例接入DTS时报错?

本文介绍在使用VPN将源或目标数据库实例接入到DTS时报错的解决方法。注意事项 若您的数据库实例使用的是云上VPN网关,在解决报错过程中对VPN有其他疑问或需求,请联系VPN网关的技术支持。更多关于VPN网关的信息,请参见 什么是VPN网关。...

DTS任务在预检查阶段出现schema存在性检查问题

问题描述 为保障数据迁移任务的顺利执行,DTS任务会在预检查阶段检查待迁移的数据库在目标实例中是否存在。如果不存在,DTS会自动创建,如果创建失败则会提示预检查失败。问题原因 DTS在以下情况中自动创建数据库的...适用于 数据传输服务 DTS

DTS数据迁移时在增量迁移阶段卡住很久

概述 本文主要对数据迁移时在增量迁移阶段卡住很久的问题进行说明。详细信息 任务进入增量迁移阶段,源跟目标实例会保持数据实时同步,任务不会自动结束,您可以在业务要切换到目标库之前,手动停止数据迁移即可。适用于 数据传输服务 DTS

DTS启动订阅SDK时提示“get guid info failed”

DTS启动订阅SDK时提示“get guid info failed”。问题原因 这是由于您在SDK中设置的订阅通道ID错误导致。解决方案 需要将示例代码中的client.askForGUID替换成您要订阅的订阅通道对应的ID即可。适用于 数据传输服务DTS

DTS迁移或同步任务中配置ETL

数据传输服务DTS(Data Transmission Service)提供的流式数据ETL(Extract Transform Load)数据处理功能,结合DTS的高效流数据复制能力,可以实现流式数据的抽取、数据转换、加工和数据装载。本文介绍在DTS链路内配置ETL的操作步骤及相关...

使用DTS将华为云文档数据库迁移至阿里云

本文介绍如何使用数据传输服务DTS(Data Transmission Service),将华为云文档数据库迁移至阿里云MongoDB实例。DTS支持全量数据迁移及增量数据迁移,同时使用这两种迁移类型可以实现在本地应用不停服的情况下,平滑地完成数据库迁移。前提...

【通知】2021年12月23日起DTS将逐步融合至DMS控制台

数据传输服务DTS(Data Transmission Service)将于北京时间2021年12月23日起逐步融合至DMS控制台(原DTS旧版控制台可在2022年04月01日前可正常使用),为您提供更好的一站式数据管理体验。变更时间 2021年12月23日至2022年03月31日 变更...

DTS数据迁移过程中在预检查阶段源库权限检查失败

问题描述 阿里云数据传输服务DTS在进行数据迁移过程中,“源库权限检查”检查项预检查失败。问题原因 源数据库的数据库账号没有足够的权限进行数据迁移任务。解决方案 为保障数据迁移任务的顺利执行,DTS在预检查阶段会对数据迁移任务中...

查询DTS任务列表及各任务执行详情

Port String 3306 目标实例的数据服务端口。InstanceType String RDS 目标实例类型。UserName String dtstest 目标实例的数据库账号。EngineName String MySQL 目标实例的数据库类型。MigrationMode Object 迁移类型或同步初始化类型。...

使用DTS将腾讯云MongoDB增量迁移至阿里云

本文介绍如何使用数据传输服务DTS(Data Transmission Service),将腾讯云MongoDB副本集实例增量迁移至阿里云。DTS支持全量数据迁移和增量数据迁移,同时使用这两种迁移类型可以实现在不停服的情况下,平滑地完成腾讯云MongoDB数据库的...

DTS数据迁移过程中在预检查阶段目标数据库权限检查...

问题描述 阿里云数据传输服务DTS在进行数据迁移过程中,检查目的数据库的账号权限是否满足迁移要求时,“目的库权限检查”检查项预检查失败。问题原因 目标数据库的账号没有足够的权限进行数据迁移任务。解决方案 为保障数据迁移任务的顺利...

添加DTS服务器的IP地址段

在使用数据传输服务DTS(Data Transmission Service)时,若您的源库或目标库实例只允许与特定IP地址建立连接,您需要将DTS服务器的IP地址段加入到相应数据库的安全设置(防火墙、白名单、安全组等)中,以允许DTS服务器的访问,否则可能会...

使用DTS迁移单节点架构的自建MongoDB数据库上云

本文介绍如何使用数据传输服务DTS(Data Transmission Service),将单节点架构的自建MongoDB数据库迁移至云数据库MongoDB中。除本方法外,您也可以 使用MongoDB工具将自建数据库迁移至单节点实例。更多数据迁移或数据同步场景的解决方案,...

DTS 迁移过程中,是否会锁表,对源数据库是否有影响?

DTS 在进行全量数据迁移和增量数据迁移的过程中,均不会对源端数据库进行锁表,因此在全量数据迁移和增量数据迁移的过程中,迁移源端的数据表均可以正常读写访问。

使用DTS数据订阅时提示“Connection timed out”错误

问题描述 在使用DTS数据订阅时,报类似如下错误。...partition”:{“name”:”0f59329ace868558b1xxxxxxxx”,”gmt”:1447229810},”offset”:”:1447229563:”,”group”:”111111111111111”} 2015-11-11 16:08:34,...适用于 数据传输服务DTS
共有55条 < 1 2 3 4 ... 55 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
阿里邮箱 弹性公网IP 商标服务 数据传输服务 数字证书管理服务(原SSL证书) 短信服务
新人特惠 爆款特惠 最新活动 免费试用