通过DTS采集数据

返回 数据同步 页面,单击实例右侧的 配置同步链路。选择同步通道的源及目标实例,完成后单击 授权白名单并进入下一步。系统会自动为您创建同步账号,创建过程需要30秒左右,请耐心等待。当进度条显示为 100%时,单击 下一步。选择同步对象...

2021年

RDS PostgreSQL迁移至RDS MySQL 源为RDS SQL Server的数据迁移和同步链路,在原先基于SQL Server日志解析进行数据迁移的基础上,新增CDC的模式,解决了日志截断导致迁移任务中断,不支持迁移堆表、无主键表等问题。从RDS SQL Server同步至...

产品架构介绍

数据单向/双向同步:借助DTS等产品能力进行数据同步,特别是对于单向同步链路,支持数据源主备切换过程中的同步链路翻转。读写分离/读写不分离:读写分离,写主云读本地。读写不分离,读写均在主云。主备切换:单云故障,支持数据库跨云主...

清空同步实例配置

当数据同步实例的拓扑为双向时,才可以传入 Reverse以清空反向同步链路。AccountId String 否 12323344*阿里云主账号ID,无需设置,该参数即将下线。返回数据 名称 类型 示例值 描述 ErrCode String InternalError 调用出错时返回的错误码...

体验实例规格升级

更多关于规格的信息,请参见 数据同步链路规格说明 和 数据迁移链路规格说明。注意事项 每个阿里云账号(主账号)仅有3次免费升级的体验资格,当体验资格使用完后,您可以选择付费升级实例规格。每次升级体验持续24小时,若您已在体验过程...

启动同步实例

当数据同步实例的拓扑类型为双向时,才可以传入 Reverse以启动反向同步链路。AccountId String 否 12323344*阿里云主账号ID,无需设置,该参数即将下线。返回数据 名称 类型 示例值 描述 ErrCode String InternalError 调用出错时返回的...

常见问题

DTS同步链路规格默认为medium模式,源库的数据写入量过大时,若想达到规格同步性能上线,需要 升级实例配置。无主键表的主键选择可能会导致热点行更新,而热点行更新速度很慢,可以向ADB提工单解决该问题。当ADB集群的写入性能已达到瓶颈,...

同步时源库为PolarDB-X 1.0的注意事项及限制

源库的操作限制:同步期间如需切换 PolarDB-X 1.0 的网络类型,切换成功后,请调整同步链路的网络连接信息。在同步期间,请勿对源实例执行扩缩容(比如扩缩容其下挂载的 RDS MySQL,或者虽未扩缩容 RDS MySQL,但 RDS MySQL 中逻辑库表对应...

升级单向同步至双向同步

说明 链路规格说明,请参见 数据同步链路规格说明。InstanceId String 是 dtsh77p49x4k28*实例ID,可通过调用 DescribeDtsJobs 获取。RegionId String 否 cn-hangzhou DTS实例所属的地域,详情请参见 支持的地域列表。返回数据 名称 类型 ...

如何解决增量迁移延迟或同步延迟

DTS的增量迁移或同步链路的各个规格有对应的RPS限制,当源库的数据写入量过大时(例如有大事务),达到了规格限流,就会导致任务延迟。您可以在控制台上查看任务流量或者执行 一键诊断 功能,检查当前链路是否到达相应规格的限制。查看方式...

PolarDB-X间的数据实时同步

如果需要在数据同步期间切换 PolarDB-X 的网络类型,在您执行完网络类型切换操作后,请调整同步链路的网络连接信息。费用说明 同步类型 链路配置费用 库表结构同步和全量数据同步 不收费。增量数据同步 收费,详情请参见 计费概述。支持...

暂停同步实例

当数据同步实例的拓扑为双向时,才可以传入 Reverse以暂停反向同步链路。AccountId String 否 12323344*阿里云主账号ID,无需设置,该参数即将下线。返回数据 名称 类型 示例值 描述 ErrCode String InternalError 调用出错时返回的错误码...

获取DTS任务迁移表的信息

SynchronizationDirection String 是 Forward 同步链路方向,取值:Forward:正向。Reverse:反向。说明 默认取值为 Forward。当数据同步实例的拓扑为双向时,才可以传入 Reverse 以释放反向同步链路。RegionId String 否 cn-hangzhou DTS...

Redis企业版实例间的双向同步

定位至已购买的数据同步实例,单击该实例下第一个同步作业 操作 列的 配置同步链路。重要 一个双向数据同步实例会包含两个同步作业,需要分别进行配置。在配置反向同步作业时,定位至第二个同步作业,单击 操作 列的 配置同步链路。配置...

结束DTS任务

当数据同步实例的拓扑为双向时,才可以传入 Reverse以结束反向同步链路。返回数据 名称 类型 示例值 描述 DynamicCode String 403 动态错误码,本参数即将下线。DynamicMessage String DtsJobId 动态错误信息,用于替换返回参数 ErrMessage...

容灾大屏

说明 终端用户 上方展示了当前业务LDC中的同步链路总数和同步链路异常百分比。终端用户 两侧的百分比,表示本单元的 流量比例。各模块指标含义,请参见 附录。异地应用双活容灾 登录 AHAS控制台。在左侧导航栏,单击 多活实例。在 多活实例...

从PolarDB-X同步至AnalyticDB for PostgreSQL

如果需要在数据同步期间切换 PolarDB-X 的网络类型,在您执行完网络类型切换操作后,请调整同步链路的网络连接信息。在成功启动数据同步作业后,如果在源库中新增了一个表并需要将其作为同步对象,您需要为数据同步作业 新增同步对象。费用...

压测场景的结构和数据分配

或将文件参数进行二次定义(如MD5编码等)再使用的,需要通过数据配置节点预先设置/定义后,方可在API中使用 数据导出指令:用于导出某个串联链路中的数据(导出Cookie为典型应用),供其他串联链路使用,实现导出数据的全局共享。...

功能简介

支持自定义选择已经注册的数据源端数据和目标端,支持多种常见离线同步链路。提供全量任务自动建表、同名字段自动映射、任务调度配置功能。支持对离线任务实例的运行属性和运行日志进行监看。支持对非增量离线同步实例进行实例重跑。实时...

数据集成

通过脚本模式配置离线同步任务 实时同步任务 实时同步支持将多种数据源进行星型链路组合,您可将多种输入及输出数据源搭配,组成多种同步链路进行数据同步。数据集成通过配置输入输出,可实现单表数据同步至目标单表,以及整库数据同步,...

2020年

查看全量迁移链路状态和性能 查看增量迁移链路状态和性能 查看同步链路状态和性能 发布MySQL到ClickHouse的同步功能,支持MySQL结构、全量数据、增量数据同步到ClickHouse,构建实时的数仓。DTS从MySQL数据库同步到ClickHouse集群的功能已...

数据集成:全领域数据汇聚

核心技术与架构 引擎架构 采用星形引擎架构,数据源接入数据集成后,即可与其他各类型数据源组成同步链路进行数据同步。当前支持的数据源请参见 支持的数据源与读写插件、实时同步支持的数据源。数据集成资源组与网络连通 如上图所示,进行...

数据同步

支持自定义选择已经注册的数据源端数据和目标端,支持多种常见离线同步链路,如PostGIS、Ganos、超图SDX和ArcGIS SDE的空间数据同步到PostGIS和Ganos中(邀测中)。提供全量任务自动建表、同名字段自动映射、任务调度配置功能。支持对离线...

功能简介

支持自定义选择已经注册的数据源端数据和目标端,支持多种常见离线同步链路,如PostGIS、Ganos、超图SDX和ArcGIS SDE的空间数据同步到PostGIS和Ganos中(邀测中)。提供全量任务自动建表、同名字段自动映射、任务调度配置功能。支持对离线...

功能特性

授予DTS访问云资源的权限 准备用于数据迁移的数据库账号 可靠性 集群高可用 使用高规格服务器来保证每条迁移或同步链路都能拥有良好的传输性能。产品优势 断点续传 具有自动断点续传机制,有效地保证数据传输的可靠性。产品优势 数据源容灾...

配置同步任务(旧控制台)

定位至已购买的数据同步实例,单击该实例的 配置同步链路。配置同步通道的源实例及目标实例信息。上述配置完成后,单击 授权白名单并进入下一步。说明 当源实例或者目标实例为阿里云实例时,此步骤会将DTS服务器的IP地址自动添加到源实例...

同步时源库为Redis的注意事项及限制

为保障同步链路稳定性,建议将配置文件 redis.conf 中 repl-backlog-size 参数的值适当调大。请勿在源库中执行 FLUSHDB 和 FLUSHALL 命令,否则将导致源和目标的数据不一致。源库需开启AOF日志。如果源库中的某些Key使用了过期(expire)...

数据导出指令

在压测场景中,可以导出某个串联链路中的数据(如Cookie、出参或通过数据指令定义的参数)供其他串联链路使用,做到导出数据在全局共享。本文以导出API的出参为例,说明数据导出指令的使用方法。背景信息 若某业务场景中有串联链路如下:...

参数概述

数据导出参数 无 导出串联链路中的参数后,供其它串联链路使用。更多信息,请参见 数据导出指令。数据指令—自定义参数 串联链路 通过数据指令定义的自定义参数,可以对普通参数或出参参数进行二次定义。更多信息,请参见 数据指令。数据...

新增离线数据同步任务

单击 查看同步链路支持范围,可查看离线同步链路源端和目标端支持范围。在数据源下拉列表,单击 创建数据源,可在弹出的面板中新建云计算资源。数据表 选择待同步的数据表。在数据表下拉列表,单击 获取物理表,可获取最新物理表Meta信息。...

新增离线数据同步任务

单击 查看同步链路支持范围,可查看离线同步链路源端和目标端支持范围。在数据源下拉列表,单击 创建数据源,可在弹出的面板中新建云计算资源。数据表 选择待同步的数据表。在数据表下拉列表,单击 获取物理表,可获取最新物理表Meta信息。...

从PolarDB-X同步至云原生数据仓库 AnalyticDB MySQL ...

如果需要在数据同步期间切换 PolarDB-X 的网络类型,在您执行完网络类型切换操作后,请调整同步链路的网络连接信息。请勿在数据同步时,对源库的同步对象使用gh-ost或pt-online-schema-change等类似工具执行在线DDL变更,否则会导致同步...

从自建Redis集群同步至Redis集群实例

为保障同步链路稳定性,建议将配置文件 redis.conf 中 repl-backlog-size 参数的值适当调大。为保障同步质量,DTS会在源Redis数据库中插入一个key:DTS_REDIS_TIMESTAMP_HEARTBEAT,用于记录更新时间点。请勿在源集群中执行 FLUSHDB 和 ...

产品优势

数据同步服务 具备多种数据库的日志解析能力,支持多种实时数据同步与订阅场景,经历了众多业务场景的高压锤炼,链路稳定性高达 99.95%,轻松保障事务完整性和同步链路的良好传输性能。分布式事务 蚂蚁集团自主研发的金融级分布式事务...

Tair实例间的双向同步

功能概述 双向同步功能需要您依次配置两条同步链路,分别为正向数据同步任务、反向数据同步任务。在正向数据同步任务中会执行 全量迁移 和 增量同步,但反向数据同步任务仅执行 增量数据 同步。全量迁移:DTS将源库的存量数据全部迁移到...

从ECS上的自建Redis同步至Redis实例

为保障同步链路稳定性,建议将源Redis数据库的配置文件 redis.conf 中 repl-backlog-size 参数的值适当调大。为保障同步质量,DTS会在源Redis数据库中插入一个key:DTS_REDIS_TIMESTAMP_HEARTBEAT,用于记录更新时间点。如果配置Redis集群...

基本概念

单位为每秒记录数(RPS),详情请参见 数据同步链路规格说明。同步延迟 同步延迟是指同步到目标数据库的最新数据的时间戳,与源数据库的当前时间戳之间的差值。如果同步延迟为0,则源数据库与目标数据库的数据完全同步。数据更新 数据更新...

指令概述

若需进一步模拟业务流量,可以使用指令功能来改变、控制串联链路中的压测行为和流程。指令包含数据指令、数据导出、条件跳转、思考时间、集合点等。指令列表 PTS支持的指令功能及对应功能说明详见下表。指令 说明 数据配置指令 使用数据...

实时同步能力说明

功能概述 实时同步支持的能力如下图所示:功能 描述 多种数据源间的数据同步 实时同步支持多种数据源星型链路组合,您可以将多种输入及输出数据源搭配组成同步链路进行数据同步。详情请参见 实时同步支持的数据源。复杂网络环境下的数据...

从ECS上的Codis集群同步至Redis实例

为保障同步链路稳定性,建议将源集群的配置文件 redis.conf 中 repl-backlog-size 参数的值适当调大。为保障同步质量,DTS会在源集群中插入一个key:DTS_REDIS_TIMESTAMP_HEARTBEAT,用于记录更新时间点。请勿在源集群中执行 FLUSHDB 和 ...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
可观测链路 OpenTelemetry 版 数据传输服务 应用实时监控服务 智能数据建设与治理 Dataphin 全局事务服务 (文档停止维护) 弹性公网IP
新人特惠 爆款特惠 最新活动 免费试用