2023年
本文为MSHA 2023年的版本发布记录，介绍发布的特性变更情况。...新增 配置数据层 新增数据源与同步链路的多对一配置 针对应用双活架构、异地双活架构，MSHA数据层支持将多对数据源绑定到同一条数据同步链路。新增 配置数据层
购买同步实例
SynchronizationJobClass String 是 small 数据同步链路的规格，取值：micro、small、medium、large。说明 关于各链路规格的说明及性能测试情况请参见 数据同步链路规格说明。RegionId String 否 cn-hangzhou 数据同步实例地域的ID，与 ...
创建异地灾备实例
DTS数据同步链路：规格为 small 的 按量付费 同步链路，价格请前往 数据传输详细价格信息 了解。功能限制 灾备实例不支持备份恢复、数据迁移、数据库管理、申请外网访问地址、修改连接地址功能。删库操作不会同步至灾备实例，请您登录灾备...
实时数据同步
支持的同步链路 数据源端 数据目的端 支持的拓扑 备注 MySQL Zsearch（云搜）单向同步 已支持 OceanBase ODPS、DataHub 单向同步 已支持（仅专有云）ORACLE ODPS 单向同步 已支持（仅专有云）MySQL MySQL 单向同步 规划中 数据同步对象 ...
产品优势
高性能 数据同步服务使用高规格服务器来保证同步链路的良好传输性能。相对于传统的数据同步工具，数据同步服务的实时同步功能能够将并发粒度缩小到事务级别，能够并发同步同张表的更新数据，从而极大得提升同步性能，高峰期时，同步性能...
配置告警规则
本文介绍如何配置RDS全球多活数据库集群中双向同步链路的告警规则。操作步骤 访问 全球多活数据库集群 页面。在全球多活数据库集群列表页面，单击目标集群右侧 操作 列中的 更多>配置告警。在 配置告警 对话框中，对同步延迟、同步状态、全...
产品架构
数据源地址动态适配 对于数据订阅及同步链路，容灾系统还会监测数据源的连接地址切换等变更操作，一旦发现数据源发生连接地址变更，它会动态适配数据源新的连接方式，在数据源变更的情况下，保证链路的稳定性。数据迁移工作原理 数据迁移...
功能发布记录（2024年）
2024.1.25 所有地域 所有DataWorks用户 数据脱敏能力概述 数据保护伞概述 数据地图支持展示实时同步链路数据血缘 数据地图新增解析及展示如下实时同步链路的数据血缘：MySQL实时写入MaxCompute/Hologres Kafka实时写入MaxCompute/Hologres ...
同步时源库为PolarDB-X 1.0的注意事项及限制
如果同步的源实例为 PolarDB-X 1.0，您需要在配置具体的同步任务前，参考本文的注意事项及限制，以保障数据同步任务的正常运行。重要 更多功能规范和约束说明，请参见 源为PolarDB-X的功能规范和约束说明。推荐的任务配置方案，请参见 源为...
实时数据API
在实时数据业务场景中，最常见的链路是将实时采集的数据，通过实时计算初步清洗，实时写入数据至数据库，再对接BI工具实现数据的可视化分析。数据处理流程如下图所示。实时数据业务痛点。处理实时数据业务的整个链路中，要求数据库提供高...
数据同步拓扑介绍
数据同步功能支持多种同步拓扑，您可以根据业务需求规划您的同步实例。本文介绍DTS支持的同步拓扑类型和使用说明。单向同步 在单向同步的拓扑中，为保障同步数据的一致性，对目标实例中的同步对象应只进行读操作，请勿进行写操作。拓扑类型...
升级步骤
说明 RDS PostgreSQL到 PolarDB PostgreSQL版 的升级时，会创建N条RDS PostgreSQL到 PolarDB PostgreSQL版 的DTS双向链路，上述的复制延迟小于60秒，指的是N条双向同步链路中延迟最大的链路延迟小于60秒。进入 PolarDB控制台。找到目标集群...
实施步骤
通过DTS实时同步PolarDB for MySQL数据到分析型数据库MySQL版需要以下几个步骤：步骤一：创建DTS同步作业 步骤二：配置同步链路 步骤三：查看同步数据 步骤一：创建DTS同步作业 创建DTS同步作业需要用户支付一定的费用，DTS支持两种付费...
支持的数据库
双向同步 PolarDB PostgreSQL版间的同步 云原生数据仓库 AnalyticDB PostgreSQL 版 4.3、6.0、7.0版本 库表结构同步 全量数据同步 增量数据同步 单向同步 PolarDB PostgreSQL版同步至AnalyticDB PostgreSQL 源为PolarDB-X的同步方案 重要 ...
切流演练
选择同步链路 选中同步链路，可通过源实例库或目标实例库进行搜索。禁写路由ID 设置禁写路由ID，且仅限1个ID，单击 确认。禁写单元 根据 禁写路由ID 自动生成禁写单元。ACM中的IP地址 选中ACM空间，并添加IP地址。需添加多个IP时可通过英文...
源为PolarDB-X的功能规范和约束说明
数据库不支持混合模式，即unit模式和copy模式混合的同步链路。说明 unit模式是多地用户分别在各自地域读写本地域的数据，且本地域的数据会和中心数据双向同步。copy模式是指此集群数据在中心数据库写入，完成后全量同步到各个单元。如果是...
源为PolarDB-X的功能规范和约束说明
数据库不支持混合模式，即unit模式和copy模式混合的同步链路。说明 unit模式是多地用户分别在各自地域读写本地域的数据，且本地域的数据会和中心数据双向同步。copy模式是指此集群数据在中心数据库写入，完成后全量同步到各个单元。如果是...
切换
持续观察源库，确认所有应用已自动连接至PolarDB-X 2.0后，单击 确定源库无业务连接，解除源库的禁写，启动用于回滚的反向同步链路。说明 您可以使用 show processlist 命令查看IP，确定是否有来自业务侧的连接。若您选择 不带地址切换，...
监控任务性能
功能 说明 全量同步链路拓扑 全量同步链路主要展示源库到DTS、DTS到目标库两部分的读写情况和网络信息，相关参数解释如下：源库到DTS的链路 BPS：DTS每秒从源库读取数据量，单位为MB/s。RPS：DTS每秒从源库读取的行数。网络延迟：DTS与源库...
调整链路规格
本文介绍如何调整RDS全球多活数据库集群中双向同步实例的链路规格。操作步骤 访问 全球多活数据库集群 页面。在全球多活数据库集群列表页面，单击目标集群右侧 操作 列中的 更多>DTS实例规格升降配。根据 RDS单元节点地域 定位至目标双向...
数据同步链路规格说明
数据同步规格说明 数据同步根据同步链路的同步性能上限，定义了四种规格：micro、small、medium、large，当满足以下条件时，各个规格的同步性能上限才能达到下表中的性能上限。源实例的压力要大于等于各规格对应的性能上限。目标实例的写入...
使用场景
阿里云边缘节点服务ENS使用场景包括但不限于以下场景：全网广覆盖 全网广覆盖场景包括但不限于以下：在线教育 在线教育端到端之间互动的需求很强，保证极低延时的稳定链路是业务正常开展的重要前提。边缘节点服务ENS提供CDN边缘节点的就近...
查询DTS任务列表及各任务执行详情
说明 关于各链路规格的说明及性能测试情况请参见 数据迁移链路规格说明，数据同步链路规格说明。ConsumptionCheckpoint String 2021-03-23T07:30:31Z 订阅实例的下游消费时间点，格式为 yyyy-MM-dd T HH:mm:ss Z（UTC时间）。EndTimestamp ...
修改同步对象
若新增的同步对象是字段，则该字段的数据不会同步至目标库。在新增同步对象过程中，修改 同步类型 的操作仅对新增对象生效。在修改同步对象过程中，不支持新增或修改数据校验任务。在修改同步对象过程中，不支持修改 是否迁移账号 信息。若...
调用链采样配置最佳实践
调整采样是目前解决这类问题最高效且主流的方式，但具体配置什么样的采样策略，能够在可控的资源开销和费用成本内，最大程度保证错、慢、异常等链路被采集，从而最大限度保障性能监控和问题排查的使用需求。本文将重点围绕不同业务场景下...
通过一键建仓同步至数仓版
注意事项 数据同步过程中，若在源实例PolarDB MySQL中新增库，新增库数据不会自动同步，手动配置同步链路，请参见 手动配置。不要在数据同步过程中增加无主键表，将导致同步链路中断。同步链路中断7天后不再保证数据正确性，请及时处理链路...
通过一键建仓同步至数仓版
注意事项 数据同步过程中，若在源实例RDS MySQL中新增库，新增库数据不会自动同步，需要手动配置同步链路，请参见 手动配置。不要在数据同步过程中增加无主键表，将导致同步链路中断。同步链路中断7天后不再保证数据正确性，请及时处理链路...
配置数据层
COPY 同步延迟策略 同步延迟策略在执行切流时生效：无：数据保护规则上的同步链路在切流时的同步位点时间没有追赶上切流配置生效时间，不禁止对该实例分组下的写操作SQL语句。禁止写入：数据保护规则上的同步链路在切流时的同步位点时间...
配置同步任务（新控制台）
注意事项 本文仅简单介绍数据同步任务的通用配置流程，不同的同步链路在配置数据同步任务时略有不同。指定同步链路的具体配置步骤，请参见 同步方案概览。说明 本文中的配置参数仅供参考，请以实际界面为准。准备工作 当源或目标库为自建...
配置数据层
直接录入 同步链路 已录入的同步链路，通过已选中的数据源可直接匹配得到 redis-同步-正向 redis-同步-反向 创建同步链路成功后，您可以在 同步链路列表 页面查看到创建的同步链路。可选：您还可以在 同步链路列表 页面进行以下操作：查看...
产品架构介绍
数据单向/双向同步：借助DTS等产品能力进行数据同步，特别是对于单向同步链路，支持数据源主备切换过程中的同步链路翻转。读写分离/读写不分离：读写分离，写主云读本地。读写不分离，读写均在主云。主备切换：单云故障，支持数据库跨云主...
MSE+云效AppStack实现应用服务全链路灰度
整体上应用的调用链路是，客户端入口流量首先达到网关应用，而后按顺序经过 A、B、C 三个应用：一次需求发布窗口中，应用 A 和 C 进行了迭代，需要对 A 和 C 的新版本进行全链路灰度测试，调用链路如下：2.操作实践 2.1 开启 MSE 微服务...
镜像同步加速
背景信息 跨境同步加速和自定义同步链路功能区别如下：跨境同步加速：基于调度策略与网络链路优化，提升中国内地与海外地域、中国内地与中国香港之间的同步速度。自定义同步链路：使用自定义的云企业网，为不同地域搭建私网通信通道，实现...
SavePtsScene-保存或修改场景
链路1 RelationId string 否 链路 ID。1 ApiList object[]是 链路下的 API 信息。ApiName string 是 API 名称。api Url string 是 压测 URL。http://www.example.com Method string 是 请求方法。GET ApiId string 否 API 的 ID。1 ...
通过云效构建CI/CD实现微服务全链路灰度
整体架构 整体上应用的调用链路是，客户端入口流量首先达到网关应用，而后按顺序经过A、B、C三个应用：在一次上线窗口中，A和C进行了迭代，进行了灰度发布。在测试流程中，需要对A和C的灰度版本进行全链路灰度的测试，调用链路如下：通过云...
同步日志
IDaaS 中单条数据变更触发的同步事件 账户 手动触发同步组织或账户（暂不支持）同步任务状态 状态 说明 成功 当次所有同步请求全部成功执行。失败 当次所有同步请求全部失败，可能由于网络原因。部分 成功 该批次请求中部分失败，可以查看...
异地应用双活切流
如果是单向同步链路切换，则需要执行 建立反向同步链路，等待反向同步初始化 和 重置正向同步链路，双向同步链路切换则不需要。单击等待反向同步初始化的详情，可以看到同步链路的名称，单元 和 反向同步状态，在这里，可以通过 查看，直接...
PolarDB PostgreSQL版间的迁移
链路规格 DTS为您提供了不同性能的同步规格，同步链路规格的不同会影响同步速率，您可以根据业务场景进行选择。更多信息，请参见 数据同步链路规格说明。订购时长 在预付费模式下，选择包年包月实例的时长和数量，包月可选择1~9个月，包年...
PolarDB-X 1.0同步至阿里云消息队列Kafka
链路规格 DTS为您提供了不同性能的同步规格，同步链路规格的不同会影响同步速率，您可以根据业务场景进行选择。更多信息，请参见 数据同步链路规格说明。订购时长 在预付费模式下，选择包年包月实例的时长和数量，包月可选择1~9个月，包年...
基本概念
单位为每秒记录数（RPS），详情请参见 数据同步链路规格说明。同步延迟 同步延迟是指同步到目标数据库的最新数据的时间戳，与源数据库的当前时间戳之间的差值。如果同步延迟为0，则源数据库与目标数据库的数据完全同步。数据更新 数据更新...
- 产品推荐
- 这些文档可能帮助您