PolarDB MySQL版间迁移
通过数据传输服务DTS（Data Transmission Service），可以帮助您实现 PolarDB MySQL版 集群间的数据迁移。说明 目前 PolarDB MySQL版 集群暂不支持升级MySQL版本至8.0版本，您可以创建一个新的 PolarDB MySQL版 集群（8.0版本），使用本...
PolarDB MySQL版迁移至RDS MySQL
待迁移的表需具备主键或唯一约束，且字段具有唯一性，否则可能会导致目标数据库中出现重复数据。如迁移对象为表级别，且需进行编辑（如表列名映射），则单次迁移任务仅支持迁移至多1000张表。当超出数量限制，任务提交后会显示请求报错，...
通过临时实例恢复SQL Server数据
数据恢复功能可以最大程度地减少数据库误操作造成的损失，您可以通过临时实例来恢复数据。本文介绍通过临时实例恢复SQL Server数据的操作方法。创建临时实例并不影响当前的生产实例，而是提供一个临时实例供数据访问。您可以先将数据恢复到...
RDS PostgreSQL间的数据迁移
本文介绍如何使用数据传输服务DTS（Data Transmission Service），实现 RDS PostgreSQL 间的结构迁移、全量数据迁移以及增量数据迁移。同时使用这三种迁移类型可以实现在业务不停服的情况下，平滑地完成数据库的迁移。前提条件 已创建源和...
使用Zipkin对Nginx进行链路追踪
通过Zipkin为应用埋点并上报链路数据至 可观测链路 OpenTelemetry 版 后，可观测链路 OpenTelemetry 版 即可开始监控应用，您可以查看应用拓扑、调用链路、异常事务、慢事务和SQL分析等一系列监控数据。本文介绍如何使用Zipkin埋点并上报...
压测场景的结构和数据分配
说明 只有使用了数据导出指令，才会出现串联链路之间不是全都并行的情况。为保证用户登录信息不重复，需在压测API对应的 数据配置 中为某参数设置 数据轮询一次。本示例中串联链路1中的参数设置了数据只轮询一次。一批用户登录完成后，将...
PolarDB-X 1.0迁移至RDS MySQL
待迁移的表需具备主键或唯一约束，且字段具有唯一性，否则可能会导致目标数据库中出现重复数据。如迁移对象为表级别，且需进行编辑（如表列名映射），则单次迁移任务仅支持迁移至多1000张表。当超出数量限制，任务提交后会显示请求报错，...
2024年
修复数据处理场景中存储引擎处理特定数据时会触发 negative bitmapset member not allowed 报错信息，导致执行引擎异常崩溃的问题。修复数据处理过程中系统在尝试读取数据文件的特定块时发生错误，触发 beam could not read block in file ...
管理逻辑组合
前提条件 已登录DataV控制台 已进入蓝图编辑器 什么是逻辑组合 逻辑组合就是封装和复用一部分节点和连线，添加到主画布的 逻辑组合节点 与 逻辑组合 是引用关系，修改逻辑组合的名字、内容，均会影响主画布上所有的逻辑节点。新增逻辑组合 ...
自建Oracle迁移至AnalyticDB MySQL 3.0
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将自建Oracle数据迁移至 云原生数据仓库AnalyticDB MySQL版 3.0实例。DTS支持结构迁移、全量数据迁移以及增量数据迁移，同时使用这三种迁移类型可以实现在本地应用不停服的...
逻辑备份恢复至自建数据库
本文介绍如何通过Mongorestore将云数据库MongoDB实例的逻辑备份文件恢复至自建MongoDB数据库中。前提条件 实例存储类型为 SSD本地盘。为保障兼容性，自建MongoDB数据库和云数据库MongoDB实例的数据库版本相同。背景信息 MongoDB提供了一组...
逻辑备份恢复至自建数据库
本文介绍如何通过Mongorestore将云数据库MongoDB实例的逻辑备份文件恢复至自建MongoDB数据库中。前提条件 实例存储类型为 SSD本地盘。为保障兼容性，自建MongoDB数据库和云数据库MongoDB实例的数据库版本相同。背景信息 MongoDB提供了一组...
使用Jaeger对Nginx进行链路追踪
通过Jaeger为应用埋点并上报链路数据至 可观测链路 OpenTelemetry 版 后，可观测链路 OpenTelemetry 版 即可开始监控应用，您可以查看应用拓扑、调用链路、异常事务、慢事务和SQL分析等一系列监控数据。本文介绍如何使用Jaeger埋点并上报...
使用ping命令丢包或不通时的链路测试方法
网络区域 通常情况下，从客户端到目标服务器的整个链路，会显著的包含如下区域：客户端本地网络 本地局域网和本地网络提供商网络，如前文链路测试结果示例图中的区域A，一般为前2~3个节点。如果该区域出现异常，如果是客户端本地网络相关...
自动或手动主备切换
A：RDS在发生异常触发高可用切换时，应用端长连接可能无法感知到连接状态变化，如果没有设置socket超时时间，应用程序会一直等待数据库返回结果，通常会等到几百秒后才会断连，期间数据库的部分连接无法正常工作，SQL会出现大量执行异常。...
从MongoDB单节点实例迁移至副本集或分片集群实例
由于DTS写入数据的逻辑为并发写入，所以会导致目标端占用的存储空间比源端大5%~10%。请确保目标端MongoDB没有与源端相同的主键（默认为_id），否则会导致数据丢失。若目标端有与源端相同的主键，请在不影响业务的前提条件下清空目标端的...
无感数据集成（Zero-ETL）
传统的ETL流程通常会面临以下挑战：资源成本增加：不同的数据源可能需要不同的ETL工具，搭建ETL链路会产生额外的资源成本。系统复杂度增加：用户需要自行维护ETL工具，增加了运维难度，无法专注于业务应用的开发。数据实时性降低：部分ETL...
自建HBase迁移至云原生数据仓库 AnalyticDB MySQL 版 ...
待迁移的表需具备主键或唯一约束，且字段具有唯一性，否则可能会导致目标数据库中出现重复数据。如迁移对象为表级别，且需进行编辑（如表列名映射），则单次迁移任务仅支持迁移至多1000张表。当超出数量限制，任务提交后会显示请求报错，...
配置同步任务（新控制台）
数据传输服务DTS（Data Transmission Service）提供的数据同步功能简单易用，您只需在新版控制台上进行简单操作，即可完成整个数据同步作业的配置。注意事项 本文仅简单介绍数据同步任务的通用配置流程，不同的同步链路在配置数据同步任务...
可用性与可靠性
备份恢复 在某些极端异常的场景，例如整个机房出现故障或者用户数据误删，导致数据丢失，AnalyticDB PostgreSQL版 仍然可以通过远端数据备份的方式恢复集群，提供服务，为极端场景或者用户数据误删情况下提供进一步的数据恢复手段。...
依赖服务
将应用数据上报至 可观测链路 OpenTelemetry 版 后，可观测链路 OpenTelemetry 版 即可开始监控应用，您可以在 依赖服务 页面了解应用依赖服务的详情，包括外部调用、数据库调用和消息队列的详细信息。前提条件 已将应用数据上报至 可观测...
PolarDB MySQL版间的单向同步
如果数据同步的源库没有主键或唯一约束，且记录的全字段没有唯一性，可能会出现重复数据。建议源和目标 PolarDB MySQL版 集群的数据库版本保持一致，或者从低版本同步到高版本以保障兼容性。费用说明 同步类型 链路配置费用 库表结构同步和...
配置数据层
配置异地应用双活数据层主要包括数据源、数据同步以及数据保护规则。各单元之间数据源的数据会通过数据同步组件进行复制，并按照指定的数据保护规则承担不同比例流量写入和读取，使各个单元的数据保持最终一致性。当某个单元出现异常或者不...
PolarDB-X 1.0同步至PolarDB-X 2.0
源库、目标库出现其他问题后的重试时间 在同步任务启动后，若源库或目标库出现非连接性的其他问题（如DDL或DML执行异常），则DTS会报错并会立即进行持续的重试操作，默认持续重试时间为10分钟，您也可以在取值范围（1~1440分钟）内自定义重...
逻辑数仓
数据管理DMS提供的逻辑数仓具有强大的数据源管理能力，可以实现将企业的异构数据源进行逻辑聚合，形成物理分散、逻辑统一的虚拟数仓，然后快速地提供数据分析和访问服务，满足业务人员、BI分析师、运营人员等各种角色的需求。背景信息 企业...
PolarDB-X 1.0间同步
在同步期间，请勿对源实例执行扩缩容（比如扩缩容其下挂载的 RDS MySQL，或者虽未扩缩容 RDS MySQL，但 RDS MySQL 中逻辑库表对应的物理库表的分布发生变化）、迁移热点表、变更拆分键操作和变更DDL等操作，否则数据同步任务会失败，或者...
提供服务
将应用数据上报至 可观测链路 OpenTelemetry 版 后，可观测链路 OpenTelemetry 版 即可开始监控应用，您可以在 提供服务 页面了解应用提供的服务详情，包括接口调用、消息队列、定时任务和内部方法的详细信息。前提条件 已将应用数据上报至...
PolarDB-X 1.0同步至阿里云消息队列Kafka
在同步期间，请勿对源实例执行扩缩容（比如扩缩容其下挂载的 RDS MySQL，或者虽未扩缩容 RDS MySQL，但 RDS MySQL 中逻辑库表对应的物理库表的分布发生变化）、变更拆分键操作和变更DDL等操作，否则数据同步任务会失败，或者数据不一致。...
迁移时源库为PolarDB-X 2.0的注意事项及限制
待迁移的表需具备主键或唯一约束，且字段具有唯一性，否则可能会导致目标数据库中出现重复数据。如迁移对象为表级别，且需进行编辑（如表列名映射），则单次迁移任务仅支持迁移至多1000张表。当超出数量限制，任务提交后会显示请求报错，...
数据管理DMS逻辑库同步至云原生数据仓库 AnalyticDB ...
数据传输服务DTS（Data Transmission Service），支持将在数据管理（Data Management，简称DMS）配置的逻辑库同步至 云原生数据仓库AnalyticDB MySQL版 3.0，帮助您快速构建企业内部BI、交互查询、实时报表等系统。前提条件 已在数据管理...
异地应用双活切流
说明 单元（地域）间通信出现故障，将流量，主数据库全部切换到主单元（地域）。a.MSHA会自动将备单元的流量切0，主数据在备单元的也会自动选中，后续会切换单主单元。b.单击 下一步，进入 容灾切换预览，在预览页，可以看到单元前后比例的...
RocketMQ全链路追踪解决方案
在分布式应用系统中，多个服务间的交互涉及复杂的网络通信和数据传输，往往一次请求需要多个内部服务间的相互调用才能完成，任何一个环节出现问题都可能导致外部服务任务执行失败或延时，且很难快速定位问题根源。链路追踪功能可在多个服务...
云数据库Redis间的单向同步
若在源库执行多Key操作时，Key不在同一个slot或涉及多个slot，则会出现以下报错：CROSSSLOT Keys in request don't hash to the same slot 建议在DTS同步过程中仅执行单Key操作，以免导致链路中断。其他限制 若源实例为自建Redis，则Slave...
MaxCompute近实时增全量一体化架构介绍
在大数据开源生态领域，针对这些问题已经出现了一些典型的解决方案，其中最典型的是Spark、Flink、Trino等开源数据处理引擎，它们深度集成了Hudi、Delta Lake、Iceberg、Paimon等开源数据湖，并以开放统一的计算引擎和数据存储理念为基础，...
PolarDB-X 1.0同步至云原生数据仓库 AnalyticDB ...
数据传输服务DTS（Data Transmission Service）支持将 PolarDB-X 1.0 同步至 云原生数据仓库AnalyticDB PostgreSQL版，帮助您轻松实现数据的流转，将企业数据集中分析。前提条件 PolarDB-X 1.0 的存储类型需为RDS MySQL，暂不支持为PolarDB...
PolarDB-X 1.0同步至Elasticsearch
源库、目标库出现其他问题后的重试时间 在同步任务启动后，若源库或目标库出现非连接性的其他问题（如DDL或DML执行异常），则DTS会报错并会立即进行持续的重试操作，默认持续重试时间为10分钟，您也可以在取值范围（1~1440分钟）内自定义重...
Linux实例网站访问丢包延时高的排查方法
概述 当网站访问很慢或无法访问时，若已经排除显著的问题，而使用ping命令检测到有明显丢包时，建议您做链路测试。Linux环境下，推荐优先使用mtr命令行工具测试，或使用traceroute命令行工具进行链路测试来判断问题来源。通常情况下，链路...
PolarDB-X 1.0同步至PolarDB MySQL版
在同步期间，请勿对源实例执行扩缩容（比如扩缩容其下挂载的 RDS MySQL，或者虽未扩缩容 RDS MySQL，但 RDS MySQL 中逻辑库表对应的物理库表的分布发生变化）、迁移热点表、变更拆分键操作和变更DDL等操作，否则数据同步任务会失败，或者...
PolarDB MySQL版间的双向同步
如果数据同步的源集群没有主键或唯一约束，且记录的全字段没有唯一性，可能会出现重复数据。如双向同步任务的源实例或目标实例位于海外地域，则仅支持同地域的双向同步，不支持跨地域的双向同步。例如，支持日本地域间的双向同步，不支持...
基本概念
资源管理 资源管理，实现系统资产和配置管理功能，提供各类资源及其相关属性的维护管理，范围不仅包括设备、服务器和IoT之类物理资源，也包括IP地址、业务链路等逻辑资源。设备 一般指IP网数通类网络通信设备，比如交换机、路由器、防火墙...
- 产品推荐
- 这些文档可能帮助您