PolarDB数据源配置
云数据库PolarDB是阿里云对外提供的一种即开即用、稳定可靠、可弹性伸缩的在线数据库服务（了解PolarDB）。购买 PolarDB 前须知 OpenSearch目前支持PolarDB for mysql5.6、5.7、8.0。PolarDB集群必须隶属于当前登录阿里云账号才能访问使用...
查询子实例间的同步延迟
在使用过程中，您可以随时查询子实例的同步状态、同步延迟和同步数量，掌握同步链路的实时情况。前提条件 Tair 全球多活实例中至少包含2个子实例。关于如何添加子实例，请参见 为分布式实例添加子实例。操作步骤 登录 Tair管理控制台。在...
实时同步任务延迟解决方案
在DataStudio新建的数据库迁至DataHub等类型实时同步任务，您可以单击右侧的 基本配置 设置任务内存。同步解决方案任务，您可以在 运行资源设置 步骤中设置内存。确认源端数据是否有倾斜或者是否需要扩展分区或shard的数量 对于源端是Kafka...
配置监控报警
DTS为数据同步作业提供了监控报警功能，您可以通过控制台对重要的监控指标设置报警规则，让您第一时间了解同步作业的状态。前提条件 已完成数据同步作业的配置流程，详情请参见 配置数据同步作业。操作步骤 登录 数据传输控制台。在左侧...
全球多活同步延迟测试
产品概述 Tair 全球多活 是阿里云自研的基于 云原生内存数据库Tair 的多活数据库系统。通过数据同步通道将多个子实例组网成1个逻辑上的分布式实例，所有子实例均可读写并保持实时数据同步，可轻松支持异地多个站点同时对外提供服务的业务...
通过DataWorks导入
您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，以便在同步任务配置过程中，可通过选择数据源名称来控制同步任务的读取和写入数据库。同步任务支持的数据源及其配置详情请参见 支持的数据源及同步方案。说明 数据...
通过DataWorks导入数据
您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，以便在同步任务配置过程中，可通过选择数据源名称来控制同步任务的读取和写入数据库。同步任务支持的数据源及其配置详情请参见 支持的数据源及同步方案。说明 数据...
产品架构
此过程将持续下去，直到所有正在进行的数据变更都复制到目标数据库，并且源数据库和目标数据库完全同步。数据同步的工作原理 DTS可以在两个数据源之间同步正在进行的数据变更。数据同步通常用于OLTP到OLAP的数据传输。数据同步包括以下两个...
创建同步ADS
2.同步说明 1）目前DataHub仅支持将TUPLE数据同步到ADS服务中2）ReplaceInto与IgnoreInto：ReplaceInto模式下，会使用replace into语句将数据插入，反之，IgnoreInto会使用insert方式插入数据库（replace into将根据主键覆盖记录，ignore ...
全球多活同步延迟测试
产品概述 Redis 全球多活 是阿里云基于云数据库Redis自研的多活数据库系统，可轻松支持异地多个站点同时对外提供服务的业务场景，助力企业快速复制阿里巴巴异地多活架构。更多信息，请参见 Redis全球多活简介。测试环境 本案例中，分布式...
数据同步流程
您已为源端和目标端创建专用于数据同步的数据库用户，并赋予其相关权限。详情请参见 创建数据库用户。新建数据源。在 数据传输>管理数据源 页面，分别新建源端和目标端的数据源。详情请参见 新建数据源 模块的文档。购买数据同步项目。根据...
MySQL只读实例简介
在对数据库有少量写请求，但有大量读请求的应用场景下，单个实例可能无法承受读取压力，甚至对业务产生影响。为了实现读取能力的弹性扩展，分担数据库压力，您可以创建一个或多个只读实例，利用只读实例满足大量的数据库读取需求，增加应用...
Oracle数据导入
您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，以便在同步任务配置过程中，可通过选择数据源名称来控制同步任务的读取和写入数据库。同步任务支持的数据源及其配置详情请参见 支持的数据源及同步方案。说明 数据...
数据同步操作指导
背景知识 同步方案概览 介绍数据同步功能支持的数据库、同步初始化类型和同步拓扑，以及配置步骤。结构初始化涉及的数据类型映射关系 由于不同的数据库支持的数据类型不一样，数据类型无法完全对应。DTS在执行结构初始化时，会根据目标库...
通过云监控平台为DTS任务设置报警规则
背景信息 云监控平台目前支持的监控项为延迟信息和任务状态：监控项目 说明 配置入口 延迟信息 监控增量数据迁移延迟信息，当迁移延迟、同步延迟或订阅延迟的时间超过设定值时（单位为毫秒），触发报警规则。阈值报警 任务状态 监控任务的...
修复同步作业预检查失败的问题
数据库存在性检查 当待同步的数据库在目标实例中不存在，由DTS自动创建时，可能由于下述原因导致创建失败：数据库名包含小写字母、数字、下划线（_）或中划线（-）以外的其他特殊字符。数据库的字符集为utf8、GBK、latin1或utf8mb4以外的...
重新配置数据同步作业
注意事项 执行该操作后，将造成下述影响，请谨慎操作：数据同步作业将停止同步数据，即不再将源库的增量数据变更和结构变更同步至目标库。数据同步作业的配置（含监控报警策略）信息将被清空，并转变为 未配置 状态。操作步骤 登录 数据...
通过Mongo Shell管理数据库账号
roles":[{"role":"readAnyDatabase","db":"admin"}]} 查询目标数据库的所有数据库账号 说明 您可以通过 use database_name 命令切换数据库，其中 database_name 为目标数据库的名称。方式一：在目标数据库执行查询命令。show users 说明 ...
管理报警
添加自定义告警规则 RDS PostgreSQL除一键告警外，还支持您根据实际需要自定义告警规则，支持的报警项如下：数据库年龄 非活跃复制槽数量 最慢SQL执行耗时 最大复制槽延迟 只读同步延迟 只读流复制状态 最慢Standby回放延迟 最长事务执行...
使用DTS同步RDS MySQL数据到AnalyticDB MySQL 2.0
本文以RDS MySQL数据源为例，介绍如何通过DTS将RDS MySQL数据实时同步至 AnalyticDB MySQL版 2.0 中。前提条件 根据 RDS MySQL快速入门，准备好测试...进入 AnalyticDB MySQL版控制台，在 ads_DataBase 数据库中可以查看到同步过来的数据表。
湖仓一体
本章节介绍如何通过 云数据库SelectDB 提供的联邦查询技术，对数据湖、数据库、远端文件等外部数据源进行联邦分析。为您提供简单、快速的数据分析体验。概述 云数据库SelectDB 提供多源数据目录功能（Multi-Catalog或Catalog），支持对接...
云监控控制台查看监控
您可以查看各云服务的监控图表，了解资源的运行状况...MaterializeMySQL同步失败个数 使用MaterializeMySQL引擎创建的同步数据库同步失败个数。延迟Insert个数 延迟的插入语句个数。Kafka外表消费发生错误个数 同步失败的Kafka外表消费个数。
通过DTS采集数据
注意 DataHub同步的是增量数据，您的数据库中必须插入、删除或更新一条或多条数据后，才会同步到DataHub中。本案例采用手动插入数据的方法，但在实际情况中，都是将用户的购买行为，通过程序的方式动态同步到数据库中的。进行数据抽样时，...
修改持久内存型实例的同步模式
云原生内存数据库Tair 持久内存型实例的默认同步模式为异步，若业务场景对数据持久化要求较高，您可以在控制台将其同步模式修改为半同步，提高数据安全性。前提条件 实例为持久内存型，且版本为1.2.4及以上。说明 低版本的持久内存型实例可...
资源组操作及网络连通
如果您使用独享数据集成资源组走公网同步数据，请在数据库白名单列表中添加独享数据集成资源组本身的EIP地址。获取独享数据集成资源组EIP地址如下：在 DataWorks控制台 的 资源组列表 页面中的 独享资源组 页签下，单击数据集成资源组后的 ...
新增数据同步任务
数据库：选择 RDS 数据源实例下需要同步的数据库。数据表：选择数据库中的一张表。填写 数据去向信息：数据源：选择云搜数据源。索引名称：默认选择 与源库表名相同 来创建索引；也支持以自定义的方式创建索引。说明：如果填写的索引名称在...
DDL 同步范围
本文 DDL 同步支持说明中的 DDL 语句，仅作为 DDL 示例，具体语法受不同数据库支持影响，略有差异，请根据不同数据库实际语法评估支持的 DDL 语句。本文 DDL 同步支持说明中的表相关的 CREATE DDL，需要以 匹配规则 的方式选择对象，并且 ...
更改 Topic
适用场景 创建数据库至消息队列的数据同步项目时，数据传输支持您在选择需要同步的 Topic 类型后，通过 更改 Topic 功能重新选择 Topic 名称。操作步骤 将数据同步项目配置至 选择同步对象 步骤。详情请参见相应类型的 数据同步 项目文档。...
列存索引延迟告警
当您需要监控 云原生多模数据库 Lindorm 计算引擎中列存索引的同步延迟时，可以通过本文提供的配置方法，设定延迟告警监控功能，来帮助您及时发现和解决其性能问题。前提条件 已开通计算引擎。如何开通，请参见 开通与变配。已开通列存索引...
重启实例
当实例连接数满或出现访问异常时，您可以重启 云原生内存数据库 Tair。重启的影响与注意事项 重启可能发生 数据丢失。重启过程中实例会发生 秒级闪断，请判断业务影响后执行重启操作，重启前请做好业务安排并 确保应用有重连 机制。操作...
重启实例
当实例连接数满或出现访问异常时，您可以重启 云数据库 Redis 版。重启的影响与注意事项 重启可能发生 数据丢失。重启过程中实例会发生 秒级闪断，请判断业务影响后执行重启操作，重启前请做好业务安排并 确保应用有重连 机制。操作步骤 ...
实时数据同步
可应用于数据异地灾备、数据库扩缩容、跨境数据同步、查询与报表分流、云 BI（商业智能工具）及实时数据仓库等多种业务场景。支持的同步链路 数据源端 数据目的端 支持的拓扑 备注 MySQL Zsearch（云搜）单向同步 已支持 OceanBase ODPS、...
单向同步升级至双向同步
前提条件 数据同步任务的源和目标数据库实例为支持双向同步的数据库类型和版本。例如，源和目标数据库均为8.0版本的 MySQL。更多信息，请参见 同步方案概览。数据同步任务的同步拓扑为 单向同步。数据同步任务的状态为 运行中。费用说明 如...
源库存在触发器时如何配置同步作业
当您同步任务的对象为整库，且该数据库中包含了会更新库内某个表的触发器（Trigger）时，可能会导致源库和目标库的数据不一致。本文介绍源库存在触发器的情况下如何正确地配置同步作业，以确保数据的一致性和完整性。重要 若您使用的是新版...
调用OpenAPI配置Redis企业版实例间单向或双向数据同步
如果数据库业务量较大或服务器规格较低，可能会加重数据库压力，甚至导致数据库服务不可用。建议您在执行数据迁移前谨慎评估，在业务低峰期执行数据同步。请勿在源实例中执行 FLUSHDB 和 FLUSHALL 命令，否则将导致源和目标的数据不一致。...
T+1多库合并建仓
背景信息 在数据库应用中，当单个关系型数据库RDS（Relational Database Service）的数据量越来越多时，相应的数据查询时间也会延长，影响用户体验。为保证业务可以继续使用RDS数据库，业务端通常会采用分库分表技术，将一个RDS数据库中的...
购买流程
说明 关于同步拓扑的介绍，请参见 支持的数据库、同步类型、同步拓扑以及配置文档。同步拓扑 支持 双向同步 选项的 源实例 和 目标实例 请参见 支持双向同步的链路。网络类型 Serverless任务使用的网络类型，固定为 专线。资源组 选择...
为子实例设置同步延迟的监控报警
背景信息 云数据库 Redis 版 全球多活实例已接入云监控平台，云监控 是针对阿里云资源和互联网应用进行监控的服务，可以帮助您提升系统服务可用时长，降低企业IT运维监控成本。操作步骤 登录 云监控控制台。在左侧导航栏，选择 报警服务>...
MySQL整库实时同步至OSS数据湖
配置页面的右侧为源端数据库表的预览，是根据上述步骤中配置的数据源预览出来的待同步的数据库表和已选择好要同步的数据库表的预览情况。您可根据待同步的源端数据库表的数量，参考以下操作建议，快速选择要同步的库表。如果您的数据库表...
ClickHouse控制台查看监控
MaterializeMySQL同步失败个数 使用MaterializeMySQL引擎创建的同步数据库同步失败个数。延迟Insert个数 延迟的插入语句个数。Kafka外表消费发生错误个数 同步失败的Kafka外表消费个数。分布式表临时文件个数 分布式表临时文件的个数。...
- 产品推荐
- 这些文档可能帮助您