多表归并任务中执行Online DDL操作导致目标库数据丢失
问题描述 在通过DTS进行多表归并任务时，若在源库进行Online DDL操作，对源库的表结构等进行了调整修改，则同步到目标库时，会出现数据丢失的情况。说明 多表归并任务指将不同源库的表进行归并，继而同步或迁移到目标库。例如：当用户配置...
MySQL四种能规避因数据库变更导致锁表问题的功能
会出现日志空间不足问题。会出现“Duplicated Key”错误。容易导致只读实例复制延迟。部分操作不支持并发DML。无法暂停。受MDL表元数据锁限制。RDS for MySQL Online DDL使用 RDS for MySQL表上Metadata Lock的产生和处理 Online DDL操作...
注意事项与使用限制
通过DMS等客户端工具执行DDL时，若无法评估DDL需要的执行时间且客户端工具本身带有超时中断连接（客户端与 PolarDB-X 1.0 之间的连接）的设置，为避免DDL由于超时中断连接而无法被继续执行，您可以启用 PURE_ASYNC_DDL_MODE 异步模式，执行...
Kafka Partition同步策略说明
说明 同一个表的数据和DDL信息会投递到同一个Partition。与表无关的DDL信息（例如CREATE DATABASE）则投递到Partition 0。优势：单个表的创建、变更顺序和源端保持一致，性能较好。缺点：由于不同的表投递到不同的Partition，表与表之间的...
Kafka Partition迁移策略说明
说明 同一个表的数据和DDL信息会投递到同一个Partition。与表无关的DDL信息（例如CREATE DATABASE）则投递到Partition 0。优势：单个表的创建、变更顺序和源端保持一致，性能较好。缺点：由于不同的表投递到不同的Partition，表与表之间的...
【通知】慢SQL的模板化算法优化
对DDL语句进行粗粒度模板化，例如MySQL中的DDL，会被统一模板化成以下几类："CREATE DATABASE?CREATE TABLE?CREATE INDEX?CREATE VIEW?ALTER DATABASE?ALTER TABLE?DROP DATABASE?DROP TABLE?DROP INDEX?DROP ...
任务管理语句
说明 恢复任务前，建议您先通过SHOW DDL仔细查看任务中断或者失败的原因，找到并解决导致DDL任务失败的因素后，再执行恢复任务的操作，否则恢复任务可能会遭遇同样的问题导致失败。语法 RECOVER DDL { ALL|[,].} 参数 说明 ALL 恢复所有...
执行DDL语句进行变更时系统提示“The MySQL server is...
解决方案 请确认当前使用的数据库类型后，选择以下对应的步骤：实例为主库 此问题一般在10分钟内会自动修复，请您在10分钟后重新执行任务即可。说明：如果超过10分钟没有修复该问题，请获取工单号和对应的数据库信息提供给对应的DBA，如何...
DDL物理复制优化
PolarDB 通过DDL物理复制优化功能，在主节点写物理日志和只读节点应用物理日志的关键路径上进行了全面优化，大大缩短了主节点上DDL操作的执行时间和只读节点上解析DDL的物理日志复制延迟时间。本文介绍如何使用DDL物理复制优化功能。前提...
RDS 同步到云搜
同步过程中，如果 RDS 中某个表进行了 DDL 操作，数据同步服务会跳过这个 DDL，此后同步到这个表的相关 DML 操作时，会出现同步失败。此时，需要重新修改任务，再重启即可。前置条件 请确保您已经提前购买了 RDS 源端数据库，以及目的端...
polar_ddl_manager
ALTER TABLE[IF EXISTS]name ATTACH PARTITION partition_name { FOR VALUES partition_bound_spec|DEFAULT }[NOCHECK_CONSTRAINT]用户需确保ATTACH的分区和DEFAULT的分区中的数据已经满足分区约束，否则会出现数据正确性问题。性能对比 ...
Faster DDL
前提条件 实例版本如下：MySQL 8.0（内核小版本 为20200630或以上）MySQL 5.7（内核小版本 为20200630或以上）MySQL 5.6（内核小版本 为20200630或以上）背景信息 数据库经常会执行DDL操作，也经常会遇到DDL相关的问题，例如：为什么加索引...
PolarDB MySQL版8.0.1版本发布日志
修复RO节点的物理机出现故障时，RW节点在特殊情况下未将其复制关系中断，而引发RW节点刷脏受阻的问题。修复HA后，因表数量过多而引发table cache淘汰导致Autoinc回退的问题。修复多主集群缓存中心重启情况下，读写节点可能无法启动的问题。...
故障演练常见问题
欢迎您反馈在使用故障演练过程中遇到的问题，目前提供以下常见问题供您参考。单个演练活动成功状态怎么判断？因为一个活动可能会有很多目标机器，当所有机器执行完毕之后，如果有机器没有执行成功，那么这个演练活动就会被系统判断为失败。...
2023年
无 缺陷修复 修复带SORT KEY的内存攒批任务执行后可能会出现的查询报错问题。修复Serverless实例读取字符串类型数据可能出错的问题。修复WHERE子句中过滤条件过多可能出错的问题。修复SQL包含like语句时可能出现报错的问题。修复扩缩容等锁...
故障排查
如果您在使用 ACK Serverless集群 时出现故障，可根据以下故障分类匹配故障场景和解决方案，帮助您快速排查问题，提升运维效率。分类 相关文档 集群资源和集群组件异常问题排查 集群检查项及修复方案（包括升级集群、迁移集群、安装组件、...
事件触发器行为总览
只要与一个事件触发器相关的事件在事件触发器所在的数据库中发生，该事件触发器就会被引发。当前支持的事件是 ddl_command_start、ddl_command_end、table_rewrite 和 sql_drop。未来的发行版中可能会增加对更多事件的支持。ddl_command_...
参数设置
说明 请输入 可修改参数 取值范围内的参数值，否则当您 批量提交 时会出现错误提示。修改 数据库级 参数 单击 数据库级 页签后，找到目标数据库名称并单击目标数据库页签。找到目标参数，单击 运行参数值 栏的。说明 您可以单击 参数描述 ...
数据库代理常见问题
为什么查询时会出现乱码？DDL操作是否会自动从主库同步到从库?什么是数据库代理？数据库代理是位于数据库服务端和应用服务端之间的网络代理服务，用于转发应用服务端访问数据库时的所有请求，提供自动读写分离、事务拆分、连接池、连接保持...
使用DTS同步
源表DMS_ONLINE_DDL过程中是否复制临时表到目标库 如果源库使用 数据管理DMS（Data Management Service）执行Online DDL变更，您可以选择是否同步Online DDL变更产生的临时表数据。是：同步Online DDL变更产生的临时表数据。说明 Online ...
查看列存索引构建的执行进度
本文介绍当操作大表或遇到执行时间较长的DDL语句时，如何在列存索引（IMCI）和InnoDB两种场景下查看DDL语句的执行速度和构建进度。列存索引（IMCI）场景 您可以在对应的表中查看您需要的信息：在 INFORMATION_SCHEMA.IMCI_INDEXES 表中查看...
常见错误码及排查方法
SQLException:[15018,2021030506452201000000420803151947572]modify column type is not supported,col=x,oldType=bigint,newType=int 一般情况下，目标库为AnalyticDB MySQL时，会出现示例报错信息。可能原因：链路不支持该类型的DDL操作...
通过Holo Client读写数据
Holo Client是Hologres在JDBC的基础上自研的一款开发接口，适用于大批量数据写入（批量、实时同步至Hologres...如果慢Query日志中，出现大量该SQL，且延迟较高，说明实例的DDL较频繁，建议减少DDL操作频率，以免出现节点间版本不一致的情况。
结构迁移操作说明
通常源端存在目标端不支持的创建语法时，会出现该状态。跳过、移除、查看和修改创建语法 前提条件 已配置并启动数据迁移项目，详情请参见 数据迁移 模块相应类型的配置数据迁移项目文档。使用限制 本文介绍的结构迁移操作适用于 运行中 或 ...
云数据库RDS MySQL版主实例与只读实例之间存在复制...
问题描述 云数据库RDS MySQL版主实例与只读实例之间存在复制延迟。问题原因 原因一：执行过涉及数据量较大的DDL语句。涉及数据量较大的DDL语句可能会产生大量的临时数据表，并且DDL语句通常是单线程执行的，所以速度比较慢，例如 optimize ...
ListDIProjectConfig
用于出现错误后定位日志，排查问题。Success Boolean true 请求是否成功。取值如下：true：成功。false：失败。示例 请求示例 http(s):/[Endpoint]/?Action=ListDIProjectConfig&DestinationType=elasticsearch&ProjectId=1000&RegionId=...
DBMS_METADATA
get_ddl-CREATE TABLE IF NOT EXISTS public.t(a integer,b text COLLATE"default")(1 row)说明 在调用 DBMS_METADATA.GET_DDL 时不指定模式，会在当前模式下查找对象。注意事项 参数大小写 对象类型是大小写不敏感的，以表类型为例，table...
迁移 OceanBase 数据库 Oracle 租户的数据至 Oracle ...
对于无主键且包含 LOB 类型字段的表，反向增量会出现数据质量问题。如果源端字符集为 UTF-8，建议目标端使用兼容源端的字符集（例如，UTF-8、UTF-16 等），避免产生因字符集不兼容导致目标端出现乱码等问题。节点之间的时钟不同步，或者...
数据库优化
当出现元数据锁（MDL）时，会导致大量SQL处于Waiting for table metadata lock的状态，在DDL prepare和commit阶段，DDL语句需要获取MDL锁，如果表上有未提交事务或慢SQL，会阻塞DDL操作，DDL操作又会阻塞其他的SQL，最终导致活跃线程数升高...
DDH生命周期
是 故障 稳定状态 DDH出现故障。您可以 提交工单 检查并处理问题。是 已过期 稳定状态 包年包月DDH到期时出现的状态。对DDH续费后，DDH的状态会变为 运行中。续费详情，请参见 手动续费DDH。是 已释放 稳定状态 包年包月DDH过期后自动释放...
DBMS_METADATA
get_ddl-CREATE TABLE IF NOT EXISTS public.t(+a integer,+b text COLLATE"default"+)(1 row)如果当前处于对象所在的模式下，可以在调用get_ddl时不指定模式，函数会去当前模式下查找对象，同样也可以查找到对应的DDL语句。select current...
异地应用双活切流
选择 故障单元，代表此时，该单元当前出现故障，无法承接流量，MSHA会自动将该单元的流量置0，将另一个单元置为100。b.单击 下一步，进入 容灾切换预览，在预览页，可以看到单元前后比例的对比，和 当前切流服务，如果和您预期不符，请返回...
如何正确处理DDL异常
本文介绍处理DDL异常的常用方法。概述 作为一款分布式数据库，PolarDB-X 中的一条DDL语句背后隐藏着复杂的数据处理流程。例如创建一张拆分表时，实际上会在多个数据节点上创建很多张物理MySQL表。PolarDB-X 的DDL处理框架拥有一定的容错...
自动SQL优化
前提条件 实例为如下版本：RDS MySQL 8.0 高可用系列或集群系列 RDS MySQL 5.7 高可用系列或集群系列 RDS MySQL 5.6 高可用系列 RDS MySQL 5.5 高可用系列 说明 当慢SQL优化完成后，可能会出现全局性能变差的问题，为了提升 SQL自动优化 的...
从ECS上的Codis集群同步至Redis实例
源表DMS_ONLINE_DDL过程中是否复制临时表到目标库 如源库使用 数据管理DMS（Data Management Service）执行Online DDL变更，您可以选择是否同步Online DDL变更产生的临时表数据。是：同步Online DDL变更产生的临时表数据。说明 Online DDL...
从ECS上的Twemproxy Redis集群同步至Redis实例
源表DMS_ONLINE_DDL过程中是否复制临时表到目标库 如源库使用 数据管理DMS（Data Management Service）执行Online DDL变更，您可以选择是否同步Online DDL变更产生的临时表数据。是：同步Online DDL变更产生的临时表数据。说明 Online DDL...
从ECS上的Codis集群同步至Redis实例
源表DMS_ONLINE_DDL过程中是否复制临时表到目标库 如源库使用 数据管理DMS（Data Management）执行Online DDL变更，您可以选择是否同步Online DDL变更产生的临时表数据。是：同步Online DDL变更产生的临时表数据。说明 Online DDL变更产生...
从ECS上的Twemproxy Redis集群同步至Redis实例
源表DMS_ONLINE_DDL过程中是否复制临时表到目标库 如源库使用 数据管理DMS（Data Management）执行Online DDL变更，您可以选择是否同步Online DDL变更产生的临时表数据。是：同步Online DDL变更产生的临时表数据。说明 Online DDL变更产生...
设计方案
容错 容错是指在分布式系统中，系统出现故障时，通过设计和实现可靠的机制和策略，使系统能够自动检测、排除或者纠正错误，保证系统能够正常运行，从而提高系统的可靠性和稳定性。容量 容量是在一定时间内，系统能够处理的最大工作量或数据...
Oracle同步至Tablestore
DDL记录：当源端发生DDL时，DDL会被记录到此处。任务重跑 直接重跑：不修改任务配置，直接单击同步任务 操作 列的 更多>重跑。效果：重新运行一次从结构迁移到启动实时同步的流程。修改后重跑：编辑任务，进行修改操作后，单击 完成。此时...
- 产品推荐
- 这些文档可能帮助您