Query洞察

Query洞察旨在结合 慢Query日志 和统计信息日志系统hg_table_info,快速获取当前Query的执行信息,例如Query进程的资源消耗、Query所涉及的的元数据,以及Query对应的执行计划(plan)。同时可以通过Query洞察快速判断当前Query是否...

Multi-Master关键技术介绍

本文对Multi-Master架构的关键技术点进行介绍,包括分布式事务处理、全局死锁处理、DDL支持、分布式表锁支持、集群容错和高可用能力。分布式事务管理 AnalyticDB PostgreSQL版 分布式事务 AnalyticDB PostgreSQL版 通过二阶段提交协议(2PC...

手工概述

详情:查看的详情信息,包括 数据名、负责人、手工最近修改人、手工最近修改时间、描述、结构。版本:支持查看的发布版本信息,包括 版本更新时间、负责人、更新操作类型。搜索:支持查找当前数据或替换数据内容。自...

手工概述

详情:查看的详情信息,包括 数据名、负责人、手工最近修改人、手工最近修改时间、描述、结构。版本:支持查看的发布版本信息,包括 版本更新时间、负责人、更新操作类型。搜索:支持查找当前数据或替换数据内容。自...

以及排查

操作/锁范围 表 数据锁 行数据 Schema锁 CREATE 不涉及 DROP 说明 一旦DROP命令获取锁,无法执行其他命令,其他命令会等待锁,直到发现表被删除了,则其他命令失败。说明:不涉及 不涉及 说明 与其他操作都冲突。ALTER 说明 与DROP...

MySQL四种能规避因数据库变更导致锁表问题的功能

概述 MySQL在大数据量的情况下进行结构变更(增加字段、修改字段属性、增加索引、修改索引等),需要考虑锁表的风险,锁表可能导致业务无法正常写入。本文主要介绍四种能较好地规避因数据库变更导致锁表问题的功能。详细信息 功能 优点 ...

写入或更新调优指南

离线写入如MaxCompute写入Hologres时是表锁,实时写入大多数是Fixed Plan写入为行(例如Flink实时写入或者DataWorks数据集成实时写入),如果对同一个并发执行离线写入和实时写入,那么离线写入就会拿表锁,实时写入会因为等而导致...

参数调优建议

innodb_autoinc_lock_mode 适用版本:8.0、5.7、5.6、5.5 修改完后是否需要重启:是 作用:在MySQL 5.1.22后,InnoDB为了解决自增主键锁表的问题,引入了参数innodb_autoinc_lock_mode,用于控制自增主键的锁机制。该参数可以设置的值为0、...

无锁结构变更方案对比

锁表变更对业务甚至是致命的,DDL无锁变更通过引入非触发器的方式可以解决大表无锁变更这个难题。本文介绍几种无锁结构变更方案的对比。线上业务不建议直接进行DDL操作,通常有几种做法来避免影响业务:业务低峰期变更:合适的变更窗口以及...

同步时源库为PostgreSQL的注意事项及限制

对于表级别的数据同步,如果除DTS以外的数据没有写入目标库,您可以使用数据管理DMS(Data Management)来执行在线DDL变更,请参见 不锁表结构变更。在DTS同步期间,不允许有除DTS外的数据写入目标库,否则会导致源库与目标库数据不一致。...

无锁结构变更

背景信息 为解决变更数据库表结构时的锁表问题,ODC V4.2.0 版本提供了无锁结构变更功能,该功能可以较好地规避因锁表以致于阻塞业务。本文档旨在介绍如何通过提交无锁变更工单实现数据库无锁结构变更。ODC 支持的在线结构变更 分类 操作 ...

PolarDB MySQL 8.0.2版支持的DDL执行方式

本文从以下几方面介绍了8.0.2版本的支持情况:是否允许并发DML(是否锁表):非锁表的DDL(支持Online DDL功能)只在修改元数据时申请表互斥锁(持续时间一般不超过1秒),在表结构变更期间允许对目标表进行读写操作,提高了在生产环境中的...

无锁结构变更概览

DDL无锁变更能够有效解决结构变更时锁表的问题,较好地规避了因锁表导致业务阻塞的问题、避免了数据库原生Online DDL带来的主备延迟现象。您可在业务低峰期提交无锁变更。背景信息 在数据量大的情况下进行结构变更,需要考虑锁表的风险,...

开启无锁结构变更

原生无锁优先,失败转DMS执行 优先尝试使用数据库原生OnlineDDL无锁执行,如果DMS检测到原生执行会锁表或失败,则自动转用DMS自研的DDL无锁变更引擎执行,以保障不锁表。执行时间相对比较快,但有可能导致实例的并行复制降为串行复制,从而...

DTS 迁移过程中,是否会锁表,对源数据库是否有影响?

DTS 在进行全量数据迁移和增量数据迁移的过程中,均不会对源端数据库进行锁表,因此在全量数据迁移和增量数据迁移的过程中,迁移源端的数据表均可以正常读写访问。

空间回收

锁表回收空间,只能回收部分空间。频率:对于有较多实时更新的表,每天做一次。如果更新是每天一次批量进行的,可以在每天批量更新后做一次。对系统影响:不会锁表,表可以正常读写。会导致CPU、I/O使用率增加,可能影响查询的性能。什么...

DML无锁变更概览

此类问题通常可通过分批执行的方法解决,但是仍存在风险,例如:研发写程序分批处理:分批方式不当,例如直接用 LIMIT 进行分批,可能仍会锁表。分批执行的频率没有控制好,会造成主备延迟过大。DBA提取目标数据手动拆分:人工拆分非常繁琐...

通过无锁变更工单实现无锁结构变更

为解决变更数据库表结构时的锁表问题,数据管理DMS 推出了无锁结构变更功能,该功能可以较好地规避因锁表以致于阻塞业务和数据库原生OnlineDDL带来的主备延迟问题。本文介绍通过提交无锁变更工单实现数据库无锁结构变更的方法。前提条件 ...

非阻塞DDL

Nonblock DDL规避了执行DDL过程中MDL锁长时间获取不成功导致的连接堆积和阻塞,有效地解决了DDL导致的锁表问题。背景信息 用户在执行DDL操作的时候,若目标表存在未提交的长事务或大查询,DDL将持续等待获取MDL-X锁。在 PolarDB 中由于MDL-...

分区常见问题

支持 创建和删除分区表时,是否会锁表?PolarDB MySQL版 8.0.2版本支持分区粒度锁,只锁住当前操作的分区,避免了大事务阻塞DDL,从而不影响其他分区的DML操作。具体请参考 在线分区维护。使用 PolarDB MySQL版 分区,会不会导致性能下降?...

无锁结构变更

DMS为解决结构变更时的锁表问题而推出的无锁结构变更功能,能较好地规避因数据库变更导致锁表以至于阻塞业务的现象、以及数据库原生Online DDL带来的主备延迟现象。前提条件 实例的管控模式为稳定变更或安全协同。更多信息,请参见 管控...

pg_locks

有多种不同类型的可对象:整个关系(如)、关系的单个页、关系的单个元组、事务 ID(包括虚拟和永久 ID)和普通数据库对象(由类 OID 和对象 OID 标识,和 pg_description 或 pg_depend 中的相同方式)。扩展一个关系的权力也被表示为...

pg_locks

pg_locks 视图提供了数据库服务器上活动进程中保持的的信息。简介 pg_locks 视图对每一个活动可对象、请求模式和相关进程的组合都有一行。因此,如果多个进程持有或者正在等待一个可对象上的,同一个可对象可能出现多次。但是...

事务隔离

相反,一个想要保证数据一致性的读已提交或可重复读事务可能需要拿走一个在整个上的,这可能阻塞其他尝试使用该的用户,或者它可能会使用不仅会阻塞其他事务还会导致磁盘访问的 SELECT FOR UPDATE 或 SELECT FOR SHARE。像大部分其他...

数据库

重量级,也称为管理器或者简单,主要保护 SQL 可见的对象,例如。不过,它们也被用于确保特定内部操作的互斥,例如关系扩展。wait_event 将标识等待的的类型。BufferPin:服务器进程正在等待访问数据缓冲区,而此时没有其他...

数据库

重量级,也称为管理器或者简单,主要保护 SQL 可见的对象,例如。不过,它们也被用于确保特定内部操作的互斥,例如关系扩展。wait_event 将标识等待的的类型。BufferPin:服务器进程正在等待访问数据缓冲区,而此时没有其他...

RDS MySQL中等待的介绍

概述 本文主要介绍在RDS MySQL中等待的介绍。详细信息 阿里云提醒您:如果您对实例或数据有修改、变更等风险操作,务必注意实例的容灾、容错能力,确保数据安全。如果您对实例(包括但不限于ECS、RDS)等进行配置与数据修改,建议...

基于Hadoop集群支持Delta Lake或Hudi存储机制

步骤三:基于MaxCompute实时分析Hadoop集群数据 基于已创建的MaxCompute项目以及Hadoop集群数据,创建External Project,用于Hadoop集群,并映射至已创建的MaxCompute项目。后续可通过映射的MaxCompute项目对External Project进行数据...

LOCK

描述 LOCK TABLE 获得一个,必要时会等待任何冲突被释放。如果指定了 NOWAIT,LOCK TABLE 不会等待以获得想要的:如果它不能立刻得到,该命令会被中止并且发出一个错误。一旦获取到,该会被在当前事务中一直持有(没有 UNLOCK ...

RDS MySQL如何管理长时间执行的查询

出现原因 在使用RDS MySQL的过程中,由于某些原因,例如被SQL注入、SQL执行效率较差、DDL语句引起元数据等待等,会出现运行时间很长的查询。说明:元数据等待的问题请参考 解决MDL导致无法操作数据库的问题。由于SQL执行效率差而...

云数据库RDS SQL Server版查看信息

免责声明:本文档可能包含第三方产品信息,该信息仅供参考。阿里云对第三方产品的性能、可靠性以及操作可能带来的潜在影响,不做任何暗示或其他...说明:sessionid为 锁表的进程。objectname为 被锁的表名。适用于 云数据库RDS SQL Server版

通过DataWorks将Hadoop数据同步到阿里云ES

当您基于Hadoop进行交互式大数据分析查询,遇到查询延迟的问题时,可以将数据同步至阿里云Elasticsearch中再进行查询分析。ES对于多种查询类型,特别是即席查询(Ad Hoc),基本可以达到秒级响应。本文介绍通过DataWorks的数据集成服务,...

显式锁定

2.冲突的锁模式 请求的锁模式 已存在的锁模式 ACCESS SHARE ROW SHARE ROW EXCL.SHARE UPDATE EXCL.SHARE SHARE ROW EXCL.EXCL.ACCESS EXCL.ACCESS SHARE X ROW SHARE X X ROW EXCL.X X X X SHARE UPDATE EXCL.X X X X X SHARE X X X X ...

MySQL性能排查解析

整体性能排查思路 资源监控 CPU 内存 IO 网络 连接 磁盘 日志分析 error log slow log general log binlog SQL分析 slow log explain show profile optimizer_trace 分析 表锁 间隙 下一键 MDL 死锁 MySQL资源性能瓶颈 ...

Hive作业异常排查及处理

hadoop fs-cp hdfs:/emr-header-1.xxx/old/path oss:/bucket/new/path hive-e"create table new_tbl like old_tbl location 'oss:/bucket/new/path'"Hive UDF和第三方包 Hive lib目录下放置三方包导致冲突 原因分析:在Hive lib目录($HIVE...

Query管理

说明 be_lock_waiters和be_lock_converting_waiters采集的都是backend的,而不是frontend的,排查请参见 以及排查。支持 不支持 state 表示连接的状态。常见的状态如下:active:活跃。idle:空闲。idle in transaction:长事务...

系统

本文将会为你介绍Hologres中的系统以及每个如何使用。概述 Hologres系统的组成如下所示。名 使用场景 hologres.hg_table_properties 查看当前数据库下Hologres所有以及属性。pg_catalog.pg_tables 查看、视图等关系的信息...

不支持FOR UPDATE OF

背景说明 Oracle支持Select for update 和 For update of column的语法,这两种语法对于单来说没有区别,都是符合条件的相关行。对于多来说For update会符合条件的行,For update of 会根据条件锁定相应的行。例如:单...

使用说明

不支持 空间索引 不支持(所有与全文索引相关的创建、使用均不支持)事务 事务隔离级别 支持如下2个隔离级别:读已提交(RC)可重复读(RR)单个事务支持的最大数据量 32 MB Savepoint 不支持 XA事务 即将支持 粒度 支持级别和行...

数据膨胀诊断

AnalyticDB PostgreSQL版 提供的智能诊断数据膨胀功能,可以定期自动诊断数据库内的所有,并生成诊断信息。您可以通过诊断信息,查看的膨胀情况并获得相应的处理建议(如执行VACUUM或VACUUM FULL操作)。注意事项 智能诊断数据膨胀...
共有72条 < 1 2 3 4 ... 72 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
开源大数据平台 E-MapReduce 弹性公网IP 短信服务 人工智能平台 PAI 物联网平台 对象存储
新人特惠 爆款特惠 最新活动 免费试用