查询优化（Query Optimizer)
查询优化器是数据库系统的核心组件之一，它的功能是基于用户输入的SQL语句进行优化，选择最优的语句执行方式，将结果返回给客户端。优化器的功能是否强大是决定数据库性能是否高效稳定的核心因素，尤其在具有混合负载的场景下（包括一定...
指定联接顺序
包括 ORDERED 指令以指示查询优化器按照其在 FROM 子句中列出的顺序联接表。如果没有包括 ORDERED 关键字，则查询优化器将选择联接表的顺序。例如，以下命令允许优化器选择FROM 子句中列出的顺序联接表：SELECT e.ename,d.dname,h....
指定联接顺序
包括 ORDERED 指令以指示查询优化器按照其在 FROM 子句中列出的顺序联接表。如果没有包括 ORDERED 关键字，则查询优化器将选择联接表的顺序。例如，以下命令允许优化器选择FROM 子句中列出的顺序联接表：SELECT e.ename,d.dname,h....
基于代价的SQL优化
AnalyticDB MySQL 基于代价的查询优化器具有以下优点：面向分布式设计 AnalyticDB MySQL 查询优化器会充分利用多机资源，制定最佳的分布式查询执行计划。将一个复杂的查询拆解到多台机器上执行，对于复杂查询也能实时查询出结果。高度自治...
2023年
修复ORCA优化器在部分Semi Join+Distinct场景中，结果可能出现错误的问题。修复分区主表删除Constraint后，子表未删除，导致表结构不一致的问题。V6.6.0.0 类别 功能 功能描述 相关文档 新增 向量检索 兼容pgvector协议。SDK为pgvector插件...
执行引擎
执行计划由异步算子组成的执行图DAG（有向无环图）表示，可以表达各种复杂查询，并且完美适配Hologres的数据存储模型，方便对接查询优化器，利用各种查询优化技术。全异步执行 端到端的全异步处理框架，可以避免高并发系统的瓶颈，充分利用...
查询优化器介绍
查询优化器负责优化逻辑计划从而输出物理计划，其主要阶段包含查询改写和计划枚举。本文将介绍查询优化器的基本原理，以及什么是关系代数运算符、查询改写（RBO阶段）和查询计划枚举（CBO阶段）。PolarDB-X 接收到一条SQL后的执行过程大致...
自适应优化
传统查询优化器基于静态的统计...为了解决这些无法提前预料的变化因素可能导致的性能回退问题，PolarDB MySQL版 在查询优化器中引入了自适应能力，可以通过动态感知环境和执行相关因素来调整执行计划，保证执行效率的最优性。自适应执行能力
Nereids全新优化器
注意事项 暂不支持的功能 重要 如果开启了自动回退，则在新优化器出现问题的场合，会自动回退到旧优化器执行。不支持JSON、Array、Map、Struct 类型：查询的表含有这些类型，或者查询中的函数会输出这些类型时，不支持Nereids优化器。仅...
HTAP中的行列混存查询优化
由于在执行查询时使用的执行计划好坏对性能的影响非常关键，因此在所有的数据库系统中都存在查询优化器，典型的查询优化器结构如下图所示：通常，查询优化器会通过如下三个典型组件来协同工作：Plan space enumeration：根据一系列的等价...
ORDER BY LIMIT执行效率低
问题现象 在RDS MySQL实例中，执行 WHERE$CONDITION ORDER BY$A LIMIT$N 类型的语句时，在$N 值较小的情况下出现执行效率低的问题。查看执行计划，发现优化器选择了$A 作为索引，而不是和$CONDITION 相关的索引。可能原因 问题现象中的SQL...
ORDER BY LIMIT执行效率低
问题现象 在RDS MySQL实例中，执行 WHERE$CONDITION ORDER BY$A LIMIT$N 类型的语句时，在$N 值较小的情况下出现执行效率低的问题。查看执行计划，发现优化器选择了$A 作为索引，而不是和$CONDITION 相关的索引。可能原因 问题现象中的SQL...
使用EXPLAIN阅读查询计划
查询优化器使用数据库的数据统计信息来选择具有最小总代价的查询计划，查询代价通过磁盘I/O取得的磁盘页面数作为单位来度量。可以使用EXPLAIN和EXPLAIN ANALYZE语句发现和改进查询计划。EXPLAIN的语法如下：EXPLAIN[ANALYZE][VERBOSE]...
查询计划和查询重规划
查询计划器（Query Planner）MongoDB查询计划器能够根据可用的索引给每个查询选择并缓存最有效的查询计划，查询计划器工作流程如下图。查询计划器会根据候选计划时查询执行的工作单元（works）数量评估出最有效的查询计划，成功缓存的查询...
Tair小版本发布日志
缺陷修复 修复开启全球多活后，集群架构实例在扩缩容时可能会小概率出现崩溃的问题。5.0.25 LOW 2023-01-13 功能优化 TairSearch全面支持分词器框架，更多信息请参见 Search分词器。TairSearch中的term和terms查询支持设置 lowercase 参数...
模糊查询+查询分析
用户在配置了 模糊搜索 分析器的情况下并不能很好的满足业务需要并出现了一下bad_case，希望通过 查询分析 可以优化解决，但是由于模糊搜索本身就是扩大召回范围，以非精确性的方式召回数据，并且系统限制了SHORT_TEXT类型的字段配置的索引...
产品介绍
为了系统性地解决这些问题，PolarDB推出了新一代的基于代价的优化器。面向场景的内核定制Feature 面向不同的场景，提供不同的内核Feature来解决用户问题。比如秒杀、连接池等。企业级能力提升 PolarDB PostgreSQL版（兼容Oracle）进行了...
Link Visual SDK更新记录
云存播放器过滤非法帧数据避免视频花屏 优化点播获取当前播放进度在结束前可能返回0的情况 优化云存点播刚播放时立即暂停一段时间后再恢复时画面可能出现快放现象 解决设备录像点播在P2P下可能出现的花屏及跳帧问题 2023-6-1 Link Visual...
Cost-based SQL诊断引擎
基于代价模型 与基于规则不同，DAS中的SQL诊断优化服务采用的是基于代价模型方式实现，即采用和数据库优化器相同的方式去思考优化问题，最终会以执行代价的方式量化评估所有的（或尽可能所有的，因为是最优解求解的NP类问题，因此在一些...
OOM常见问题排查指南
如何解决查询时OOM 当出现查询OOM时，其原因通常有如下几类。执行计划错误：统计信息不正确、Join Order不正确等。Query并发度高，且每个Query消耗的内存很大。Query本身复杂或者扫描的数据量很大。Query中包含 union all，增加执行器的...
执行计划管理
查询优化器的稳定性，对于数据库性能的稳定性和可预期性都非常重要，尤其是对于变更操作频繁的事务型数据库系统，统计信息经常会出现滞后或不准确的问题，此外一些优化器固有的限制也可能导致偏离最优的执行方式，通过Query Cache和Outline...
V5.3.x系列实例版本说明
v5.3.12-15708775 日期 2019.10.12 类别 说明 新增特性 新增Chunk-Based执行器，查询优化复杂查询。新增SQL执行计划管理（Plan Management）功能。新增新的DDL任务引擎，支持DDL任务的查看、恢复和回滚等功能。新增通过FORCE INDEX HINT...
V5.4.x系列实例版本说明
优化查询优化器的算法，用于消除JOIN、FILTER、基于BKA（Batched Key Access）算法的IN条件中的重复条件。优化部分子查询的执行速度。V5.4.9-16142062 日期2021-02-25 类别 说明 新增特性 默认禁止执行未包含条件的UPDATE或DELETE语句。...
PolarDB并行查询
新的并行优化器解决了这个问题。串行优化与并行优化解耦，并行优化会重新构建抽象算子树，并以此为输入开始 enumeration。并行优化与并行计划生成解耦，优化的结果是计划子片段的抽象描述，作为输出进行 plan generation。这样就使执行策略...
版本发布说明
修复特殊Project-Agg组合场景下，相关联子查询条件抽取异常导致优化器报错的问题。修复filter不完全推导的问题。修复partition hint不支持session变量语句的问题。修复INSERT IGNORE SELECT语句，SELECT子句中包含相关联子查询时，部分场景...
8.0.1和8.0.2版功能对比
PolarDB for MySQL 8.0.1版和8.0.2版在功能上存在一些差异，包括Warm Buffer Pool、Hash Join、弹性并行查询、执行器增强、优化器增强、分区表、多主集群（库表）、Blink Tree等方面的差异。本文介绍这两个版本的功能区别，以便您基于业务...
PolarDB HTAP实时数据分析技术解密
其最核心的功能即为In-Memory Column Store，通过提供行列混合存储、高级查询优化（物化表达式，JoinGroup）等技术提升OLAP性能。微软在SQL Server 2016 SP1上，开始提供Column Store Index功能。用户可以根据负载特征，灵活的使用纯行存表...
功能发布记录
查询优化器新增Row Group Filter机制，针对列存表，同一列的多行数据组成Row Group，并且记录每个Row Group的max/min值，在查询过滤对应列时，可以在不读取数据的情况下对Row Group过滤，显著降低查询开销，提升查询性能。优化Runtime ...
PolarDB MySQL版8.0.1版本发布日志
修复主键不包含分区键的分区表在使用查询优化器进行搜索、执行DML操作和记录Binlog时的问题。8.0.1.1.40.2 类别 说明 发布时间 问题修复 修复当多主集群的主节点负载不均衡时，全局只读节点复制延迟可能变高的问题。修复在多主集群上首次...
列存索引技术架构介绍
Oracle公司在2013年发表的Oracle 12C上，发布了Database In-Memory套件，其最核心的功能为In-Memory Column Store，即通过行列混合存储/高级查询优化（物化表达式，JoinGroup）等技术来提升OLAP性能。微软在SQL Server 2016 SP1上，开始...
对接MaxCompute常见问题与诊断
当导入Query包含查询，但部分表没有 analyze，或者 analyze 过，但数据又有更新导致不准确，导致查询优化器决策连接顺序有误，会引起内存开销过高。对所有参与的内表、外表执行 analyze tablename;命令，更新表的统计元信息，可以帮助查询...
客户端版本更新日志
功能优化 关闭写信页时提示保存草稿 问题修复 解决 Windows 邮件列表中使用上下键切换邮件失效的问题 解决预览 Word 文件出现错误提示的问题 桌面端 2.1.0(2023.02.27)功能更新 支持自动升级 支持邮件列表中使用上下键切换邮件 支持移动...
性能诊断
性能诊断 功能是用于分析和优化性能的关键工具，通过 性能诊断 功能可以帮助您发现和解决报表和数据分析操作中的性能问题，提高报表查询的速度和响应性能，提升您对数据的分析效率和准确性。使用限制 性能诊断 功能暂时只有仪表板模块支持...
Explain和Explain Analyze
当SQL查询性能不佳或查询结果不符合预期时，Hologres提供了Explain和Explain Analyze命令用于分析查询语句执行计划，可以帮助您了解Hologres如何执行查询语句，以便您对查询语句或数据库结构进行调整优化。本文介绍在Hologres中通过Explain...
V5.1.x系列实例版本说明
优化执行器的列查找性能，INSERT、REPLACE的吞吐提升14%。优化JVM的启动参数，CPU消耗降低5%。优化SQL类型识别的算法性能。优化跨库查询归并排序的算法性能。DDL建表的组合索引的第一列包含拆分键时将不再重新单独为拆分列自动建索引。修复...
优化内部表的性能
使用Runtime Filter 从V2.0版本开始，Hologres开始支持Runtime Filter，通常应用在多表Join（至少2张表），尤其是大表Join小表的场景中，无需手动设置，优化器和执行引擎会在查询时自动优化Join过程的过滤行为，使得扫描更少的数据量，从而...
更新记录
全部 无 文章 修复链接导入的文章，全选下修改文字出现内容丢失问题 全部 无 2023年2月 发布时间 更新分类 功能名称 功能描述 发布地域 相关文档 2023.2.10(2.9.4)功能优化 特效文字 增加文字字体，实现样式效果、去掉字体背景色、优化...
混合检索使用指南
具体是通过优化器的RBO（Ranked-Biased Overlap）代价估算规则，生成不同的执行计划来解决结构化数据与非结构化数据需要同时检索的问题。下文通过一个例子来说明混合检索的原理。假设有一个带条件的拍图查找商品需求：查找与输入图片相似度...
PolarDB处理TPC-H查询的挑战和机遇
如果您从事查询优化和执行的工作，即使是使用OLTP（在线交易）型的数据库系统，也会和TPC-H打上交道。TPC-H是用来评估在线分析处理的基准程序，主要模拟了一个供应商和采购商之间的交易行为，其中包含针对8张表的22条分析型查询。说明 该...
Logview诊断实践
优化阶段 问题现象：子状态为 SQLTask is optimizing query，优化器正在优化执行计划。产生原因：执行计划复杂，需要较长时间做优化。解决措施：请耐心等待，正常不会超过10分钟。生成物理执行计划阶段 问题现象：子状态为 SQLTask is ...
- 产品推荐
- 这些文档可能帮助您