PolarDB MySQL版8.0.1版本性能（集群版）
您可以通过ANALYZE命令收集优化器所需要的统计信息，也可以让优化器自动收集统计信息，统计信息包括表大小和记录数、密度向量（density vector）、单列混合直方图（hybrid histogram）、NDV和null ratio。CBO代价模型参数可以通过系统表...
功能发布记录
根据一个或者一组优化问题数据，对采用的求解器的超参进行调优，获得更快的求解速度和优化器GAP。2023年3月 求解器SDK更新V0.24.x版本（V0.24.1下载）：提高了MILP求解器的性能。正式发行版本。云鉴权账号全部开放使用权限,无需再申请特殊...
分区剪枝
这就是优化器阶段的分区剪枝，可以看到SQL中的限定条件是分区键 logdate，且条件表达式的值 DATE '2023-10-01' 是静态的，或者是不可变的，它可以在优化阶段计算出来。EXPLAIN SELECT*FROM measurement WHERE logdate>=DATE '2023-10-01';...
分区剪枝
这就是优化器阶段的分区剪枝，可以看到SQL中的限定条件是分区键 logdate，且条件表达式的值 DATE '2023-10-01' 是静态的，或者是不可变的，它可以在优化阶段计算出来。EXPLAIN SELECT*FROM measurement WHERE logdate>=DATE '2023-10-01';...
分区剪枝
这就是优化器阶段的分区剪枝，可以看到SQL中的限定条件是分区键 logdate，且条件表达式的值 DATE '2023-10-01' 是静态的，或者是不可变的，它可以在优化阶段计算出来。EXPLAIN SELECT*FROM measurement WHERE logdate>=DATE '2023-10-01';...
Explain和Explain Analyze
当SQL查询性能不佳或查询结果不符合预期时，Hologres提供了Explain和Explain Analyze命令用于分析查询语句执行计划，可以帮助您了解Hologres如何执行查询语句，以便您对查询语句或数据库结构进行调整优化。本文介绍在Hologres中通过Explain...
SQL调优方法与实战
大多数情况下，PolarDB-X 1.0 的查询优化器可以自动产生最佳的执行计划。但少数情况下，可能因为统计信息存在缺失、误差等，导致生成的执行计划不够好，这时可以通过Hint来干预优化器行为，使之生成更好的执行计划。如下示例将讲解执行计划...
5.6/5.7/8.0版功能对比
❌ 创建只读分区 ❌ 创建混合分区 ❌ 自动化管理分区 ❌ 查询优化（Query Optimizer）功能 集群版 子查询解关联 ❌ 基于代价的查询变换 ❌ Limit Offset下推 ❌ 谓词完全下推 ❌ 扫描完全下推（FastTraverse）❌ Bloom Filter For HashJoin...
列存索引行列融合基础组件介绍
本文介绍了列存索引行列融合基础组件（优化器代价模型、执行器多引擎访问、存储引擎日志回放和事务处理）以及处理长尾请求问题的HybridIndexSearch算子的相关内容。背景信息 事务处理（OLTP）和分析处理（OLAP）混合工作负载在当前的业务...
MongoDB实例的CPU使用率高问题
关于审计⽇志的使⽤⽅法和语法参考：开通日志审计功能 CPU使用率高的常见原因和优化策略 CPU使用率高的常见原因及对应的优化策略如下：扫描⾏数过多 MongoDB为多线程应⽤，如果存在单个查询扫描⾏数过多，该查询所在线程的CPU占⽤时间会变...
查询概述
查询进阶 查询加速 为了提供极致的数据分析服务，SelectDB中采用了查询优化技术，包含基于Cascades框架的全新优化器、基于Pipeline的执行引擎、高并发点查、物化视图、索引加速、Join优化等。通常情况下，SelectDB会自动优化查询规划和执行...
API概览
优化求解器中所有开放的API的API链接和API描述罗列如下，目前仅开放管控台查询信息接口供使用。优化求解器管控台接口 API 描述 GetOpenStatus 获取优化求解器产品内所有服务开通情况 GetOrderInfo 获取数学规划本地版License购买信息 ...
ListSlowQueryQueries-列出慢查询Query清单
列出优化大师慢查询Query清单。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句的 Action ...
概述
查询优化器 支持Partial Partition Wise join 无 支持Partition动态剪枝 支持Partition Index Pruning 支持分区粒度的统计信息（Hyperloglog）分区表支持分区间的并行扫描 支持全局索引优化器选择和并行扫描 支持分区与MPP相结合 分区粒度...
偏分析场景的实践和优化
在查询过程中，PolarDB-X 首先会基于优化器选择合适的分布式执行计划，然后将计划调度到各个计算节点，充分发挥整个集群的计算资源加速查询。这个过程生成的分布式执行计划完全是基于统计信息做代价选择，因此及时的信息采集至关重要；同时...
计划缓存(Auto Plan Cache)
您可以使用 PolarDB MySQL版 提供的Auto Plan Cache功能，来缓存SQL语句的执行计划信息，以缩短查询优化时间，提升SQL语句的查询性能。本文介绍了Auto Plan Cache功能的背景信息、前提条件、依赖的参数和接口等内容。背景信息 执行计划的...
内核版本发布记录
1.7.0内核版本发布说明 新增特性 Analyticsearch查询优化上线，基于日志检索插件实现查询性能大幅提升，具体说明如下：日志检索场景，例如Kibana Discover查询加速，优化索引合并策略及Date_histogram执行计划策略，无条件或单条件查询性能...
表数据格式
所有数据文件会按照PK列进行排序，可有效提升Merge的效率，并有助于DataSkipping查询优化。数据文件会按照列式压缩存储，可有效减少存储的数据量，节省成本，也可有效地提升IO读写效率。数据存储分桶 为了进一步优化读写效率，...
pg_hint_plan
行数校正提示 行数校正提示会校正由于查询优化器限制而导致的行数错误。Rows(a b#10)*/SELECT.;设置连接结果的行数为10/*+Rows(a b+10)*/SELECT.;行数增加10/*+Rows(a b-10)*/SELECT.;行数减去10/*+Rows(a b*10)*/SELECT.;行数增大10倍 ...
pg_hint_plan
行数校正提示 行数校正提示会校正由于查询优化器限制而导致的行数错误。Rows(a b#10)*/SELECT.;设置连接结果的行数为10/*+Rows(a b+10)*/SELECT.;行数增加10/*+Rows(a b-10)*/SELECT.;行数减去10/*+Rows(a b*10)*/SELECT.;行数增大10倍 ...
列存索引（IMCI）发布说明
SQL Parser/优化器：面向行列混合存储的CBO优化器，可以根据代价自动选择行存或者列存执行查询请求；在此架构下，PolarDB MySQL版 实现了100%兼容MySQL协议的基础上，同时获得数个数量级的查询加速效果。核心优势 PolarDB MySQL版 依托列存...
Dynamic Join Filter
关于优化器的详细信息，请参见 查询性能优化指导。仅支持Laser计算引擎。关于Laser计算引擎的详细信息，请参见 Laser计算引擎的使用。不支持执行计划中包含IntiPlan的SQL。支持UDP网络模式，不支持TCP网络模式。功能介绍 Hash Join是 ...
查询计划和查询重规划
本文将为您介绍什么是查询计划，以及出现查询重规划（Replan）的原因和处理方法。查询计划器（Query Planner）MongoDB查询计划器能够根据可用的索引给每个查询选择并缓存最有效的查询计划，查询计划器工作流程如下图。查询计划器会根据候选...
JOIN优化和执行
详情参见 查询优化器介绍 此外，各个JOIN算法对左右输入也有不同的偏好，例如，Hash Join中右表作为内表用于构建哈希表，因此应当将较小的表置于右侧。这些也同样会在CBO中被考虑到。PolarDB-X 支持了上述比较丰富的Join算法，优化器会根据...
Partial Result Cache（PTRC）
为了减少不必要的开销，优化器会基于代价来选择是否使用PTRC，主要从以下两个维度来进行判断：当查询的整体cost高于 partial_result_cache_cost_threshold 参数值时，才考虑引入PTRC；评估算子使用PTRC的命中率，当命中率高于 partial_...
PolarDB HTAP实时数据分析技术解密
其最核心的功能即为In-Memory Column Store，通过提供行列混合存储、高级查询优化（物化表达式，JoinGroup）等技术提升OLAP性能。微软在SQL Server 2016 SP1上，开始提供Column Store Index功能。用户可以根据负载特征，灵活的使用纯行存表...
谓词完全下推
参数名称 级别 描述 loose_optimizer_switch Global、Session 查询优化的总控制开关。其中，计算下推的子控制开关如下：limit_offset_pushdown：Limit Offset下推优化开关 ON（默认值）：开启Limit Offset下推优化开关。OFF：关闭Limit ...
版本发布说明
修复特殊Project-Agg组合场景下，相关联子查询条件抽取异常导致优化器报错的问题。修复filter不完全推导的问题。修复partition hint不支持session变量语句的问题。修复INSERT IGNORE SELECT语句，SELECT子句中包含相关联子查询时，部分场景...
Limit Offset下推
参数名称 级别 描述 loose_optimizer_switch Global、Session 查询优化的总控制开关。其中，计算下推的子控制开关如下：limit_offset_pushdown：Limit Offset下推优化开关 ON（默认值）：开启Limit Offset下推优化开关。OFF：关闭Limit ...
慢查询诊断
query_optimizer character varying(16)查询所使用的优化器（ORCA or Planner）。access_tables text 查询所访问的表名。result_rows bigint 返回查询的行数。如果是INSERT命令，则返回插入的行数。num_segments integer 查询所在计算节点...
查询性能优化指导
值为on：表示当前优化器为ORCA优化器-值为off：表示当前优化器为Legacy优化器 说明 AnalyticDB PostgreSQL 4.3版 的默认优化器为Legacy优化器，AnalyticDB PostgreSQL 6.0版 的默认优化器为ORCA优化器。实例级别设置请 提交工单 联系技术...
Elasticsearch集群慢查询优化方法
请参见 使用慢查询隔离池，使用慢查询隔离池优化查询，降低单条慢查询对集群性能的影响。如果存在agg、term、脚本、模糊查询等消耗性能较大，建议您优化或者升级集群。注意：Elasticsearch集群查询性能同集群的健康状况有一定关系。磁盘...
StarRocks概述
智能查询优化 StarRocks通过CBO优化器（Cost Based Optimizer）可以对复杂查询自动优化。无需人工干预，就可以通过统计信息合理估算执行成本，生成更优的执行计划，大大提高了AdHoc和ETL场景的数据分析效率。联邦查询 StarRocks支持使用...
术语表
计算节点包括SQL解析器、优化器、执行器等模块。数据节点（Data Node，简称DN）PolarDB-X实例是存储计算分离架构，存储层由多个存储节点构成，每一个节点关系对等，规格相同。存储节点负责数据的持久化，基于多数派Paxos协议提供数据高可靠...
关联子查询上拉
优化器通常会对带有关联查询的 ANY/IN/EXISTS/NOT EXISTS 子查询尝试上拉，使其能够与父查询被共同优化为带有半连接（Semi Join）或反连接（Anti Join）的执行计划，从而提升查询性能。其中，对于 ANY_SUBLINK，如果子查询引用了上一级父...
关联子查询上拉
优化器通常会对带有关联查询的 ANY/IN/EXISTS/NOT EXISTS 子查询尝试上拉，使其能够与父查询被共同优化为带有半连接（Semi Join）或反连接（Anti Join）的执行计划，从而提升查询性能。其中，对于 ANY_SUBLINK，如果子查询引用了上一级父...
Hints
ASYNC_TASK_ID|+-+|q202006161430hz89aab7ef0245339|+-+1 row in set(0.04 sec)MySQL 5.7.7及以下版本的MySQL client默认发送到服务器的SQL statements中删除 comments（包括优化器提示）。如果您使用低于MySQL 5.7.7的版本，需要使用-c ...
MySQL 8.0 Server层最新架构详解
(R2.c1=R1.c1)(cost=0.35.0.35 rows=0)->Table scan on R1(cost=0.25.0.25 rows=1)MySQL8.0.2x为了更好的兼容两种优化器，引入了新的类AccessPath，可以认为这是MySQL为了解耦执行器和不同优化器抽象出来的Plan Tree。老优化器入口。老优化...
动态过滤器（Dynamic Filter）
使用该方式时，优化器 会智能地估计插入动态过滤器是否有足够的资源或时间获益，如果有收益则插入动态过滤器，否则不会插入。说明 该方式依赖元数据统计，例如ndv，更多元数据统计信息，请参见 优化器信息收集。因为元数据统计是优化器的...
动态过滤器（Dynamic Filter）
使用该方式时，优化器 会智能地估计插入动态过滤器是否有足够的资源或时间获益，如果有收益则插入动态过滤器，否则不会插入。说明 该方式依赖元数据统计，例如ndv，更多元数据统计信息，请参见 优化器信息收集。因为元数据统计是优化器的...
- 产品推荐
- 这些文档可能帮助您