Range Clustering
不仅仅可以优化等值查询，也可以优化区间查询。例如对于一个简单的查询条件 id，先在优化器里面将查询条件抽取出来，并转化成值域空间(-∞,3)。这个时候就可以利用Global Index做Bucket Pruning，把不在这个区间的Bucket 2和Bucket 3都去掉...
Delta连接器
说明 Trino暂不支持like和in等谓词，但由于Z-order的局部排序能力，这些谓词在Z-order优化后同样可以提升查询速度。例如，表conn_zorder，共含有src_ip、src_port、dst_ip和dst_port四列。先在Spark中执行优化，命令如下所示。OPTIMIZE ...
Java SDK概述
LogtailProfileSample.java 查询Logtail配置相关示例。SavedSearchSample.java 快速查询操作相关示例。ScmSample.java 创建日志库、配置文件、机器组、索引和配置权限相关示例。ShardBalanceTool.java Shard相关示例。SlsSample.java 查...
查询优化（Query Optimizer)
查询优化器是数据库系统的核心组件之一，它的功能是基于用户输入的SQL语句进行优化，选择最优的语句执行方式，将结果返回给客户端。优化器的功能是否强大是决定数据库性能是否高效稳定的核心因素，尤其在具有混合负载的场景下（包括一定...
查询优化
查询优化 在日常的业务开发中，opensearch出现慢查询是很常见的，用户不恰当的操作、filter内容过多、某段时间激增的QPS都有可能导致慢查询的现象发生。opensearch提供的 慢Query分析 可以指定时间段查询高LCU花销的慢Query详情，并获得...
HTAP中的行列混存查询优化
在IMCI中，这些用于改写计划的规则被分为以下类：Transform Rule：这类规则与rewriting rule类似，但这类规则可选，用于优化查询性能，并不泛用。因此，这类规则会被放进IMCI基于代价的优化器中，用于枚举等价查询计划，后续会通过...
自适应优化
传统查询优化器基于静态的统计信息决定目标SQL语句的执行策略，但统计信息会随着数据的变更而产生偏差，此外数据库整体的负载情况也是实时变化的。为了解决这些无法提前预料的变化因素可能导致的性能回退问题，PolarDB MySQL版 在查询优化...
查询优化
查询优化 在日常的业务开发中，opensearch出现慢查询是很常见的，用户不恰当的操作、filter内容过多、某段时间激增的QPS都有可能导致慢查询的现象发生。opensearch提供的 慢Query分析 可以指定时间段查询高LCU花销的慢Query详情，并获得...
基于代价的SQL优化
AnalyticDB MySQL 基于代价的查询优化器具有以下优点：面向分布式设计 AnalyticDB MySQL 查询优化器会充分利用多机资源，制定最佳的分布式查询执行计划。将一个复杂的查询拆解到多台机器上执行，对于复杂查询也能实时查询出结果。高度自治...
查询加速
本章将详细介绍如何在 云数据库 SelectDB 版 实例中进行查询优化和数据分析，云数据库 SelectDB 版 提供了多种分析SQL和优化方案，帮助您提升查询速度并实现高效的数据分析。概述 云数据库 SelectDB 版 采用了MySQL网络连接协议，兼容 标准...
开启时空两阶段查询优化
Ganos在时空索引框架基础上进行的深度优化，可减少时空查询中额外的数据I/O及计算开销。背景信息 时空引擎传统的查询都是经典的两阶段查询处理方法（粗糙集过滤和精确过滤），首先利用时空多维索引进行粗糙集过滤，筛选出来的中间结果集再...
开启时空两阶段查询优化
Ganos在时空索引框架基础上进行的深度优化，可减少时空查询中额外的数据I/O及计算开销。背景信息 时空引擎传统的查询都是经典的两阶段查询处理方法（粗糙集过滤和精确过滤），首先利用时空多维索引进行粗糙集过滤，筛选出来的中间结果集再...
前言
SelectObjectSample.java 查询文件 DeleteObjectsSample.java 删除文件 UploadPartCopySample.java 拷贝文件 ObjectOperationSample.java 禁止覆盖同名文件 RestoreObjectSample.java 解冻文件 SymLinkSample.java 管理软链接 ...
整体流程和预估时间
表1 库表恢复速度测试数据参考表 CPU和内存（独享）测试数据 innodb_io_capacity innodb_io_capacity_max 是否开启存储热备 基础版流程恢复耗时 优化版流程恢复耗时 基础版流程恢复速度 优化版流程恢复速度 优化版较基础版恢复速度提升 2核...
设置优化器的Join Reorder
为了提高列存索引（IMCI）处理复杂查询的能力，列存索引优化器通过结合变换规则与表中各个列的统计信息，基于代价生成高效的执行计划，以此来增强自身的优化器能力。本文介绍列存索引查询优化功能的工作原理、使用方法以及使用限制等内容。...
RDS MySQL/MariaDB版实例CPU使用率较高
慢SQL导致查询成本高 解决该问题的原则：定位效率低的查询、优化查询的执行效率、降低查询执行的成本。通过以下方式定位效率低的查询：执行以下SQL语句，查看当前执行的查询语句。show processlist;show full processlist;系统显示类似如下...
Quick BI报表查询速度如何优化加速
概述 本文主要介绍Quick BI中报表查询速度可以通过哪些方法进行优化加速。问题描述 Quick BI的报表查询与其他产品的报表查询相比，非常慢，有什么方法优化吗？问题原因 查询数据量比较大，报表展示慢，可以通过数据集加速缓存方式加速查询...
查询计划概述
您可以通过 EXPLAIN 语句查看不同深度的执行计划，进一步分析优化查询逻辑，以提升查询性能。适用引擎 适用于宽表引擎和时序引擎。背景信息 查询计划（Query Plan）是对一条SQL查询语句在数据库中执行过程的描述，也称为执行计划...
使用EXPLAIN阅读查询计划
查询优化器使用数据库的数据统计信息来选择具有最小总代价的查询计划，查询代价通过磁盘I/O取得的磁盘页面数作为单位来度量。可以使用EXPLAIN和EXPLAIN ANALYZE语句发现和改进查询计划。EXPLAIN的语法如下：EXPLAIN[ANALYZE][VERBOSE]...
查询优化器介绍
查询优化器负责优化逻辑计划从而输出物理计划，其主要阶段包含查询改写和计划枚举。本文将介绍查询优化器的基本原理，以及什么是关系代数运算符、查询改写（RBO阶段）和查询计划枚举（CBO阶段）。PolarDB-X 接收到一条SQL后的执行过程大致...
云数据库查询优化
大量数据查询优化 如果您的数据量非常大，在设置合适的索引之后仍然会查询超时，您要考虑以下优化方案。尽量避免使用skip，至少不应该skip比较大的值，因为skip操作MongoDB服务端依然会扫描被skip的数据，带skip操作的耗时和skip的数量线性...
智能顾问的审计事件
智能顾问已与操作审计服务集成，您可以在操作审计中查询用户操作智能顾问产生的管控事件。操作审计支持将管控事件投递到日志服务SLS的LogStore或对象存储OSS的存储空间中，满足实时审计、问题回溯分析等需求。操作审计记录了用户通过Open...
查询优化器介绍
查询优化器通过优化逻辑计划从而输出物理计划，其主要阶段包含查询改写和计划枚举。PolarDB-X 1.0 接收到一条SQL后的执行过程大致如下：语法解析器（Parser）将SQL文本解析成抽象语法树（AST）。语法树被转化成基于关系代数的逻辑计划。...
5.6/5.7/8.0版功能对比
❌ 创建只读分区 ❌ 创建混合分区 ❌ 自动化管理分区 ❌ 查询优化（Query Optimizer）功能 集群版 子查询解关联 ❌ 基于代价的查询变换 ❌ Limit Offset下推 ❌ 谓词完全下推 ❌ 扫描完全下推（FastTraverse）❌ Bloom Filter For HashJoin...
子查询优化和执行
子查询是指在父查询的WHERE子句或HAVING子句中嵌套另一个SELECT语句的查询，本文主要介绍 PolarDB-X 如何优化和执行子查询。基本概念 根据是否存在关联项，子查询可以分为非关联子查询和关联子查询。非关联子查询是指该子查询的执行不依赖...
向量召回过滤优化
参数介绍 因为转倒排优化需要先查询一次，如果被过滤掉的文档少，会增量查询的耗时，因此设置了开关。参数 默认值 说明 vector_service.search.enable_filter_optimize false 是否开启filter优化。默认false，true为打开 vector_service....
谓词完全下推
当需要查询大量数据的时候，引擎层访问数据、SQL层的交互和计算都会占用大量的开销。PolarDB MySQL版 会将谓词下推到引擎层进行计算，极大的减少性能开销，提升查询性能。前提条件 集群版本需为 PolarDB MySQL版 8.0版本且修订版本需满足...
Limit Offset下推
当需要查询大量数据的时候，引擎层访问数据、SQL层的交互和计算都会占用大量的开销。PolarDB MySQL版 会将Limit Offset下推到引擎层进行计算，极大的减少性能开销，提升查询性能。前提条件 集群版本需为 PolarDB MySQL版 8.0版本且修订版本...
计算层变量
ENABLE_MATERIALIZED_SEMI_JOIN 否 TRUE[TRUE|FALSE]优化查询计划过程中是否允许将SemiJoin转成MaterializedJoin来实现。ENABLE_SEMI_JOIN_REORDER 否 TRUE[TRUE|FALSE]优化查询计划过程中是否允许将SemiJoin参与CBO Reorder优化。ENABLE_...
自动优化
这两个特性：一个是对写入进行合并，防止小文件的产生 并 提高写数据的吞吐量，一个是 对已经产生的小文件进行自动合并，优化查询性能，减少需要维护的元数据量。如何使用？Auto Optimize需要在创建表时，显式指定：优化表的写入过程：该...
更新日志
Visual Studio Code 端插件更新日志 2024-01-31（1.2.2)修复缺陷 2024-01-30（1.2.1)支持自定义配置不触发行间生成的编程语言 兼容 Windows 7 操作系统，扩展 IDE 版本兼容到 1.70.0 以上 优化 Java、Python 生成单元测试效果 优化登录后...
数据源读取时间超时的优化思路
总体来说，如果读取数据源超过了DataV的超时时间，就意味着查询数据的方式较为复杂，可以通过优化查询时间的方式来处理。具体的优化方案要结合查询本身的技术特征、业务数据的逻辑关系以及相关技术框架等来考虑和设计。
数据源读取时间超时的优化思路
总体来说，如果读取数据源超过了DataV的超时时间，就意味着查询数据的方式较为复杂，可以通过优化查询时间的方式来处理。具体的优化方案要结合查询本身的技术特征、业务数据的逻辑关系以及相关技术框架等来考虑和设计。
ACK Virtual Node
Metrics数据查询接口支持NodeName过滤。修复 修复ImageCacheController空指针问题。修复虚拟节点上部分容器的metrics重复问题。此次升级不会对业务产生影响。2024年01月 版本号 镜像地址 变更时间 变更内容 变更影响 v2.10.7 registry-$...
高并发点查
本文介绍 云数据库 SelectDB 版 中 高并发点查相关优化设计和使用指南，帮助您优化查询并发和响应延时。背景 在高并发服务场景中，一般是从系统中获取整行数据。而SelectDB基于列存构建，当表较宽时，列存格式将大幅放大随机读取IO，造成...
查询数据
本文档介绍如何使用Java异步、Java、Python语言进行向量检索、预测检索、以及包含过滤条件的检索。相关依赖 Java异步<dependency><groupId>...
Nereids全新优化器
可以观察到，在无需手动优化查询的情况下，新的优化器的总体查询性能接近于经过手动优化的旧优化器，远远超过了旧优化器在原始SQL下的性能。更健壮 Nereids优化器的所有优化规则，均在逻辑执行计划树上完成。在一个查询的语法语义解析完成...
EMR Spark功能增强
用户可以创建Relational Cache对数据进行预计算，在执行用户查询时，Spark Optimizer自动发现合适的Cache，并改写SQL执行计划，基于Cache的数据继续计算，从而提升查询速度，适用于报表、Dashboard、数据同步和多维分析等场景。通过DDL，...
Join优化
本文介绍 云数据库 SelectDB 版 中针对Join操作所设计的一系列优化方案，以及基于此给出的 Join优化参考，帮助您提升查询速度。物理算子支持 SelectDB支持如下两种物理Join算子，用于实现单机引擎中数据进行Join的处理过程。Hash Join：在...
版本发布说明
优化AUTO模式数据库中表数据量较大时，建表的速度。优化部分场景下数据迁移过程的校验速度。缺陷修复 修复XRPC下使用流式早停，小概率导致实例级连接池切库失败的问题。修复子查询大于等于三项关联项时，关联匹配错乱的问题。修复DDL操作...
- 产品推荐
- 这些文档可能帮助您