图解MySQL 8.0优化器查询解析篇
然而这种方式虽然入门简单，但是维护极难，而且通用性不强，即使不断进行软件架构设计或者抽象重构，仍然需要不断地变换应用，这也是为何非关系型数据库回头拥抱数据库SQL优化器的原因。SQL优化器本质上是一种高度抽象化的数据接口的实现，...
查询优化（Query Optimizer)
查询优化器是数据库系统的核心组件之一，它的功能是基于用户输入...本章节将介绍 PolarDB MySQL版 查询优化器组件在多个方面的功能，这些功能覆盖SQL优化器的方方面面，将分为如下子章节进行介绍。查询改写 执行计划管理 自适应优化 计算下推
高性能Flink SQL优化技巧
实时计算目前的SQL优化器能分析出Filter参数，从而同一个字段上计算不同条件下的COUNT DISTINCT能共享State，减少对State的读写操作。性能测试中，使用AGG WITH FILTER语法来代替CASE WHEN能够使性能提升1倍。适用场景 对于同一个字段上...
SQL性能问题
实时计算目前的SQL优化器能分析出Filter参数，从而同一个字段上计算不同条件下的COUNT DISTINCT能共享State，减少对State的读写操作。性能测试中，使用AGG WITH FILTER语法来代替CASE WHEN能够使性能提升1倍。适用场景 对于同一个字段上...
列存索引技术架构介绍
在处理大数据量下复杂查询所需要的能力方面，如优化器处理子查询的能力、高性能算子HashJoin、SQL并行执行能力等，MySQL社区一直将其放在比较低优先级上，因此，MySQL的数据分析能力提升进展缓慢。随着MySQL发展为世界上最为流行的开源数据...
PolarDB HTAP实时数据分析技术解密
支持行列混合执行的优化器框架，该优化器框架会根据下发的SQL是否能在列索引上执行覆盖查询，并且其所依赖的函数及算子能被列式执行器所支持，来决定是否启动列式执行。优化器会同时对行存执行计划和列存执行计划做代价估算，并选中代价较...
错误代码
产生TDDL-4203错误表示SQL语句扫描了多个分库的数据并且执行时间超过900秒，建议进行如下优化：尽量在WHERE条件中添加分库键（Sharding key）条件，将SQL语句优化成单库执行。检查是否可以在后端RDS MySQL上创建适合的索引，提升扫描各个分...
错误码
建议优化SQL语句，以及在后端数据节点上创建适合的索引以提升SQL语句的执行性能。如果优化后的SQL语句仍然较慢，可以参见如下Hint语法临时设置 PolarDB-X 的超时时间：/*TDDL:SOCKET_TIMEOUT=900000*/SELECT*FROM dual;其中SOCKET_TIMEOUT...
Nereids全新优化器
可以观察到，在无需手动优化查询的情况下，新的优化器的总体查询性能接近于经过手动优化的旧优化器，远远超过了旧优化器在原始SQL下的性能。更健壮 Nereids优化器的所有优化规则，均在逻辑执行计划树上完成。在一个查询的语法语义解析完成...
术语表
计算节点包括SQL解析器、优化器、执行器等模块。数据节点（Data Node，简称DN）PolarDB-X实例是存储计算分离架构，存储层由多个存储节点构成，每一个节点关系对等，规格相同。存储节点负责数据的持久化，基于多数派Paxos协议提供数据高可靠...
列存索引常见问题
在列存节点上，优化器会对SQL进行代价预估，如果预估代价高于设定的阈值 cost_threshold_for_imci，则使用列存索引进行查询，否则使用原有的行索引进行查询。在确认SQL被转发到列存节点后，如果通过EXPLAIN查看执行计划依然没有使用列存...
MapReduce支持SQL运行时执行模式
新版本MaxCompute支持将MapReduce作业指定为SQL运行时执行模式，基于SQL运行时，MapReduce可以使用MaxCompute SQL引擎编译器、基于代价的优化器和向量化执行的执行引擎，同时可以复用SQL引擎开发的各种新特性，包括功能、性能、稳定性等...
SparkSQL自适应执行
Runtime执行计划优化 SparkSQL的Catalyst优化器会将SQL语句转换成物理执行计划，然后真正运行物理执行计划。但是Catalyst转换物理执行计划的过程中，由于缺少Statistics统计信息，或者Statistics统计信息不准等原因，实际转换的物理执行...
SQL优化
数据库自治服务DAS提供SQL优化功能，自动输出诊断结果、优化建议和预期优化收益，您可以根据诊断结果确认是否采纳建议。本文介绍如何使用SQL优化功能。前提条件 数据库引擎为：RDS MySQL 自建MySQL MyBase MySQL MongoDB RDS PostgreSQL ...
自动SQL优化
数据库自治服务DAS（Database Autonomy Service）为RDS PostgreSQL提供自动SQL优化功能，可以进行自动SQL诊断优化和索引创建，在数据库实例出现慢SQL问题时，及时进行诊断和优化，帮助数据库系统运行在最佳状态。前提条件 RDS PostgreSQL...
2022年
2022-12-05 实例画像 2022年11月 引擎 功能名称 功能描述 发布时间 相关文档 RDS MySQL、PolarDB MySQL版 自动SQL优化 新增自动SQL优化的API接口，用于获取指定时间段内自动SQL优化任务的统计数据，包括任务总数和最大收益等。2022-11-29 ...
Quick BI报表sql优化建议中的查询的排队时间如何理解
概述 本文描述了Quick BI报表sql优化建议中的查询的排队时间如何理解。详细信息 这个查询的排队时间是指数据库内部的排队时间，这里的优化建议指的都是数据库内的。适用于 Quick BI 公共云专业版
获取自动SQL优化事件的统计数据
调用GetInstanceSqlOptimizeStatistic接口，获取指定时间段内自动SQL优化任务的统计数据，包括任务总数和最大收益等。接口说明 使用该接口需满足以下前提条件：使用阿里云或 DAS 的 SDK 时，建议使用最新版本。使用 SDK 调用 DAS 服务时，...
基于代价的SQL优化
AnalyticDB MySQL 基于代价的查询优化器具有以下优点：面向分布式设计 AnalyticDB MySQL 查询优化器会充分利用多机资源，制定最佳的分布式查询执行计划。将一个复杂的查询拆解到多台机器上执行，对于复杂查询也能实时查询出结果。高度自治...
批量开启、修改或关闭自动SQL优化功能
调用UpdateAutoSqlOptimizeStatus接口，批量开启、修改或关闭自动SQL优化功能。接口说明 使用该接口需满足以下前提条件：在使用 SDK 调用 DAS 服务时，需要将地域指定为 cn-shanghai。目标数据库实例已开启 DAS 企业版，您可以调用 ...
Data Copilot智能助手
SQL优化 左键单击需要优化的SQL区域，单击提示框的 优化，智能助手将为您提供SQL优化建议及优化后的SQL。SQL续写 输入一段SQL后，通常需要等待1~4秒（等待时间与续写的长度相关），智能助手可自动续写SQL的后半部分。说明 按下Tab键接受...
应用场景
从最初面向DBA的工具化辅助诊断，到Self-driving Platform理念提出，开始孵化和锤炼数据库自治能力，随后DAS自治能力逐步覆盖集团全网数据库实例，如自动SQL优化、自动空间、自动异常修复等。目前，混合云数据库管理HDM+CloudDBA+自治能力...
支持的数据库引擎与功能
参数诊断 ✔️ ✔️ ✔️ ✔️ ❌ ❌ ❌ ❌ ❌ SQL优化 ❌ ✔️ ✔️ ✔️ ❌ ✔️ ✔️ ✔️ ✔️ 慢日志分析 ❌ ✔️ ✔️ ✔️ ❌ ✔️ ✔️ ✔️ ✔️ 巡检评分 ✔️ ✔️ ✔️ ✔️ ❌ ❌ ❌ ❌ ❌ 事件订阅服务 ✔️ ✔️ ✔️ ✔️ ...
自动SQL限流
自动SQL优化请参见 自动SQL优化。手动SQL优化请参见 SQL优化。当实例 CPU利用率 或者 活跃会话数 未达到阈值，无法触发自动限流时，您可以手动设置规则进行限流，详情请参见 SQL限流。相关API API 描述 UpdateAutoThrottleRulesAsync 采用...
会话管理
PolarDB MySQL版 的一键诊断融合了DAS部分功能，您可以通过其中的...您可以通过单击 优化 按钮，对SQL进行诊断和优化，详情请参见 SQL优化。会话统计：支持查看会话总数、会话时间，以及按照不同统计项（如按用户统计）对会话数量进行统计。
API概览
自动SQL优化 API 标题 API概述 UpdateAutoSqlOptimizeStatus 批量开启、修改或关闭自动SQL优化功能 调用UpdateAutoSqlOptimizeStatus接口，批量开启、修改或关闭自动SQL优化功能。GetSqlOptimizeAdvice 查询自动SQL优化产生的诊断建议 调用...
开启自治功能
DAS基于机器学习和细粒度的监控数据，实现7 x 24小时的异常检测，提供自动SQL优化，自动SQL限流、存储空间自动扩展、计算资源自动扩展等功能。从异常发现、根因分析、进行止损或优化、效果跟踪、回滚或沉淀知识库，实现诊断流程的闭环，...
自动SQL限流
自动SQL优化请参见 自动SQL优化。手动SQL优化请参见 SQL优化。当实例 CPU利用率 或者 活跃会话数 未达到阈值，无法触发自动限流时，您可以手动设置规则进行限流，详情请参见 SQL限流。相关API API 描述 UpdateAutoThrottleRulesAsync 采用...
慢日志
本文介绍了 PolarDB-X 的慢日志查询功能。PolarDB-X 提供慢日志查询功能，并且将CPU使用率和慢日志数量的视角结合在一起，能帮助您快速发现影响数据库性能的关键SQL。慢日志功能提供交互页面，您可以查看格式化的慢SQL...查看慢SQL优化建议。
捷顺
并且在可能的情况下对这些慢SQL进行 自动SQL优化 或者提出优化建议，避免旧系统遗留的慢SQL在高并发执行时把数据库资源耗尽导致系统崩溃。开启DAS 自动扩容，当数据库实例CPU使用率因为QPS增长而持续超过阈值一段时间，DAS调用RDS OpenAPI...
RDS MySQL I/O高问题
数据库自治服务DAS提供自助SQL优化功能，具体操作，请参见 SQL优化。读取冷数据导致实例I/O高 现象 如果SQL查询或修改的数据不在缓冲池（Buffer Pool），则需要从存储中读取，可能会产生大量的I/O吞吐。您可以在控制台的 自治服务>性能趋势...
功能特性
自动SQL优化 智能压测 确认数据库实例规格是否需要扩容，并验证在真实业务场景下的实际效果，降低上线后引发故障的风险。此外，在数据库实例发生故障且无法定位原因时，可以利用克隆库复现故障场景，以便更好地定位故障原因。智能压测 搜索...
自治中心
相关功能：异常检测 SQL限流 自动SQL限流 自动SQL优化 自动性能扩展 自动空间扩展 空间碎片自动回收 SQL请求行为识别 操作步骤 登录 DAS控制台。在左侧导航栏中，单击 实例监控。找到目标实例，单击实例ID，进入目标实例详情页。在左侧导航...
GetSqlOptimizeAdvice-查询自动SQL优化产生的诊断建议
调用GetSqlOptimizeAdvice接口，查询DAS自动SQL优化产生的诊断建议。接口说明 SQL 诊断功能提供实例诊断建议，您可通过诊断建议优化实例的索引，详情请参见 自动 SQL 优化。说明 调用本接口只能查询由 DAS 自动 SQL 优化功能产生的诊断建议...
查看性能评估报告
报告详情说明 负载回放报告包括 回放分析、性能趋势、SQL 诊断信息、SQL 优化信息 和 回放信息列表 等模块。回放分析 模块包括 回放总数、回放成功率 和 回放流量对比图。您可以在 回放流量对比图 区域右上角筛选查看 全部、Select 或 ...
实例会话
优化：单击 优化，对目标实例会话进行优化，详细操作请参见 SQL优化。导出活跃会话。结束会话。结束会话时，需要输入建立该会话的数据库账号和密码。您也可以使用更高权限的数据库账号（具有结束其他账号建立的会话的权限），例如 高权限...
数据查询最佳实践
SQL优化核心方法是减少I/O 尽可能少的进行列扫描，返回最小数据量，减少I/O同时也减少内存开销。分布式计算，本地计算&并行计算 大数据计算情况下，本地计算时充分利用分布式多计算资源的能力，避免数据跨节点。高QPS，分区裁剪 业务系统...
实例会话
优化：单击 优化，对目标实例会话进行优化，详细操作请参见 SQL优化。导出活跃会话。结束会话。结束会话时，需要输入建立该会话的数据库账号和密码。您也可以使用更高权限的数据库账号（具有结束其他账号建立的会话的权限），例如 高权限...
性能优化与诊断简介
自动SQL优化 可以进行自动SQL诊断优化和索引创建，在数据库实例出现慢SQL问题时，及时进行诊断和优化，帮助数据库系统运行在最佳状态。存储自动扩容 当数据库实例的已使用存储空间大于等于设置的扩容阈值时，系统会进行自动扩容，保障您的...
实例会话
优化：单击 优化，对目标实例会话进行优化，详细操作请参见 SQL优化。导出活跃会话。结束会话。结束会话时，需要输入建立该会话的数据库账号和密码。您也可以使用更高权限的数据库账号（具有结束其他账号建立的会话的权限），例如 高权限...
- 产品推荐
- 这些文档可能帮助您