MySQL查询表文件大小
说明：mysql.slow_log日志文件中不会展示表文件大小，如果实例磁盘使用大小与该查询脚本的结果相差较大，可以执行以下SQL语句，然后再和磁盘使用量进行核对。truncate table mysql.slow_log 适用于 云数据库RDS MySQL版
Quick BI交叉表导出数据时，报错“本次查询已超出最大...
问题描述 Quick BI交叉表导出数据时，报错“本次查询已超出最大行列交叉数量，请通过减少行/列维度数量或添加筛选条件解决”。问题原因 1.交叉表中行是维度，列是度量的场景。导出1000行数据。2.交叉表中行是维度，列是度量和维度混布的...
概述
应用场景 并行查询适用于大部分SELECT语句，例如大表查询、多表连接查询、计算量较大的查询。对于非常短的查询，效果并不显著。同时由于并行方式的多样化，可以适用于多种广泛而灵活的应用场景：海量数据分析场景 在中等及更大规模数据量的...
功能发布记录
查询引擎新增Lazy Create Fragment Instance机制，对于大表查询（常见预览场景）limit N场景，降低查询开销，显著改善查询性能。全面优化执行计划展示格式（Explain&Explain Analyze），改善可阅读性，简化SQL性能优化手段，详情请参见 ...
流量诊断
本文介绍如何通过集群管理系统查看表流量信息和表异常流量检测结果。背景信息 在实际使用数据库的过程中...在 大查询表检测 区域，查看采样命中次数较多的表流量监测的详细信息。检测结果中的预估请求量表示热点分片所在表每秒的预估请求数。
Quick BI仪表板图表查询时间远大于图表SQL在数据库...
问题描述 Quick BI仪表板图表查询时间远大于图表SQL在数据库查询时间什么原因。问题原因 查看用户侧图表查询时的接口返回信息，访问数据库建立连接时间花费20秒，查询SQL任务2毫秒，访问数据库时花费了较长时间导致报表加载时间较长。解决...
使用Hybrid Plan加速宽表查询
技术原理 在查询大宽表时，若对少数列通过WHERE或JOIN条件进行过滤，或查询TOP K，最后输出筛选出来的行的所有详细信息。对于这类查询，使用列存索引进行查询的效果较好。但在使用列存索引查询筛选出的列的详细信息时，project需要获取所有...
JOIN实现类型
Lookup Join：用于包含等值条件的join 将小表按连接键作为大表的查询条件，去召回大表纪录。SELECT t1.id,t2.id FROM tj_shop AS t1 JOIN tj_item AS t2 ON t1.id=t2.id 说明 等值条件的一边是建索引的字段才可以开启lookup join优化 说明 ...
SQL处理优化
在查询效率上，跟查询普通表最大的不同在于，读取源表数据文件时，可能会涉及大量 DeltaFile 的合并以及数据历史中间状态的消除，详情可参见 TimeTravel 查询设计，从而极大影响读取效率，因此对于查询频率和效率要求比较高的业务场景，...
IO加速
适用场景 下列是一些IO加速功能适用的业务场景：排序、分组聚合、联合等产生临时结果的复杂操作 使用CTE通用表达式的递归查询 无法使用适当索引的复杂查询 对大表或多个表的分析型查询 其他使用临时表的工作负载 支持范围 满足以下条件的...
SELECT
以下示例为查询一个大表，LIMIT子句限制它只输出5行（因为查询没有ORDER BY，所以随意返回几行）。SELECT orderdate FROM orders LIMIT 5;o_orderdate-1996-04-14 1992-01-15 1995-02-01 1995-11-12 1992-04-26(5 rows)Joins 它允许合并...
Quick BI订阅任务发送失败报错“截图超时”
可以提前聚合的数据，都聚合好，生成一张汇总后的表，供Quick BI使用（查询数据时，从单张表查询，和从多张表关联后的表里查询，效率会相差很多）。如果仪表板查询用的表已经是单张表，而且也没法继续汇总，建议您从优化表结构的角度考虑下...
如何对JSON类型进行高效分析
因此，数据仓库往往需要同时维护ETL作业逻辑和业务表结构，而频繁发布ETL作业常常会影响上游数据消费和下游结果入仓，且在不支持INSTANT DDL时修改大表结构代价相对比较高，容易影响正常查询业务。总体来说，传统数仓解决方案虽然能够提供...
HTAP中的行列混存查询优化
本文介绍了查询优化的作用及基本原理，以及列存索引优化器Join Reorder的实现原理。查询优化的作用及基本...查询效果图如下：开启查询优化后的效果图如下：开启查询优化后，join顺序变为了，d与e的大表join被消除，执行时间减少了50%以上。
调优集群性能
如下图所示，某个大表分布不均，存储节点0上的Shard_0和Shard_1中数据量较大，而在存储节点1上的Shard_2和Shard_3中数据量较小，那么当您查询这个大表时，较大概率会出现存储节点0需要处理的数据多，存储节点1上需要处理的数据少的情况，...
如何查看表和数据库的数据量大小？
执行以下命令，查询一张表的总大小（单位为MB，包含表的索引和数据）：select pg_size_pretty(pg_total_relation_size('<schemaname>.<tablename>'));执行以下命令，查询表的数据大小（单位MB，不包括索引）：select pg_size_pretty(pg_...
根据表大小或代价控制是否使用ePQ
支持根据表的大小或执行计划的代价来控制对查询使用ePQ还是单机执行。背景信息 ePQ善于解决复杂、执行时间长的OLAP长查询，不适用于简单、执行时间短的OLTP短查询。对于短查询而言，计算节点之间建立连接、数据交换、销毁连接的开销反而会...
根据表大小或代价控制是否使用ePQ
PolarDB PostgreSQL版 支持根据表的大小或执行计划的代价来控制对查询使用ePQ还是单机执行。前提条件 支持的 PolarDB PostgreSQL版 的版本如下：PostgreSQL 14（内核小版本14.9.15.0及以上）。说明 您可通过如下语句查看 PolarDB ...
最佳实践
PolarDB PostgreSQL版 支持根据表的大小或执行计划的代价来控制对查询使用ePQ还是单机执行，从而在查询不同大小的表和执行不同代价的计划时，能够选择性能更好的查询执行方式。关于更多ePQ的原理介绍和性能数据，请参见 PolarDB PostgreSQL...
如何发布和调用JDBC数据服务
多表查询 与单表查询类似，可参见单表查询结果参数说明，只是特定配置项和字段要求略有不同。在 接入协议 页面配置接入服务。配置项说明：数据服务类型：选择 多表查询。数据表名和表别名列表：以英文逗号（,）分隔的多个数据库表和别名，...
Quick BI如何将跳转表查询控件中的条件带入到目标表的...
问题描述 Quick BI如何将跳转表查询控件中的条件带入到目标表的查询控件中去。解决方案 1.在目标表中设置查询控件的全局参数。2.在跳转表的跳转配置中关联此全局参数。适用于 Quick BI
逻辑表查询
本文介绍逻辑表查询的操作步骤。背景信息 分库分表后，需要快速地查询单个分表或查询多个分表并返回结果，可以对使用者屏蔽人为寻找分库、分表场景。用户最终使用查询操作都是被当做单个表查询，这样的操作相对较透明，也符合用户当下的...
JDBC数据服务问题
不同的 数据服务类别 会返回不同的查询结果参数：单表查询：可以将查询结果参数的 表别名字段名 直接配置为需要的字段逻辑运算表达式，如(score1+score2)/2。多表查询：可以将查询结果参数的 表别名.字段名 直接配置为需要的字段逻辑运算...
DataV读取数据源超时
解决方案 执行以下操作，通过优化查询时间的方式进行解决：使用SQL查询的业务数据表数量太大 针对查询条件所使用的字段添加索引，减少扫描行数。在数据库中增加定时任务，定时计算所需要的业务指标并更新结果表。DataV组件直接查询结果表的...
生成API概述
以下为 向导模式生成API 和 脚本模式生成API 的区别：功能分类 功能点 向导模式 脚本模式 查询对象 单数据源、单数据表查询 支持 支持 单数据源、多数据表关联查询 不支持 支持 查询条件 数值型等值查询 支持 支持 数值型范围查询 支持 ...
并行查询
云原生数据仓库AnalyticDB PostgreSQL版 提供了单表查询的并行查询功能。在低并发场景下，开启并行查询，对大数据量单表聚合查询，能够减少约50%的查询时间。功能说明 如果您的实例Segment节点是4核及以上规格，单表查询将自动开启并行查询...
使用SQL导入MaxCompute的数据至Hologres
排查步骤四 可能原因：导入数据的过程中，并发度高，CPU消耗大，影响内表查询。解决方案：从V1.1版本开始，可以通过并发度参数 hg_foreign_table_executor_dml_max_dop 控制，默认为32，在导入时设置更小的 hg_foreign_table_executor_dml_...
使用GetRange接口查询数据时返回指定范围外的数据
问题现象 在控制台范围查询、SDK范围查询、OTS外部表查询、OTSReader数据同步等场景中，使用 GetRange 接口查询数据时，返回的结果与查询条件中设置的范围不一致。可能原因 设置的查询条件不符合最左匹配原则。例如当第一主键列设置 ...
QuickBI全表查询控件的全局置顶功能介绍
概述 本文主要介绍全表查询控件全局置顶的功能。详细信息 创建仪表板全表的查询控件时，样式中有一项“全局置顶”选项，这个功能具体有什么用呢？介绍如下：在勾选此项后，如果本查询控件之前还设置了查询控件全局置顶，那么当前置顶的控件...
数据查询
您可以查看云计算资源中物理表基本情况的概览能力，帮助您直观了解物理表基础信息、字段内容分布等情况，建立对数据表的宏观理解，为建立数据标准...单击 物理表查询，选择 adbpg_dev>public>stg_base_yhkh_demo_di，查看物理表数据预览信息。
大查询请求检测
大查询请求通常是指查询条件不合理，导致单次请求过滤大量数据块（Block）的请求。在 云原生多模数据库 Lindorm 中，如果单次RPC（Remote Procedure Call）请求扫描数据块的数量超过100个，则该请求就被定义为大查询请求。当大查询请求量较...
列出映射表名称列表
您可以使用 SELECT 语句通过某个映射表查询满足指定条件的数据。更多信息，请参见 查询数据。如果要查询某个映射表的详细信息，例如字段名称、字段类型等，您可以 DESCRIBE 语句实现。更多信息，请参见 查询表的描述信息。如果由于数据表的...
预览物理表
提供不同数据资源的快速预览和字段详情查看，便于开发人员、数据应用人员和数据分析人员全面直观的了解数据，本章节介绍如何预览物理表。前提条件 已新建工作组“信息...预期结果 在物理表查询中可展示“stg_base_yhkh_demo_di”物理表信息。
API概览
GetTranscriptionPhrases 查询热词词表 查询热词词表信息。UpdateTranscriptionPhrases 更新热词词表 更新热词词表。DeleteTranscriptionPhrases 删除热词词表 删除词表。ListTranscriptionPhrases 列举热词词表 列举用户所有热词词表信息...
OOM常见问题排查指南
类型4：大表被Broadcast Broadcast是指将数据复制至所有Shard。仅在Shard数量与广播表的数量均较少时，Broadcast Motion的优势较大。在Join场景中，执行计划先进行Broadcast，即将build side的数据广播完再构建Hash表，这就意味着每个Shard...
偏分析场景的实践和优化
设计为分区表或者广播表 广播表会在集群的每个数据节点都存储一份数据，建议广播表的数据量不宜太大，每张广播表存储的数据不超过20万行，这样在大表和广播表做关联时，可以计算下推，让关联贴近数据层做计算，避免大表数据拉取到计算节点...
KV、KKV查询
4.使用限制 KV、KKV单表查询，where 子句后必须含有PK字段的等值查询条件。如果顶层查询条件由AND连接，必须保证至少有一个子条件是PK字段的等值查询条件。SELECT company_id,company_name FROM company WHERE company_id IN(1,2)AND ...
云数据库RDS MySQL版实例中实时查询慢日志slow_log的...
用户告知 本文仅阐述实时查询slow_log的方法，文中的操作示例未通过where语句进行条件过滤，因此属于全表查询。建议您在操作时，通过where语句增加条件过滤，避免慢查询结果太多导致查询时间长等情况。云数据库RDS MySQL v5.5版实例不支持...
PolarDB MySQL版8.0.2版本发布日志
修复在B-tree较高或B-tree数据倾斜的大表上执行并行查询操作时，可能存在的并行分片数目过少，或并发worker数据不均衡的问题。8.0.2.2.22 类别 说明 发布时间 新增功能和性能优化 支持为用户授予执行 SHOW_ROUTINE、FLUSH_USER_RESOURCES、...
创建多元索引的映射关系
背景信息 由于执行CREATE TABLE创建表的映射关系时，数据表可能会包含多种不同的索引类型，当用户使用映射表查询数据时，SQL引擎会自动选择合适的数据表主键查询、二级索引或者多元索引执行查询。为了让用户更清晰地选择指定多元索引执行...
- 产品推荐
- 这些文档可能帮助您