排序优化
AnalyticDB PostgreSQL版 支持通过组合排序（适用于：查询SQL的等值条件或范围条件包含几个固定列）或多维排序（适用于：查询SQL包含的过滤条件不是固定的列）加速查询。背景信息 您在创建表时，可以定义一个或多个列为排序键，当有数据...
高并发点查
where条件里需要有且仅有Key列的等值，可以认为是一种键值对查询。使用PreparedStatement 为了减少SQL解析和表达式计算的开销，SelectDB查询入口层提供了与MySQL协议完全兼容的 PreparedStatement 特性（目前只支持主键点查）。若在FE开启 ...
Doris概述
Bloom Filter：对高基数列的等值过滤裁剪非常有效。Invert Index：能够对任意字段实现快速检索。在存储模型方面，Doris支持多种存储模型，针对不同的场景做了针对性的优化：Aggregate Key模型：相同Key的Value列合并，通过提前聚合大幅提升...
生成API概述
以下为 向导模式生成API 和 脚本模式生成API 的区别：功能分类 功能点 向导模式 脚本模式 查询对象 单数据源、单数据表查询 支持 支持 单数据源、多数据表关联查询 不支持 支持 查询条件 数值型等值查询 支持 支持 数值型范围查询 支持 ...
索引类型
B-tree B-tree可以在可排序数据上的处理等值和范围查询。特别地，本数据库的查询规划器会在任何一种涉及到以下操作符的已索引列上考虑使用B-tree索引：< <= = >=>将这些操作符组合起来，例如 BETWEEN 和 IN，也可以用 B-tree 索引搜索实现。...
ODPS-0130071
解决方案 1)保证Join condition包含等值表达式 2)增加mapjoin hint（注意：on条件只包含非等值表达式，可能会导致join膨胀出特别多的数据，执行缓慢）示例-错误：join condition只包含非等值表达式 odps>select t1.*from src t1 join src t...
2024-04-01版本
对Kafka的写入，支持了对JSON格式中某一列为空数据时不写入NULL的能力，优化了对Kafka存储容量的占用，同时支持了根据Header进行等值过滤的能力，帮您进行数据分流处理；另外，对于Hive Catalog支持了OSS-HDFS作为Hive写入端的存储；对于...
存储引擎
丰富的索引类型：支持Btree（等值查询/范围查询）、Brin（结合排序实现粗糙集过滤）、GIN（倒排索引）等索引类型，在点查和低选择率场景采用索引可显著提升数据检索性能。数据压缩类型：压缩算法支持ZLIB、ZSTD和LZ4等，高压缩率可显著降低...
查询语法
join_condition：用于join的 on 条件，on 后面的条件只能是等值关系，非等值关系需在 where 子句中定义。WHERE子句 WHERE子句语法为：[WHERE filter_condition]其中filter_condition可以是用 AND，OR 等二元逻辑操作符连接的多个表达式，也...
优化建议
查询尽量在单机完成，最为简单的方式就是在分区字段上指定等值条件，使操作只发送到一个后台数据库节点。若不指定，则操作需要发送到每个后台节点，可能导致性能大幅下降；尽量避免分布式事务和分布式查询；同时使用其他适用于MySQL的优化...
基本概念
ARMS的指标一般对应于实时计算后的Count、Max、Sum、Count Distinct等值。数据清洗 对自定义监控日志数据进行切分、静态Join等操作，最终将其转化为标准键值对（Key-Value）格式的过程。数据筛选 关于数据集中什么样的数据将被用于数据集...
列的最佳实践（2.0版）
从内部索引机制上，字符串类型适合等值查询和范围查询情况，而时间，数值类型性能更高，建议用户尽可能使用数值类型，减少使用字符串类型。方法 常见将字符串转换为数值类型方法：包含字符前缀或后缀，例如E12345，E12346等。可以直接去掉...
Range Clustering
背景信息 哈希聚簇（Hash Clustering）表有以下优点：对于等值的列条件查询，可以利用Hash算法直接定位到对应的哈希桶（Bucket Pruning），如果桶内数据排序存储，还可以进一步利用索引定位，从而减少数据扫描量，提高查询效率。...
JSON索引（2.0版）
例如，where json_column='{"id":123}' 类似的字符串等值、不等值、范围过滤以及 LIKE 操作等。JSON ARRAY查询对标于Elasticsearch的Object类型，而不是nested类型。例如，JSON ARRAY数据为 {"addr":[{"city":"beijing","no":11},{"city":...
列式JSONB
设置Bitmap索引 在Hologres中，bitmap_columns 属性指定位图索引，是数据存储之外的独立索引结构，以位图向量结构加速等值比较场景，能够对文件块内的数据进行快速的等值过滤，适用于等值过滤查询的场景。Hologres从V2.0版本开始支持对开启...
Join优化
Hash Join：在右表上根据等值Join列建立哈希表，左表流式的利用哈希表进行Join计算，这个算子只适用于等值Join。Nest Loop Join：通过两个for循环进行Join过程处理。它适用的场景是不等值的Join，例如大于小于或者是需要求笛卡尔积的场景。...
索引表配置
配置equal则对offset数据进行等值压缩 单值整型attribute不能配置uniq，可以配置equal对data数据进行等值压缩；FLOAT/DOUBLE浮点型单值attribute也支持等值压缩配置 其他压缩方式：当字段类型为定长多值的float类型字段时，除了uniq|equal...
索引表配置
配置equal则对offset数据进行等值压缩 单值整型attribute不能配置uniq，可以配置equal对data数据进行等值压缩；FLOAT/DOUBLE浮点型单值attribute也支持等值压缩配置 其他压缩方式：当字段类型为定长多值的float类型字段时，除了uniq|equal...
SQL其他常见问题
在执行MaxCompute SQL过程中，对DOUBLE类型的数据进行等值比较，为什么结果不符合预期？如何解决DECIMAL数据类型精度溢出问题？新创建的MaxCompute项目不支持数据类型自动隐式转换，如何解决？查询数据时，提示XXXtypeisnotenabled ...
实时物化视图
如果查询语句包含OUTER JOIN，JOIN条件仅支持AND连接，不支持OR或NOT等，不支持非等值条件，不支持等值条件的左右列来自同一张表。当查询语句包含聚合操作时，只支持COUNT、SUM、AVG、MAX、MIN，不支持HAVING子句。仅支持简单查询、FROM子...
创建维表
在进行维表JOIN的时候，JOIN ON的条件必须包含所有主键的等值条件。RDS的主键可以定义为表的主键或唯一索引列。在实际使用过程中需要把所有 your_xxxxxx 参数值，替换为实际的数据库相关参数值，并根据如下步骤，在配置中心存入数据库的...
更新数据
当然 WHERE 条件不一定非得是等值测试。许多其他操作符也都可以使用。但是表达式必须得出一个布尔结果。你还可以在一个 UPDATE 命令中更新更多的列，方法是在 SET 子句中列出更多赋值。例如：UPDATE mytable SET a=5,b=3,c=1 WHERE a>0;
创建Hologres内部表
位图列：即比特编码列，可对存储文件内部数据进行快速等值过滤。因此，建议您将等值filter条件的数据构建为比特编码。更多存储方式的详细介绍，请参见 建表概述。分区 定义表的分区字段。说明 当分区表设有主键时，主键中必须包含分区字段...
分区裁剪
AnalyticDB PostgreSQL 7.0版 支持Hash分区，Hash分区只能通过等值条件进行裁剪。动态分区裁剪仅支持分区列的等值条件，如=或 IN 等。分区裁剪效果与数据分布有关，如果分区约束无法有效裁剪，性能会回退到与全表扫描一致。静态分区裁剪 ...
何时选择HASH分区
根据分区键使用分区修剪，基于分区键的等值查询开销减小；随机分布数据，以避免I/O瓶颈。分区键的选择一般要满足以下要求：选择唯一或几乎唯一的列或列的组合；为每个2的幂次分区创建多个分区和子分区。例如：2、4、8、16、32、64、128等。...
云数据库Redis
Redis维表JOIN时，ON条件必须包含所有主键的等值条件。Redis维表仅支持None和LRU两种缓存策略。语法结构 CREATE TABLE redis_table(a STRING,b STRING,PRIMARY KEY(a)NOT ENFORCED-必填。WITH('connector'='redis','host'='<yourHost>');云...
Beam概述（公测）
Beam自研存储引擎采用统一的存储设计（行存Detla和PAX结构的列存Base），既能够承载OLTP的高并发读写负载，也能够...如果您经常对某列或某几列进行范围查询或等值筛选，可以指定Beam排序键提升查询效果。详情请参见 Beam排序优化（7.0版）。
管理地图子组件
中间层：点热力层、背景图片层、网格热力层、飞线层、蜂窝热力层、等值面层、信息标签层、中国国家边界、轨迹线层、自定义区域下钻层、矢量散点层、呼吸气泡层、图标散点层、符号聚合层、区域热力层。底部层：基础底图层和高德底图层。说明...
场景化建表调优指南
设置建议 将等值过滤条件的字段设置为主键（Primary Key）的最左字段，即Lineitem表的主键是(l_orderkey,l_linenumber)，而不是(l_linenumber,l_orderkey)。将等值过滤条件的字段设置为Distribution Key，保证需要扫描的数据都存储在同一个...
管理地图子组件
中间层：图片背景层、区域热力层、呼吸气泡层、区域下钻热力层、网格热力层、点热力层、蜂窝热力层、等值面层、文字标注层、线热力层、点聚合层、飞线层、图标散点层和矢量散点层。底部层：高德在线底图层和底图层。说明 只能在子组件所属...
2021年
针对JOIN场景，MaxCompute推出Dynamic Filter智能优化功能，可以利用JOIN本身的等值连接属性，基于运行时动态生成过滤器，在Shuffle或JOIN之前提前过滤数据，实现加速查询运行。该功能适用于维度表和事实表执行JOIN的场景。您可以在Session...
如何减少查询命中时间线提升查询效率
本文提供给客户介绍如何通过优化查询的策略提升查询的...无法避免的情况下尽量增加一个literor的等值过滤条件。对于低基数值的查询，可采用预聚合方式提前聚合后写入。比如机房A有1000个IP。查询机房A的最大CPU使用率。可提前聚合好后写入。
一级分区的规划和设计（2.0版）
如果常用的SQL包含某列的等值或IN查询条件，则选择该列作为分区列。以下例子则选择 id 列作为分区列。select*from table where id=123 and…;select*from table where user in(1,2,3);数据倾斜带来的影响 如果一级分区列选择不合理会导致...
聚集列（2.0版）
Join子句中的等值条件列（通常是一级分区列）作为聚集列。示例 现有一张数据表，其一级分区键和聚集列均为 org_code，示例如下。CREATE TABLE t_fact_mail_status(mail_id varchar COMMENT '',scan_timestamp timestamp COMMENT '',biz_...
MaxCompute SQL示例解析
此场景为等值连接。SELECT a.ename,b.ename FROM emp a LEFT OUTER JOIN emp b ON b.empno=a.mgr;示例4：查询基本薪金大于1500的所有工作。此场景下需要使用HAVING子句。SELECT emp.`JOB`,MIN(emp.sal)AS sal FROM `emp` GROUP BY emp.`JOB...
设置优化器的Join Reorder
描述对应列的值的分布范围，主要用于估算单张表上的取值范围及等值谓词的选择率。对应列的特殊值的个数。主要用于估算 Group By 中的分组个数，也可用于辅助估计等值谓词的选择率。其他约束。如该列是否存在唯一索引，该列是否与其他列存在...
设置列索引查询过滤算法
适用场景 Bloom filter适用于等值条件以及IN条件，对于过滤性较强的等值条件，具有较好的过滤效果。如使用字符串ID进行等值过滤。Minmax indexes适用于对列数据分布有较好的局部性的场景，对于范围过滤条件和等值过滤条件具有较好的过滤...
处理接口
根据时间轴的特性，如果您需要时间轴变化的同时，等值面的数据也发生变化，那么可以开发一个接口或者数据库，能根据时间参数来获取不同时间段的全国各个监测站点的数据。本文档为您介绍如何使用Node.js完成接口的开发和发布（您也可以使用...
BI分析模式的限制说明
矢量散点层 图标散点层 区域热力层-仅支持省级行政区划 呼吸气泡层 轮播标签层 中国国家边界 自定义区域下钻层 飞线层 点热力层 等值面层 网格聚合层 蜂窝聚合层 轨迹线层 符号聚合层 说明 支持BI分析模式的组件正在不断更新，敬请赐侯。
SELECT语句
join_condition：用于join的 on 条件，on 后面的条件只能是等值关系，非等值关系需在 where 子句中定义。WHERE子句 WHERE子句语法为：[WHERE filter_condition]其中filter_condition可以是用 AND，OR 等二元逻辑操作符连接的多个表达式，也...
- 产品推荐
- 这些文档可能帮助您