OpenSearch文档排序实践
排序策略说明 排序策略打分原理 对于排序策略的算分分为两个阶段：基础排序和业务排序，通过query召回并通过filter过滤后的文档，首先进入基础排序，根据基础排序表达式海选出文档得分较高的文档，然后取出TOP N个结果再按照业务排序表达式...
OpenSearch-行业算法版文档排序实践
排序策略说明 排序策略打分原理 对于排序策略的算分分为两个阶段：基础排序和业务排序，通过query召回并通过filter过滤后的文档，首先进入基础排序，根据基础排序表达式海选出文档得分较高的文档，然后取出TOP N个结果再按照业务排序表达式...
列存索引中TopK算子的实现
当内存不足时，如果使用归并排序并基于offset和limit做truncate，则在归并排序的前期阶段，sorted run的长度可能小于offset+limit，无法进行truncate，所有数据都将参与排序，truncate的实际效果受到影响。重要 本文中的内存充足是指，算法...
SELECT语法
本文为您介绍 SELECT 命令格式及如何实现嵌套查询、分组查询、排序等操作。执行 SELECT 操作前需要具备目标表的读取数据权限（SELECT）。授权操作请参见 MaxCompute权限。本文中的命令您可以在如下工具平台执行：MaxCompute客户端 使用SQL...
JOIN优化和执行
它的原理如下：开始Sort-Merge Join之前，输入端必须排序（借助MergeSort或MemSort）。比较当前左右表输入的行，并按以下方式操作，不断消费左右两边的输入：如果左表的JOIN Key较小，则消费左表的下一条数据。如果右表的JOIN Key较小，则...
JOIN与子查询的优化和执行
它的原理如下：开始Sort-Merge Join之前，输入端必须排序（借助MergeSort或MemSort）。比较当前左右表输入的行，并按以下方式操作，不断消费左右两边的输入：如果左表的JOIN Key较小，则消费左表的下一条数据。如果右表的JOIN Key较小，则...
相关性实战
分词、匹配、相关性、排序表达式 针对目前若干用户遇到的搜索结果与预期不符合的问题进行统一详细说明，并以此为话题展开说明下OpenSearch在搜索效果方面的功能和后续一些工作方向。首先，对于搜索来讲，最常见的有两种做法：数据库的like...
相关性实战
分词、匹配、相关性、排序表达式 针对目前若干用户遇到的搜索结果与预期不符合的问题进行统一详细说明，并以此为话题展开说明下OpenSearch在搜索效果方面的功能和后续一些工作方向。首先，对于搜索来讲，最常见的有两种做法：数据库的like...
排查MongoDB CPU使用率高的问题
如果排序无法通过索引满足，MongoDB会在查询结果中进行排序，而排序这个动作将非常消耗CPU资源，这种情况需要对经常排序的字段建立索引的方式进行优化。说明 当您在慢日志里发现 SORT 关键字时，可以考虑通过索引来优化排序。其他还有诸如...
使用Hologres实现分页
SELECT.FROM.ORDER BY key LIMIT N OFFSET S SQL实现原理：对于扫描出来的记录，按照 key 排序，取 TOP N+S 条记录（通过部分排序 PARTIAL SORT 实现），然后丢弃前S条记录，返回剩下的N条记录。在分页方案中，核心的考虑因素如下：N：每页...
高精度时间戳（精确到纳秒）和全局排序
SLS会基于Time和Time_ns组合出来的纳秒时间全局排序，控制台序查询结果如下图所示：基本原理 日志写入SLS的时候可能会落在不同的Shard里面，在查询的时候根据查询条件和查询时间范围，通过倒排索引和写入过程中存放的高精度时间信息来将...
聚簇索引Clustering Key
技术原理 Clustering Key在物理存储上是指在文件内进行排序，默认为升序（asc），可以通过下图理解Clustering Key的布局概念。逻辑布局。Clustering Key查询具备左匹配原则，不匹配则无法使用Clustering Key查询加速。如下场景示例将为您...
高级搜索概述
高级搜索中每个运算符和函数的工作原理和操作方式都是基于 PostgreSQL。关于高级搜索支持的SQL基本语法，请参见 SQL基本语法。查询表 resources表是高级搜索中的核心数据表，它存储了资源属性的相关信息。高级搜索所有的查询都是通过对...
MongoDB实例的CPU使用率高问题
查看和Kill活跃会话 正常运⾏中的MongoDB实例会话突然飙升⾄100%，绝⼤部分情况是业务侧的变化引起，可能是由于扫描行数过多、数据排序和聚合、业务流量突增等原因导致的。建议您使⽤以下方法查看。在 MongoDB管理控制台 的 CloudDBA>实例...
什么是AutoML
推荐场景：排序召回模型调优，提升AUC等指标。深度学习：提升图像多分类/视频多分类等任务的精度。相关文档 AutoML工作原理（推荐）了解AutoML原理机制，实验、Trial、训练任务关系，帮助您理解后续配置项间的逻辑关系。新建实验 通过控制...
类目预测功能介绍
什么是类目预测 搜索引擎效果优化在查询意图理解阶段有语义理解、命名实体识别、词权重分析、拼写纠错等手段，在排序阶段有文本相关度、人气模型、类目预测等手段。通过配置查询分析策略和调整排序公式，搜索效果优化有很大的提升空间，再...
layer子句
range:site_id{5,10},quota:1000 对于离线排序是多维的情况，也可以支持多维区间的定位，还是以站内查询为例，离线排序是先按站点排序，站点相同的，按照网页的静态分排序，这种时候，查询希望召回静态分大于100的网页，查询语法如下：...
layer子句
range:site_id{5,10},quota:1000 对于离线排序是多维的情况，也可以支持多维区间的定位，还是以站内查询为例，离线排序是先按站点排序，站点相同的，按照网页的静态分排序，这种时候，查询希望召回静态分大于100的网页，查询语法如下：...
layer子句
range语法基本工作原理是通过用户给定的attribute，逐级计算最终需要seek的doc范围。需要注意的点：语法中用到的必须是attribute，不能是需要计算的表达式 语法中用到的attribute必须与离线排序方式相符，否则会自动转换为查询全部区间。...
layer子句
range语法基本工作原理是通过用户给定的attribute，逐级计算最终需要seek的doc范围。需要注意的点：语法中用到的必须是attribute，不能是需要计算的表达式 语法中用到的attribute必须与离线排序方式相符，否则会自动转换为查询全部区间。...
写入或更新调优指南
背景信息 Hologres是一站式实时数据仓库引擎，支持海量数据高性能实时写入与实时更新，满足大数据场景上对数据高性能低延迟的需求，Hologres的写入技术原理详情请参见 写入技术揭秘。在写入或更新场景上，Hologres提供多种数据写入和更新的...
事件介绍
事件类型 事件分为冒泡事件和非冒泡事件：冒泡事件：以关键字 on 为前缀，当组件上的事件被触发，该事件会向父节点传递。非冒泡事件：以关键字 catch 为前缀，当组件上的事件被触发，该事件不会向父节点传递。事件绑定的写法同组件的属性，...
执行计划和基本算子
')))")|HitCache:false|+-+9 rows in set(0.01 sec)除执行计划外，EXPLAIN 结果中还会有一些额外信息，上面的例子中仅有一项 HitCache（是否命中Plan Cache缓存），详细原理参见 执行计划管理。算子介绍 PolarDB-X 1.0 中支持以下算子。...
转发路由器工作原理
多地域VBR等价路由 企业版转发路由器路由表从多个VBR实例学习到相同目标网段的路由条目后，在这些路由条目其他路由条目属性一致的情况下，系统默认按照地域ID字母排序靠前的路由条目转发流量。开启多地域VBR等价路由功能后，在其他路由条目...
事件
使用方式 事件分为 冒泡事件 和 非冒泡事件：冒泡事件：当一个组件上的事件被触发后，该事件会向父节点传递。非冒泡事件：当一个组件上的事件被触发后，该事件不会向父节点传递。事件绑定的写法同组件的属性，为 key、value 的形式。key 以...
数据排序
排序包含字段排序和按堆积总和两种，按字段排序时，Quick BI按照某个字段的顺序排列；按照总和排序时，Quick BI会先将字段分组求和再排序，您可以查看某组数据总和的排序。本文为您介绍字段如何排序。前提条件 您已创建仪表板，请参见 新建...
在TairSearch中使用Msearch实现索引分片搜索
TairSearch根据该原理实现了大Key的内存搜索方案：预先将大Key拆分成小Key，设计负载规则将数据写入不同的Key中，并通过 TFT.MSEARCH 对该类Key进行查询。创建该类Key时，必须使该类Key具备相同的Schema配置。更多关于TairSearch的信息，请...
Beam排序优化（7.0版）
若您经常针对Beam表的某几列进行范围查询或等值筛选时，您可以使用Beam排序键（组合排序键或多维排序键），获得更优的查询性能。Beam支持在创建表时指定一个或者多个排序键，系统会按照排序键持续对写入数据进行排序。当数据有序后，Beam在...
排序优化
ORDER BY加速 排序加速前（未排序）排序加速后 GROUP BY加速 排序加速前（未排序）排序加速后 JOIN加速 排序加速前（未排序）排序加速后 说明 JOIN排序加速需要关闭ORCA功能，打开mergejoin功能，语句如下：SET enable_mergejoin TO on;...
排序策略配置
查看排序效果，在搜索测试界面，配置基础和业务排序参数，并打开显示排序明细：查看各函数算分结果：说明 对于文档得分的排序分为两个阶段：基础排序和业务排序，通过query召回并通过filter过滤后的文档，首先进入基础排序，根据基础排序...
排序策略配置
查看排序效果，在搜索测试界面，配置基础和业务排序参数，并打开显示排序明细：查看各函数算分结果：说明 对于文档得分的排序分为两个阶段：基础排序和业务排序，通过query召回并通过filter过滤后的文档，首先进入基础排序，根据基础排序...
排序和翻页
使用多元索引查询数据时，通过预先定义排序方式或者查询时指定排序方式，您可以按照指定排列方式获取到返回数据。当返回结果行数较多时，通过使用跳转翻页或者连续翻页可以快速定位到所需数据。使用场景 分类 使用方式 功能 使用场景 排序 ...
排序和翻页
使用多元索引查询数据时，通过预先定义排序方式或者查询时指定排序方式，您可以按照指定排列方式获取到返回数据。当返回结果行数较多时，通过使用跳转翻页或者连续翻页可以快速定位到所需数据。使用场景 分类 使用方式 功能 使用场景 排序 ...
sort子句
子句说明 用户可以通过查询语句控制结果的排序方式，包括指定排序的字段和升降序。子句语法 排序子句格式为：+field1;field2 field为要排序的字段，+为按字段值升序排序，-为降序排序，默认降序排序。field也支持简单的算术运算，如+、-、*...
sort子句
子句说明 用户可以通过查询语句控制结果的排序方式，包括指定排序的字段和升降序。子句语法 排序子句格式为：+field1;field2 field为要排序的字段，+为按字段值升序排序，-为降序排序，默认降序排序。field也支持简单的算术运算，如+、-、*...
自动增量排序
AnalyticDB PostgreSQL版 提供了自动增量排序功能，本文为您介绍如何使用自动增量排序功能。功能简介 自动增量排序（AutoMerge）是 AnalyticDB PostgreSQL版 在后台运行的数据自动排序进程。自动增量排序会定期巡检表的数据状态，对新增...
排序和翻页
使用多元索引查询数据时，通过预先定义排序方式或者查询时指定排序方式，您可以按照指定排列方式获取到返回数据。当返回结果行数较多时，通过使用跳转翻页或者连续翻页可以快速定位到所需数据。使用场景 分类 使用方式 功能 使用场景 排序 ...
sort子句
子句说明 用户可以通过查询语句控制结果的排序方式，包括指定排序的字段和升降序。子句语法 排序格式为：expression:field field为要排序的字段 field也支持简单的算术运算，如+、-、*、\等，但参与运算的字段类型必须一致。field部分也...
列存表使用排序键和粗糙集索引加速查询
性能对比结果 排序方式 Q1 Q2 Q3 组合排序 0.07s 3.35s 3.64s 多维排序 0.44s 0.28s 0.047s 结论 对于Q1场景，由于包含排序键的首列，所以组合排序的效果非常好，而多维排序则会相对性能弱一些。对于Q2场景，由于不包含排序键的首列，组合...
sort子句
子句说明 用户可以通过查询语句控制结果的排序方式，包括指定排序的字段和升降序。子句语法 排序格式为：expression:field field为要排序的字段 field也支持简单的算术运算，如+、-、*、\等，但参与运算的字段类型必须一致。field部分也...
- 产品推荐
- 这些文档可能帮助您