设置跨集群OSS仓库
对于多类型索引，由于5.5.3版本的实例只支持多类型索引，而6.7.0版本不支持多类型索引，所以恢复可能会出现问题。添加OSS仓库引用 登录 阿里云Elasticsearch控制台。在左侧导航栏，单击 Elasticsearch实例。进入目标实例。在顶部菜单栏处，...
2023年
无 缺陷修复 修复智能诊断功能统计表大小时可能会出现数字溢出的问题，现已将统计表大小的列由integer数据类型修改为bigint数据类型。修复分区表UPDATE分布键列时出现 tuple already updated by self 错误信息的问题。修复Master节点不回收...
错误码概述
当访问OSS出现错误时，OSS会返回Code、Message、RequestId、EC等信息，方便您定位并解决问题。错误响应头 HTTP/1.1 403 Forbidden Server: AliyunOSS Date: Wed,09 Nov 2022 08:45:46 GMT Content-Type:application/xml Content-Length:471...
常见报错
主日志报错：all shards failed 报错说明 出现该报错后，集群会出现以下问题：读取请求无法从分片获得响应。由于集群或节点仍处于初始启动过程，导致无法搜索数据。分片丢失或处于恢复模式，并且集群状态为red。报错原因 可能原因如下：...
通过手动迁移shard均匀分布热点数据的解决方案
Elasticsearch通过哈希映射将文档均匀地路由到分片中，同时shard均匀地分散在各个数据节点中，这样可能会出现某些节点存储的热点数据较多，导致这些节点的负载较高的情况。针对这种情况，可采用重启集群或手动迁移shard的方式，重新分配...
使用向量检索插件（aliyun-knn）
索引预热（降低延迟）knn索引由于需要进行全内存检索，所以在索引冷加载时会出现查询延迟较高的情况。因此knn插件提供了索引预热功能，可以在knn索引提供检索服务之前，提前对knn索引进行预热，加载到本地内存，从而大大降低冷启动时的查询...
RDS MySQL全文检索相关问题及处理
概述 本文主要介绍RDS MySQL全文检索相关问题及处理方法。详细信息 阿里云提醒您：如果您对实例或数据有修改、变更等风险操作，务必注意实例的容灾、容错能力，确保数据安全。如果您对实例（包括但不限于ECS、RDS）等进行配置与数据修改，...
常见问题
该情况通常伴随 invalid table name:xxx.yyy 报错，主要原因是输出表命名出现问题。对于Proxima CE的输入输出表，其命名需要符合MaxCompute的命名规定，注意名称中不能带点号.，该符号为MaxCompute的特殊字符，会导致后续流程错误。通常...
常见问题
这种是大模型的幻觉问题，当你输入的问题大模型没有知识回答的时候就可能出现。如果在base model上训练后更严重，就是没有训练好，训练效果与训练数据质量、多样性、数据等都有关系。5.我们现在是训练垂直领域的模型，知识都是安全领域的...
通过阿里云Milvus与PAI搭建高效的检索增强生成（RAG）...
模型误导性输出：受制于数据偏差、模型内在缺陷等因素，大语言模型有时会出现看似合理实则错误的输出，即所谓的“大模型幻觉”。为克服这些挑战，并进一步强化大模型的功能性和准确性，检索增强生成技术RAG（Retrieval-Augmented ...
集群负载不均问题的分析方法及解决方案
从结果可以看到查询请求都是普通的term查询，且主日志正常，可以排除ES集群本身出现问题以及存在消耗CPU的查询语句的情况。总结 通过以上分析，可以判断CPU负载不均主要是由于shard分布不均导致的。重新分配分片，确保主shard数与副shard数...
阿里云Elasticsearch实例FAQ
本文列举了阿里云Elasticsearch（ES）相关的常见问题，包括购买、退订、配置、访问、查询、写入、插件、分词、日志、重启、负载或状态异常、备份与恢复、监控报警等相关问题。常见问题概览 购买或退订实例问题 购买ES实例时选错配置，如何...
全文检索
概述 在数据库存储的文本中找到特定的查询词并将它们按照出现的次数排序，就是一种典型的全文检索应用。大部分数据库都提供对文本查询的基本功能。例如，在查询中使用LIKE等表达式查找搜索文本，但这些方法在现代数据库业务中缺少以下能力...
云监控报警
阿里云开放搜索，通过 云监控 对应用的存储容量、计算资源、查询QPS等指标进行监控。帮助用户监测应用的使用情况，并支持用户对监控项设置 报警规则。...若帮助文档未能解决云监控相关问题，请提交工单，我们会尽快为您处理。
开源Elasticsearch FAQ
本文列举了一些开源Elasticsearch（ES）相关的常见问题，例如，如何配置索引线程池大小，如何重新分配索引分片，如何批量删除索引等。常见问题概览 如何配置索引线程池大小？出现内存溢出OOM（OutOfMemory）的错误，如何处理？如何手动对...
常见问题
另外，当数据量很大时，单机分区数也会很多，服务端的并发请求可能会出现排队现象。如果设置固定查询字段进行HASH分区，则查询时只需要扫描某一个或某几个分区。因此，当分区数量较多时，设置固定字段会带来明显的RT和QPS提升。说明 为提升...
功能发布记录
03月24日 地域：杭州 版本：全部 Filebeat+Kafka+Logstash+Elasticsearch Serverless构建日志分析系统 Elasticsearch Serverless新增写入异常日志 向Elasticsearch Serverless应用中写入数据，出现Schema问题或Elasticsearch语法等问题导致...
模糊搜索
模糊分析介绍 模糊搜索是指在用户搜索意图不明确时，搜索引擎将用户的查询（query）与待检索的内容（doc）进行模糊匹配，找出与查询相关的内容。是否相关主要从两个方面衡量：一是query是doc中某些内容的全拼或者简拼；二是query中内容直接...
人脸检索使用概述
在检索到对应的个体后，我们会返回您设置的相关信息。使用限制 待检索的图像中，支持出现多张人脸（支持M:N功能），默认最大支持二十张人脸。对于检索到的每一张人脸图像，默认会返回相似度最高的五个个体的ID，建议您取分值最高的个体ID...
缩容集群数据节点
如果集群负载过高且索引没有副本，同时在缩容过程中存在大量写入或查询等情况，在缩容过程中可能会出现访问超时的问题。建议在缩容前，在客户端中配置好重试机制，减小对业务的影响。缩容数据节点 登录 阿里云Elasticsearch控制台。在左侧...
关键词感知检索
关键词检索+语义检索 针对上述问题，逐渐有业务和系统演化出来“两路召回、综合排序”的方法来解决，并且在效果上也超过了单纯的关键字检索或语义检索，如下图所示：但这种方式的弊端也很明显：系统复杂度增加。硬件资源（内存、CPU、磁盘...
错误码说明
API推送数据错误 错误码 处理方式 1000 一般为超时引起，重试后查看是否还会出现。如仍有报错，请提交工单，值班人员会尽快排查处理。3001 文档不能为空 3004 保存文档失败 3008 请求过于频繁 3011 在配置RDS或MYSQL数据源后，不支持API推...
网站耗资源的原因及解决方法
conn,1,1 while not rs.eof response.write rs("id")&"="&rs("name")rs.movenext wend%>ACCESS数据库的容量比较大 如果网站采用ACCESS数据库，当数据库的容量比较大时（比如超过100M以上），性能就可能会出现问题，所以访问量大的网站一般...
cluster子句
检索时会对这些内容进行hash，计算处对应的分片id，然后进行检索。一些例子：#查询hash字段内容为123，456对应的分片的内容 {"cluster":{"hash_field":["123","456"]} }#查询hash字段内容为abc对应的分片的内容 {"cluster":{"hash_field":...
混合检索使用指南
反之会出现Ann Index Scan with filter。混合检索使用方法 AnalyticDB PostgreSQL版 向量数据库混合查询既支持结构化字段过滤，也支持半结构化字段过滤，同时也支持和文本字段的全文检索一起进行双路召回。混合查询具体可以划分为三类：...
cluster子句
检索时会对这些内容进行hash，计算处对应的分片id，然后进行检索。一些例子：#查询hash字段内容为123，456对应的分片的内容 {"cluster":{"hash_field":["123","456"]} }#查询hash字段内容为abc对应的分片的内容 {"cluster":{"hash_field":...
数据检索与预览
本文为您介绍自动驾驶数据管理平台中的数据检索和预览功能。平台提供场景数据的可视化功能，包括数据的检索、预览、回放等，通过目标数据特征检索并找到各类元数据。数据集 说明 数据文件的集合，通过左上方搜索栏输入数据集名称字段可自动...
2024年
2024年03月 V6.6.2.1 类别 功能 功能描述 相关文档 新增 pg_jieba插件 pg_jieba插件对中文文本进行分词，从而实现高效的中文全文检索。使用pg_jieba插件进行中文分词 Btree-GIST插件 Btree-GIST插件提供了一种使用GIST索引结构来模拟B树（B...
DashVector+ModelScope 玩转多模态检索
本教程演示如何使用向量检索服务（DashVector），结合 ModelScope 上的 中文CLIP 多模态检索模型，构建实时的“文本搜图片”的多模态检索能力。作为示例，我们采用 多模态牧歌数据集 作为图片语料库，用户通过输入文本来跨模态检索最相似的...
概述
本章节介绍Elasticsearch的Java Client的原理、版本兼容性以及使用示例，帮助您快速地使用Java客户端与Elasticsearch集群进行交互，完成检索、分析等相关业务。Transport Client迁移至REST Client Transport Client随着Elasticsearch的第一...
快速入门
说明 如果您的授权出现问题，请通过 重新授权 进行处理。在 高级监控报警 页面，查看默认监控。在左侧导航栏，选择 监控可视化>指标监控，查看已接入实例的指标监控数据。指标监控的详细信息，请参见 基础指标 和 引擎指标。在左侧导航栏，...
查询日志
注意 如果您的业务侧出现问题，建议优先查看主日志和 集群监控，排除集群自身的性能瓶颈或管道配置问题。慢日志 耗时比较久的管道事件日志。当管道运行耗时超过指定阈值时，将在慢查询日志中打印相关信息。注意 为了方便后续排查与定位阿里...
DashVector x 通义千问大模型：打造基于专属知识的...
相比之下，倘若我们把提问的文本，和知识库的内容，都先转化为高质量向量，再通过向量检索将匹配过程转化为语义搜索，那么提取相关知识点就会变得简单而高效。接下来我们将基于 中文突发事件语料库（CEC Corpus）演示关于突发事件新闻报道...
TairVector混合检索实践
本文介绍基于Tair向量检索（Vector）实现条件过滤、向量检索、全文检索融合的混合检索方案。背景信息 大语言模型（Large Language Model,LLM）的发展使得文本、图片、音视频等非结构化数据都可以通过向量来表示其语义信息，基于向量的KNN...
自定义插件安装错误的排查与解决方法
插件太大，会出现安装过程中插件加载慢的情况。出现该情况，需要中断变更，删除该插件，然后修改插件配置（例如减少分词类插件的分词），确认插件小于50 MB后，再重新上传安装。确认是否有数据节点在写入数据。是。需要耐心等待，说明上传...
采集ECS服务日志
如果RAM控制台授权的默认策略或系统角色被删除，可通过 云资源访问授权 进行快捷授权，并为RAM用户授予以下自定义权限，否则会出现权限不足的报错。创建自定义权限的具体操作，请参见 创建自定义权限策略。{"Version":"1","Statement":[{...
降配集群
如果集群负载高且索引没有副本，同时在降配过程中存在大量的写入或查询等情况，业务可能会出现偶发的访问超时现象，无法保证高可用机制，业务稳定性无法保证。GET_cat/indices?v 使用限制 节点磁盘空间和Kibana节点规格，不支持降配操作。...
引擎版本特性
为提升用户体验，降低用户接入门槛，OpenSearch团队针对向量检索版进行了全新升级，摒弃了繁重复杂的集群概念，将向量检索引擎抽象成以表为单位的向量数据库，本文将具体介绍此次升级的改动点。首先为兼顾老用户，OpenSearch将原先的向量...
部署和使用跨可用区实例
["cn-hangzhou-f","cn-hangzhou-g"]使用（切流与恢复）跨可用区实例部署完成后，如果发现实例中某一可用区中的节点出现问题，可通过切流操作，将来自客户端的流量只传输到剩余的在线状态的可用区中，并从集群中隔离被切流可用区中的节点。...
产品简介
常见的搜索应用场景包括互联网搜索、电子商务搜索、社交媒体搜索等等 检索引擎 文本检索引擎是一种用于从大量文本数据中快速检索相关信息的软件工具。它能够根据用户的查询词或关键字，从文本数据库中找到相关的文档或记录，并将其按照相关...
- 产品推荐
- 这些文档可能帮助您