什么是向量检索服务
标签+向量检索：在索引算法层实现了“带条件的向量检索”，解决了传统多路归并召回结果不理想的情况，满足组合检索的要求。索引水平扩展：采用非对等分片方法实现分布式检索，支持有限精度下索引的快速合并，与Map-Reduce计算模型可有效...
应用场景
阿里云Elasticsearch具有广泛的应用场景，包括日志分析与运维全观测、信息检索、数据智能等。日志分析与全观测 在复杂业务场景下，海量服务器、物理机、Docker容器、移动设备和IoT传感器等设备中，往往存在着结构分散、种类多样、规模庞大...
数据处理
数据上传后请务必检查返回值，并对相关错误码进行重试（尤其是3007错误），否则会出现数据丢失情况。同时，数据处理是异步的，系统返回“OK”后只表示系统接收数据成功，数据处理过程的错误会在控制台错误信息中展示，请注意及时检查。POST...
应用场景
本文为您介绍向量检索服务在 电商智能搜索和偏好推荐、自然语言处理等AI问答系统、图库类网站多模态搜索、视频检索、分子检测与筛选等场景下的应用。电商智能搜索和偏好推荐场景 在电商智能搜索和偏好推荐场景中，向量数据库可以实现基于...
产品简介
常见的搜索应用场景包括互联网搜索、电子商务搜索、社交媒体搜索等等 检索引擎 文本检索引擎是一种用于从大量文本数据中快速检索相关信息的软件工具。它能够根据用户的查询词或关键字，从文本数据库中找到相关的文档或记录，并将其按照相关...
ODPS-0420095
错误码：ODPS-0420095:Access Denied 错误1：You have no privilege to create external project-you have to be owner,super admin or admin of the referred project.错误信息 ODPS-0420095:Access Denied-You have no privilege to ...
阿里云大模型RAG对话系统最佳实践
在响应用户查询时，RAG对话系统首先利用检索系统从知识库中检索相关内容，然后将检索到的内容与原始查询一同输入大语言模型（LLM），无需重新训练LLM模型就能够获取最新的信息，并产生可靠的输出。RAG对话系统特别适用于问答、摘要生成和...
高速全文检索（RUM）
背景信息 GIN索引（通用倒排索引）支持通过tsvector和tsquery两种数据类型进行全文检索，但是有如下几个问题：排序慢 需要有关词汇的位置信息才能进行排序。GIN索引不存储词汇的位置，因此在索引扫描之后，需要额外的扫描来检索词汇位置。...
ODPS-0123031
错误码：ODPS-0123031:ODPS partition exception 错误1：maximum 60000 partitions allowed 错误信息示例 ODPS-0123031:ODPS partition exception-maximum 60000 partitions allowed 错误描述 每张MaxCompute的分区表最多允许存在 60000 个...
语义检索
IMM语义检索是采用向量检索方式，根据特定内容语义对多媒体数据进行搜索的过程，本文介绍如何使用语义检索。功能简介 传统的标量检索是根据文件携带的元数据信息进行检索，例如文件名称、文件创建时间、文件格式等。与标量检索不同的是，...
什么是阿里云Elasticsearch
基于云上超强的计算和存储能力，以及在集群安全和运维领域积累的技术经验，阿里云Elasticsearch不仅支持集群一键部署、弹性伸缩、智能运维和各类内核引擎优化，还提供了迁移、容灾、备份和监控等全套解决方案。您可以基于阿里云...
多元索引介绍
多元索引基于倒排索引和列式存储，可以解决大数据的复杂查询难题，包括非主键列查询、全文检索、前缀查询、模糊查询、多字段自由组合查询、嵌套查询、地理位置查询、统计聚合（max、min、count、sum）等功能。多元索引在车联网场景中主要...
2023年
2023年08月 V6.3.11.2 类别 功能 功能描述 相关文档 新增 向量检索 增加余弦相似度相关函数。支持并行构建针对文本数据和向量数据的向量索引。融合查询功能增强，支持半结构化数据索引加速，支持通过向量检索和全文检索进行双路召回。向量...
大模型RAG对话系统
为了解决这一问题，当前业界广泛采用的方法是利用检索增强生成（Retrieval-Augmented Generation,RAG）技术来增强LLM的性能，这一技术可以显著提升问答、摘要生成以及其他需要引用外部知识的自然语言处理（NLP）任务的质量。RAG通过将大...
人脸检索使用概述
本文介绍了接入人脸检索功能的操作流程和计费信息。初次接入 如果您初次接入人脸检索功能，想快速进行测试，请参照以下步骤进行操作：创建个体（person）。关于接口的说明，请参见 新建个体。说明 如果分组（group）不存在，创建个体的接口...
常见Pod问题
解决方法：您可以尝试从该容器中检索日志以调查失败原因。如果因为容器重新启动太快而看不到日志，则可以使用以下命令来查看日志：$kubectl logs<pod-name>-previous RunContainerError 容器无法启动时可能出现此错误。可能原因：挂载了不...
常见问题
目前Proxima CE不支持相同输入doc的多个任务同时执行，因为多个任务同时执行会导致索引的坏写，比如A任务写了某份索引，B任务会覆盖，这样会导致各种问题，常见问题如下：底层OSS Volume Filesystem相关的错误。build过程失败，提示 jni ...
SQL查询常见错误排查
错误码 错误信息 描述 解决办法 OTSUnsupportOperation Operation not supported 表格存储SQL目前覆盖部分SQL功能集合。当使用未支持的SQL语法时，系统会报错。使用表格存储SQL支持的功能。SQL功能会快速迭代，最新功能集合请以官网文档为...
事件分析概述
消息领域：在传统消息领域，消息Schema管理、消息内容检索一直是无法解决的难题，大部分情况下需要增加订阅者来对消息做离线分析。事件总线EventBridge 的事件分析平台提供消息Schema管理与消息内容查询能力，为消息可视化提供更完整的解决...
基于向量检索版+LLM构建对话式搜索
向量检索版+大模型系统构建 3.1 下载大模型工具 OpenSearch-LLM，并解压到llm目录 3.2 在llm目录中的.env文件中配置Chat相关信息，用户需自行购买Chat相关服务。使用Chat LLM_NAME=OpenAI OPENAI_API_KEY=*OPENAI_API_BASE=*OPENAI_...
基于向量检索版+LLM构建对话式搜索
向量检索版+大模型系统构建 3.1 下载大模型工具 OpenSearch-LLM，并解压到llm目录 3.2 在llm目录中的.env文件中配置Chat相关信息，用户需自行购买Chat相关服务。使用Chat LLM_NAME=OpenAI OPENAI_API_KEY=*OPENAI_API_BASE=*OPENAI_...
快速创建Milvus实例
通过创建阿里云向量检索Milvus实例，能够迅速搭建起具备高性能、弹性伸缩特性的AI向量检索数据库，并借助内置可视化管理工具Attu实现高效运维与监控。本文为您介绍如何快速创建Milvus实例。前提条件 已拥有阿里云账号。如果您还没有阿里云...
什么是自动驾驶开发平台
数据管理提供自动驾驶采集数据在云上数据预处理、预标注、管理、检索、重组、回放、输出到仿真或训练系统中的能力：非结构化数据处理针对非结构化数据处理提供DAG调度和并行计算能力，构建自动调度的10倍加速的自动驾驶数据工作流 多模态...
开放搜索
开放搜索服务（OpenSearch）是一款结构化数据搜索托管服务，为移动应用开发者和网站站长提供简单、高效、稳定、低成本和可扩展的搜索解决方案。通过OpenSearch自带功能，可将RDS中的数据自动同步到OpenSearch中并实现各类复杂搜索。本文以...
错误码
错误码 识别成功 错误码 错误信息 描述 0 SUCCESS 成功 配置或参数错误 错误码 错误消息 描述 解决方案 240999 DEFAULT_ERROR 内部默认错误。内部错误，请重试。240001 NUI_CONFIG_INVALID 配置文件错误。配置文件错误，请确认传入的资源...
错误码
错误码 识别成功 错误码 错误信息 描述 0 SUCCESS 成功 配置或参数错误 错误码 错误消息 描述 解决方案 240999 DEFAULT_ERROR 内部默认错误。内部错误，请重试。240001 NUI_CONFIG_INVALID 配置文件错误。配置文件错误，请确认传入的资源...
高级监控报警概述
高级监控报警服务是基于Elasticsearch开发的一种SAAS服务，具备对集群指标和日志数据的采集、加工、监控、检索、可视化和报警等多种能力，为云上用户提供了一种开箱即用的一站式监控报警解决方案。通过使用高级监控报警服务，您可以实现对...
查询语法
如果字段的数据类型不被设置为double、long或者查询时数值范围的语法错误，那么日志服务会按照全文查询方式进行查询，这样查询到的结果可能与您期望的结果不同。例如字段 owner_id 不是double、long类型，则执行查询语句 owner_id>100 时，...
概述
本章节介绍Elasticsearch的Java Client的原理、版本兼容性以及使用示例，帮助您快速地使用Java客户端与Elasticsearch集群进行交互，完成检索、分析等相关业务。Transport Client迁移至REST Client Transport Client随着Elasticsearch的第一...
OSS SDK使用中常见问题的解决方法
概述 本文主要介绍OSS SDK使用中常见问题的解决方法。详细信息 本文档介绍使用OSS SDK时可能遇到的问题。...iOS SDK和Android SDK如何开启日志记录功能 相关文档 常见的OSS SDK调用错误和工具类错误排查 OSS常见错误码 适用于 对象存储 OSS
功能发布记录
更新日期 更新内容 相关文档 2023年01月05日 发布图片审核增强版识别图片违规风险功能。图片审核增强版计费说明 接入指南 图片审核增强版API 控制台操作指南 2022年11月30日 发布文本审核增强版识别文本违规风险功能。使用文本审核增强版...
插件配置概述
阿里云Elasticsearch支持20余款开源和自研Elasticsearch插件，能够提升集群在稳定性、查询和写入性能、分词查询、数据检索等各方面的能力。本文介绍阿里云Elasticsearch支持的系统默认插件和自定义插件。系统默认插件 系统默认插件为阿里云...
全文检索
全文检索（Full Text Search）指数据库将自然语言文本转换为可被查询数据的能力。云原生数据仓库AnalyticDB PostgreSQL版 使用PostgreSQL内核，提供完善的全文检索功能。本文介绍 AnalyticDB PostgreSQL版 如何实现“一站式全文检索”业务...
压测指标和任务参数说明
错误率相关指标 error rate 索引的每个任务的响应错误率。压测任务Task 您可以从Task维度查看实例的吞吐量、延迟、服务时间、错误率等参数指标。Operation 说明 index-append 索引。index-stats 索引状态。node-stats 节点状态。default ...
Logstash数据写入问题排查方案
在使用阿里云Logstash将数据写入阿里云Elasticsearch（output指定为阿里云Elasticsearch）时，您可能会遇到网络不通、管道配置错误、负载高、管道正常启动但无数据写入目标端以及服务正常但缺少数据等问题...网络不通 排查方案 常见错误案例 ...
模糊搜索
模糊分析介绍 模糊搜索是指在用户搜索意图不明确时，搜索引擎将用户的查询（query）与待检索的内容（doc）进行模糊匹配，找出与查询相关的内容。是否相关主要从两个方面衡量：一是query是doc中某些内容的全拼或者简拼；二是query中内容直接...
获取Collection
说明 通过Collection对象，后续可进行Doc相关操作，如插入Doc、检索Doc、管理Partition等 前提条件 已创建Cluster：创建Cluster。已获得API-KEY：API-KEY管理。已安装最新版SDK：安装DashVector SDK。接口定义 Python Client.get(name:str)...
应用性能监控分析服务介绍
使用阿里云Elasticsearch作为其数据存储，能够实时监控数千个应用程序的性能，支持通过Agent收集并传入请求、数据库查询、外部HTTP请求和错误及异常等多种详细的性能信息，并通过Kibana可视化分析，为您提供高效的应用程序性能优化与监控...
模糊分析器
模糊分析介绍 模糊分析器（fuzzy）适用于模糊搜索，模糊搜索是指在用户搜索意图不明确时，搜索引擎将用户的查询（query）与待检索的内容（doc）进行模糊匹配，找出与查询相关的内容。是否相关主要从两个方面衡量：一是query是doc中某些内容...
日志同步分析概述
相关文档 方案描述 通过Filebeat采集Apache日志数据 典型的ELK日志采集模式。使用阿里云Filebeat采集Apache日志数据，通过阿里云Logstash过滤采集后的日志数据，传输到Elasticsearch中进行查询分析。通过logstash-input-sls插件从日志服务...
- 产品推荐
- 这些文档可能帮助您