使用Elasticsearch的向量近邻检索（kNN）功能
背景信息 关于Elasticsearch向量近邻检索k-nearest neighbor（kNN）search的详细说明，请参见 k-nearest neighbor（kNN）search。前提条件 创建阿里云Elasticsearch 8.x版本实例，本文以阿里云Elasticsearch 8.5.1版本为例介绍。创建实例的...
【通知】Elasticsearch Serverless服务正式版上线
相比公测版，正式版Elasticsearch Serverless服务对原生Elasticsearch的读写API及生态组件有更高兼容性，帮助用户快速构建数据检索与分析应用，可灵活使用在多种应用场景中，例如网站搜索、企业信息检索、日志分析、运维监控等。...
分组向量检索
本文介绍如何在向量检索时将结果按照字段值进行分组返回。背景介绍 在向量检索的实际应用中，有些场景需要将向量检索的结果分组返回。例如：在RAG中，一篇文档往往需要拆分为多个段落，每个段落生成一个向量存入DashVector。在向量检索时，...
AliPG功能模块
向量检索 PASE高效向量检索 PASE（PostgreSQL ANN search extension）是一款为AliPG数据库研发的高性能向量检索索引插件，使用业界中成熟稳定且高效的ANN（Approximate nearest neighbor）检索算法，包括IVFFlat和HNSW算法，通过这两种算法...
通过自建Metricbeat收集系统指标信息
操作流程 配置阿里云Elasticsearch 配置Metricbeat 在Kibana中查看Dashboard 说明 您也可以参考本案例的操作流程，使用Metricbeat采集一台Linux系统或Windows系统电脑的指标信息，并推送到阿里云Elasticsearch上。配置阿里云Elasticsearch ...
OpenSearch-向量检索版服务关联角色
背景信息 OpenSearch-向量检索版服务关联角色（AliyunServiceRoleForSearchEngine）是在某些情况下，为了完成OpenSearch-向量检索版自身的某个功能，需要获取其他云服务的访问权限，而提供的RAM角色。更多关于服务关联角色的信息请参见 ...
关键词感知检索
背景介绍 关键词检索及其局限 在信息检索领域，“传统”方式是通过关键词进行信息检索，其大致过程为：对原始语料（如网页）进行关键词抽取。建立关键词和原始语料的映射关系，常见的方法有倒排索引、TF-IDF、BM25等方法，其中TF-IDF、BM25...
OpenSearch-向量检索版服务关联角色
背景信息 OpenSearch-向量检索版服务关联角色（AliyunServiceRoleForSearchEngine）是在某些情况下，为了完成OpenSearch-向量检索版自身的某个功能，需要获取其他云服务的访问权限，而提供的RAM角色。更多关于服务关联角色的信息请参见 ...
应用场景
推荐系统场景中可使用 表格存储 的数据湖架构来实现。场景架构如下图所示。舆情&风控分析（数据爬虫）场景 通过对舆情信息的分析与把控，可以有效的分析与洞察市场，例如针对点评、新闻、评论等信息的收集分析，需要丰富的多类数据高并发...
图扑案例
开箱即用免维护，进一步降低系统维护成本。兼容OpenTSDB、Prometheus接口，无缝对接主流生态。建设效果 目前图扑软件联合阿里云端支撑泛在电力物联网及智能楼宇行业客户实现终端设备传感器云端数据采集、存储、检索，实现并发量100万TPS...
DashVector+DashScope升级多模态检索
本教程在前述教程（DashVector+ModelScope玩转多模态检索）的基础之上，基于DashScope上新推出的ONE-PEACE 通用多模态表征模型 结合向量检索服务DashVector来对多模态检索进行升级，接下来我们将展示更丰富的多模态检索能力。DashVector+...
开启或关闭向量检索引擎优化
云原生数据仓库AnalyticDB PostgreSQL版 向量数据库针对向量数据库场景做了大量的内核参数优化，您需要先在控制台开启该功能才能使用向量检索引擎优化，本文介绍如何开启或关闭向量检索引擎优化。使用场景 如果实例用于向量分析，例如AIGC...
倒排索引介绍
它是文档检索系统中最常用的数据结构。通过倒排索引，可以快速定位单词所在的文档列表以及该词在文档中的位置，词频等信息。供信息分析使用。倒排索引存储信息 信息名称 描述 ttf 全称：total term frequency,表示检索词在所有文档中出现的...
安装或卸载系统默认插件
详细信息，请参见 使用IK分词插件（analysis-ik）。elasticsearch-repository-oss：在开源插件的基础上，支持通过OSS文件系统创建和恢复索引快照。注意事项 安装或卸载插件都会触发集群重启，并且卸载插件时会删除当前选中的插件，请确认后...
倒排索引介绍
它是文档检索系统中最常用的数据结构。通过倒排索引，可以快速定位单词所在的文档列表以及该词在文档中的位置，词频等信息。供信息分析使用。倒排索引存储信息 信息名称 描述 ttf 全称：total term frequency,表示检索词在所有文档中出现的...
使用向量检索插件（aliyun-knn）
向量检索插件是阿里云Elasticsearch团队自主开发的向量检索引擎插件，基于阿里巴巴达摩院proxima向量检索库实现，能够帮助您快速实现图像搜索、视频指纹采样、人脸识别、语音识别和商品推荐等向量检索场景的需求。本文介绍如何使用向量检索...
安装DashVector SDK
Python SDK 说明 需要提前安装Python3.7及以上版本，请确保相应的Python版本 执行如下命令，通过pip安装SDK，即可使用向量检索服务。以当前 最新版本 为例：Shell pip3 install dashvector 如需升级至最新版本SDK，可执行如下命令。Shell ...
时序模型介绍
数据写入后，系统会自动提取该时间线的元数据信息并自动构建索引，支持按照度量名称、数据源以及标签的组合条件进行时间线检索。表格存储时序模型的主要优势如下：通用的时序数据建模方式，用户无须预定义表结构。支持自动构建时间序列的...
升配Cluster
本文主要介绍如何通过向量检索服务控制台升配Cluster。操作步骤 登录 向量检索服务控制台。在左侧导航栏单击 Cluster列表，移动鼠标至需要升配Cluster...单击 管理控制台 跳转至控制台概览页，Cluster创建成功后，即可正常使用向量检索服务。
时序模型介绍
数据写入后，系统会自动提取该时间线的元数据信息并自动构建索引，支持按照度量名称、数据源以及标签的组合条件进行时间线检索。模型特性 表格存储的时序模型是针对时间序列数据的特点进行设计，适用于物联网设备监控、设备采集数据、机器...
Logstash性能排查
阿里云Logstash在使用及调优方面和开源版Logstash无差异，Logstash管道处理分为三个阶段：input、filter和output。Logstash管道每个阶段都运行在自己的线程中，input阶段将事件写入到内存（默认）或磁盘的中央队列，每个管道工作线程从此...
控制台介绍
本文为您介绍向量检索服务控制台的主要功能及页面布局。了解控制台主要功能和页面布局前，请先登录 向量检索服务控制台。概览 标号 功能介绍 ① 查看向量检索服务介绍、Clsuter 数量。② 查看向量检索服务使用引导。③ 查看向量检索服务...
向量检索版介绍
OpenSearch-向量检索版经过多年的发展，在满足业务高可用、高时效性、低成本等需求的同时，也沉淀出一套自动化运维系统，使用它用户可以根据自己的业务特点方便的构建自己的搜索服务。OpenSearch-向量检索版架构 OpenSearch-向量检索版 ...
使用Zhparser支持中文分词
AnalyticDB PostgreSQL版 数据库安装Zhparser插件后可以实现全文检索时的中文分词。重要 全文检索功能仅支持 AnalyticDB PostgreSQL 6.0版。V6.3.8.9及以后版本，安装或升级插件需要 提交工单 联系技术支持进行处理。如何查看实例内核版本...
高效基因序列检索助力快速分析肺炎病毒
AnalyticDB MySQL版基因检索系统 肺炎病毒的RNA序列可以用一串核酸序列（又称碱基序列）表示，RNA序列含有四种核苷酸，分别用A、C、G和T表示，分别代表腺嘌呤、胞嘧啶、鸟嘌呤、胸腺嘧啶。每个字母代表一种碱基，无间隔排列在一起。每一个...
Logstash FAQ
本文介绍使用阿里云Logstash的常见问题。Logstash支持将数据源配置为DRDS吗？如何将公网数据导入或导出到Logstash中？使用自建Kafka作为Logstash的输入或者输出时，出现错误日志，如何处理？阿里云Logstash的JDBC支持MySQL数据库吗？...
AnalyticDB PostgreSQL助力彩数实现全文检索加工及...
本文以彩数业务场景展示 云原生数据仓库AnalyticDB PostgreSQL版 如何实现一站式全文检索实时分析业务。背景信息 彩数（上海）商务咨询有限公司是韩国三星集团旗下第一企划公司全资控股中国子公司，上海市专精特新企业，主要业务是从社交...
DashVector+DashScope升级多模态检索
本教程在 DashVector+ModelScope玩转多模态检索 教程的基础之上，基于DashScope上新推出的ONE-PEACE 通用多模态表征模型 结合 向量检索服务DashVector 来对多模态检索进行升级，接下来我们将展示更丰富的多模态检索能力。DashVector+...
使用索引压缩插件beta版本（codec-compression）
您可在 插件配置 页面查看是否已安装codec-compression插件，如果还未安装，请手动进行安装，安装方法请参见 安装或卸载系统默认插件。背景信息 codec-compression插件支持brotli和zstd压缩算法，适用于写入量大、索引存储成本高的场景，...
查看系统审计到的语句
单击表中的 执行次数，系统可跳转至 模板检索 页面，您可以在该页面对SQL语句模板信息进行查询，以便快速定位高危SQL语句。更多 模板检索 功能信息，请参见 模板检索。客户端统计：以图表的方式，展示客户端统计数据。您可以自定义选择查看...
全文检索最佳实践（2.0版）
表连接：在文章表articles_test中检索“浙江省杭州市”，在作者信息表author_info中检索“张三”，并且利用ID列将两表进行join。CREATE TABLE author_info(id bigint COMMENT '',name varchar COMMENT '',addr varchar COMMENT '',FULLTEXT...
智能媒资分析
智能媒体服务提供了智能媒资分析功能，以便于对媒资库内容进行快速检索。通过阅读本文，您可以了解如何开启智能媒资分析功能。开启智能媒资分析 通过控制台开启 登录 智能媒体服务控制台。在顶部左上角根据实际情况选择地域。在左侧导航栏...
开通服务
本文主要介绍如何开通向量检索服务。前提条件 完成注册阿里云账号，如未注册，请单击 注册阿里云账号 进行注册。完成个人或企业实名认证，如未认证，请单击 实名认证 进行认证。操作步骤 登录 阿里云官网。进入 向量检索服务产品详情页，...
什么是向量
本文主要介绍向量的基本概念，包括向量维度、距离度量方式、数据类型等，通过基本概念快速了解什么是向量，以及如何更好地使用向量检索服务。向量的基本概念 在AI领域，向量是描述对象特征的抽象表达。以DashScope上 通用文本向量 模型为例...
引擎简介
文本检索 例如商品信息检索场景，一般会保存大量商品文本信息，希望通过某个指定短语检索查询符合条件的商品。服务开通 如何开通搜索引擎，具体请参见 开通指南。使用指南 搜索引擎支持标准SQL访问，同时支持Web式操作，具体操作请参见 ...
方案背景
在业务上，用户可以基于这些车辆状态信息来实现车辆行为分析、行驶状态监控、轨迹分析、车辆状态检索等。通过持久化存储和分析车辆元数据信息，用户可以实现复杂的业务需求，例如统计某一个区域内的车辆数量用于判断道路拥挤程度，通过监测...
政务舆情分析系统的数据库解决方案
搜索引擎的数据提供给在线舆情检索系统使用。DataV：舆情分析产生的爆表数据、用户情感数据等统计结果是非常庞杂的数据，要快速掌握其动态发展需要有图形化的展现，阿里云DataV可以简单快速的进行业务监控、风险预警、舆情信息分析，满足...
Proxima Searcher
该值越大，扫描doc数越多，召回率越高 proxima.hnsw.searcher.max_scan_ratio float 0.1f 用在检索时，控制最多扫描文档的比例。例如如果当前索引中有100w doc，如果此值为0.1，则最多扫描10w。如果ef值提前收敛，则不会扫描到10w proxima....
向量计算（Proxima CE）概述
Proxima CE 是基于Proxima2.x内核提供的超大规模离线向量检索引擎，用于支持批量离线向量检索任务，包括基础的向量检索、多类目检索及百万TopK检索等功能。本文为您介绍 在MaxCompute中如何使用向量计算功能。背景信息 Proxima CE是一款...
安装Proxima CE包
量化使用 使用向量检索后会自动生成一个输出表，存储在MaxCompute表中，您无需创建，在运行Proxima CE代码的-output_table 参数后面指定表名即可使用。生成的输出表格式请参考下文的 输出表格式说明。输出表格式说明 运行向量检索后会自动...
- 产品推荐
- 这些文档可能帮助您