提取字段
FieldType String 是 字段的类型，取值为string或json。ExpondJson Boolean 否 是否进行JSON展开。true：展开。false（默认值）：不展开。仅当 FieldType 为 json 时生效。ExpondConnecter String 否 JSON展开的连接符。默认值为下划线（_...
动态摘要
分别是字段名称，片段的个数，单个片段的长度，飘红的开始标签、飘红结束标签，多个片段直接的连接符 示例：config=start:0,hit:10,format:json&query=default:'搜索'&kvpairs=freeschema_extract_fields:content`21`250`2<em>`2</em>`2...
FieldSort
} 名称 类型 是否必选 描述 field_name string 是 字段名称。order SortOrder 否 排序的顺序，支持升序排列和降序排列，默认为升序排列。mode SortMode 否 当字段存在多个值时的排序方式。只有当字段类型为数组类型时，才需要设置此参数。...
配置数据识别规则
当这些敏感字段类型的命中条件个数相同时，识别顺序是 字段名称识别>数据内容识别>字段注释识别。当命中条件的个数和类型都相同时，优先命中分级等级高的敏感字段类型的识别规则。完成敏感字段类型的配置后，可在 数据发现、数据访问 和 ...
多轮对话搜索
字段名 字段名称,对采用OSS文件格式作为数据源的实例，字段名称跟离线数据解析结果字段对应，离线解析结果默认的字段名称包括：字段名称 字段描述 字段类型 docId 主键、唯一标识id varchar name 文件名称 varchar title 解析片段标题内容 ...
常见问题
可以排查数据集中新建计算字段的表达式中是否引用了其他计算字段，注意计算字段表达式中只能使用数据库中原始字段，不能引用之前创建的计算字段，您也可以使用前计算字段的表达式来代替。日期类型的字段，在不转换文本的情况下是否支持...
向量检索
参数 对应API参数名称 说明 距离 score 向量相似度 不同的距离度量方式，向量间距离的数值表示并不相同，请参见 什么是向量。返回结果根据向量相似度降序排列。主键ID id 相似向量的主键ID。向量 vector 向量数据，例如[1.00,2.00,3.00,4....
SELECT
例如，当任务类型为检索问答时，ai_infer('rqa_model','Lindorm是什么')中，field1_identifier为 'Lindorm是什么'，即输入的问题。推理调整参数（params）可选参数。格式为：key1=value1,[key2=value2]。具体说明如下表所示：任务类型 参数...
创建索引
字段索引：先将日志根据字段名称（KEY）进行区分，然后在字段内使用分词符进行分割，字段类型包括 text、long、double、JSON。创建字段索引后，您可以指定字段名称和字段值（Key:Value）进行查询，也可以使用SELECT语句。更多信息，请参见 ...
使用向量检索插件（aliyun-knn）
向量检索插件是阿里云Elasticsearch团队自主开发的向量检索引擎插件，基于阿里巴巴达摩院proxima向量检索库实现，能够帮助您快速实现图像搜索、视频指纹采样、人脸识别、语音识别和商品推荐等向量检索场景的需求。本文介绍如何使用向量检索...
分组检索Doc
说明 {Endpoint} path str 是 Cluster的Endpoint，可在控制台 Cluster详情 中查看 {CollectionName} path str 是 Collection名称 dashvector-auth-token header str 是 api-key group_by_field body str 是 按指定字段的值来分组检索，...
开放搜索OpenSearch向量检索
1.什么是向量检索 人工智能算法可以对物理世界的人/物/场景所产生各种非结构化数据（如语音、图片、视频，语言文字、行为等）进行抽象，变成多维的向量。这些向量如同数学空间中的坐标，标识着各个实体和实体关系。我们一般将非结构化数据...
常见问题
这种查询方式通常无法保证每次检索都一定能匹配到数据，即使原始写入的数据中包含检索内容，但这些数据在存储时经过分词或过滤停词等操作后导致最终构建的索引字段中没有对应的检索内容，那么检索结果也仍旧为空。另外，不同分词器的分词...
DashVector x 通义千问大模型：打造基于专属知识的...
rsp=collection.upsert([Doc(id=str(id),vector=vector,fields={"raw":doc})for id,vector,doc in zip(ids,vectors,news)])assert rsp 在示例中，我们将 Embedding 向量和新闻报道的文稿（作为 raw 字段）一起存入DashVector向量检索服务中...
MaxCompute+API 数据源
前置条件 了解MaxCompute（原ODPS），如果您对MaxCompute 没有过多的了解，可 什么是MaxCompute 进行参考。表权限，在配置MaxCompute 数据表时需要登录OpenSearch的账号对该表有相应的权限（describe,select,download,字段的label权限）。...
什么是向量
本文主要介绍向量的基本概念，包括向量维度、距离度量方式、数据类型等，通过基本概念快速了解什么是向量，以及如何更好地使用向量检索服务。向量的基本概念 在AI领域，向量是描述对象特征的抽象表达。以DashScope上 通用文本向量 模型为例...
向量索引最佳实践
设置字段，至少需要定义2个字段 主键字段 和 向量字段（向量字段需要设置为多值float类型）：如果需要带有类目的向量，可以在主键和向量字段中间加一个类目字段，类型要求单值或多值的整数类型：属性和字段内容压缩：属性字段可以选择是否...
通用版快速入门
设置字段，至少需要定义2个字段 主键字段 和 向量字段（向量字段需要设置为多值float类型）：如果需要带有类目的向量，可以在主键和向量字段中间加一个类目字段，类型要求单值或多值的整数类型：属性和字段内容压缩：属性字段可以选择是否...
图搜场景快速入门
设置字段，“向量：图片搜索”模板默认生成4个预置字段id（主键）、vector（向量字段）、cate_id（类目字段）、vector_source_image（存储图片向量的字段），用户选择MaxCompute数据源后，从数据源同步的字段，展示在预置字段下方：属性和...
QueryTermMatchCount
OpenSearch支持一个索引中包含多个字段，检索时只要查询词在其中一个字段上命中文档就可以返回。因此QueryTermMatchCount有两种计算方式，一种是查询词中在被检索索引包含的所有字段上命中的词组个数，一种是查询词中在被检索索引包含的某...
分组检索Doc
本文介绍如何通过Java SDK在Collection中按分组进行相似性检索。前提条件 已创建Cluster：创建Cluster。已获得API-KEY：API-KEY管理。已安装最新版SDK：安装DashVector SDK。接口定义 Java(JSP)/class DashVectorCollection/同步接口 ...
QueryMatchRatio
OpenSearch支持一个索引中包含多个字段，检索时只要查询词在其中一个字段上命中文档就可以返回。因此QueryMatchRatio有两种计算方式，一种是查询词中在被检索索引包含的所有字段上命中的词与总词组的比值，一种是查询词中在被检索索引包含...
文本向量场景快速入门
属性和字段内容压缩：属性字段可以选择是否压缩，默认为不压缩，选择file_compressor表示开启压缩 字段内容可以选择是否压缩，默认为不压缩，默认多值和STRING类型选择uniq，单值数值类型是equal 说明 使用向量检索，在定义字段时有位置...
索引、属性、字段作用详解
通俗说就是数据库的名字 字段 在es中索引创建完了之后，是类型，类型之后，是字段 通俗说就是某个表里面的属性的名称 属性 字段的类型（string、int、double.）字段的类型（string、int、double.）OpenSearch：名词 OpenSearch解释 与关系...
向量索引最佳实践
设置字段，至少需要定义2个字段 主键字段 和 向量字段（向量字段需要设置为多值float类型）：如果需要带有类目的向量，可以在主键和向量字段中间加一个类目字段，类型要求单值或多值的整数类型：属性和字段内容压缩：属性字段可以选择是否...
文本向量化检索最佳实践
如果设置了MaxCompute数据源，会自动映射数据源字段：字段设置，文本向量化是通过系统将文本转换成向量，然后通过向量进行检索数据，因此此处需要配置3个必须字段，如上图（名称均可以自定义）：主键字段id：类型可以为STRING或者整数类型...
索引结构
索引表结构介绍 每个Document都是由多个field组成，每个field中包含一系列的词语，构建索引的目的是为了加快检索的速度，根据映射关系方向的不同，索引可以分为：字段（filed）：用于定义索引表的字段名及字段类型。倒排索引（index）：倒...
Quick BI计算字段可以直接使用物理字段
问题描述 Quick BI数据集预览报错，使用该数据集创建的图表可以正常使用。SQL创建的数据集，SQL可以正常执行。问题原因 计算字段里引用了已经不存在的...也可以直接在计算字段中使用物理字段，而不是引用数据集里的维度/度量。适用于 Quick BI
数据集常见问题
函数from_unixtime的返回值格式是什么？如何解决函数from_unixtime的返回值为空？创建新建字段时能否使用已创建的计算字段？编辑计算字段（维度）时，出现“计算字段（维度）不能包含sum、avg、count、countd、min等聚合函数”错误。编辑...
云服务专用总线事件分析
说明 您也可以在该字段的右上角选择多个数值检索项之间是 AND 或者 OR 的关系。可视化分析 否 如果您需要通过图表的方式查看结果，可以选择设置可视化聚合函数。支持多选，一个可视化分析函数对应一个折线图。GROUP BY 否 如果您需要按照...
基本概念
本文主要介绍向量检索服务的名词释义。Client（客户端）Client（客户端），是用户用于连接DashVector服务端的基础对象，相当于关系型数据库中的Connection。通过设置API_KEY即可完成Client对象的创建，即完成与DashVector服务端的连接。...
RDS/PolarRDB 数据源配置分库分表
本文介绍如何在OpenSearch行业算法版和高性能检索版实例中配置分库分表的数据源。一般用户的分库分表分两种情况：单库多表：database1 table1、table2、table3、table4.多库多表：database1 database2 database3.table1、table2、table3、...
单doc多向量检索
功能说明：用户可以在一个doc中的某个向量字段中存储多个向量内容进行检索，例如向量维度为128维，向量字段中可以存储256（两个向量）、384（三个向量）等等向量维度的整数倍个向量，查询时可以通过向量命中字段中的任何一个向量进行召回。...
RDS/PolarDB 数据源配置分库分表
本文介绍如何在OpenSearch行业算法版和高性能检索版实例中配置分库分表的数据源。一般用户的分库分表分两种情况：单库多表：database1 table1、table2、table3、table4.多库多表：database1 database2 database3.table1、table2、table3、...
质量规则模板类型
数据表/指标模板类型 模板分类 模板说明 完整性 字段空值校验 用于对单字段是否是空值进行校验。字段空字符串校验 用于对单个字段是否是空字符串进行校验。唯一性 字段唯一性校验 用于对单字段唯一值/非唯一值进行校验。字段分组个数校验 ...
质量规则模板类型
数据表/指标模板类型 模板分类 模板说明 完整性 字段空值校验 用于对单字段是否是空值进行校验。字段空字符串校验 用于对单个字段是否是空字符串进行校验。唯一性 字段唯一性校验 用于对单字段唯一值/非唯一值进行校验。字段分组个数校验 ...
文档格式
实时推送文档格式[{"cmd":"add","fields":{"id":"1","title":"This is the title","body":"This is the body","tags":[1,2,3]} },{"cmd":"delete","fields":{"id":"3"} }]向量检索版的文档包括cmd和fields两个部分，这两个字段都是必选字段...
安全中心
数据管理和安全中心是什么关系？为什么在申请时，有时可以选择字段，有时不可以选择？提交申请后，需要谁进行审批？为什么提交了一个申请，在我的申请中却看到两个申请单？为什么有的字段只申请1个月权限，审批完成后查看变为永久？为什么...
名词解释
索引字段 在 query子句 中使用，需要定义索引字段，通过索引字段来做高性能的检索召回。属性字段 在 filter子句、sort子句、aggregate子句、distinct子句 子句使用，用来实现过滤、统计等功能。默认展示字段 用来做结果展示。可以通过API...
FieldTermProximity
简介 计算查询词分词词组在指定索引和字段上分布的紧密程度。紧密度可以从一定程度上衡量查询词和字段的相关性，比如查询词为：用户手册，字段1的内容为：开放搜索用户手册，字段2的内容为：用户使用开放搜索手册解决问题。这时候查询词在...
- 产品推荐
- 这些文档可能帮助您