使用Elasticsearch的向量近邻检索(kNN)功能

Elasticsearch 8.0及以上版本新增向量近邻检索k-nearest neighbor(kNN)search功能,能够帮助您快速实现图像搜索、视频指纹采样、人脸识别、语音识别和商品推荐等向量检索场景的需求。本文介绍如何使用kNN search功能。背景信息 关于...

执行引擎

AnalyticDB PostgreSQL版 搭载自研向量执行引擎,针对火山模型的缺点和现代硬件的特点,结合向量化计算、即时编译(Just In TIme,JIT)等技术,专注于执行性能、特别是OLAP场景的执行性能提升。向量化计算模型 AnalyticDB PostgreSQL版 ...

QueryCollectionData-召回向量数据

召回向量数据。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在RAM权限策略语句的 Action 元素中使用,用来...

向量检索

AnalyticDB MySQL 的向量检索功能可以帮助您实现非结构化数据的近似检索。本文主要介绍向量检索功能以及如何创建并使用向量索引。前提条件 集群的内核版本需为3.1.4.0及以上版本。说明 内核版本为3.1.5.16、3.1.6.8、3.1.8.6及以上版本的...

高斯混合模型训练

假设聚类中心点数量为K,输入数据的向量维度为M,则每个节点需要配置的内存大小为:M×M×K×8×2×12,即M×M×K×8×2×12÷1024÷1024 MB。通常每个节点的内存配置为8 GB。如何预估节点的个数?建议按照输入数据的大小配置。例如:输入...

向量召回过滤优化

背景 目前向量检索中的过滤机制是在遍历到一个向量后,计算filter的结果当前向量是否满足条件,如果不满足条件则放弃当前节点。因此遍历结束后,所有的向量都是满足过滤条件的。但因为向量检索所扫描的点数是固定的(默认扫描1%的数据)...

UpsertCollectionData-上传向量数据

上传向量数据到指定的向量集中。接口说明 注意 SDK 于 2023-11-8 日升级,从最大 512KB 数据请求...变更历史 变更时间 变更内容概要 操作 2023-11-07 API 内部配置变更,不影响调用 变更集 变更项 变更内容 API 内部配置变更,不影响调用。

什么是智能开放搜索OpenSearch

OpenSearch以平台服务化的形式,将专业搜索技术简单化、低门槛化和低成本化,让搜索不再成为客户的业务瓶颈,以低成本实现产品搜索功能并快速迭代。使用OpenSearch搭建搜索服务,您只需:创建OpenSearch实例 编辑、配置实例 同步/上传文档 ...

ListCollections-查询向量集列表

查询向量集列表。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在RAM权限策略语句的 Action 元素中使用,...

搭建具备大模型和向量检索功能的知识库应用程序

chat应用默认使用CPU运行embedding模型,可通过在 chat.pod.resources 中申请GPU资源来提高文本向量速度。resources:limits:nvidia.com/gpu: "1" requests: cpu: "4" memory: 8Gi nvidia.com/gpu: "1" 如何指定向量数据库类型?支持的...

支持向量

本文为您介绍支持向量机组件。功能说明 支持向量机组件支持使用支持向量机算法对分类或回归问题进行建模。支持向量机(SVM)是在分类分析中分析数据的监督式学习模型与相关的学习算法,也被拓展运用于回归问题。支持向量机在高维度或无穷...

DescribeCollection-查询向量集信息

查询向量集信息。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在RAM权限策略语句的 Action 元素中使用,...

通过向导模式配置离线同步任务

本文为您介绍向导模式配置离线同步任务的常规配置,各数据源配置存在一定差异,请以 具体数据源配置文档 为准。背景信息 数据集成离线同步,为您提供数据读取(Reader)和写入插件(Writer)实现数据的读取与写入,您可通过向导模式和脚本...

GrantCollection-向量集授权

向量集授权。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。...变更历史 变更时间 变更内容概要 操作 2023-11-07 API 内部配置变更,不影响调用 变更集 变更项 变更内容 API 内部配置变更,不影响调用。

功能发布记录

07月18日 地域:德国(法兰克福)版本:通用商业版 版本特性变化 ES实例节点配置说明 2023年05月 功能名称 功能概述 发布时间 发布地域和版本 相关文档 新增开发测试型规格 Elasticsearch开源8.5版本对向量搜索、索引压缩和查询优化等场景...

创建实例

云原生数据仓库AnalyticDB PostgreSQL版 针对AIGC、向量检索等向量分析场景,新增了向量引擎优化功能。本教程将指导您如何创建开通了向量引擎优化的 AnalyticDB PostgreSQL版 实例。前提条件 已注册阿里云账号。若尚未注册,请前往 阿里云...

向量索引的lock策略

向量索引的lock策略配置 对于向量检索有性能要求的业务场景,可以通过修改在线表配置,将向量索引lock 内存,来提升检索效率,具体配置方法如下:在部署管理页面点击数据节点:在在线表配置下选择对应的索引表,点击编辑:在load_config 下...

DeleteCollection-删除向量

删除向量数据集。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。...变更历史 变更时间 变更内容概要 操作 2023-11-07 API 内部配置变更,不影响调用 变更集 变更项 变更内容 API 内部配置变更,不影响调用。

创建配置

配置内容 在页面右侧的 配置内容 区域,输入配置的内容,例如:threadPoolSize=5 logLevel=WARN 说明 建议普通配置的内容不大于100 KB,加密配置的内容不大于50 KB,若配置内容大于该值,请将此配置拆分成多个小配置。调整配置内容大小可能...

DeleteVectorIndex-删除向量索引

删除向量索引。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。...变更历史 变更时间 变更内容概要 操作 2023-11-07 API 内部配置变更,不影响调用 变更集 变更项 变更内容 API 内部配置变更,不影响调用。

快速实现向量检索

向量检索是实现高效相似性搜索的关键技术。本文通过详细示例为您介绍如何快速实现向量检索。前提条件 已创建Milvus实例,请参见详情 快速创建Milvus实例。已在本地客户端成功安装了PyMilvus库,并将其更新至当前最新版本。如果您尚未在本地...

关于开通云产品的方案建议

PAI-EAS:注意在业务高峰期配置定时扩容,同时配置自动扩缩容保证到业务低峰期收缩资源。注意:上面5万DAU不是一个严格的分界线(下面的DAU数据同理),主要是基于提高推荐效果是否能带来足够的业务价值,以覆盖推荐系统的成本。下面的其他...

向量索引的lock策略

向量索引的lock策略配置 对于向量检索有性能要求的业务场景,可以通过修改在线表配置,将向量索引lock 内存,来提升检索效率,具体配置方法如下:在部署管理页面点击数据节点:在在线表配置下选择对应的索引表,点击编辑:在load_config 下...

端到端图搜解决方案(图片向量化)

向量索引:名称自定义,索引类型选择CUSTOMIZED,包含字段可选择3个,如果没有标签可以不填,但是主键字段和向量字段必选:向量索引的高级配置中需要将dimension改成512维,固定512维不可修改为其他维度,其他参数建议保持默认:schema示例...

创建实例

本教程将指导您如何创建 AnalyticDB PostgreSQL版 实例,并开通向量引擎优化。前提条件 已注册阿里云账号。若尚未注册,请前往 阿里云官网 进行注册。阿里云账号或RAM用户需要拥有管理 AnalyticDB PostgreSQL版 的权限...

CreateDocumentCollection-创建文档库

clip-vit-b-16:CLIP ViT-B/16 模型,512 维,图片向量化算法 clip-vit-l-14:CLIP ViT-L/14 模型,768 维,图片向量化算法 clip-vit-l-14-336px:CLIP ViT-L/14@336px 模型,768 维,图片向量化算法 clip-rn50:CLIP RN50 模型,1024 维,图片向量...

DeleteCollectionData-删除向量数据

删除向量数据。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在RAM权限策略语句的 Action 元素中使用,用来...

InitVectorDatabase-初始化向量数据库

初始化向量检索数据库。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。...变更历史 变更时间 变更内容概要 操作 2023-11-07 API 内部配置变更,不影响调用 变更集 变更项 变更内容 API 内部配置变更,不影响调用。

消息队列 RocketMQ 客户端流控设计

消息队列 RocketMQ 是一种常用的异步 RPC 技术。本文以阿里云消息队列 RocketMQ 为例,介绍了如何使用 ACM 对消息队列 RocketMQ 实现流量控制。迁移到MSE Nacos ACM进入下线状态,所有配置管理相关的需求由MSE中的Nacos承接(ACM独享版,更...

高斯混合模型预测

页签 参数 描述 字段设置 向量列名 向量列对应的列名。算法保留列名 选择算法保留的列名称。参数设置 预测结果列名 预测结果列的列名称。预测详细信息列名 预测详细信息列的列名。组件多线程线程个数 组件多线程的线程个数,默认为1。执行...

QueryContent-查询文档内容

用自然语句从指定文档库检索向量和元数据。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在RAM权限策略语句...

多主体识别最佳实践

多主体识别技术使得搜索引擎不仅能够找到包含单一物体的图像,还能够识别和检索出包含多个相关物体的复杂图像。在实际应用中,这意味着当用户对某一图像进行搜索时,搜索引擎可以通过分析图像的视觉内容,判断出图像中所有显著的元素,并将...

选型指导

序号 服务类型 说明 目录价 1 标准版服务 推荐引擎配置 服务发布管理 指标注册与自定义 AB实验平台、实验数据诊断 一致性检查工具 5000元/月 2 高级版服务 较标准版新增加 数据智能诊断 推荐算法定制(包括新物品冷启动召回)8000元/月 3 ...

DBSCAN

向量列名 向量列对应的列名。参数设置 邻域距离阈值 如果节点A是节点B的邻域,则节点A和节点B之间的距离不超过该阈值。具体配置方法,详情请参见 附录2:如何配置参数。邻域中样本个数的阈值 当一个节点被认为是核心(core)时,它的邻域中...

通过实时计算Flink集成向量数据

云原生数据仓库AnalyticDB PostgreSQL版 支持通过flink-adbpg-connector集成向量化数据。本文以将Kafka数据导入至 AnalyticDB PostgreSQL版 为例,介绍如何将向量数据导入 AnalyticDB PostgreSQL版。前提条件 已创建 AnalyticDB PostgreSQL...

通过实时计算Flink集成向量数据

云原生数据仓库AnalyticDB PostgreSQL版 支持通过flink-adbpg-connector集成向量化数据。本文以将Kafka数据导入至 AnalyticDB PostgreSQL版 为例,介绍如何将向量数据导入 AnalyticDB PostgreSQL版。前提条件 已创建 AnalyticDB PostgreSQL...

对象存储OSS

开通OSS服务 开通OSS服务 控制台创建存储空间 控制台上传文件 添加OSS数据源 进入OpenSearch控制台,在左上角切换到OpenSearch-向量检索版,在实例管理页面对应的列表中找到所属实例,点击操作栏中的管理:配置数据源,在 配置中心>数据源 ...

创建实例

开启向量引擎优化可以提升实例的向量分析性能,但是向量引擎优化会大幅占用实例的内存资源,且实例的并发度会有大幅下降,请确认影响后再开启。说明 仅存储弹性模式6.0版实例支持开启向量引擎优化功能。计算节点规格需为4核32 GB及以上。...

利用配置中心规范构建 PaaS 服务配置

配置中心的配置结构功能 除了集中管理配置和订阅推送等能力,配置中心还具备配置结构化能力,能帮助管理员大幅简化各种复杂应用场景下的配置管理。1.配置中心的配置结构能力说明 租户隔离:配置中心根据用户或场景对配置进行隔离。使用租户...

UpdateCollectionDataMetadata-更新向量数据中的...

更新向量数据中的Metadata数据。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名...变更历史 变更时间 变更内容概要 操作 2023-12-06 API 内部配置变更,不影响调用 变更集 变更项 变更内容 API 内部配置变更,不影响调用。
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云服务器 ECS 应用配置管理 (文档停止维护) DDoS防护 弹性公网IP 短信服务 人工智能平台 PAI
新人特惠 爆款特惠 最新活动 免费试用