2023年
当在有数据的向量表中构建向量索引时，会先训练码本，再构建索引。新增向量相关的UDF，如vector_sum、vector_max、vector_min、vector_avg、vector_norm、vector_angle和vector_dot等。向量检索 pldbgapi插件 支持创建pldbgapi插件并使用PL...
向量检索使用指南
使用指南 创建向量表 创建向量表的示例如下：/*polar4ai*/CREATE TABLE table_name(id int,name vector_5,type int,primary key(id));其中，字段类型无需指定精度。name 为向量类型，vector_5 中的5是向量的维度，您可以根据实际需要修改...
创建向量表
本节将通过具体示例，介绍如何创建向量表。当前使用的相关语法均符合SQL1999标准，兼容部分SQL2003功能。前提条件 已开启向量检索引擎功能。更多信息，请参见 开启或关闭向量检索引擎。语法 创建向量表的语法与 云原生数据仓库AnalyticDB ...
案例一：搭建以图搜图系统
创建向量表 创建向量表的SQL语句如下：/*polar4ai*/CREATE TABLE image_vector(id int,image_address varchar,image_address_vector vector_512,type int,primary key(id));其中，image_address_vector 为向量类型字段，维度为512。将图片...
插入数据
注意：向向量表中插入数据时，向量列的维数必须与 定义向量列 时指定的维度相同，否则系统将提示出错。insert into test_table values('rowkey1','[0.5,0.6,0.3,0.1]','seednmae','label')insert into test_table values('rowkey1','AAAAP5...
案例二：搭建文档检索系统
')创建文档向量表 创建文档向量表的SQL语句如下：/*polar4ai*/CREATE TABLE vector_table(id bigint,content text,content_vector vector_768,primary key(id));文档数据向量化 您可以根据实际使用场景，选择将文档数据离线向量化或在线...
案例三：搭建问答机器人
')创建向量表 创建向量表的SQL语句如下：/*polar4ai*/CREATE TABLE vector_table(id bigint,content text,content_vector vector_768,primary key(id));问答数据向量化 将问答数据向量化的SQL语句如下：/*polar4ai*/select id,content from...
扩缩容
表的数据存储方式 表之间数据存储和查询共享数据节点资源（CPU、内存、磁盘）：上图中展示的就是两张向量表，一个是4分片，一个是1分片，4分片的会根据产出的索引进行均分数据到每个分片中，而1分片的向量表则会形成广播表在每个数据节点中...
向量检索版介绍
表之间共享数据节点资源（CPU、内存、磁盘）：上图中展示的就是两张向量表，一个是4分片，一个是1分片，4分片的会根据产出的索引进行均分数据到每个分片中，而1分片的向量表则会形成广播表在每个数据节点中存储一份完整的向量表2的索引数据...
Doc2Vec
您可以通过Doc2Vec算法组件将文章映射为向量，输入为词汇表，输出为文档向量表、词向量表或词汇表。本文为您介绍Doc2Vec算法组件的配置方法。使用限制 支持的计算引擎为MaxCompute。组件配置 您可以使用以下任意一种方式，配置Doc2Vec组件...
pgvector兼容模式使用指南
创建向量表 创建兼容pgvector语法的向量表和 AnalyticDB PostgreSQL版 中原生向量表的语法相同，只是表中的向量列由数组（smallint[]，float2[]和 float4[]）类型改为了vector类型（pgvector定义的向量类型），并且一个表可以支持多个向量...
基于外卖评论实现舆情风控
工作流运行结束后，您可以右键单击画布中的 Doc2Vec，在快捷菜单中选择 查看数据>输出文档向量表，即可查看文本向量表。④ 生成分类模型。首先将向量化的文本通过拆分算法，拆分为训练集和测试集。然后将训练集通过逻辑回归算法，训练生成...
Word2Vec
输入为单词列或词汇表，输出为词向量表和词汇表。使用说明 Word2Vec组件的上游需要接入 词频统计 组件。说明 词频统计的输出结果为三元组，即词和词的统计。组件下游接入Word2Vec组件，Word2Vec组件会先将数据整理成单个单词的形式，后续会...
查询数据
向向量表中插入数据后，您可以通过ANN查询的方式查询向量数据。示例 以下SQL将从 TEST_TABLE 表中检索 float_feature，返回与输入向量 '[0.5,0.6,0.3,0.1]' 最接近的前10条记录。ann_distance 是输入向量和返回结果之间的真实相似度，相似...
向量召回评估
参数 类型 参数说明 输入配置 item_emb_table（item向量表）string item embedding表。true_seq_table（真实序列表）string 真实序列表。u2i召回时为user和user关联的items；i2i召回时为item和item关联的items。重要 测试召回效果时，训练...
非结构化分析
基于 AnalyticDB PostgreSQL版 实现非结构化数据向量分析示例 Web App把文本，图片或者视频等非结构化数据（后续简称非结构化数据）通过特征提取服务提取特征向量，然后再把特征向量写入云原生数据仓库PostgreSQL版向量分析的向量表。...
主成分分析
主成分分析（PCA）是研究如何通过少数主成分揭示多个变量间的内部结构，考察多个变量间相关性的一种多元统计方法。PCA从原始变量中导出少数主成分，使它们尽可能多地保留原始变量的...无 示例 PCA输出示例 降维后的数据表 特征值和特征向量表
向量计算使用指南
向量在Hologres中一般用FLOAT4数组表示，创建向量表的语法如下。说明 仅列存、行列共存表支持向量索引，行存表不支持。定义向量时，数组维度仅支持定义为 1，即 array_ndims、array_length 的第二入参都必须设置为 1。Hologres V2.0.11版本...
实验参数配置
召回表 用于召回的数据表，可描述物品与物品之间的相似度（i2i）或者物品特征（item向量表）、用户特征（用户向量表）。排序服务 即在线预测服务，目前暂时只支持PAI-EAS的在线预测服务，即对召回结果，进行在线打分排序。trace_info 在...
基于二部图GraphSAGE算法实现推荐召回
④ 通过 graphSage 组件生成用于推荐召回场景的User向量表和Item向量表。运行工作流并查看输出结果。单击画布上方的 运行。工作流运行结束后，右键单击画布中的 graphSage，在快捷菜单中，单击 查看数据>user_embedding，即可查看生成的...
Proxima向量计算
可以通过离线或者实时的方式将数据导入至向量表，详情请参见 数据同步概述，可以根据业务需求选择合适的同步方式。但需要注意的是，在批量导入后，执行VACUUM和Analyze命令以提升查询效率。VACUUM会让后端的文件compaction成更大的文件，对...
黑名单监控告警
SELECT id,name FROM ann(SELECT*FROM black_list WHERE gender='male',feature,FACE_FEATURE_EXTRACT_V1('https://xxx/face_img.jpg' ),1,'DISTANCE_THRESHOLD=0.6')从向量表中检索图片数据时，需要使用OSS图片的URL，有以下两种方法获取...
快速拉起多路召回服务
数据准备 准备物品X2I召回表/向量表 数据准备流程同X2I召回流程及向量召回流程的数据准备一致，详情见 快速拉起X2I召回服务 数据准备及 快速拉起向量召回服务 数据准备 准备物品详情表（可选）在MaxCompute客户端中准备数据-创建数据...
重排配置
此时Hologres的表一般需要设置为分区表 TablePKey string 否 embedding向量表的主键 EmbeddingColumn string 否 embedding向量表的向量字段名 EmbeddingSeparator string 否 embedding向量的分隔符，默认为英文逗号 Alpha float 是 DPP算法...
快速拉起向量召回服务
数据准备 准备物品向量表 在MaxCompute客户端中准备离线数据-创建数据表 CREATE TABLE IF NOT EXISTS aime_example_vector(item_id STRING COMMENT"物品ID",vector STRING COMMENT"物品向量")PARTITIONED BY(ds STRING COMMENT"分区字段...
数据规范
Vector向量表 物品向量表要求有两个数据字段，其中一个字段为 主键，同时也是 分片字段，另一个字段为 向量。表中的记录和物品一一对应，主键 为物品的唯一标识，因此 主键 必须是唯一的。主键 的字段类型必须为 STRING。向量 字段的字段...
召回配置
向量表中存储向量的字段 HologresVectorConf：字段 类型 是否必填 描述 VectorTable string 是 holo 中 item 向量表 VectorEmbeddingField string 是 item 向量表中的主键字段 VectorKeyField string 是 item 向量表中存储向量的字段 ...
组件参考：所有组件汇总
输入为词汇表，输出为文档向量表、词向量表或词汇表。条件随机场 条件随机场CRF（conditional random field）是给定一组输入随机变量条件下，另一组输出随机变量条件的概率分布模型，其特点是假设输出随机变量构成马尔可夫随机场。文章相似...
向量计算SDK
创建向量表。需要指定向量的维度，以及表中的除向量列、主键、JSON列以外的其他强Schema列及数据类型。table_name="test_table"#定义表名 holo=HologresVector(connection_string,#连接信息 5,#向量维度 table_name=table_name,#表名 table...
向量检索
例如，创建向量表如下，向量索引目前支持一个向量列上创建多个向量索引，可以根据需求创建所需的索引，但一定要保证查询的SQL和索引能匹配上。如操作符只能使用采用欧氏距离构建的索引；操作符只能使用采用内积距离构建的索引；操作符只能...
私网传输迁移
例如，迁移任务出错时，SMC服务端会中断迁移并向SMC客户端发送错误日志。正向代理服务器介绍 正向代理服务器是位于客户端与服务端之间的代理服务器，当客户端不具备公网访问能力，不能直接访问服务端时，可以设置代理服务器与客户端互通，...
创建向量索引
说明 目前一个向量表可以创建多个向量列，每个向量列又可以创建多个向量索引，具体根据实际需要创建对应的向量索引，避免创建无效的索引。向量查询的方式必须与向量索引的距离度量对应。例如，向量查询中的符号对应欧氏距离度量的向量索引...
AI Earth 地球科学云平台用户协议
11.3 如发生下列任何一种情形，网站有权不经通知而中断或终止向您提供服务：（1）根据法律法规规定您应提交真实信息，而您提供的个人资料不真实、或与注册时信息不一致又未能提供合理证明。（2）您违反相关法律法规的规定或违反本协议的...
入驻协议
但阿里云不能随时预见和防范法律、技术以及其他风险，阿里云对此类风险在法律允许的范围内免责，包括但不限于不可抗力、病毒、木马、黑客攻击、系统不稳定、第三方服务瑕疵、政府行为等原因可能导致的服务中断、数据丢失以及其他的损失和...
云存储网关软件版公测
Open、缓存的ETag和云上元数据信息不一致时，ossfs会向OSS发送更新元数据信息的请求，从而保证本地元数据信息和云上元数据信息的强一致性，因此ossfs需要频繁更新元数据信息，极大地影响性能，但是实时性相比于云存储网关软件版较高。...
管理共享
网关会尽量合并这两个动作，但仍可能针对某个文件向存储桶发起多个操作。设置修改时间会被转换成修改存储桶里的对象的元数据，通过调用拷贝对象API来实现，如果是归档类型或者冷归档类型的文件，就会需要执行耗时的解冻动作，影响上传效率...
配置和管理BGP
CreateBgpPeer：向指定的BGP组中添加BGP邻居。AddBgpNetwork：宣告BGP网络。ModifyBgpGroupAttribute：修改BGP组的属性。ModifyBgpPeerAttribute：修改BGP邻居的属性。DeleteBgpGroup：删除指定的BGP组。DeleteBgpPeer：删除指定的BGP邻居...
专线接入常见问题
阿里巴巴与客户的分工界面在阿里侧交换机的端口，端口不通则属于运营商线路中断，需客户向运营商报障。阿里云侧线路出现故障时您可以通过提交工单的方式联系阿里云售后支持人员解决故障问题。速率不符合预期怎么办？对于路由器接口的规格在...
专线连接类
阿里云与用户的分工界面在阿里侧交换机的端口，接入设备正常，但端口不通则属于运营商线路中断，需要您向运营商报告故障。带宽不符合预期，如何解决？路由器接口的规格在1 Gbps以下时，可以使用iPerf3等工具测试带宽。如果无法超过10 Mbps...
光照信息屏
在环境亮度及接近程度到达门限值后持续时间超出持续时间阈值之后，会向INT管脚发送中断通知MCU进行处理。本案例中未使用中断模式。AP3216C工作流程 AP3216C的典型工作流程如下：对AP3226C进行复位之后，设定工作模式（连续/单次测量，ALS/...
- 产品推荐
- 这些文档可能帮助您