Indexing Service系列介绍
规格 实例版本 写入TPS 写入可见性延迟 3个数据节点的2核8 GB 通用商业版 24883 5秒 内核增强版Indexing Service 226649 6秒 3个数据节点的4核16 GB 通用商业版 52372 5秒 内核增强版Indexing Service 419574 6秒 3个数据节点的8核32 GB ...
内核版本发布记录
通过优化Backports lucene postings pfor编码，索引大小降低3%。当用户集群写入量较大，为缓解写入托管服务Indexing Service集群资源压力，可平滑迁移至更充足的资源空间，对用户集群无影响。Bug修复 修复 aliyun-codec插件 中，source_...
基于向量检索版+LLM构建对话式搜索
背景 随着生成式AI技术“火爆出圈”...python-m script.embed_files-f${doc_dir} 使用-f选项指定需要处理的文档所在目录 3.4 启动问答服务 cd~/llm python api_demo.py 3.5 使用curl命令测试 测试请求：curl-H"Content-Type:application/json...
查询计划和查询重规划
{$gt:20 } })/查询操作2 第三个索引仅能支持查询操作2而无法支持查询操作1，因此这两个查询操作具有完全不同的查询计划缓存键。当新增加一个 {x:1,a:1} 的索引时，这两个查询计划缓存键也会更新。查询重规划（replan）当集合中的数据发生...
pgvector兼容模式使用指南
在向量列C3上创建三种向量索引。CREATE INDEX idx_c3_l2 ON FACE_TABLE USING ann(C3)WITH(distancemeasure=l2,hnsw_m=64,pq_enable=1);CREATE INDEX idx_c3_ip ON FACE_TABLE USING ann(C3)WITH(distancemeasure=ip,hnsw_m=64,pq_enable=1...
多元索引最佳实践
本文从数据表设计、多元索引设计、多元索引使用三个方面介绍了使用多元索引的最佳实践。数据表相关设计实践 主键设计 Tablestore数据表根据分区键进行Range范围分区，主键的设计会影响多元索引的同步速度和部分场景下的查询水平拓展。主键...
生成列
创建生成列 语法 col_name data_type[GENERATED ALWAYS]AS(expr)[VIRTUAL|STORED|LOGICAL][NOT NULL|NULL][UNIQUE[KEY]][[PRIMARY]KEY][COMMENT 'string']生成列有以下三种类型：VITRUAL：生成列的值不存储，每次读取该列时由存储节点DN...
手动/定时索引重建
当定时索引重建任务完成后，新生成的版本（线下应用），会自动切换到线上，被替换的应用版本将在[8,16]小时后自动删除 手动索引重建 手动创建索引重建任务并执行。1.进入开放搜索控制台“实例管理”页，点击应用的“详情”按钮。2.点击...
定时索引重建
当定时索引重建任务完成后，新生成的版本（线下应用），会自动切换到线上，被替换的应用版本将在[8,16]小时后自动删除 索引重建流程及进度 流程为：数据导入——数据处理——索引构建。从数据源导入数据后，做数据处理，发给build服务做...
Range范围查询
3.在查询中使用range查询语法实现区间查询。（1）INT与TIMESTAMP的范围查询 INT的范围查询语法与TIMESTAMP类型的语法相同，支持的查询语法如下：index:[number1,number2]/number1[number1,number2)/number1(number1,number2]/number1...
TimeStream API功能介绍
阿里云Elasticsearch提供Aliyun-TimeStream时序增强插件，支持通过API接口完成TimeStream索引的增删改查，以及数据写入和查询。本文介绍如何使用TimeStream API。背景信息 TimeStream是阿里云Elasticsearch团队自研，并结合Elastic社区时序...
使用集群限流插件（aliyun-qos）
例如集群中有3个索引A、B、C，则这3个索引的限流值都为1000。不支持。设置所有索引的查询总QPS限流 PUT/_qos/limiter/<limiterName>{"limiters":{"search.qps":"1000"},"tags":{"index":"*"} } 说明 index:*表示任意索引。例如集群中有3个...
JSON索引
3.1.5.10以下内核版本的集群，创建表后会自动为JSON列创建JSON索引。说明 如何查看集群内核版本，请参见 如何查看实例版本信息。如需升级内核版本，请联系技术支持。创建表时创建JSON索引 注意事项 若您在建表时手动指定为某一列或某几列...
向量动态量化
更多参考 数据集 量化策略 索引比 召回比 QPS比 Cohere 10M 768 Cosine DT_VECTOR_INT8 33%95.28%170%GIST 1M 960 L2 DT_VECTOR_INT8 35%99.54%134%OpenAI 5M 1536 Cosine DT_VECTOR_INT8 34%67.34%189%Deep1B 10M 96 Cosine DT_VECTOR_INT...
创建文档库
body:#{#"Message":"success",#"RequestId":"7BC35B66-5F49-1E79-A153-8D26576C4A3E",#"Status":"success"#} 其中create_document_collection的参数说明如下：account：AnalyticDB PostgreSQL版 实例的数据库初始账号。account_password：...
名词解释
或至少一个索引表分片数为1，其余索引表分片数一致，规则详情可见参考文档）数据更新资源数 数据更新所用资源数，每个索引默认免费提供2个4核8G的更新资源，超出免费额度的资源将产生费用，详见：产品文档 场景模板 向量检索版提供了3类...
在DMS中为MySQL建立索引时出现“Specified key was ...
767/4=191 UTF-8 按照表为UTF-8字符集的标准，单个字符需要3个字节进行存储，则最大定义索引前缀需设置为255，具体计算方法如下。767/3=255 GBK 按照表为GBK字符集的标准，单个字符需要2个字节进行存储，则最大定义索引前缀需设置为383，...
功能简介
轨迹分段存储：提供按点数/距离/经纬度/时间四种内置分段策略，从批量轨迹点构建分段线模型轨迹 高效率时空查询 基本查询功能：ID+时间查询、属性查询、空间范围查询和时空范围查询 高效时空查询能力：通过对点模型构建z2/z3索引，...
列存索引技术架构介绍
本文介绍了列存索引的技术背景、简介以及技术架构等内容。技术背景 MySQL生态HTAP数据库解决方案 MySQL是一款主要面向OLTP型场景设计的开源数据库，开源社区的研发方向侧重于加强其事务处理能力。如提升单核性能、多核扩展性和增强集群能力...
PolarDB HTAP实时数据分析技术解密
从MySQL 8.0开始，在一些count(*)等基本查询上增加并行执行的能力，但是复杂SQL的并行执行能力构建依然任重道远。MySQL最常用的存储引擎都是按行存储。在按列进行海量数据分析时，按行从磁盘读取数据存在非常大的IO带宽浪费，其次，行式...
Java SDK历史迭代版本
版本号：5.3.0 发布时间：2019-09-10 下载地址：5.3.0 更新日志：多元索引新增统计聚合功能。版本号：5.1.0 发布时间：2019-07-01 下载地址：5.1.0 更新日志：多元索引新增更多分词类型。版本号：5.0.0 发布时间：2019-06-10 下载地址：5.0...
常见问题
假设实例有n个服务节点，每个节点放m个shard，需要遵循如下公式：索引的总数据量>n X m X 21亿 如果一个服务节点的m个数太大了，例如超过节点CPU的个数，那就可能要考虑扩容集群或者升配。对于一个索引而言，每个服务节点放一个shard开始，...
产品优势
阿里云智能召回引擎BE，是阿里巴巴集团自...4.提升效果：加载全量索引（例如i2i，加载全量i2i索引，淘汰了离线生成的u2i数据），从而避免离线截断，丰富召回候选集，提升效果；5.秒级别实时数据更新以及查询 高并发地实时写入和查询实时数据。
基础概念
属性图 属性图（如下图1所示）具有如下特征：属性图由不同的节点和边组成 用户节点U1/U2/U3/U4和商品节点I1/I2/I3 好友关系friend1/friend2/friend3/friend4，购买关系buy1/buy2/buy3/buy4/buy5 属性图中所有边都是有向边 属性图中的节点和...
混合查询最佳实践
数据更新资源数：数据更新所用资源数，每个索引默认免费提供2个4核8G的更新资源，超出免费额度的资源将产生费用，详情可参考 向量检索版计费概述 2.数据同步 配置数据源（目前支持的数据源有OSS数据源、MaxCompute数据源和API推送数据源）...
PublishIndexVersion-发布索引版本
名称 类型 必填 描述 示例值 instanceId string 是 实例 ID ha-cn-tl32m2c4u01 indexName string 是 索引名称 automobile_2d body object 否 查询结果。{} 请求示例 POST/openapi/ha3/instances/ose-test1/indexes/my_index/actions/...
端到端图搜解决方案
或至少一个索引表分片数为1，其余索引表分片数一致 数据更新资源数：数据更新所用资源数，每个索引默认免费提供2个4核8G的更新资源，超出免费额度的资源将产生费用，详情可参考 向量检索版计费概述 场景模板：选择“向量：图片搜索”数据...
图搜场景快速入门
0.3,0.4,0.98,0.6&n=10&sf=0.8' 注：index_name为向量索引名，后面是要查询的向量，sf指定要过滤分数的阈值。SQL语法：query=select proxima_score('index_name')as score,id from table_name where MATCHINDEX('index_name',?order by ...
向量索引
向量索引介绍 向量召回是指将商品或者内容等以向量的形式表达，并建立向量索引库，索引库上支持输入一个或多个用户或商品向量来根据向量距离召回topK的商品或内容。向量索引配置 不带类目的向量配置 {"table_name":"test_vector","summarys...
管理搜索索引
本文介绍管理搜索索引的操作方法。前提条件 已开通 云原生多模数据库 Lindorm 实例的搜索索引服务，具体操作请参见 开通搜索索引。已通过Lindorm-cli连接Lindorm宽表引擎，具体操作请参见 通过Lindorm-cli连接并使用宽表引擎。使用限制 ...
CREATE INDEX
Lindorm提供了 三种 高效易用的索引：二级索引、搜索索引和列存索引，分别适用于非主键匹配场景、多维查询场景 和列存储数据查询场景。在使用CREATE INDEX语法创建索引时，您可以指定索引类型并添加索引属性。引擎与版本 CREATE INDEX语法...
向量索引最佳实践
本文将介绍如何在已有的召回引擎版实例中配置向量索引，并简单演示使用SDK方式通过向量查询检索召回引擎版实例数据。购买OpenSearch召回引擎版实例 购买实例可参考 购买OpenSearch召回引擎版实例。配置集群 新购买的实例，在其详情页中，...
DeleteIndexTemplate
调用DeleteIndexTemplate，删除索引模板。仅适用于日志增强版实例。说明 删除索引模板前，请先删除关联该索引模板的数据流。否则，将无法删除对应的索引模板。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行...
DeleteIndex-删除索引
dataSource=xxx 返回参数 名称 类型 描述 示例值 object Schema of Response requestId string id of request 022F36C7-9FB4-5D67-BEBC-3D14B0984463 result object 索引信息 {} 返回示例 正确返回 { "requestId":"65911539-5a8b-4bce...
通过_split API快速拆分主分片
当您使用Elasticsearch集群出现索引分片设置不合理（例如索引主分片设置不合理、每个分片存在大量数据等）引发集群性能问题时，可通过_split API在线扩大主分片数，将现有索引拆分为具有更多主分片的索引。本文介绍如何通过_split API快速...
升级检查
bytes_per_sec 3 索引级别 索引相似性设置（Similarity settings）index.similarity.base 4 索引影子副本设置（Shadow replicas settings）index.shared_filesystem、index.shadow_replicas 5 索引存储设置（Index store settings）index....
倒排索引类型
PACK 索引 PACK索引介绍 PACK索引是多字段索引。对TEXT类型的字段建立索引。与TEXT索引相比，该索引将多个TEXT字段合并，建立一个索引，共同检索；该索引还可存储段落信息，用于查询每一个检索词所在的段落及相关信息。可以采用截断，高频...
构建全量数据索引
宽表和索引表的列映射关系配置完成后，实时写入宽表中的数据将自动同步到索引表中。对于宽表中的全量数据，需要手动执行全量构建索引才可以完成数据同步。本文介绍通过构建索引完成全量数据同步。前提条件 已安装Java环境，要求安装JDK 1.8...
数据类型映射
本文介绍了数据表中和多元索引中字段数据类型的映射关系以及不同字段数据类型支持的附加属性信息。多元索引的字段值来源于数据表中同名字段的值，两者的数据类型必须相匹配，多元索引字段数据类型与数据表中字段数据类型的匹配关系请参见下...
加速密文索引（encdb_btree）
以如下加密表为例：CREATE TABLE test(t1 enc_int4,t2 enc_int8,t3 enc_text);您可以在加密表上通过 USING enc_btree 关键字创建enc_btree索引：CREATE INDEX ON test USING enc_btree(t1);CREATE UNIQUE INDEX ON test USING enc_btree(t2...
- 产品推荐
- 这些文档可能帮助您