优化建议
确保语句能正确使用到索引，例如查询条件能被索引完全覆盖到，保证分区键上有索引等；查询尽量在单机完成，最为简单的方式就是在分区字段上指定等值条件，使操作只发送到一个后台数据库节点。若不指定，则操作需要发送到每个后台节点，可能...
Trajectory最佳实践
使用合适的时空索引 合适的索引能加快查询速度，需要根据应用场景的要求来构建合适的索引。可针对轨迹数据类型构建以下索引：空间索引：只针对轨迹的空间范围建立索引，适合只查询轨迹空间范围情况。时间索引：只针对轨迹的时间范围建立...
Trajectory最佳实践
使用合适的时空索引 合适的索引能加快查询速度，需要根据应用场景的要求来构建合适的索引。可针对轨迹数据类型构建以下索引：空间索引：只针对轨迹的空间范围建立索引，适合只查询轨迹空间范围情况。时间索引：只针对轨迹的时间范围建立...
服务介绍
网站会员、商品信息检索场景，一般保存大量的商品/会员信息，并需要根据少量条件进行复杂且任意的查询，以满足网站用户任意搜索需求等。Search服务的整体数据流如上图，数据写入HBase后，BDS负责将数据实时同步到Search索引中。在此架构下...
Trajectory最佳实践
使用合适的时空索引 合适的索引能加快查询速度，需要根据应用场景的要求来构建合适的索引。可针对轨迹数据类型构建以下索引：空间索引：只针对轨迹的空间范围建立索引，适合只查询轨迹空间范围情况。时间索引：只针对轨迹的时间范围建立...
Trajectory最佳实践
使用合适的时空索引 合适的索引能加快查询速度，需要根据应用场景的要求来构建合适的索引。可针对轨迹数据类型构建以下索引：空间索引：只针对轨迹的空间范围建立索引，适合只查询轨迹空间范围情况。时间索引：只针对轨迹的时间范围建立...
列存索引内存管理介绍
列存索引服务用户广泛、应用场景复杂。用户往往无法对参数进行有效的调整，可能会导致自测结果不理想，或者需要提交工单给内核团队寻求帮助。但内核团队的支持能力有限，不能够保证支持力度。因此，列存索引内存管理的设计目标是能够在默认...
计量计费项
二级索引 计费项包括数据存储量、构建索引的读写吞吐量和正常读写吞吐量。更多信息，请参见 二级索引计量计费。时序模型 计费项包括数据存储量和按量读写吞吐量。更多信息，请参见 时序模型计量计费。数据多版本 主要产生基于版本号与各个...
多列索引
在其余列上的条件将限制由索引返回的项，但是第一列上的条件是决定索引上扫描量的最重要因素。当第一列中具有很少的可区分值时，一个 GiST 索引将会相对比较低效，即便在其他列上有很多可区分值。多列GIN索引可以用于条件中涉及到任意索引...
动态修改schema
动态修改schema操作包括为源索引创建灰度索引并修改多元索引schema、等待表数据全部同步到灰度索引、设置权重进行A/B测试、交换源索引和灰度索引的schema和删除灰度索引五个步骤。功能概述 表格存储数据表是schema free的，而多元索引是强...
使用索引压缩插件beta版本（codec-compression）
codec-compression是阿里云Elasticsearch（简称ES）团队自主开发的索引压缩插件，支持brotli和zstd压缩算法，具有更高的索引压缩比，可以大幅降低索引的存储成本。前提条件 您已完成以下操作：创建阿里云ES实例（6.7.0版本），详情请参见 ...
索引选择
如需其他组合需创建新的索引表 可对索引字段做任意组合查询 查询性能 通过索引键可定位到对应的分片，性能佳 需要查询所有的分片 大范围扫描 支持，性能与表引擎一致 支持，但性能低于表引擎及二级索引 数据可见延迟 全局二级索引：毫秒级 ...
创建数据表
使用CreateTable接口创建数据表时，需要指定数据表的结构信息和配置信息，高性能实例中的数据表还可以根据需要设置预留读/写吞吐量。创建数据表时支持创建一个或者多个索引表。注意事项 创建数据表后需要几秒钟进行加载，在此期间对该数据...
锁定和索引
尽管本数据库提供对表数据访问...因为它还有比 Hash 索引更多的特性，在那些需要对标量数据进行索引的并发应用中，我们建议使用 B-tree 索引类型。在处理非标量类型数据的时候，B-tree 就没什么用了，应该使用 GiST、SP-GiST 或GIN 索引替代。
RDS PostgreSQL慢SQL问题
在相同业务场景下，架构设计和库表索引设计会影响查询性能，良好的设计可以提高查询性能，反之会出现很多慢SQL（执行时间很长的SQL语句）。本文介绍导致慢SQL的原因和解决方案。查看慢SQL 控制台的 参数设置 中，可以找到名为 log_min_...
高维向量相似度搜索（pgvector）
测试结果 向量数据、索引数据占用的存储空间以及TPS与数据量之间的测试结果 数据量（单位：万行）table size（单位：MB）index size（单位：MB）Latency（单位：ms）TPS（单位：个）10 796 782 15.7 380 30 2388 2345 63 94 50 3979 3907 ...
创建数据表
使用CreateTable接口创建数据表时，需要指定数据表的结构信息和配置信息，高性能实例中的数据表还可以根据需要设置预留读/写吞吐量。创建数据表时支持创建一个或者多个索引表。注意事项 创建数据表后需要几秒钟进行加载，在此期间对该数据...
PolarDB HTAP实时数据分析技术解密
并行查询的加入使得PolarDB突破了单核执行性能的限制，利用多核CPU的并行处理能力，PolarDB部分SQL查询耗时成指数级下降。Why We Need Column-Store 并行执行框架突破了CPU扩展能力的限制，带来了显著的性能提升。然而受限于行式存储及行式...
Join
当使用Join的SQL语句中某张表使用了比较多的过滤条件时，在无索引的情况下读取性能会有所下降，此时使用索引加速数据的读取可能会加速整体的执行速度。示例 假设有orders和customers两张表，数据如下：SELECT*FROM orders;order_id|...
创建索引
倒排索引是一种数据存储结构，由关键词和指向实际数据的逻辑指针组成，记录了特定文本内容出现在哪些日志中，用于快速根据关键词定位到具体数据行，类似于数据的目录。创建索引后，您才能对日志数据进行查询和分析。本文为您介绍日志服务...
文本向量化检索最佳实践
索引设置，必要设置的索引为 主键索引和向量索引：主键索引：名称自定义，索引类型选择 PRIMARYKEY64，包含字段选择字段设置中设置为主键的字段，此处为id。向量索引：名称自定义，索引类型选择 CUSTOMIZED，包含字段可选择3个，如果没有...
文本向量场景快速入门
如果是MaxCompute数据源，从数据源同步字段后，展示在预置字段下方 主键字段不支持压缩 字段压缩、属性压缩开启后将节省存储空间，但查询性能可能有所下降，详见说明文档 设置索引，“向量：文本语义搜索”模板默认生成2个预置索引（主键...
如何设计时间线结构提升查询效率
减少单个Tag 标签索引时间线量 避免在每一条时间线上都设置一个相同的标签，以免该标签索引的时间线数量过多，影响查询时的性能。减少查询时间线覆盖 如果标签1索引的时间线的集合是标签2的子集，那么查询时可以只使用标签1，以提升查询...
索引管理
阿里云Elasticsearch 7.10内核增强版（Indexing Service）将索引构建写入部分全部托管在云端的Elasticsearch集群中，以满足海量时序日志数据的快速写入要求。本文介绍如何通过索引管理功能实现云端索引管理。使用限制 仅开启Indexing ...
文本向量场景快速入门
配置集群 新购买的实例，在其详情页中，实例状态为“待配置”，并且会自动部署一个与购买的查询节点和数据节点的个数及规格一致的空实例，之后需要为该实例 配置表信息>数据同步>字段配置>索引结构，之后等待索引重建完成即可正常搜索。...
分区表常见问题
针对 PolarDB MySQL版 分区表，您可以选择以下几种索引：部分索引（Partial Index）您可以根据实际业务场景，在分区表的不同分区上创建不同的索引，以满足不同分区上的查询需求。全局二级索引（GSI）针对查询条件中不包含分区键的等值查询...
实时精准营销（人群圈选）
方案概览 表结构：KEY：用户ID VALUES：标签数组 表索引：标签数组字段:GIN倒排索引 搜索方法 与、或、非 where VALUES@>array[标签s]-与 where VALUES&array[标签s]-或 where not VALUES@>array[标签s]-非 方案缺陷 使用数组替代多字段...
通过Logstash将ES数据迁移至阿里云ES Serverless
如果您需要将自建、云上自建或云上Elasticsearch（简称ES）中的全量或增量数据迁移至阿里云ES Serverless中，可通过Logstash的管道配置功能实现。本文介绍在ECS上自建Logstash，并通过该Logstash将源端ES中的数据全量迁移至目标阿里云ES ...
列存索引技术架构介绍
本文介绍了列存索引的技术背景、简介以及技术架构等内容。技术背景 MySQL生态HTAP数据库解决方案 MySQL是一款主要面向OLTP型场景设计的开源数据库，开源社区的研发方向侧重于加强其事务处理能力。如提升单核性能、多核扩展性和增强集群能力...
全文索引服务
全文索引Search服务用来解决复杂的多维查询和全文检索。警告 HBase增强版的全文索引特性目前处于关闭状态，相关能力已全面迁移到Lindorm中，更强大、更成熟、更好用，详情参见 Lindorm Searchindex。Solr是构建在Apache Lucene上的企业级...
透明页压缩TPC
在写场景TPS会有下降。在与透明数据加密 TDE同时开启时，会影响压缩效果。对TOAST数据的压缩效果不佳。操作步骤 透明页压缩功能依赖表空间，需要创建压缩表空间。CREATE TABLESPACE rds_compress LOCATION '/data/postgresql/rds_compress'...
PolarDB MySQL版CPU使用率高
TP类查询业务的读写数据量都非常小，如果某个查询的扫描数据量非常大，那么大概率是由于索引缺失导致。例如下述查询语句在慢查询列表中显示扫描数据量为1万+，但返回数据为1条，那么很明显在 name 列上有索引缺失的情况。SELECT*FROM table...
常见问题
在使用Lindorm SQL查询宽表数据或创建索引时，可能会遇到报错或出现查询性能不符合预期的情况。本文介绍Lindorm SQL使用时的常见问题和解决方案。说明 本文列举的常见问题 仅适用于宽表引擎。什么查询语句是低效查询语句？使用SELECT语句...
ListInstanceIndices
1gb","max_age":"1d","max_docs":10000 },"set_priority":{"priority":1000 } } },"version":1,"modified_date_in_millis":1629277370953 } } } } 当前索引的全量生命周期状态。示例 请求示例 GET/openapi/instances/es-cn-tl329rbpc0001*...
通用版快速入门
向量索引 OpenSearch会对主键与向量字段自动构建索引，索引名与字段名相同，只需要在控制台配置向量索引：高级配置，向量索引需要单独配置参数，详情可参考 向量索引通用配置 说明 主键字段、向量字段必须填写，命名空间字段非必填，可以为...
监控与日志
多元索引计量数据 在数据表的 索引管理 页签，单击多元索引 操作 列的 索引详情，查看多元索引的存储量、预留读CU、行数等计量数据。时序表监控数据 在时序表的 监控指标 页签，查看时序表的表大小监控数据。健康状态监控 建议实时了解云...
开发运维建议
索引 B-Tree索引字段至多2000字节，如果存在超过2000字节的字段需要新建索引，建议使用函数索引（例如哈希值索引）或分词索引。对于线性顺序存储的数据（如流式数据、时间字段或自增字段），通常查询时使用范围查询，建议使用 BRIN 索引，...
查询和分析网站日志
本文以查询和分析网站日志为例，帮助您快速上手查询和分析操作。前提条件 已采集到网站访问日志。具体操作，请参见 使用完整正则模式采集日志。步骤一：创建索引 登录 日志服务控制台。在Project列表区域，单击目标Project。在 日志存储>...
应用配额与服务限制
2 CU 6 CU 12 CU 24 CU storage_quota 单个应用的索引最大存储量。1 GB 24 GB 48 GB 96 GB 说明 您可以在应用详情页的 配额管理 中，查看应用配额、配额的昨日用量峰值和服务限制。您可以在应用详情页的 监控中心 中，查看应用资源用量曲线...
通过Logstash将自建Elasticsearch数据全量或增量迁移...
如果您需要将自建Elasticsearch中的全量或增量数据迁移至阿里云Elasticsearch，可通过在ECS中自建Logstash，并通过Logstash的管道配置功能实现。本文在ECS上部署自建Elasticsearch和自建Logstash，并通过Logstash将自建Elasticsearch中的...
- 产品推荐
- 这些文档可能帮助您