PolarDB PostgreSQL版：ePQ架构详解
OLTP业务中有大量的索引，而B-Tree索引创建的过程大约有80%的时间消耗在排序和构建索引页上，20%消耗在写入索引页上。如下图所示：PolarDB PostgreSQL版 利用RO节点对数据进行分布式ePQ加速排序，采用流水化的技术来构建索引页，同时使用...
PolarDB PostgreSQL版：ePQ架构详解
OLTP业务中有大量的索引，而B-Tree索引创建的过程大约有80%的时间消耗在排序和构建索引页上，20%消耗在写入索引页上。如下图所示：PolarDB PostgreSQL版（兼容Oracle）利用RO节点对数据进行分布式ePQ加速排序，采用流水化的技术来构建索引...
如何降低索引流量费用？
关闭日志聚类 开启日志聚类功能后，索引总流量增加10%，示例如下表所示：原始日志大小 索引比例 日志聚类功能产生的索引量 索引总流量 100 GB 20%（20 GB）100 GB×10%30 GB 100 GB 40%（40 GB）100 GB×10%50 GB 100 GB 100%（100 GB）100...
Dataphin是否有索引的概念
概述 Dataphin在创建三种逻辑表的时候，需要设置主键，并且常见的数据库能够设置索引，用户想了解Dataphin是否有...2.Dataphin创建的物理表是存储在计算引擎的，如果计算引擎是MaxCompute，那么也没有索引的概念。适用于 Dataphin公共云版本
向量检索版介绍
全量索引的产出需要经过数据处理，索引构建，索引合并等流程，在各个阶段可以通过设置索引处理的并发度提高全量索引的产出速度。实时增量流程 全量索引产出后，每个全量版本都会有一个常驻的增量流程，而增量数据同步是通过 数据更新节点 ...
表和索引
尽管这些查询可以在没有索引的情况下工作，大部分应用会发现这种方法太慢了，除了偶尔的临时搜索。实际使用文本搜索通常要求创建一个索引。创建索引 我们可以创建一个 GIN 索引来加速文本搜索：CREATE INDEX pgweb_idx ON pgweb USING GIN...
召回引擎版介绍
全量索引的产出需要经过数据处理，索引构建，索引合并等流程，在各个阶段可以通过设置索引处理的并发度提高全量索引的产出速度。增量流程 全量索引产出之后，后续数据的更新都需要通过API推送完成。API推送的数据有两条处理链路：经过...
索引表加载策略
索引表加载策略配置 索引表的加载策略配置由多个索引文件的加载策略组成，每个策略描述了一组索引文件的具体加载方式。索引表在加载时，针对每个索引文件，从上到下依次匹配策略规则，优先使用第一个匹配的策略加载索引文件。配置示例 JSON...
索引表加载策略
索引表加载策略配置 索引表的加载策略配置由多个索引文件的加载策略组成，每个策略描述了一组索引文件的具体加载方式。索引表在加载时，针对每个索引文件，从上到下依次匹配策略规则，优先使用第一个匹配的策略加载索引文件。配置示例 JSON...
Search
TFT.GETALLSUGS TFT.GETALLSUGS index 获取指定索引的全量自动补全文本。说明 本文的命令语法定义如下：大写关键字：命令关键字。斜体：变量。[options]：可选参数，不在括号中的参数为必选。A|B：该组参数互斥，请进行二选一或多选一。...
典型慢查询
导致查询磁盘I/O消耗较大的原因通常有如下几种：过滤条件的数据筛选率较低，导致索引的使用效率不高，需要读取的索引量较大。过滤条件没有下推，导致对源表进行了全表扫描。过滤条件下推，但是过滤条件设置的范围较大，仍然有大量数据被...
设置数据库索引
注意 如果一个记录在一个唯一索引中没有索引字段的值，则该索引将为该记录存储一个空值。由于唯一约束限制，只会允许一个记录缺少索引字段。对多于一个以上的记录没有索引字段的值或缺少索引字段，索引构建将失败，提示重复键错误。索引...
索引结构
管理员模式：开发者模式：删除索引表 若索引表中的索引表版本没有“使用中”的状态，可以直接删除索引表：若索引表中的索引表版本有“使用中”的状态：则需要按如下步骤操作，才可删除：在运维管理>部署管理中，点击索引表，‘取消订阅’，...
为什么索引流量费用是读写流量费用的几倍？
索引流量是按照未压缩数据被构建或重建索引所产生的索引数据量计算的，而读写流量是按照压缩后数据的传输数据量计算的。索引数据的大小和日志内容的复杂度与建立索引的字段数量有关。例如原数据10 GB，创建的索引文件为8 GB，原数据压缩后...
存储空间分析
您可以在 AnalyticDB for MySQL 空间总览页面查看集群和表的总数据量、冷数据量、热数据量、索引数据量、分区数量、节点的磁盘使用率等指标。查看集群级别的数据量 通过 空间总览 可以查看当前集群的 总数据量、热数据量、冷数据量、以及 ...
索引缺失
索引缺失图表信息参数说明 参数 说明 索引缺失变化趋势 最近24小时之内的缺失索引量变化趋势。用户最后查找时间 最近一天、最近一周、最近两周、最近一月的用户查找缺失索引总量。查询开销平均减少 缺失索引造成的查询平均开销减少的统计...
Proxima向量计算
Proxima的基本模型 分为索引构建和在线检索两部分：索引构建：索引构建从原始向量数据中构建出相关索引文件，并传予在线检索模块加载使用。支持Brute Force、KD-Tree、Product Quantization、KNN Graph、LSH 等。在线检索：在线检索加载完...
索引管理
索引类型 云原生数据仓库AnalyticDB PostgreSQL版 支持如下索引类型：B-Tree索引（默认索引类型）位图索引 说明 位图索引（Bitmap Index）为每一个键值都存储一个位图，位图索引提供了和常规索引相同的功能且减少索引空间。对于拥有100至...
快速扩缩分片
功能介绍 当用户业务数据即将超过节点规格的上限时，为保证业务数据正常导入，可以通过快速扩缩分片功能，调整数据节点个数完成扩容，调整后立即完成，无需配置更新和索引重建，也可确保用户API推送数据源的数据完整性。操作步骤 在运维...
扩缩分片
因为实例只会保留3天内的API增量，如果分区数据选择的过早，由于API增量只保留3天，索引重建产出的全量数据，可能会有增量数据丢失的风险 注意事项 快速扩缩分片之后会自动触发一次索引重建，这时候由于分片数量变化了，索引的变化阈值会...
历史变更
索引表 新增索引表 是 新增数据源部署->新增索引->手动触发全量->订阅/取消订阅索引表 修改索引表 是 推送离线配置->手动触发全量 索引表的索引重建 是 手动触发全量 配置更新 是 推送离线配置->手动触发全量 从索引恢复数据 是 索引中恢复...
索引（2.0版）
没有创建索引的列，建议不要在查询中进行筛选和计算。使用场景 列的类型为VARCHAR，写入长度超过16KB。使用方法 通过 DMS for AnalyticDB 建表时，列信息 中选择 无索引。通过 CREATE TABLE（2.0版）建表时，列定义指定 disableIndex true...
B-TREE索引
没有索引时的执行计划 postgres=explain select name from test where name='a1';QUERY PLAN-Seq Scan on test(cost=0.00.1791.00 rows=1 width=6)Filter:((name):text='a1':text)(3 rows)创建索引 create index ON test(name);有索引时的...
历史变更
索引表 新增索引表 是 新增数据源部署->新增索引->手动触发全量->订阅/取消订阅索引表 修改索引表 是 推送离线配置->手动触发全量 表的索引重建 是 手动触发全量 配置更新 是 推送离线配置->手动触发全量 从索引恢复数据 是 索引中恢复FSM ...
通过reindex将自建ES数据迁移至阿里云
本文介绍通过reindex方式，将ECS上自建Elasticsearch（简称ES）集群中的数据迁移至阿里云ES中，包括创建索引和迁移数据。背景信息 通过reindex迁移数据，仅支持单可用区实例。如果您使用的是多可用区实例，建议采用如下方案将自建ES数据...
通过表格存储控制台查看监控数据
通过表格存储控制台，您可以查看实例的每秒请求次数、行数统计、流量统计、CapacityUnit等监控数据，查看数据表、二级索引表或者多元索引的平均访问延迟、每秒请求次数等监控数据以及多元索引的存储量、预留读CU、行数等计量数据。...
配置YML参数
通过配置阿里云Elasticsearch实例的YML参数，您可以设置允许自动创建索引、删除索引指定名称、配置Auditlog索引、开启Watcher以及其他配置。本文介绍如何配置YML参数、CORS访问、reindex白名单、Auditlog和queue大小。注意事项 2020年10月...
错误码说明
6316 Query中没有指定索引 6317 Filter子句中只能使用一次公式 6318 公式语法解析出错 6400 排序脚本不存在 6450 执行脚本时出现异常 6500 搜索语法中包含不存在的字段 6501 在线系统没有索引数据 6502 用户query语法错误 6503 不支持默认...
迁移可用区节点
如果集群负载过高且索引没有副本，同时业务中存在大量的写入或查询等场景，在可用区迁移过程中，业务可能会出现偶发的访问超时现象。建议在可用区迁移前，在客户端访问机制中配置重试机制，以减小对业务的影响。操作步骤 登录 阿里云...
错误码说明
6316 Query中没有指定索引 6317 Filter子句中只能使用一次公式 6318 公式语法解析出错 6400 排序脚本不存在 6450 执行脚本时出现异常 6500 搜索语法中包含不存在的字段 6501 在线系统没有索引数据 6502 用户query语法错误 6503 不支持默认...
TimeStream管理Elasticsearch时序数据快速入门
PUT_time_stream/test_stream 与直接通过Elasticsearch create index命令（PUT test_stream）创建的索引相比，通过TimeStream的创建索引接口创建的索引是 DataStream索引，而不是一个具体的索引，并且自动集成了Elasticsearch在时序场景的...
上传同义词文件
如果集群负载过高且索引没有副本，同时业务中存在大量的写入或查询等场景，在集群变更过程中，业务可能会出现偶发的访问超时现象。建议在客户端访问机制中配置重试机制，以减小对业务的影响。假设现存索引 index-aliyun 使用了aliyun.txt...
ListInstanceIndices
1gb","max_age":"1d","max_docs":10000 },"set_priority":{"priority":1000 } } },"version":1,"modified_date_in_millis":1629277370953 } } } } 当前索引的全量生命周期状态。示例 请求示例 GET/openapi/instances/es-cn-tl329rbpc0001*...
CreateDataStream
说明 当系统返回【DatastreamUnmatchedIndexTemplateError】消息时，表示数据流没有匹配的索引模板，请修改数据流名称，或前往索引模板管理进行创建或修改。当系统返回【DatastreamDuplicatedError】消息时，表示数据流已经存在时，请重新...
监控与日志
多元索引计量数据 在数据表的 索引管理 页签，单击多元索引 操作 列的 索引详情，查看多元索引的存储量、预留读CU、行数等计量数据。时序表监控数据 在时序表的 监控指标 页签，查看时序表的表大小监控数据。健康状态监控 建议实时了解云...
ALTER TABLE
如果 PRIMARY KEY 被指定，并且该索引的列没有被标记 NOT NULL，那么这个命令将尝试对每一个这样的列做 ALTER COLUMN SET NOT NULL。这需要一次全表扫描来验证这些列不包含空值。在所有其他情况中，这都是一种很快的操作。如果提供了一个...
查询语法
当您开启全文索引，且没有指定某个字段进行查询时，日志服务从全文索引数据中随机采样，返回部分结果并不是全量扫描底层数据。request_time>60 and request_method:Ge*表示查询 request_time 字段值大于 60 且 request_method 字段值以 Ge ...
倒排索引
当您需要快速检索 云数据库 SelectDB 版 中的大量文本数据时，本文档将指导您如何创建和使用倒排索引，以支持您的文本检索应用，并提高检索速度。背景信息 倒排索引，是信息检索领域常用的索引技术。通过将文本分割成一个个词然后构建索引...
计量计费项
二级索引 计费项包括数据存储量、构建索引的读写吞吐量和正常读写吞吐量。更多信息，请参见 二级索引计量计费。时序模型 计费项包括数据存储量和按量读写吞吐量。更多信息，请参见 时序模型计量计费。数据多版本 主要产生基于版本号与各个...
计费模式
1万张表，共50万个分区，0.5万个索引，则 月初时，元数据对象的存储量=0.01（库）+1（表）+50（分区）+0.5（索引）=51.51万个存储对象 1月31号，增加60万个分区，库、表和索引数量没有发生变化，则元数据对象的存储量=111.51万个存储对象。...
- 产品推荐
- 这些文档可能帮助您