PolarDB-X 1.0同步至Elasticsearch
您可以根据实际情况，选择是否对全量同步任务进行限速设置（设置 每秒查询源库的速率、每秒全量迁移的行数RPS 和 每秒全量迁移的数据量MB），以缓解目标库的压力。说明 仅当 同步类型 选择了 全量同步 时才可以配置。是否限制增量同步速率 ...
创建数据表
使用CreateTable接口创建数据表时，需要指定数据表的结构信息和配置信息，高性能实例中的数据表还可以根据需要设置预留读/写吞吐量。创建数据表时支持创建一个或者多个索引表。注意事项 创建数据表后需要几秒钟进行加载，在此期间对该数据...
通过Kibana Discover实现数据可视化时序展示
常见问题 Q：为什么创建索引模式之后，在Discover页面没有展示直方图？A：需要确认索引中是否有时间类型字段的数据，例如查看索引mapping中是否有字段类型为timestamp。Q：为什么使用search功能查询索引数据时，必须搜索完整的field ...
升配集群
当Elasticsearch（ES）集群的数据量持续增长或内存占用过高，导致原有配置无法有效应对业务负载和性能需求时，可升级ES集群配置。升级集群时，如果集群负载不高且索引有副本的情况下，集群在变更过程中可以持续对外提供服务，但性能可能会...
开发运维建议
索引 B-Tree索引字段至多2000字节，如果存在超过2000字节的字段需要新建索引，建议使用函数索引（例如哈希值索引）或分词索引。对于线性顺序存储的数据（如流式数据、时间字段或自增字段），通常查询时使用范围查询，建议使用 BRIN 索引，...
分区表常见问题
使用分区表数据量没有下限，空表也可建分区表，但数据量太少没必要分区，一般普通表大于500 MB可以选择使用分区表。当单分区数据量超过64 TB（与单个普通表一致），最大分区数超过8192时不适合使用分区表。建议单表数据量超过1 TB或者1亿行...
查询计划和查询重规划
本文将为您介绍什么是查询计划，以及出现查询重规划（Replan）的原因和处理方法。查询计划器（Query Planner）MongoDB查询计划器能够根据可用的索引给每个查询选择并缓存最有效的查询计划，查询计划器工作流程如下图。查询计划器会根据候选...
通过DTS将PolarDB MySQL数据同步至阿里云Elastic...
Elasticsearch是一个基于Lucene的实时分布式的搜索与分析引擎，它提供了一个分布式服务，可以使您快速的近乎于准实时的存储、查询和分析超大数据集，通常被用来作为构建复杂查询特性和需求强大应用的基础引擎或技术，详情请参见 什么是阿里...
表结构设计
本文介绍如何设计 AnalyticDB for MySQL 的表结构（包括选择表类型、分布键、分区键、主键和聚集索引键等），从而实现表性能的优化。选择表类型 AnalyticDB for MySQL 支持复制表和普通表两种类型。在选择表类型时，需要注意如下几点：复制...
基础概念
什么是倒排索引？倒排索引也常被称为反向索引、置入档案或反向档案，是一种索引方法，被用来存储在全文搜索下某个单词在一个文档或者一组文档中的存储位置的映射。它是文档检索系统中最常用的数据结构。倒排索引可以为我们做什么？通过倒排...
倒排索引介绍
什么是倒排索引 倒排索引也常被称为反向索引、置入档案或反向档案，是一种索引方法，被用来存储在全文搜索下某个单词在一个文档或者一组文档中的存储位置的映射。它是文档检索系统中最常用的数据结构。通过倒排索引，可以快速定位单词所在...
倒排索引介绍
什么是倒排索引 倒排索引也常被称为反向索引、置入档案或反向档案，是一种索引方法，被用来存储在全文搜索下某个单词在一个文档或者一组文档中的存储位置的映射。它是文档检索系统中最常用的数据结构。通过倒排索引，可以快速定位单词所在...
新手指引
什么是轻量应用服务器 轻量应用服务器的产品优势 轻量应用服务器的应用场景 轻量应用服务器支持的镜像 轻量应用服务器的使用限制 轻量应用服务器与云服务器ECS对比 快速使用流程 轻量应用服务器快速使用流程如下图所示。准备工作 您需注册...
向量检索版介绍
全量索引的产出需要经过数据处理，索引构建，索引合并等流程，在各个阶段可以通过设置索引处理的并发度提高全量索引的产出速度。实时增量流程 全量索引产出后，每个全量版本都会有一个常驻的增量流程，而增量数据同步是通过 数据更新节点 ...
召回引擎版介绍
全量索引的产出需要经过数据处理，索引构建，索引合并等流程，在各个阶段可以通过设置索引处理的并发度提高全量索引的产出速度。增量流程 全量索引产出之后，后续数据的更新都需要通过API推送完成。API推送的数据有两条处理链路：经过...
Dataphin是否有索引的概念
概述 Dataphin在创建三种逻辑表的时候，需要设置主键，并且常见的数据库能够设置索引，用户想了解Dataphin是否有...2.Dataphin创建的物理表是存储在计算引擎的，如果计算引擎是MaxCompute，那么也没有索引的概念。适用于 Dataphin公共云版本
使用须知
轻量应用服务器使用须知 轻量应用服务器的实例适用于小型Web应用、轻量应用等低负载、突发型应用场景。如果您需要选择其他的实例类型或者需要具有较高CPU性能负载的实例（例如，大型应用、视频编码等），请您使用云服务器ECS。更多信息，请...
变更历史
表 添加表 是 订阅/取消订阅索引表->手动触发全量->新增索引->新增数据源部署->索引表激活 修改表 是 手动触发全量->推送离线配置 删除表 否 推送在线配置->订阅/取消订阅索引表，表状态变为未使用后，点击删除 表的停止使用/恢复 否 推送...
典型慢查询
导致查询磁盘I/O消耗较大的原因通常有如下几种：过滤条件的数据筛选率较低，导致索引的使用效率不高，需要读取的索引量较大。过滤条件没有下推，导致对源表进行了全表扫描。过滤条件下推，但是过滤条件设置的范围较大，仍然有大量数据被...
索引、属性、字段作用详解
与开源ES的名词解释对比 由于 开放搜索 是阿里巴巴自主研发的大规模分布式搜索引擎平台，虽然有些名词与开源的Es叫法相同，但其作用却差距较大，这里做出如下对比：Es：名词 Es解释 与关系型数据库对比 索引 索引（index）是Elasticsearch...
索引、属性、字段作用详解
与开源ES的名词解释对比 由于 开放搜索 是阿里巴巴自主研发的大规模分布式搜索引擎平台，虽然有些名词与开源的Es叫法相同，但其作用却差距较大，这里做出如下对比：Es：名词 Es解释 与关系型数据库对比 索引 索引（index）是Elasticsearch...
多元索引计量计费
使用多元索引时，索引数据会产生额外的数据存储量，索引查询也会消耗读吞吐量。本文介绍了多元索引的计费项、计费公式、计费示例以及常见问题。注意事项 索引单独计量计费，和数据表无关。多元索引的各计费项的价格和高性能实例费用一致。...
基础概念
分片规格 即计算资源的规格 分片 即分列，列是partition的意思，如果索引量太大，单机无法放下，可以按某一列（比如item_id）做hash分成多列，列与列之间数据不一样，但是配置是一样的。每个请求过来BE会请求多列，将所有列结果合并后才能...
多元索引介绍
多元索引（Search Index）基于倒排索引和列式存储，可以解决大数据的多维查询和统计分析难题。当日常业务中有非主键列查询、多列组合查询、模糊查询等多维查询需求以及求最值、统计行数、数据分组等数据分析需求时，您可以将这些属性作为...
升级数据库版本
常见问题 Q：升级过程中，为什么会出现实例切换？是否会有其他严重风险？A：为保证业务稳定，本地SSD盘实例升级采用先备后主的方式，备实例升级完成后，业务自动切换至备实例。ESSD云盘实例升级采用新建节点的方式，新节点升级完成后，业务...
Lindorm宽表引擎的搜索索引和二级索引的区别
概述 本文主要介绍阿里云云原生多模数据库Lindorm宽表引擎的搜索索引和原生二级索引的区别。详细信息 Lindorm宽表引擎的搜索索引和二级索引的区别如下：二级索引是Lindorm宽表内置的特性，不需要开通即可使用，查询场景适合较为固定的业务...
pg_index
目录 pg_index 包含关于索引的部分信息。其他信息大部分在 pg_class 中。列名称 列类型 描述 indexrelid oid 此索引的 pg_class 项的OID。indrelid oid 此索引的基表的 pg_class 项的OID。indnatts int2 索引中的总列数（与 pg_class....
SQL调优思路
缺少索引 索引缺失，通过执行计划发现SQL没有使用索引，查询效率低，创建索引后性能提升。示例如下：添加索引前 添加索引后 最优执行计划 执行计划并非最优执行计划，SQL执行时间未达到预期速度，通过执行计划发现SQL有调优空间，创建合适...
算子级别诊断结果
如果是过滤条件中的相关字段没有索引导致过滤条件没有下推，那么需要检查没有索引的原因。Join存在数据膨胀 问题 Join的数据膨胀率是Join的输出行数与Join的输入行数的比值，其中Join的输入行数为左表行数与右表行数之和。对于合理Join条件...
管理索引
索引是一种单独的、物理的对数据库表中一列或多列的值进行排序的一种存储结构。本文为您介绍如何通过DDM管理索引。您可以在 索引编辑器 页面对索引进行增加、删除、选择字段和索引成员等操作。
现代IM系统中的消息系统—架构
基于Timeline构建的现代消息系统能够同时支持消息系统的多种特性，包括多端同步、消息漫游和在线检索，在性能和规模上能够实现全量消息云端存储和索引、百万TPS写入以及毫秒级延迟的消息同步和检索能力。背景 在这个高度信息化的移动互联网...
名词解释
已有向量数据，即用户有自己的向量模型，不需要引擎生成向量，向量检索版实例用于向量查询 需将原始数据转为向量数据：即用户没有自己的向量模型，需要引擎将文本或图片生成向量，进行向量检索 索引重建 将MaxCompute或oss上的数据构建成...
KV转columns
是 整数或浮点数 说明 若存在非数值数据，则会置为NaN csv组件 igateoffline组件 平台上其他数据处理组件 按照平台组件开发的自定义组件 OUT端口 参数名 参数描述 是否必填 输出数据类型 输出 输出参数包含索引和键值两部分：索引须和输入...
RDS MySQL引擎表索引方式更改为Hash无效的原因说明
概述 本文主要介绍RDS MySQL引擎表索引方式更改为Hash无效的原因说明。详细信息 阿里云提醒您：如果您对实例或数据有修改、变更等风险操作，务必注意实例的容灾、容错能力，确保数据安全。如果您对实例（包括但不限于ECS、RDS）等进行配置...
BRIN索引
BRIN 索引是块级索引，有别于B-TREE等索引，BRIN记录并不是以行号为单位记录索引明细，而是记录每个数据块或者每段连续的数据块的统计信息。因此BRIN索引空间占用特别的小，对数据写入、更新、删除的影响也很小。操作符< <= = >=>应用场景 ...
索引结构
索引结构 索引结构分为：索引字段和属性字段。其中索引字段为文本类型字段分词，提供检索服务，而属性字段则提供统计、排序、过滤、聚合等功能。支持创建为索引字段的类型 INT，INT_ARRAY，TEXT，SHORT_TEXT，LITERAL，LITERAL_ARRAY，...
ALL_IND_EXPRESSIONS
ALL_IND_EXPRESSIONS视图提供了关于数据库中所有索引表达式的信息。简介 all_ind_expressions 视图是 PolarDB PostgreSQL版（兼容Oracle）中的一个系统视图，提供了关于数据库中所有索引表达式的信息，但仅限于当前用户有权限访问的表达式...
索引结构
索引结构 索引结构分为：索引字段和属性字段。其中索引字段为文本类型字段分词，提供检索服务，而属性字段则提供统计、排序、过滤、聚合等功能。支持创建为索引字段的类型 INT，INT_ARRAY，TEXT，SHORT_TEXT，LITERAL，LITERAL_ARRAY，...
服务介绍
网站会员、商品信息检索场景，一般保存大量的商品/会员信息，并需要根据少量条件进行复杂且任意的查询，以满足网站用户任意搜索需求等。Search服务的整体数据流如上图，数据写入HBase后，BDS负责将数据实时同步到Search索引中。在此架构下...
为什么索引流量费用是读写流量费用的几倍？
索引流量是按照未压缩数据被构建或重建索引所产生的索引数据量计算的，而读写流量是按照压缩后数据的传输数据量计算的。索引数据的大小和日志内容的复杂度与建立索引的字段数量有关。例如原数据10 GB，创建的索引文件为8 GB，原数据压缩后...
- 产品推荐
- 这些文档可能帮助您