批量数据合并
参数说明 IN1端口-输入参数 参数名 参数描述 是否必填 输入数据类型 数据源类型 IN1-索引列 配置IN1端口输入数据的索引列。IN1索引和IN2索引的个数要相同。是 不限 说明 IN1-索引列和IN2-索引列对应的参数的输入数据类型需一致。csv组件。...
索引介绍
图 1：索引1 图 2：索引2 有了这两张索引表，即可通过索引表的主键前缀范围查询的方式来精确定位某个MD5或某个SHA1对应的文件名。多元索引 多元索引引擎相对于表引擎，底层增加了倒排索引、多维空间索引等，支持多条件组合查询、模糊查询、...
恢复.kibana_1索引
在复杂的业务场景下，例如，.kibana_1 索引结构发生损坏或Kibana访问异常，需要删除.kibana_1 索引重置Kibana集群，或因定时任务配置异常导致.kibana_1 索引被删除，集群重启后Kibana相关数据被重置，.kibana_task_manager_1 会自动生成...
通过_split API快速拆分主分片
当您使用Elasticsearch集群出现索引分片设置不合理（例如索引主分片设置不合理、每个分片存在大量数据等）引发集群性能问题时，可通过_split API在线扩大主分片数，将现有索引拆分为具有更多主分片的索引。本文介绍如何通过_split API快速...
二级索引
为数据表创建二级索引后，您可以使用索引表、查看索引表信息、使用索引表查询数据以及删除索引表。前提条件 已创建数据表，且数据表的最大版本数（max Versions）必须为1。已为数据表创建预定义列。创建二级索引 说明 二级索引包括全局二级...
索引管理
对于OpenStore 智能混合存储 版本，只支持通过 仅查看托管中的索引 筛选相关索引，且 索引管理 页面最上方会展示 OpenStore索引总大小 及 索引个数。关键参数 说明 仅查看托管中的索引 说明 仅7.10内核增强版Indexing Service系列支持此...
如何设计时间线结构提升查询效率
{“metric”：“cpu”，”tags”：{“site”：“et2”,“ip”：“1.1.1.1”,“app”：“TSDB”} } 方式二：{“metric”：“cpu”，”tags”：{“ip”：“1.1.1.1”} } 查询方式二只使用了1个标签，因为 ip=1.1.1.1 这个标签只索引了1条时间...
通过Elasticsearch X-Pack角色管理实现用户权限管控
v 查看集群状态 GET/_cluster/stats 查询product_info索引中的数据 GET/product_info/_search 查询product_info1索引中的数据 GET/product_info1/_search 通过POST方式，向kibana_sample_data_logs索引中写入数据 POST/kibana_sample_data_...
ListILMPolicies
调用ListILMPolicies，查询已有的索引生命周期策略列表。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求头 该接口使用公共请求头，无特殊请求头。请...
ListInstanceIndices
调用ListInstanceIndices，获取集群的索引列表。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求头 该接口使用公共请求头，无特殊请求头。请参见公共...
DescribeILMPolicy
调用DescribeILMPolicy，查询指定索引生命周期详情。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求头 该接口使用公共请求头，无特殊请求头。请参见...
ListDataStreams
indexTemplateName String template1 索引模版名称。ilmPolicyName String rollver1 生命周期策略名称。name String my-index-0001 索引名称。health String Green 数据流状态，支持以下三种状态：Green：健康。Yellow：报警。Red：异常。...
手动备份与恢复
POST/_snapshot/my_backup_restore/snapshot_1/_restore {"indices":"index_1","rename_pattern":"index_(.+)","rename_replacement":"restored_index_$1"} 参数 说明 indices 只恢复 index_1 索引，忽略快照中的其他索引。rename_pattern ...
基于向量检索版+LLM构建对话式搜索
步骤1：将文本形式的业务数据导入文本向量化模型中，得到向量形式的业务数据 步骤2：将向量形式的业务数据导入到OpenSearch向量检索版中，构建向量索引 1.2.搜索问答在线服务 实现搜索功能后，结合Top N搜索结果，基于LLM问答模型返回搜索...
DROP INDEX
创建列存索引idx3 CREATE INDEX IF NOT EXISTS idx3 USING COLUMNAR ON test(p1,p2,c1,c2,c3)PARTITION BY ENUMERABLE(p1,p2,bucket(128,p1,p2));删除二级索引 执行以下语句，禁用二级索引idx1。ALTER INDEX IF EXISTS idx1 ON test ...
全局二级索引（GSI）
此处以创建分区表 mytest1.big_table_1 和 mytest2.big_table_1 为例，其中，表 mytest1.big_table_1 为创建局部索引的表，表 mytest2.big_table_1 为创建全局二级索引的表。CREATE TABLE mytest1.big_table_1(a INT PRIMARY KEY,b INT,c ...
二级索引简介
维度 全局二级索引 本地二级索引 同步方式 异步方式 同步方式 第一列主键要求 可选数据表中的任意主键列或者预定义列 必须和数据表的第一列主键相同 同步延迟 毫秒级别 实时 读取一致性 最终一致性 强一致性 功能特性 二级索引的功能特性...
CREATE INDEX
〇 〇 〇 索引属性（index_options）〇 〇 〇 使用说明 每张宽表最多可创建 3个 二级索引、1个 搜索索引 和 1个 列存索引。索引类型（index_method_definition）您可以在创建索引时通过 USING 关键字指定索引类型，Lindorm宽表引擎支持创建...
创建多元索引的映射关系
创建多元索引映射表search_exampletable1后，您可以执行以下操作：查询索引描述信息 以下示例用于查询search_exampletable1的索引描述信息。SHOW INDEX IN search_exampletable1;关于查询索引描述信息的更多信息，请参见 查询索引描述信息...
基本概念
Elasticsearch 7.0以下版本默认为一个索引创建5个主分片，并分别为每个主分片创建1个副本分片，7.0及以上版本默认为一个索引创建1个主分片和1个副本分片。两者区别如下：分片类型 支持处理的请求 数量是否可修改 其他说明 主分片 支持处理...
SHOW INDEX
SHOW INDEX语法用于查看指定表的索引信息，包括索引类型、索引构建进度、索引列等，方便您查询表的索引结构。同时，在删除二级索引和搜索索引前您可以通过SHOW INDEX语法来查看索引是否已被禁用。适用引擎 SHOW INDEX语法仅适用于宽表引擎...
通过索引生命周期管理实现冷热数据分离
warm 索引进入warm阶段后，ILM会将索引收缩到1个分片，强制合并为1个段。完成该操作后，索引将在1小时（从滚动更新时算起）后进入cold阶段。cold 索引进入cold阶段后，ILM将索引从hot节点移动到warm（冷数据）节点。完成操作后，索引将在2...
创建二级索引
二级索引相当于把数据表的主键查询能力扩展到了不同的列，当需要使用属性查询数据时，您可以通过创建二级索引加快数据查询的效率。设置预定义列后，在创建二级索引时将预定义列作为索引表的索引列或者属性列。您可以使用CreateIndex接口在...
索引使用率
自治服务提供索引使用率查询功能，用户可以查询表中已经存在的索引的使用率情况，以及索引的碎片率。前提条件 实例不能是RDS SQL Server 2008 R2云盘版。操作步骤 访问 RDS实例列表，在上方选择地域，然后单击目标实例ID。在左侧导航栏中，...
索引缺失
自治服务提供索引缺失查询功能，用户可以非常方便地发现RDS实例中缺失的索引信息。阿里的专家服务团队总结多年服务经验，发现许多客户遇到RDS CPU使用率过高、IOPS过高、查询语句性能低下、应用超时卡顿等问题，超过90%的原因是索引缺失...
ModifyIndexVersion-修改集群索引版本（索引回滚）
{} indexName string 否 索引名称 main_index version string 否 索引版本 1 buildDeployId string 否 产出索引的离线部署 277 请求示例 PUT/openapi/ha3/instances/ha3_instance_nameclusters/test_cluster/index-version [ { ...
使用二级索引读取数据
inclusiveStartPrimaryKey:[{"col1":Long.fromNumber(1)},{"pk1":TableStore.INF_MIN },{"pk2":TableStore.INF_MIN }],exclusiveEndPrimaryKey:[{"col1":Long.fromNumber(1)},{"pk1":TableStore.INF_MAX },{"pk2":TableStore.INF_MAX }],/...
通过SDK使用二级索引
二级索引相当于把数据表的主键查询能力扩展到了不同的列，当需要使用属性查询数据时，您可以通过创建二级索引加快数据查询的效率。设置预定义列后，在创建二级索引时将预定义列作为索引表的索引列或者属性列。创建二级索引后，您可以使用二...
按使用功能计费模式计费项
例如：您原始时序数据量为1 GB，上传到日志服务后，日志服务自动为您构建索引，索引数据量为1 GB。上传时的压缩率为20%，则日志存储空间为0.2 GB+1 GB=1.2 GB。按量付费：存储空间-时序存储费用=日累计存储量（GB）×每GB单价 资源包：新版...
虚拟手柄及自定义手柄
手柄X按钮，手柄图索引（1）public static final int CG_GAMEPAD_BUTTON_A=0x89;手柄A按钮，手柄图索引（2）public static final int CG_GAMEPAD_BUTTON_B=0x8A;手柄B按钮，手柄图索引（3）public static final int CG_GAMEPAD_BUTTON_Y=0x...
如何实现不锁表转冷存
普通表不锁表转冷存-tblname为普通表，包含三个索引tblname_partial_idx、tblname_pkey、tblname_with_idx-通过pg_repack将tblname转存到oss（不包含索引）pg_repack-U user1-dbname=db01-table=tblname-tablespace=oss-通过pg_repack将...
如何实现不锁表转冷存
普通表不锁表转冷存-tblname为普通表，包含三个索引tblname_partial_idx、tblname_pkey、tblname_with_idx-通过pg_repack将tblname转存到oss（不包含索引）pg_repack-U user1-dbname=db01-table=tblname-tablespace=oss-通过pg_repack将...
游戏行业算法版
（5）完成配置：查询测试 搜索测试 1、索引构建完成后可在 功能扩展>搜索测试 页面对游戏行业算法版的行业文本分析器对应的索引进行测试：以default索引为例，query子句填入：default:'游戏' 向量检索 如需测试向量检索功能请按如下流程...
通过OpenStore自定义冷热存储实现海量数据存储
OpenStore存储引擎是阿里云Elasticsearch针对日志场景自研的弹性、高效、低成本的日志存储引擎，支持自定义冷热存储与智能混合存储版本。本文介绍使用OpenStore自定义冷热存储实现海量数据存储的方法。背景信息 在日志全观测场景下，通常...
KV转columns
应用场景：例如有如下数据：x1 x2 x3 x4 x5 1:00 pi1 a cc 1 2:00 pi2 a dd 2 3:00 pi1 a cc 3 4:00 pi1 a dd 4 经过KV转columns组件转换（x1为索引列，x2,x3,x4为键值列，x5为数据列），结果如下：x1 x5_pi1_a_cc x5_pi1_a_dd x5_pi2_a_dd...
数据索引
数据索引是OSS对外提供的文件（Object）元数据索引能力。您可以利用Object的元数据自定义索引的条件，从而快速获取Object列表。...1秒内大约可以为600个文件建立索引。您可以结合Bucket内的文件数量，预估建立索引所需时间。
OpenStore冷热共享/分离引擎介绍
OpenStore存储引擎是阿里云Elasticsearch团队针对日志场景...相关文档 内核增强版实例应用 通过OpenStore智能混合存储实现海量数据存储 通过OpenStore自定义冷热存储实现海量数据存储 升配集群 索引管理 创建索引模板 查看集群状态和节点信息
使用集群限流插件（aliyun-qos）
例如集群中有2个数据节点、1个索引，该索引有1个shard、1个副本，每次写入10 MB大小的数据。因为存在副本，所以每个数据节点上都会被写入10 MB大小的数据。另外X-Pack自身的Monitor、Audit、Watcher等任务同样会占用写入流量，设置阈值时...
库表数太多导致实例卡顿或异常
覆盖了所有字段：_id（默认索引）{ last_name:1 } { last_name:1,first_name:1 } { coins:1 } { stars:1 } 索引优化逻辑如下：业务查询不会访问 coins 字段，因此 { coins:1 } 是无用索引。根据前面提到的索引前缀匹配规则，{ last_name:1,...
数据查询最佳实践
在上述SQL中，计算引擎首先检索列c1的索引，得出满足条件 c1=3 的行集合，然后读取每行所对应的time列数据。如果满足 time>='2010-01-01 00:00:00'，则将该行数据加入返回结果。不等于条件通过内部扫描 例如在查询中使用 c2<>100，通过索引...
- 产品推荐
- 这些文档可能帮助您