查询不到日志的排查思路
配置索引后，只对新写入的日志数据生效。如果您要查询和分析历史数据，请使用重建索引功能。具体操作，请参见 重建索引。您可以在 查询分析 面板中，检查已设置的分词符是否符合要求。更多信息，请参见 配置索引。其他原因 确认您的日志...
日志分析
如果日志服务中配置的索引为 traceId 的字段索引，此处设置 关联索引 为对应的 traceId 的索引。在日志中打印TraceID的操作，可以查看对应的链路追踪框架的TraceID打印功能说明。配置索引的操作，请参见 创建索引。在 自定义配置 页签左下...
一键迁移索引数据
为了快速实现自建Elasticsearch集群迁移上云、集群索引重建（reindex）和跨集群数据迁移，阿里云Elasticsearch提供了一键索引迁移功能。本文介绍一键索引迁移功能的应用场景及使用方法。前提条件 已创建满足条件的源和目标端Elasticsearch...
日志分析
如果日志服务中配置的索引为 traceId 的字段索引，此处设置 关联索引 为对应的 traceId 的索引。在日志中打印TraceID的操作，可以查看对应的链路追踪框架的TraceID打印功能说明。配置索引的操作，请参见 创建索引。在 自定义配置 页签左下...
OSS+API 数据源
通用、向量-图片搜索、向量-文本语义模板 数据同步，配置数据源，校验通过后，点击 下一步：数据源类型：选择对象存储OSS OSS路径：访问OSS文件的路径，需以/开头，路径中不允许包含?符号 存储空间（Bucket）：OSS的Bucket名称 时间戳：...
一键实时同步至Elasticsearch
支持通过目标索引配置规则实现源端多表数据写入至目标端指定的某个索引。任务组成 当前方案将分别创建用于全量数据初始化的离线同步子任务，和用于增量数据实时同步的数据集成实时同步子任务，方案产生的离线同步子任务个数与最终读取的源...
扫描（Scan）查询概述
字段类型 由索引配置中的数据类型决定。更多信息，请参见 数据类型。无论字段是否已配置索引，在扫描模式下 SP语句中出现的字段均按照text类型处理。详情请参考 数据类型转换。结果集大小 通过控制台或SDK指定，最大100条。满足下述任一...
对安全组规则的合规性进行审计和预警
说明 因为索引配置仅对新产生的日志生效，您可以再次修改安全组规则，来触发一个不合规事件，从而在日志服务中查看日志投递。单击 查询/分析，从 config-alarm2 日志库中，可以搜索到一条不合规的事件日志。步骤三：配置告警 在日志服务SLS...
使用apack插件的物理复制功能
索引配置：使用默认配置（5个主分片，1个副本分片）。测试结果 产品 写入速度（doc/s）原生Elasticsearch 6.7.0 127305 阿里云Elasticsearch 6.7.0，并开启物理复制功能 184592 结论 与原生Elasticsearch相比，阿里云Elasticsearch在开启了...
索引表加载策略
schema.json 索引配置文件。主要记录fields，index,attribute 和summary等信息。引擎通过该文件来加载索引。version.0 version文件。主要记录当前partition中引擎需要加载的segment和最新doc的时间戳。在实时build中，引擎会根据增量...
创建索引表
配置索引参数 创建索引所需要的一些列参数都通过设置SimpleFeatureType的静态属性来指定：指定属性索引HBase Ganos允许对普通属性创建索引，这样在不指定时空参数的情况下可以大大提高查询效率，如下例单独对name字段创建索引：...
索引表加载策略
schema.json 索引配置文件。主要记录fields，index,attribute 和summary等信息。引擎通过该文件来加载索引。version.0 version文件。主要记录当前partition中引擎需要加载的segment和最新doc的时间戳。在实时build中，引擎会根据增量...
CLI概述
copy_project 复制源Project的所有Logstore、Logtail、机器组和索引配置等到目标Project中。Logstore管理 create_logstore 创建Logstore。delete_logstore 删除Logstore。get_logstore 获取指定Logstore信息。list_logstore 查询所有...
端到端图搜解决方案（图片向量化）
配置实例 新购买的实例，在其详情页中，实例状态为“待配置”，并且会自动部署一个与购买的查询节点和数据节点的个数及规格一致的空集群，之后需要为该集群配置 数据源->索引结构->索引重建，之后才可正常搜索，点击操作栏下的“配置”按钮...
文本向量化检索最佳实践
配置实例 新购买的实例，在其详情页中，实例状态为“待配置”，并且会自动部署一个与购买的查询节点和数据节点的个数及规格一致的空集群，之后需要为该集群配置 数据源->索引结构->索引重建，之后才可正常搜索，点击操作栏下的“配置”按钮...
基本配置
配置介绍【线上应用配置】当通过首页进入【搜索算法中心-召回配置-基本配置】，选择了“应用名”和“线上应用”，就会显示如上图所示的列表，展示当前应用正在使用的分词配置。线上应用可通过右上角的“线下变更”按钮修改应用结构。【线下...
基本配置
配置介绍【线上应用配置】当通过首页进入【搜索算法中心-召回配置-基本配置】，选择了“应用名”和“线上应用”，就会显示如上图所示的列表，展示当前应用正在使用的分词配置。线上应用可通过右上角的“线下变更”按钮修改应用结构。【线下...
使用扩展属性定制列存索引
关于 loose_imci_default_pack_shift 参数的详细说明请参见 列存索引配置参数说明。您可以在控制台上查看和设置 loose_imci_default_pack_shift 参数的值，具体操作请参见 设置集群参数和节点参数。codec_opt 用于设置列存索引的压缩算法。...
基于Indexing Service实现数据流管理
常见问题 Q：为Indexing Service实例中的写入托管索引配置refresh、merge等写入参数，是否会生效？A：不会生效。Indexing Service实例中的写入托管索引已使用默认写入参数配置，用户侧配置不生效。默认写入参数配置如下。index.merge....
查询与分析日志的常见报错
解决方法 检查您的索引配置。具体操作，请参见 创建索引。only support*or?in the middle or end of the query 报错原因 使用模糊查询时，未正确使用通配符。解决方法 修改查询和分析语句中的通配符。相关说明如下：支持在词的中间或者末尾...
创建多元索引
如果要查询多元索引的描述信息，包括多元索引的字段信息和索引配置等，您可以使用查询多元索引描述信息功能实现。具体操作，请参见 查询多元索引描述信息。如果不再需要使用多元索引，您可以删除多元索引。具体操作，请参见 删除多元索引。
通过配置文件管理管道
说明 阿里云Elasticsearch为了保证用户操作数据的安全性，默认将 自动创建索引 配置设置为 不允许。阿里云Logstash在传输数据的时候，使用提交数据的方式创建索引，而不是 Create index API 的方式。所以在使用阿里云Logstash上传数据之前...
Logstash FAQ
阿里云Elasticsearch为了保证用户操作数据的安全性，默认将 自动创建索引 配置设置为不允许。阿里云Logstash在传输数据的时候，使用提交数据的方式创建索引，而不是 Create index API 自动创建索引的方式。所以在使用阿里云Logstash上传...
成本优化指南
典型配置 根据 加工原理 和 性能指南，推荐您简化采集方案，使用一个或多个Logstore快速接入数据，然后使用数据加工进行快速分发，并根据实际需求设置不同目标Logstore的存储时间以及索引配置。成本因素 通过日志服务的 计费项，可以了解到...
数据类型
text类型 如果您要查询和分析字符串类型的字段，需在配置索引时，将字段的数据类型设置为text，并开启统计功能。说明 开启全文索引后，日志服务默认将整条日志（除_time_以外所有字段）设置为text类型。日志样例 配置索引 查询和分析语句 ...
向量索引
向量索引配置 不带类目的向量配置 {"table_name":"test_vector","summarys":{"summary_fields":["id","vector_field"]},"indexs":[{"index_name":"pk","index_type":"PRIMARYKEY64","index_fields":"id","has_primary_key_attribute":true,...
初始化
初始化MetaStore 构建Meta表的Schema，包含Identifier、MetaIndex等参数，通过Store工厂创建并获取Meta的管理Store，配置参数包含Meta表名、索引名、主键字段、索引类型等。TimelineIdentifierSchema idSchema=new ...
使用Python SDK管理索引
logstore_name="ali-test-logstore"if_name_='_main_':#创建索引前，必须规划好全文索引、字段索引配置。该示例中，开启全文索引，为request_method、status字段开启字段索引。logstore_index={'line':{ 'token':[',',' ',"'",'"',';','=',...
AliES内核增强版功能介绍
1.7.0及以上内核版本支持×物理复制插件 基于索引级别的配置开关，实现主分片与副本分片的实时增量同步，大幅降低集群CPU开销，提升写入性能60%。详细信息，请参见 使用apack插件的物理复制功能。1.2.0及以上内核版本支持 Bulk写入聚合插件...
召回引擎版介绍
schema.json 索引配置文件。主要记录fields，index,attribute 和summary等信息。引擎通过该文件来加载索引。version.0 version文件。主要记录当前partition中引擎需要加载的segment和最新doc的时间戳。在实时build中，引擎会根据增量...
部署和使用跨可用区实例
在索引配置了副本的情况下，当某一可用区出现故障时，剩余的可用区依然可以不间断地提供服务，显著增强了集群的可用性。同时，您可以通过控制台的切流操作，将出现故障的可用区隔离，这时系统会自动在剩余的可用区中补充计算资源，满足业务...
创建多元索引
api*@param[]$request*请求参数、数据表名称、索引配置等。return[]请求返回。throws OTSClientException 当参数检查出错或服务端返回校验出错时抛出异常。throws OTSServerException 当OTS服务端返回错误时抛出异常。example"src/examples...
快速入门
说明 阿里云Elasticsearch为了保证用户操作数据的安全性，默认将 自动创建索引 配置设置为 不允许。阿里云Logstash在传输数据的时候，使用提交数据的方式创建索引，而不是 Create index API 的方式。所以在使用阿里云Logstash上传数据之前...
多元索引最佳实践
如果为多元索引配置路由后，则可以改变数据分布，根据路由键（而不是之前的所有主键）将数据进行Hash分区，一个确定的路由键会落在明确的一个或多个分区上。使用路由键的好处如下：显著减少长尾查询：未使用路由键前，每个查询均会访问索引...
管理Logstore
关于索引配置的更多信息，请参见 创建索引。方式三 在 快速分析 页签中，单击目标字段，系统将提示您升级Logstore规格。您可以单击 立即升级，完成升级。关于快速分析的更多信息，请参见 快速分析。删除Logstore 重要 删除Logstore前需先...
自动索引推荐
自动索引推荐功能的主要优势如下：精准推荐：利用数据库自动搜集的统计信息和优化器代价模型，能够为具体的SQL查询推荐合适的索引配置，避免了盲目地添加索引可能带来的性能负担和试错成本。效率提升：减少手动分析慢查询的时间，帮助快速...
数据流管理
基本概念 数据流及后备索引 数据流 由一个或多个自动生成的后备索引组成，每个数据流都需要一个匹配的索引模板，该模板包含用于配置数据流的后备索引的映射和设置。相同的索引模板可用于多个数据流，但不能删除数据流正在使用的索引模板。...
API概览
GetStoreViewIndex 查询指定数据集索引配置 根据指定名称查询数据集索引，只支持 logstore 类型的数据集。ListStoreViews 查询数据集列表 查询日志项目中的数据集列表。机器组 API 标题 API概述 CreateMachineGroup 创建机器组 创建一个...
使用Java SDK管理索引
创建索引前，必须规划好全文索引、字段索引配置。该示例中，开启全文索引，为request_method、status字段开启字段索引。String logstoreindex="{\"line\":{\"token\":[\",\",\"\",\"'\",\"\\\"\",\;\",\"=\",\"(\",\")\",\"[\",\"]\",\"{\...
意图
相似的表达方式，比如：我要买火车票、买火车票、买一张火车票 不同表达的方式，比如：我要买火车票、我要坐火车出行、坐火车到xx去玩 高级语义配置 这里的填写规范用到了 LGF 最佳实践 首先从最简单的LGF表达开始，逐步深入复杂的LGF表示...
- 产品推荐
- 这些文档可能帮助您