通过Logstash修改字段名
在某些业务的使用场景下，您可能需要对索引的一些字段进行重命名。例如，使用DataWorks在阿里云Elasticsearch集群间迁移数据时，由于源集群数据中包含了特殊符号（例如@），而DataWorks不支持特殊符号，因此需要修改字段名（去掉特殊符号）...
新旧版本使用指引
IndexVideo-对视频进行自动截帧、分组、识别操作 BatchIndexFileMeta-批量文件元信息建立索引 无 GetFileMeta-获取文件元数据 GetImage-从媒体集中获取一张图片的信息 新版支持获取数据集中所有类型的文件信息。GetVideo-获取一个视频的...
索引表配置
索引表配置介绍 索引表配置是向量检索版中最重要的一个配置，它描述了原始文档的数据格式，并基于这些数据如何构建索引。这些索引包括倒排索引、正排索引、摘要索引。 索引表配置 配置概览 {"table_name":"sample","fields":[],...
索引表配置
索引表配置介绍 索引表配置是召回引擎版中最重要的一个配置，它描述了原始文档的数据格式，并基于这些数据如何构建索引。这些索引包括倒排索引、正排索引、摘要索引。 索引表配置 配置概览 {"table_name":"sample","fields":[],...
OpenMetaQuery
元数据索引库创建完成后，OSS会继续对Bucket中新增文件进行准实时的增量追踪扫描并为增量文件建立元数据索引。注意事项 权限说明 阿里云账号默认拥有开启元数据管理功能的权限。如果您希望通过RAM用户开启元数据管理功能，需确保RAM用户...
CREATE INDEX
开通列存索引将收取文件引擎和计算引擎费用。如何开通，请参见 前提条件。列存索引的索引键必须包含所有主键列。Lindorm实例对列存索引的构建任务数无限制。索引键表达式（index_key_expression）您可以将一个列或多个列定义为索引键，由多...
修改场景化配置模板
修改场景化模板等同于执行 PUT_template/aliyun_default_index_template，不会触发实例重启，对索引及集群状态不会产生影响。操作步骤 登录 阿里云Elasticsearch控制台。在左侧导航栏，单击 Elasticsearch实例。进入目标实例。在顶部菜单栏...
TargetSubtitle
false Stream array 需要处理的源文件字幕流索引号列表。空值（默认）表示处理索引号最小的字幕流（第一路字幕流），索引号大于 100 表示处理所有字幕流。示例：[0,1]处理索引号为 0 和 1 的字幕流；[1]处理索引号为 1 的字幕流；[101]处理...
Linux系统通过接入点访问文件系统
为避免已挂载文件系统的ECS实例重启后，挂载信息丢失，您可以通过在Linux ECS实例中配置/etc/fstab 文件，实现在ECS实例重启时NFS文件系统自动挂载。打开/etc/fstab 配置文件，添加挂载配置。未开启接入点RAM策略，请执行以下命令。access-...
对象存储OSS
HA文件格式 文件是建立索引的数据源（注意：需要是utf-8的编码），有着固定的格式，下面介绍标准的输入格式。首先看一个完整的数据文件standard_sample.data的内容 CMD=add^_PK=12345321^_url=http://www.aliyun.com/index.html^_title=...
对象存储OSS
HA文件格式 文件是建立索引的数据源（注意：需要是utf-8的编码），有着固定的格式，下面介绍标准的输入格式。首先看一个完整的数据文件standard_sample.data的内容 CMD=add^_PK=12345321^_url=http://www.aliyun.com/index.html^_title=...
Logtail机器组问题排查思路（主机场景）
如果Logtail启动参数错误，请根据下述表格修改ilogtail_config.json文件，然后重启Logtail。具体操作，请参见 附录：重启Logtail。场景 网络类型<config_region><endpoint>服务器为ECS，且与Project属于同一地域 阿里云内网地域>-intranet...
HBase SQL（Phoenix）FAQ
如果查询确实需要非主键或非索引列作为过滤条件的列，phoenix4.x版本可以在客户端的 hbase-site.xml 文件中配置 phoenix.force.index 为 false，重新打开客户端，即可生效。Phoenix5.x在控制台参数管理中修改 phoenix.force.index 为 false...
CPFS-NFS客户端挂载文件系统（推荐）
为避免已挂载文件系统的云服务器ECS重启后，挂载信息丢失，您可以通过在Linux ECS实例中配置/etc/fstab 文件，实现在云服务器ECS设置重启时CPFS文件系统自动挂载。打开/etc/fstab配置文件，添加挂载配置。file-system-id.region.nas....
阿里云Elasticsearch实例FAQ
本文列举了阿里云Elasticsearch（ES）相关的常见问题，包括购买、退订、配置、访问、查询、写入、插件、分词、日志、重启、负载或状态异常、备份与恢复、监控报警等相关问题。常见问题概览 购买或退订实例问题 购买ES实例时选错配置，如何...
常见问题索引
重启程序后挂载的文件就没有了，如何处理？部署应用时报错not enough instances to batch怎么办？如何修改应用部署方式，例如将JAR包部署改为镜像部署？如何部署代码、Mongo、Nacos和Seata Server等至SAE？[回到顶部]产品集成FAQ SAE支持...
数据索引
元数据索引库创建完成后，OSS会继续对Bucket中新增文件进行准实时的增量追踪扫描并为增量文件建立元数据索引。coding:utf-8-*-import oss2 from oss2.credentials import EnvironmentVariableCredentialsProvider#从环境变量中获取访问凭证...
OSS+API 数据源
即可在查询测试页面进行查询测试：文件格式 文件是建立索引的数据源（注意：需要是utf-8的编码），有着固定的格式，下面介绍标准的输入格式。首先看一个完整的数据文件standard_sample.data的内容 CMD=add^_PK=12345321^_url=...
上传同义词文件
假设现存索引 index-aliyun 使用了aliyun.txt同义词文件，当aliyun.txt文件内容变更并重新上传后，现存索引不会动态加载更新后的同义词词典。请在同义词词典内容发生变化后进行索引重建操作，否则可能会造成只有新增数据使用新词典的情况。...
多元索引
为数据表创建多元索引后，您可以通过Tablestore CLI查看多元索引列表、查看多元索引信息、使用多元索引查询数据以及删除多元索引。创建多元索引 创建一个多元索引。命令格式 create_search_index-n search_index_name 配置项说明请参见下表...
参数调优建议
现象：如果临时文件超出loose_rds_max_tmp_disk_space的取值，则会导致应用出现如下错误：The table‘/home/mysql/dataxxx/tmp/sql_2db3_1’is full 修改建议：首先需要分析一下导致临时文件增加的SQL语句是否能够通过索引或者其它方式进行...
TargetAudio
false Stream array 需要处理的源文件音频流索引号列表。空值（默认）表示处理索引号最小的音频流（第一路音频流），索引号大于 100 表示处理所有音频流。示例：[0,1]处理索引号为 0 和 1 的音频流；[1]处理索引号为 1 的音频流；[101]处理...
功能特性
索引加速 文件分析 云数据库 SelectDB 版支持表函数功能（Table-Value-Function或TVF），可以将S3、HDFS等常见远端存储中的文件数据，映射成云数据库 SelectDB 版中的表，从而对这些文件数据进行分析 文件分析 数据湖分析 Hive数据源 通过...
数据索引
元数据索引库创建完成后，OSS会继续对Bucket中新增文件进行准实时的增量追踪扫描并为增量文件建立元数据索引。import com.aliyun.oss.ClientException;import com.aliyun.oss.OSS;import com.aliyun.oss.common.auth.*;import ...
数据索引
元数据索引库创建完成后，OSS会继续对Bucket中新增文件进行准实时的增量追踪扫描并为增量文件建立元数据索引。package main import("fmt""github.com/aliyun/aliyun-oss-go-sdk/oss" "os" )func main(){/从环境变量中获取访问凭证。运行本...
基于加密服务的SSL安全卸载
签发签名证书文件SS_SM2_HSM.cr./sign_cert_s.sh SS_SM2_HSM.csr SS_SM2_HSM.crt#签发加密证书文件SE_SM2_HSM.crt./sign_cert_e.sh SE_SM2_HSM.csr SE_SM2_HSM.crt ECC算法的服务端证书申请和签发 生成证书请求文件。方式一：通过EVSM的...
AliSQL内核小版本发布记录
修复由于进程退出时未清理socket文件导致重启失败的问题。调整用户自定义函数（nextval或currval）的优先级。修复 net_length_size 返回的251错误。重要 官方8.0.22版本中引入了derived_condition_pushdown特性，该特性有效减少了派生表...
开启Binlog
集群重启后将自动清除历史Binlog文件。若您的集群未开启Binlog，此时如需删除Binlog文件，您可以重新打开Binlog，将上述Binlog的保存时长参数（loose_expire_logs_hours 或 binlog_expire_logs_seconds）设置为一个较小的值，等文件超过...
PolarDB MySQL版8.0.2版本发布日志
2023-06-28 问题修复 修复使用列存索引进行查询时，使用的临时文件写满磁盘后不能及时中断查询并清理文件的问题。修复重复执行存储过程时，参数不生效的问题。修复普通用户可以删除 sys 的问题。修复并发记录慢查询日志的过程中，Thread ...
Kibana FAQ
可能原因 解决方法 存在多个Kibana系统索引或者数据结构发生了变化 删除.kibana 开头的相关索引，并通过控制台重启Kibana节点，或者重启Elasticsearch实例，重启操作请参见 重启实例或节点。警告 删除.kibana 索引后，会丢失Kibana中已创建...
弹性搜索的审计事件
ListDictInformation 在添加用户OSS存储的词典文件时，查询和校验用户OSS词典文件的详情。ListDicts 查询指定类型的词典详情以及签名生成的公网可下载链接。ListEcsInstances 创建Beats-ECS采集器时，查询ECS机器列表。ListExtendfiles ...
API概览
进行此操作后，将为当前数据流创建一个新的索引，该索引将成为数据流的新写索引。ListDataStreams 查看数据流列表。CloseManagedIndex 关闭Indexing Service集群中某个索引的云端托管功能。此功能不可逆，关闭后无法再开启。Kibana API ...
PolarDB MySQL版8.0.1版本发布日志
8.0.1.1.41 类别 说明 发布时间 新增功能和性能优化 列存索引中新增基于TopK下推的Left Join功能。支持为用户授予执行 SHOW_ROUTINE、FLUSH_USER_RESOURCES、FLUSH_TABLES、FLUSH_STATUS 和 FLUSH_OPTIMIZER_COSTS 命令的全局动态权限。...
阿里云Elasticsearch支持被审计的事件说明
ListDictInformation 在添加用户OSS存储的词典文件时，获取和校验用户OSS词典文件的详情。ListDicts 获取指定类型的词典详情以及签名生成的公网可下载链接。ListEcsInstances 创建Beats-ECS采集器时，获取ECS机器列表。ListExtendfiles ...
2021年
使用跨机并行查询加速索引创建 2021年6月 优化 基于RTO的crash recover时间改进 支持配置polar_crash_recovery_rto参数，指定实例期望的RTO时间，从而保证在发生crash recovery时，数据库可以在期望的RTO时间内完成崩溃恢复重启，恢复可用...
RDS SQL Server空间不足问题
说明 系统文件空间使用量 包括系统数据库master、msdb和model的所有数据文件和日志文件，以及一些系统文件（错误日志、默认跟踪文件、系统扩展事件文件等）。您可以在控制台的 自治服务>空间管理 页面，查看更详细的空间使用情况，包括数据...
通过配置文件管理管道
如果您需要在input中定义插件、驱动或其他文件，可单击 查看扩展文件路径，在 扩展文件管理 对话框中，单击 前往上传，根据提示上传对应的文件。详细信息，请参见 配置扩展文件。filter 指定对输入数据进行过滤的插件。支持的插件类型，请...
库表数太多导致实例卡顿或异常
accesses.since 开始收集统计信息的时间（实例重启或者索引重建会导致该字段以及ops字段重置）。如果观察到索引命中次数很少（例如示例中的accesses.ops为1），则很大概率该索引是冗余索引或无用索引，可以考虑删除。如果您的MongoDB实例...
Logstash FAQ
所以在使用阿里云Logstash上传数据之前，需要先把集群的 自动创建索引 设置为允许，或提前创建好索引和mapping。阿里云Logstash支持rubydebug模式吗？不支持。阿里云Logstash提供 logstash-output-file_extend插件 来打印调试日志，不推荐...
2021年
对分区表使用跨机并行查询 优化 基于RTO的crash recover时间改进 支持配置polar_crash_recovery_rto参数，指定实例期望的RTO时间，从而保证在发生crash recovery时，数据库可以在期望的RTO时间内完成崩溃恢复重启，恢复可用状态。...
- 产品推荐
- 这些文档可能帮助您