深度解析Lindorm搜索索引（SearchIndex）特性
主副本宕机恢复一般在秒级。可选的索引构建成本 索引可以加速查询，助力业务进一步挖掘数据的价值，但会带来写入成本和存储成本的增加。一方面，Lindorm通过多种高效的压缩算法显著降低索引的存储体积；另一方面，通过提供可选的索引构建...
直播录制
查看录制索引：用户可以查看已有的录制索引文件，这里的索引文件包括系统在断流180秒后自动生成的索引文件，以及用户手动创建的索引文件。剪辑录制索引：用户可以根据现有的录制索引文件进行剪辑，产生新的索引文件，这里的索引文件可以是...
如何将一棵LSM-Tree塞进NVM
数据一致性 PM到磁盘的合并涉及到数据库状态的改变，可能在系统宕机时出现数据一致性问题。针对该问题，本文通过在磁盘中维护描述日志（manifest log）的方式保证数据库状态改变的数据一致性。由于描述日志不在前端写入的关键路径中，因此...
DeleteDataset-删除数据集
接口说明 删除 数据集 前，请确保已删除数据集中所有 已建立的索引文件，删除索引文件的方法可参见 DeleteFileMeta、BatchDeleteFileMeta。删除 数据集 前，请确保已解绑数据集和 OSS Bucket 的绑定关系，解除绑定的方法可参见 ...
IndexFileMeta-文件元信息建立索引
对输入的文件进行数据处理如标签识别、人脸检测、地点检测等，将提取的文件元信息建立索引，支持用户在一个数据集内多样化的数据检索。接口说明 请确保在使用该接口前，已充分了解智能媒体管理产品的收费方式和 价格。文件元信息建立索引...
API概览
元数据索引 元数据索引 IndexFileMeta 文件元信息建立索引 对输入的文件进行数据处理如标签识别、人脸检测、地点检测等，将提取的文件元信息建立索引，支持用户在一个数据集内多样化的数据检索。BatchIndexFileMeta 批量文件元信息建立索引...
为什么索引流量费用是读写流量费用的几倍？
本文主要介绍索引流量和读写流量计费的区别。索引流量是按照未压缩数据被构建或重建索引所...例如原数据10 GB，创建的索引文件为8 GB，原数据压缩后为2 GB，则索引流量为8 GB，读写流量为2 GB。更多信息，请参见 按使用功能计费模式计费项。
GetLiveEditingIndexFile-获取直播剪辑索引文件
获取直播流的索引文件，用于控制台剪辑预览。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求参数 名称 类型 ...
查询所有录制索引文件
使用说明 创建好的M3U8索引文件的信息在视频直播系统中仅保存6个月，若要查询仅能查询6个月内创建的索引文件的信息。M3U8索引文件存储在OSS中，保存时间由OSS的存储配置决定。QPS限制 本接口的单用户QPS限制为15次/秒。超过限制，API调用会...
使用apack插件的物理复制功能
主分片在每次refresh时，通过网络将增量的索引文件拷贝到副本分片，在主副分片分配可见性延迟为毫秒级别的情况下，大幅度提高了集群的写入性能。物理复制功能的性能测试信息如下：测试环境 机器配置：数据节点8核32 GB*5+2 TB SSD云盘。...
录制文件管理
在录制文件管理列表中查看录制的索引剪辑。选择待查询的时间，然后输入或选择AppName和StreamName。单击 查询，查看选择时间段内的录制文件。若录制文件无法查看，请确定OSS Bucket读写权限是否为 公共读，具体操作，请参见 配置OSS bucket...
API概览
GetLiveEditingIndexFile 获取直播剪辑索引文件 获取直播流的索引文件，用于控制台剪辑预览。剪辑制作 剪辑制作 SubmitMediaProducingJob 提交剪辑合成作业 将一个或多个视频、音频、图片、字幕素材合成为成品。可以通过时间线(Timeline)...
在云桌面内挂载CPFS文件系统
您可以在阿里云控制台创建CPFS文件系统，通过NFS协议服务把CPFS文件系统挂载至对应工作区下的无影云桌面，挂载成功后便可以在云桌面上把CPFS文件系统当作一个普通的目录来访问和使用。本文介绍如何将CPFS文件系统挂载至云桌面以及如何验证...
PolarDB MySQL版8.0.1版本发布日志
修复执行 EXCHANGE PARTITION 操作时，因索引顺序不同导致索引损坏，无法访问表数据的问题。修复主键不包含分区键的分区表在使用查询优化器进行搜索、执行DML操作和记录Binlog时的问题。8.0.1.1.40.2 类别 说明 发布时间 问题修复 修复当多...
使用多机MPP对海量数据分析提速
技术架构 列存索引多机并行执行技术架构如下：列存索引多机并行是由多个只读列存节点组成的一个多机执行组，并提供多机并行执行能力。随着用户查询负载的变化，用户可以快速增加或减少只读列存节点的个数，以平衡查询性能和计算成本。多机...
集群吞吐性能测试
本文介绍集群在顺序写、顺序读、随机读等方面的性能测试方法。注意事项 性能测试前，请注意以下事项。吞吐最大不会超过ECS带宽。如果您的ECS带宽只有1.5 Gbps，则吞吐最高可达到187.5 MB/s。文件存储 HDFS 版 的吞吐能力和购买的存储空间...
小版本更新说明
1.5.5：修复HLogExporter导致RS宕机问题。1.5.5.1：更新reference文件的size计算逻辑。2.x小版本更新说明 2.0.2：发布商业化版本。云数据库HBase标准版1.1版本同步到2.0版本。修复大量的bug，均已回馈。2.0.3：修复部分AssignmentManager v...
SFTP协议运维
文件下载命令 get<远程服务器文件名><本地服务器文件目录>文件上传命令 put<本地服务器文件名><远程服务器文件目录>可选：登录堡垒机，查看上传或下载文件的审计记录。具体操作，请参见 登录系统 和 搜索和查看会话。相关文档 修改用户信息...
向量索引
向量索引介绍 向量召回是指将商品或者内容等以向量的形式表达，并建立向量索引库，索引库上支持输入一个或多个用户或商品向量来根据向量距离召回topK的商品或内容。向量索引配置 不带类目的向量配置 {"table_name":"test_vector","summarys...
应用场景
本文介绍文件存储NAS数据存储的主要应用场景。企业应用上云 阿里云NAS提供标准的NFS和SMB接口，云下建立在NAS上的应用程序可以轻松迁移到阿里云。阿里云NAS基于云原生架构，具有99.95%高可用性，PB级容量弹性，同时支持目录配额、ACL、回收...
Linux系统挂载SMB协议文件系统
由于Linux系统对SMB协议的兼容程度较低，建议仅在需要跨操作系统共享数据的情况下使用Linux系统挂载SMB协议文件系统。本文主要介绍如何将SMB协议文件系统挂载至云服务器ECS（Linux）上并执行读写操作。前提条件 在创建SMB协议文件系统的...
查看集群健康状态
造成 yellow 状态的原因是索引存在副本分片丢失的情况，需要查找并修复集群中有问题的索引，命令如下：索引状态查询命令 curl-u<用户名>:<密码>http://<host>:9200/_cat/indices通过以上命令，您可以查找有问题的索引名称，即状态为 yellow...
新建表
UNIQUE 表示唯一的、不允许重复的索引，例如员工工号（emp_no）。FULLTEXT 表示全文搜索的索引，用于搜索包含大量数据的表。列 选择索引所在的列，需注意索引列的顺序。不可见 选择设置的索引是否可见。设置索引页面提供以下功能键：功能项...
向量索引
向量索引介绍 向量召回是指将商品或者内容等以向量的形式表达，并建立向量索引库，索引库上支持输入一个或多个用户或商品向量来根据向量距离召回topK的商品或内容。向量索引配置 不带类目的向量配置 {"table_name":"test_vector","summarys...
CPFS-NFS客户端挂载文件系统（推荐）
0（noresvport后第二项）该值表示fsck在启动时检查文件系统的顺序。对于CPFS文件系统而言，此值默认为0，表示fsck不应在启动时运行。执行 reboot 命令，重启ECS实例。说明 在重启ECS实例前，请确认手动挂载成功，避免ECS实例重启失败。另外...
使用限制
一个普通的PolarDB表（非分区表）占用3个文件（数据文件、visibilitymap文件、fsm文件，使用索引的话，每个索引一个文件）。文件数量达到上限后，继续创建表会提示类似以下错误：could not create file 此时需要删除部分表或者升级集群规格...
使用限制
一个普通的PolarDB表（非分区表）占用3个文件（数据文件、visibilitymap文件、fsm文件，使用索引的话，每个索引一个文件）。文件数量达到上限后，继续创建表会提示类似以下错误：could not create file 此时需要删除部分表或者升级集群规格...
0004-00000302
单个阿里云账号的总QPS为10,000，但在不同的读写方式下，实际能达到的值如下：顺序读写：2,000 如果您在上传大量文件时，在命名上使用了顺序前缀（如时间戳或字母顺序），可能会出现大量文件索引集中存储于存储空间中某个特定分区的情况，...
503错误
解决方案：单个账号的总QPS为10,000，但在不同的读写方式下，实际能达到的值如下：顺序读写：2,000 如果您在上传大量文件时，在命名上使用了顺序前缀（如时间戳或字母顺序），可能会出现大量文件索引集中存储于存储空间中某个特定分区的...
OSS性能与扩展性最佳实践
如果您在上传大量文件（Object）时，在命名上使用了顺序前缀（如时间戳或字母顺序），可能会出现大量文件索引集中存储于存储空间（Bucket）中的某个特定分区的情况。此时如果您的请求次数过多，会导致请求速率下降。出现此类问题时，建议您...
常见问题
本文介绍文件存储CPFS的用户咨询和关注的一些问题，帮助您快速了解CPFS。问题概览 产品咨询类 什么是文件存储CPFS？CPFS适用什么场景？CPFS的优势有哪些？如何开通服务，并创建文件存储CPFS文件系统？如何选择CPFS的性能规格？CPFS-POSIX...
多列索引
目前，只有 B-tree、GiST、GIN 和 BRIN 索引类型支持多列索引，最多可以指定 32 个列（该限制可以在源代码文件 pg_config_manual.h 中修改，但是修改后需要重新编译本数据库）。多列B-tree索引可以用于条件中涉及到任意索引列子集的查询，...
检查索引使用
尽管本数据库中的索引并不需要维护或调优，但是检查真实的查询负载实际使用了哪些索引仍然非常重要。检查一个独立查询的索引使用情况可以使用EXPLAIN命令。也可以在一个运行中的服务器上收集有关索引使用的总体统计情况。很难明确地表达...
LOADING_NCI状态说明及其影响
参数配置说明 若列存索引中的 imci_enable_read_during_load_nci 参数配置为 ON，则在全部的列存索引状态由LOADING_NCI变为COMMITTED状态之前，列存索引默认提供快照读服务，读取的数据版本为列存宕机前的最后一次完整快照。此时，无论当前...
MySQL InnoDB空间文件
写入：在进行宕机或强制执行检查点（checkpoint）时，通过 fil_write_flushed_lsn_to_data_files 写入。读取：在实例启动时，fil_read_first_page会读取LSN信息，用于更新启动时的 min_flushed_lsn 和 max_flushed_lsn。因为重做日志模块还...
产品优势
（IO hang是指在系统运行过程中，因某些IO耗时过长而引起的系统不稳定甚至宕机）最大容量32TB。需要上层集群文件系统进行扩容，扩容复杂，扩容周期长，不支持在线扩容。最大容量1PB。易用性 兼容POSIX文件接口，部署简单，挂载即用。需要...
预读和预扩展
将Buffer Pool中已经构建好的索引页写入文件系统中。使用指南 堆表预读 堆表预读的参数名为 polar_bulk_read_size，功能默认开启，默认大小为128 KB。说明 不建议用户自行修改该参数，128 KB是贴合PFS的最优值，自行调整并不会带来性能的...
预读和预扩展
将Buffer Pool中已经构建好的索引页写入文件系统中。使用指南 堆表预读 堆表预读的参数名为 polar_bulk_read_size，功能默认开启，默认大小为128 KB。说明 不建议用户自行修改该参数，128 KB是贴合PFS的最优值，自行调整并不会带来性能的...
CLUSTER
也就是说，不会尝试根据新行或者被更新行的索引顺序来存储它们（如果想这样做，可以周期性地通过发出该命令重新聚簇。还有，把表的 fillfactor 存储参数设置为小于 100%有助于在更新期间保持聚簇顺序，因为如果空间足够会把被更新行保留在...
索引介绍
使用宽表模型的表引擎查询数据时存在依赖主键以及根据属性查询效率低的问题，表格存储提供了二级索引和多元索引用于解决宽表模型的数据查询问题。您也可以为数据表创建映射关系后，像使用传统数据库一样使用SQL查询表中数据。表引擎 宽表...
- 产品推荐
- 这些文档可能帮助您