创建和使用CCI
排序键：索引的排序键，即数据在索引文件中按照该列有序存储。索引分区子句：索引的分区算法，与 CREATE TABLE 中分区子句的语法一致。CREATE CLUSTERED COLUMNAR INDEX index_name ON tbl_name(index_sort_key_name,.)[partition_options]...
部分索引
一个 部分索引 是建立在表的一个子集上，而该子集则由一个条件表达式（被称为部分索引的 谓词）定义。而索引中只包含那些符合该谓词的表行的项。部分索引是一种专门的特性，但在很多种情况下它们也很有用。使用部分索引的一个主要原因是...
搜索增强
服务创建 单击快速创建，选择搜索增强，进入服务创建界面，编辑服务名称并选择服务所使用的引擎及数据源，完成创建后进入索引配置界面。引擎 提供检索服务的基础组建，可在资源中心进行引擎管理也可在快速创建页面直接选择或添加。更多信息...
InputFile
名称 类型 描述 示例值 object 用于建立索引（如 IndexFileMeta）或更新索引（如 UpdateFileMeta）时的文件信息。URI string 必填项，本次请求进行索引、进行元数据更新的文件对象地址。支持 OSS 和 PDS 的 URI 地址。OSS 地址规则为 oss:/...
使用Robocopy工具迁移数据
本文介绍如何使用robocopy工具实现阿里云文件存储NAS SMB协议文件系统之间的数据迁移。前提条件 拥有一个存有数据的SMB协议文件系统，并且拥有一个专有网络类型挂载点。背景信息 Robocopy是Windows系统自带的目录复制命令，该功能可以创建...
概述
本文档主要介绍直播录制的工作原理及其API提供的功能。什么是直播录制 直播录制的原理 直播录制的过程，是通过拉取您推上来的直播流，将音视频封装成单独的一个个媒体切片（封装格式为TS），然后存入您指定的OSS bucket。直播录制在工作时...
开发运维建议
性能与稳定性 在RDS PostgreSQL中，单个数据库（DB）对应底层文件系统中的一个文件夹，数据库中的表、分区、索引对应文件夹中的文件，如果数据库对应文件夹中的文件数量超过2000万，将可能出现磁盘空间满的报错。建议适当拆分数据库或合并...
预读和预扩展
本文介绍了堆表预读、堆表预扩展以及索引创建预扩展的简介、原理以及使用方法等。前提条件 支持的 PolarDB PostgreSQL版 的版本如下：PostgreSQL 14（内核小版本14.5.1.0及以上）PostgreSQL 11（内核小版本1.1.1及以上）说明 您可通过如下...
IndexFileMeta-文件元信息建立索引
对输入的文件进行数据处理如标签识别、人脸检测、地点检测等，将提取的文件元信息建立索引，支持用户在一个数据集内多样化的数据检索。接口说明 请确保在使用该接口前，已充分了解智能媒体管理产品的收费方式和 价格。文件元信息建立索引...
NFS文件系统传输加密
工作原理 NAS客户端工具定义了一个网络文件系统类型alinas，与标准 mount 命令兼容。在ECS实例挂载alinas类型文件系统时，如果指定 tls 参数，NAS客户端工具会启动一个Stunnel监听进程，该进程转发并加密ECS实例对NAS服务器的访问，同时会...
0004-00000302
单个阿里云账号的总QPS为10,000，但在不同的读写方式下，实际能达到的值如下：顺序读写：2,000 如果您在上传大量文件时，在命名上使用了顺序前缀（如时间戳或字母顺序），可能会出现大量文件索引集中存储于存储空间中某个特定分区的情况，...
PolarDB MySQL版8.0.1版本发布日志
修复执行 EXCHANGE PARTITION 操作时，因索引顺序不同导致索引损坏，无法访问表数据的问题。修复主键不包含分区键的分区表在使用查询优化器进行搜索、执行DML操作和记录Binlog时的问题。8.0.1.1.40.2 类别 说明 发布时间 问题修复 修复当多...
优化内部表的性能
更多关于Distribution Key的原理和使用详情请参见 分布键Distribution Key。设置Distribution Key场景示例 例如设置Distribution Key，表tmp和tmp1做Join，通过执行explain SQL语句看到执行计划中有Redistribution Motion，说明数据有重...
VACUUM
对具有 GIN 索引的表，VACUUM（任何形式）也会通过将待处理索引项移动到主要 GIN 索引结构中的合适位置来完成任何待处理的索引插入。我们建议经常清理活动的生产数据库（至少每晚一次），以保证移除失效的行。在增加或删除了大量行之后，对...
列存索引行列融合基础组件介绍
本文介绍了列存索引行列融合基础组件（优化器代价模型、执行器多引擎访问、存储引擎日志回放和事务处理）以及处理长尾请求问题的HybridIndexSearch算子的相关内容。背景信息 事务处理（OLTP）和分析处理（OLAP）混合工作负载在当前的业务...
库表数太多导致实例卡顿或异常
在MongoDB中，WiredTiger存储引擎会为每一张表都建立对应的磁盘文件，每一个单独的索引也会成为一个新的磁盘文件。WiredTiger引擎中每一个打开的资源（比如文件系统对象）都会有一个对应的dhandle数据结构，存储了包括checkpoint信息、会话...
503错误
解决方案：单个账号的总QPS为10,000，但在不同的读写方式下，实际能达到的值如下：顺序读写：2,000 如果您在上传大量文件时，在命名上使用了顺序前缀（如时间戳或字母顺序），可能会出现大量文件索引集中存储于存储空间中某个特定分区的...
CREATE DATABASE
这会影响应用到字符串的排序顺序，例如在带 ORDER BY 的查询中，以及文本列上索引所使用的顺序。默认是使用模板数据库的排序规则顺序。附加限制见下文。lc_ctype 要在新数据库中使用的字符分类（LC_CTYPE）。这会影响字符的类别，如小写、...
OSS性能与扩展性最佳实践
如果您在上传大量文件（Object）时，在命名上使用了顺序前缀（如时间戳或字母顺序），可能会出现大量文件索引集中存储于存储空间（Bucket）中的某个特定分区的情况。此时如果您的请求次数过多，会导致请求速率下降。出现此类问题时，建议您...
深度解析Lindorm搜索索引（SearchIndex）特性
索引是加速数据库查询的重要手段，Lindorm除了提供高性能的二级索引外，同时支持搜索索引(SearchIndex)，主要面向复杂的多维查询场景，并能够覆盖模糊查询、聚合分析、排序、分页等场景。本文主要介绍SearchIndex的技术原理和核心能力。...
使用向量检索插件（aliyun-knn）
同时，由于在向量索引的查询过程中，会把索引文件全部加载到系统内存，因此建议在业务查询期间，不要同时进行大批量的写入，避免因节点内存紧张导致分片重启的情况。说明 以上均为预估，以业务实际的应用情况为准，建议提前进行压测，并...
HTAP中的行列混存查询优化
本文介绍了查询优化的作用及基本原理，以及列存索引优化器Join Reorder的实现原理。查询优化的作用及基本原理 在数据库处理查询语句的过程中，优化器接收用户输入的查询语句并进行一系列的等价变换后，通过查询中的基数与代价估计，从等价...
OSS有带宽和QPS限制吗？
000，但在不同的读写方式下，实际能达到的值如下：读写方式 QPS 顺序读写 2,000 非顺序读写 10,000 如果您在上传大量文件时，在命名上使用了顺序前缀（如时间戳或字母顺序），可能会出现大量文件索引集中存储于存储空间中某个特定分区的...
顺序消息
顺序消息为 云消息队列 RocketMQ 版 中的高级特性消息，本文为您介绍顺序消息的应用场景、功能原理、使用限制、使用方法和使用建议。应用场景 在有序事件处理、撮合交易、数据实时增量同步等场景下，异构系统间需要维持强一致的状态同步，...
参数说明
对于并行顺序扫描，被扫描的表数据量总是等于表的尺寸，但是在使用索引时，被扫描的表数据量通常会更小。默认值是8MB。min_parallel_index_scan_size 为必须扫描的索引数据量设置一个最小值，扫描的索引数据量超过这一个值时才会考虑使用...
设置透明数据加密
在安全合规或静态数据加密等场景下，推荐使用透明数据加密TDE功能，对数据文件执行实时I/O加密和解密，通过在数据库层执行静态数据加密，阻止可能的攻击者绕过数据库直接从存储中读取敏感信息，有效提高数据库中敏感数据的安全性。...
普通消息
普通消息为 云消息队列 RocketMQ 版 中最基础的消息，区别于有特性的顺序消息、定时/延时消息和事务消息。本文为您介绍普通消息的应用场景、功能原理、使用方法和使用建议。应用场景 普通消息一般应用于微服务解耦、事件驱动、数据集成等...
直播转点播
准备工作 开通视频点播服务。具体操作，请参见 开始使用视频点播。开通视频直播服务。具体操作，请参见 开通与购买视频直播 添加直转点录制配置。具体操作，请参见 录制存储至VOD。名词解释 名称 说明 直播转点播 结合视频点播的转码、云...
直播转点播最佳实践
直播转点播是将直播流同步录制为点播视频，并支持媒资管理、媒体处理（转码及内容审核/智能首图等AI处理）、内容制作（云剪辑）、CDN分发加速等一系列操作，可配置工作流自动处理，也可通过API/SDK灵活触发。本文为您介绍直播转点播3种典型...
列存索引技术架构介绍
本文介绍了列存索引的技术背景、简介以及技术架构等内容。技术背景 MySQL生态HTAP数据库解决方案 MySQL是一款主要面向OLTP型场景设计的开源数据库，开源社区的研发方向侧重于加强其事务处理能力。如提升单核性能、多核扩展性和增强集群能力...
如何将一棵LSM-Tree塞进NVM
鉴于内存表设计为顺序追加的写入方式，为了避免该问题，半持久化内存表通过将小的写打包成大块的写（WriteBatch），并且顺序地将该WriteBatch写入到PM中，之后分别将其中的记录写入到易失性索引中。如上图所示，batch表示一个大块的...
快速玩转Tablestore入门与实战
表格存储 单表支持PB级存储、千万QPS，以及多种索引方式（全局二级索引、全文索引、倒排索引以及时空索引），满足不同场景在线的不同的查询需求，可以帮助您轻松实现高效的元数据管理。基于MySQL+Tablestore分层存储架构的大规模订单系统...
使用限制
000，但在不同的读写方式下，实际能达到的值如下：读写方式 QPS 顺序读写 2,000 非顺序读写 10,000 如果您在上传大量文件时，在命名上使用了顺序前缀（如时间戳或字母顺序），可能会出现大量文件索引集中存储于存储空间中某个特定分区的...
产品简介
功能优势 优势1：行业领先的 Chunk分析及文件解析能力 基于阿里巴巴达摩院自研IDP服务，对于不同格式数据源，进行切片，生成chunk数据，并加入一定量文本理解。优势2：行业领先的搜索增强算法 全自研多语言Query分析能力，多模型结构的预...
阿里云Elasticsearch实例FAQ
新建索引时会偶现索引UUID冲突报错（index uuid conflicted），索引文档写不进去，怎么办？如何修改index.max_result_window（分页查询时查询的最大文档数量）？ES更新数据时报错：Rejecting mapping update to[]as the final mapping ...
RDS MySQL 5.6开放参数一览表
innodb_change_buffering 5.6 1 all[none|inserts|deletes|changes|purges|all]无限制 InnoDB是否执行更改缓冲，这是一种优化，它延迟对辅助索引的写操作，以便可以顺序执行I/O操作。innodb_change_buffer_max_size 5.6 1 25[0-50]无限制 ...
INSERT
当底层索引被以重叠方式替换成另一个或多或少等效的索引时，推断将能继续正确地工作，例如在删除要被替换的索引之前使用 CREATE UNIQUE INDEX.CONCURRENTLY。输出 成功完成时，INSERT 命令会返回以下形式的命令标签：INSERT oid count ...
在云桌面内挂载CPFS文件系统
您可以在阿里云控制台创建CPFS文件系统，通过NFS协议服务把CPFS文件系统挂载至对应工作区下的无影云桌面，挂载成功后便可以在云桌面上把CPFS文件系统当作一个普通的目录来访问和使用。本文介绍如何将CPFS文件系统挂载至云桌面以及如何验证...
使用限制
一个普通的PolarDB表（非分区表）占用3个文件（数据文件、visibilitymap文件、fsm文件，使用索引的话，每个索引一个文件）。文件数量达到上限后，继续创建表会提示类似以下错误：could not create file 此时需要删除部分表或者升级集群规格...
使用限制
一个普通的PolarDB表（非分区表）占用3个文件（数据文件、visibilitymap文件、fsm文件，使用索引的话，每个索引一个文件）。文件数量达到上限后，继续创建表会提示类似以下错误：could not create file 此时需要删除部分表或者升级集群规格...
- 产品推荐
- 这些文档可能帮助您