并行存储系统-并行存储系统文档介绍内容-阿里云

如何优化高并发IM系统架构

存储系统 存储系统采用阿里云表格存储，表格存储具有以下优势：表格存储写操作不仅支持单行写，也支持多行批量写，可满足大并发写数据需求。表格存储支持按范围读，消息多时可翻页。表格存储支持数据生命周期管理，可对过期数据进行自动...

音视频转码

强大的转码能力高速稳定的并行转码系统，按需动态调整转码资源，自动扩容/缩容，应对高并发转码需求无缝扩展集群资源。专业的转码算法强大的计算资源，先进的视频处理算法，业界独有的画质重生技术，将现存普通或受损的影视内容重制为超...

挂载文件存储 HDFS 版文件系统

本文介绍挂载及卸载文件存储 HDFS 版文件系统的操作。前提条件已为ECS实例安装JDK，且JDK版本不低于1.8。已创建文件存储 HDFS 版文件系统并添加挂载点。具体操作，请参见创建文件系统和添加挂载点。已安装Hadoop客户端，建议您使用...

CDH6数据迁移

为了保证在更换文件存储系统的过程中文件数据不丢失，需要暂停数据处理服务（例如：YARN服务、Hive服务、Spark服务、HBase服务等），HDFS服务仍需保持运行。此处以停止Hive服务为例进行说明。在CDH Web主页，找到Hive服务，在右侧的操作...

并行查询使用限制和兼容性问题

本文为您介绍并行查询的使用限制以及与串行执行结果可能不兼容的地方，帮助您正确使用并行查询功能。并行查询的使用限制 PolarDB 会持续迭代并行查询的能力，目前以下情况在并行计划中会有一定的局限性：查询非Innodb表，查询无法并行。...

NAS存储卷概述

具体操作，请参见：创建CNFS管理NAS文件系统（推荐）通过CNFS方式使用NAS文件系统持久化应用数据（推荐-CNFS方式）具体操作，请参见：使用CNFS管理NAS共享存储卷（推荐）使用CNFS管理NAS隔离存储卷（推荐）NAS存储卷自动扩容（推荐）通过...

准备工作

开始使用表格存储搭建订单系统前，您需要完成以下准备工作。开通表格存储已开通表格存储服务。具体操作，请参见开通表格存储服务。创建表格存储实例实例是您使用和管理表格存储服务的实体，每个实例相当于一个数据库。表格存储对应用...

扩容文件系统

创建文件存储CPFS文件系统时的配置容量即为您能使用的最大容量，当数据写满后，将导致数据无法写入。为了防止因为数据无法写入影响业务使用，建议您在数据写满前扩容当前文件存储CPFS文件系统的配置容量。本文介绍如何扩容文件存储CPFS文件...

删除文件系统

警告删除文件系统后，存储在文件系统中的数据将被删除且无法恢复，请在删除前确认数据已不再使用。登录文件存储控制台。在左侧导航栏，选择文件系统>文件系统列表。在顶部菜单栏，选择地域。找到目标文件系统，单击操作列的图标>删除。...

DeleteUserGroupsMapping-删除用户和组的映射关系

删除文件存储 HDFS 版文件系统实例的用户和组的映射关系。接口说明文件存储 HDFS 版的文件系统权限管理依赖文件的用户和组，用户和组映射关系需要通过 OpenAPI 进行管理。有关文件存储 HDFS 文件系统目录和文件访问权限的信息，请参见文件...

弹性并行查询（ePQ）发布说明

此时，您可以选择开启弹性并行查询（ePQ），系统会根据查询代价自动选择多机并行，突破单节点CPU、内存的资源瓶颈，并借助多节点的IO吞吐能力进一步利用共享存储的高带宽，获得更好的执行效率。弹性计算场景弹性计算是 PolarDB MySQL版的...

表格存储系统权限策略参考

本文描述表格存储支持的所有系统权限策略及其对应的权限描述，供您授权 RAM 身份时参考。什么是系统权限策略权限策略是用语法结构描述的一组权限的集合，可以精确地描述被授权的资源集、操作集以及授权条件。阿里云访问控制（RAM）产品...

并行查询性能

本文档基于TPC-H测试 PolarDB MySQL版 8.0.1和8.0.2版本集群版的OLAP负载性能，您可以按照本文介绍自行测试对比，快速了解数据库系统的性能。并行查询简介 PolarDB MySQL版 8.0版本集群版推出并行查询（Parallel Query）框架。当您的...

对象存储系统权限策略参考

本文描述对象存储支持的所有系统权限策略及其对应的权限描述，供您授权 RAM 身份时参考。什么是系统权限策略权限策略是用语法结构描述的一组权限的集合，可以精确地描述被授权的资源集、操作集以及授权条件。阿里云访问控制（RAM）产品...

列存索引技术架构介绍

除物理算子需要支持并行外，IMCI的优化器也支持生成并行执行计划，优化器在确定一个表的访问方式时，会根据需要访问的数据量来决定是否启用并行执行，如果确定启用并行执行，则会参考一系列状态数据（包括当前系统可用的CPU/Memory/IO资源...

SELECT

当您不知道并行度设置成多少合适时，建议不指定并行度，系统将自动采用最优的并行度。常见问题 Q：什么情况下，查询语句被认为是低效查询语句？A：如果SELECT查询的条件同时满足下列三个条件，则该查询被认为是低效查询。WHERE 语句中没有...

快速开始

通过Hint来控制并行查询使用Hint语法可以对单个语句进行控制，例如系统默认关闭并行查询情况下，但需要对某个高频的慢SQL查询进行加速，此时就可以使用Hint对特定SQL进行加速。详情内容请参见并行查询Hint语法。设置阈值控制优化器是否...

卸载并释放CDH6 HDFS服务使用的云盘

已配置CDH使用文件存储 HDFS 版文件系统。具体操作，请参见配置CDH6使用文件存储HDFS版。背景信息当CDH已经成功运行在阿里云文件存储 HDFS 版上时，ECS挂载的云盘只用来存储运算中的临时Shuffle文件，可以选择卸载原来用于构建CDH ...

系统限制

100个索引数量 400个单次请求获取的最大数据条数 1000条云数据库存储最大容量 100GB 云存储针对云存储的系统限制如下表：限制项限制说明上传QPS 300次/秒删除QPS 300次/秒查询QPS 300次/秒其他接口限制项限制说明 SDK初始化QPS ...

OSS与文件系统的对比

对比项 OSS 文件系统数据模型 OSS是一个分布式的对象存储服务，提供的是一个Key-Value对形式的对象存储服务。文件系统是一种典型的树状索引结构。数据获取根据Object的名称（Key）唯一的获取该Object的内容。虽然您可以使用类似 test1/...

PolarDB并行查询

Parallel Scan PolarDB 是共享存储的，所有数据对所有节点均可见，这和sharding的分布式系统有所不同，不同worker处理哪一部分数据无法预先确定，因此采用了逻辑分区的方案：在btree这个level，会将数据切分成很多小分片，不同worker负责...

PolarDB HTAP实时数据分析技术解密

该执行器框架充分利用列式存储的优势，例如，以一个4096行的Batch为单位访问存储层的数据，使用SIMD指令提升CPU单核处理数据的吞吐量，所有关键算子均支持并行执行。对比MySQL原有的行存执行器，性能有数量级的提升。支持行列混合执行的...

PolarDB MySQL版8.0.1版本发布日志

即开启弹性并行查询功能后，当系统的 loose_csv_max_oss_threads 参数值大于1时，直接进行并行查询。优化OSS外表文件格式错误的报错信息内容。支持在 ALTER TABLE PARTITION BY RANGE 语法中增加 without validation 的选项，将普通表快速...

ModifyFileSystem-修改文件系统属性

接口说明在修改文件系统前，请先了解文件存储 HDFS 版的计费方式和 HDFS 产品定价。调试您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试授权信息当前...

NAS存储卷概述

具体操作，请参见：创建CNFS管理NAS文件系统（推荐）通过CNFS方式使用NAS文件系统持久化应用数据（推荐-CNFS方式）具体操作，请参见：使用CNFS管理NAS共享存储卷（推荐）使用CNFS管理NAS隔离存储卷（推荐）NAS存储卷自动扩容（推荐）通过...

管理iSCSI卷

本文介绍如何在阿里云云存储网关控制台上管理iSCSI卷，包括创建iSCSI卷、修改iSCSI卷、删除iSCSI卷、查看iSCSI卷详情等操作。前提条件已创建块网关，详情请参见创建块网关。已创建缓存，详情请参见创建缓存。如果您要创建缓存模式的...

配置基础告警规则

当您需要监控文件存储CPFS文件系统资源的使用情况时，可以创建报警规则。如果资源的监控指标达到报警条件，云监控自动发送报警通知，帮助您及时得知异常监控数据，并快速处理。前提条件已创建文件存储CPFS文件系统。具体操作，请参见创建...

PolarDB PostgreSQL版架构介绍

分布式执行加速索引创建分布式并行执行加速多模：时空数据库传统数据库的问题随着用户业务数据量越来越大，业务越来越复杂，传统数据库系统面临巨大挑战，例如：存储空间无法超过单机上限。通过只读实例进行读扩展，每个只读实例独享一...

通过控制台使用分析存储

在表格存储控制台创建时序模型实例后，您可以在实例下创建分析存储并使用SQL查询时序数据。注意事项时序分析存储功能将从2023年12月20日正式开始收费。目前支持使用时序分析存储功能的地域有华东1（杭州）、华东2（上海）、华北2（北京...

PolarDB PostgreSQL版架构介绍

加速比 TPC-H性能：和传统MPP数仓对比分布式执行加速索引创建分布式并行执行加速多模：时空数据库传统数据库的问题随着用户业务数据量越来越大，业务越来越复杂，传统数据库系统面临巨大挑战，例如：存储空间无法超过单机上限。...

在本地控制台上使用块网关

是：选择是，则当云资源对应的OSS Bucket已经被用作卷的云存储时，系统会尝试使用其中的元数据（例如卷的容量等），进行卷恢复。否：选择否，则直接使用云资源对应的OSS Bucket创建新的卷。容量当恢复选择否时，需设置容量。容量需...

服务器端加密

开启该功能后，NAS会对存储在文件系统中的数据进行加密，访问数据时，NAS自动将加密数据解密后返回给用户。本文介绍服务器端加密的工作原理、支持的地域及相关操作。使用限制仅支持在创建文件系统时开启数据加密功能。已开启数据加密功能...

开发测试

本文列举了基于文件存储NAS实现高性能、低成本自动化CI/CD系统的最佳实践案例。基于K8s、NAS、GitLab、Jenkins的持续集成交付容器环境最佳实践 Serverless ACK弹性低成本CI/CD系统使用文件存储NAS构建Jenkins持续集成环境使用极速型NAS...

容器与云原生

容器挂载使用NAS动态存储卷创建有状态应用存储管理-CSI NAS卷使用说明存储管理-CSI 通过NFS使用NAS静态存储卷存储管理-CSI 通过NFS使用NAS动态存储卷容器应用阿里云ACK服务使用Windows容器挂载NAS SMB最佳实践容器服务ACK+文件存储...

NAS存储卷概述（ASK）

它提供了简单的可扩展文件存储以供与ECS配合使用，多个ECS实例可以同时访问NAS文件系统，并且存储容量会随着您添加和删除文件而自动弹性增长和收缩，为在多个实例或服务器上运行产生的工作负载和应用程序提供通用数据源。存储规格 NAS提供...

概述

PolarDB PostgreSQL版（兼容Oracle）提供了跨机并行查询（Parallel Execution）的功能，支持多个计算节点分布式地执行SQL查询，加速 PolarDB PostgreSQL版（兼容Oracle）的分析型查询性能，充分发挥存储层PolarFileSystem的高I/O吞吐能力，...

概述

PolarDB PostgreSQL版（兼容Oracle）提供了跨机并行查询（Parallel Execution）的功能，支持多个计算节点分布式地执行SQL查询，加速 PolarDB PostgreSQL版（兼容Oracle）的分析型查询性能，充分发挥存储层PolarFileSystem的高I/O吞吐能力，...

通过控制台使用时序模型

表格存储提供了控制台、命令行工具和Tablestore SDK三种访问方式。通过控制台使用时序模型（TimeSeries）时，您需要开通表格存储服务，然后使用控制台进行创建实例、创建时序表、读写时序表中数据以及使用SQL查询数据的操作。前提条件已...

管理iSCSI卷

是：选择是，则当云资源对应的OSS Bucket已经被用作卷的云存储时，系统会尝试使用其中的元数据（例如卷的容量等），进行卷恢复。否：选择否，则直接使用云资源对应的OSS Bucket创建新的卷。容量当恢复选择否时，需设置容量。容量需...

并行存储系统

新品推荐