文件存储 HDFS 版上使用Presto

本文主要介绍如何在 文件存储 HDFS 版 上搭建及使用Presto。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作,请参见 文件存储HDFS版快速入门。已搭建Hadoop集群并且所有集群节点已安装JDK,JDK版本不低于1.8...

性能优化最佳实践

您可以通过调整core-site.xml配置、TestDFSIO配置或避免使用小文件来优化集群性能。调整core-site.xml配置 在测试集群吞吐性能之前建议在core-site.xml文件...将存储文件存储HDFS版 上的小文件聚合成大文件会对整体的分析性能有较大帮助。

管理文件概述

您可以通过一系列的接口管理存储空间(Bucket)下的文件(Object)。包括以下操作:判断文件是否存在 管理文件元信息 列举文件 拷贝文件 重命名文件 禁止覆盖同名文件 删除文件 转换文件存储类型 单链接限速 解冻文件 对象标签 管理软链接

删除文件系统

您可以在 文件存储HDFS版 控制台删除某个已创建的文件系统。前提条件 已删除该文件系统下添加的挂载点。具体操作,请参见 删除挂载点。操作步骤 登录 文件存储HDFS版控制台。在顶部菜单栏,选择地域。在左侧导航栏,选择 文件系统。在 文件...

集群吞吐性能测试

hadoop jar./share/hadoop/mapreduce/hadoop-mapreduce-client-jobclient-2.7.6-tests.jar TestDFSIO 顺序写性能测试 预估值:1000 MB/s 将文件写入到 文件存储 HDFS 版。将500个大小为4 GB的文件按顺序写入到 文件存储 HDFS 版,读写数据...

卸载并释放E-MapReduce HDFS使用的云盘

背景信息 当E-MapReduce已经成功运行在阿里云 文件存储 HDFS 版 上时,ECS挂载的云盘只用来存储运算中的临时Shuffle文件,可以选择卸载原来用于构建E-MapReduce HDFS服务的云盘,降低集群的拥有成本。重要 从数据安全性考虑,数据迁移后...

服务器端加密

文件存储NAS支持服务器端加密功能。当您对文件存储有高安全性或者合规性要求时,建议您开启服务器端加密功能。开启该功能后,NAS会对存储文件系统中的数据进行加密,访问数据时,NAS自动将加密数据解密后返回给用户。本文介绍服务器端...

目录和文件访问权限

文件存储 HDFS 版 为目录和文件提供了一种访问权限,该访问权限类似于POSIX文件系统的权限模型。本文简要介绍访问权限的概念、使用方式及其相关注意事项。访问权限介绍 文件存储 HDFS 版 文件系统中的每一个文件或者目录会关联到三个权限...

使用云企业网跨VPC访问文件存储 HDFS 版

您也可以使用 文件存储 HDFS 版 的多挂载功能实现单文件系统实例同地域的多VPC访问。属性 VPC1 VPC2 VPC3 网络实例的网段规划 VPC网段:192.168.0.0/16 交换机网段:192.168.0.0/24 VPC网段:10.0.0.0/16 交换机网段:10.0.0.0/24 VPC网段...

用户和组映射

如果您是初次使用 文件存储 HDFS 版 文件系统,可使用该API创建组并关联用户。DeleteUserGroupsMapping:删除用户和组的映射关系。ListUserGroupsMappings:查看用户和组的映射关系。使用限制 用户名和组名命名规则:必须以字母或者下划线...

NAS存储卷概述(ASK)

它提供了简单的可扩展文件存储以供与ECS配合使用,多个ECS实例可以同时访问NAS文件系统,并且存储容量会随着您添加和删除文件而自动弹性增长和收缩,为在多个实例或服务器上运行产生的工作负载和应用程序提供通用数据源。存储规格 NAS提供...

数据安全

文件存储NAS提供服务器端加密和客户端加密,可有效防止数据在云端的潜在安全风险。数据加密 数据传输加密 文件存储NAS支持TLS传输链路加密,开启TLS功能后,NAS客户端和服务端之间的通信会进行TLS数据传输加密。开启TLS功能的介绍,请参见 ...

【公告】数据库文件存储按量付费价格下调

尊敬的阿里云用户,阿里云将于2023年01月30日起调整数据库文件存储(公测)按量付费价格。调整时间 2023年01月30日00:00:00。调整地域 华东1(杭州)、华东2(上海)、华北2(北京)、华南1(深圳)。调整内容 版本类型 调整前单价(GB/...

如何选择合适的文件系统?

阿里云 文件存储 NAS 和文件存储CPFS 提供各种类型的文件系统,您可以根据业务负载选择其中一种或几种文件系统,为业务负载提供必要的可靠性、安全性和持续性。适用的业务场景 通用性能型 NAS:Linux/Windows企业应用、容器...

查看快照容量

您可以按照以下步骤在数据库文件存储控制台查看某一个文件系统所有快照所占的容量。登录 数据库文件存储控制台。在顶部菜单栏左上角处,选择地域。在左侧导航栏,选择 快照,然后单击 快照链 页签。在 快照链 页面,搜索的下拉列表选择文件...

使用在线迁移服务迁移数据

使用在线迁移服务,您可以轻松实现文件存储NAS之间的数据迁移。本文介绍如何通过在线迁移服务实现阿里云文件存储NAS之间的数据迁移。使用在线迁移服务,您只需在控制台填写源NAS和目标NAS的地址信息,并创建迁移任务即可。迁移任务启动后,...

产品优势

本文档主要为您说明阿里云数据库文件存储DBFS的主要优势。数据库文件存储DBFS是阿里云推出的一款针对数据库场景的文件存储。它在性能、弹性、高可用、成本及数据安全等维度上做了诸多技术创新与优化。适合云上自建数据库使用,提供企业级...

文件存储 HDFS 版支持Python SDK吗?

文件存储 HDFS 版 提供两种SDK,分别为管控系统SDK和文件系统SDK。仅管控系统支持Python SDK,文件系统仅支持Java SDK。更多有关管控系统支持的SDK语言,请参见 OpenAPI。

CPFS存储卷概述

功能介绍 文件存储CPFS是阿里云推出的全托管、可扩展的高性能共享文件存储系统,支持POSIX、MPI-IO和NFS协议。针对GPU和CPU多机计算场景进行了深度优化,提供对数据百GB/s吞吐、亚毫秒级的访问和百万级IOPS的数据读写请求,CPFS提供了统一...

企业业务上云

本文列举了文件存储NAS助力企业业务上云的解决方案。企业搬站的关键:企业级存储如何助力核心业务系统上云?企业用户多账号合并之存储迁移集中

资源包购买指南

华东2(上海)地域当月标准存储(本地冗余)类型文件存储量为100 GB、标准存储(同城冗余)类型文件存储量为200 GB。计费说明如下:地域 资源包抵扣 按量付费 华东1(杭州)使用500 GB的 标准-本地冗余存储包 抵扣300 GB标准存储(本地冗余...

容器与云原生

使用NAS动态存储卷创建有状态应用 存储管理-CSI NAS卷使用说明 存储管理-CSI 通过NFS使用NAS静态存储存储管理-CSI 通过NFS使用NAS动态存储卷 容器应用 阿里云ACK服务使用Windows容器挂载NAS SMB最佳实践 容器服务ACK+文件存储NAS快速...

文件存储NAS

阿里云文件存储NAS(Apsara File Storage)是面向阿里云ECS实例、E-HPC和容器服务等计算节点的文件存储服务。它是一种可共享访问、弹性扩展、高可靠以及高性能的分布式文件系统,支持NFS和SMB协议。文件存储NAS 目前提供极速型、通用性能型...

NAS存储卷概述

它提供了简单的可扩展文件存储以供与ECS配合使用,多个ECS实例可以同时访问NAS文件系统,并且存储容量会随着您添加和删除文件而自动弹性增长和收缩,为在多个实例或服务器上运行产生的工作负载和应用程序提供通用数据源。存储规格 NAS提供...

NAS存储卷概述

前提条件 使用NAS数据卷之前,您需要在 文件存储管理控制台 上创建文件系统,并在文件系统中添加挂载点。创建的NAS文件系统挂载点需要和您的集群位于同一VPC。例如,您的挂载点为 055f84ad83-ixxxx.cn-hangzhou.nas.aliyuncs.com 格式。...

基因计算

文件存储NAS具备高吞吐量、读写一致性及低延迟的文件操作能力,为基因分析的大规模数据提供了高性能的存储载体。本文列举了基因计算的最佳实践案例。基因行业容器存储解决方案 EHPC实现药物筛选解决方案最佳实践 基因计算工作流实战

性能监控

您可以通过阿里云云监控来监控文件系统读请求频率、读取请求大小、每秒读取字节数、存储空间等。并通过设置报警规则,及时获取异常信息。本文介绍如何查看性能监控详情及创建报警规则。前提条件 已创建 文件存储 HDFS 版 文件系统。具体...

管理挂载点

本文介绍如何在 文件存储 HDFS 版 控制台上管理挂载点,包括添加挂载点、查看挂载点信息、删除挂载点、修改挂载点权限组、禁用和激活挂载点等。前提条件 已创建文件系统。具体操作,请参见 创建文件系统。挂载点说明 一个阿里云账号最多...

概述

本文简要说明非阿里云数据迁移至阿里云文件存储NAS的费用说明、操作流程及迁移工具选择。费用说明 非阿里云数据迁移至阿里云NAS时,会涉及如下费用:文件存储NAS存储费用,推荐购买资源包抵扣。关于NAS的计费详情,请参见 计费概述。如果您...

容灾备份

文件存储NAS服务中,保障数据安全性和业务连续性十分重要。本文列举了NAS文件备份的最佳实践及数据保护方案。阿里云NFS NAS数据保护实战 HBR云上统一备份 阿里云SMB NAS数据保护实战

高级管理FAQ

创建生命周期管理策略时,可以配置低频存储管理规则,将距最近一次访问14天、30天、60天、90天以上的文件转换为低频存储文件;也可以配置归档存储管理规则,将距最近一次访问14天、30天、60天、90天、180天以上的文件转换为归档存储文件。...

文件系统版本发布记录

本文以发布时间为顺序,介绍了文件存储CPFS文件系统版本的更新动态。2023年 版本号 发布时间 描述 发布地域 2.3.4 2023年05月 开启通用型协议服务最低容量限制更新为3600 GiB,即创建CPFS文件系统就可使用通用型协议服务。创建/扩容文件...

什么是数据库存储DBFS

数据库文件存储(DBFS),是一款针对数据库场景的云原生共享文件存储服务。它基于共享存储架构设计,通过文件协议提供数据库定制功能,具备企业级存储特性。主要服务于云上自建数据库,基于传统SAN的应用等,为用户提供高IO性能和高可用性...

计费案例

本文以案例形式介绍文件存储CPFS费用的计算方法。说明 以下计费示例仅供参考,实际价格以您CPFS购买页面为准。案例一:存储容量 王先生在华东1(杭州)创建了一个规格为200 MB/s/TiB基线的CPFS文件系统,假设在2021年10月份期间每小时的...

挂载与卸载

本文主要说明阿里云数据库文件存储服务DBFS的挂载与卸载功能。DBFS服务挂载步骤如下:进入“数据库文件存储控制台”->“数据库文件系统列表”。单击“挂载”按钮,弹出信息输入框。填写DBFS服务挂载信息,单击“确定”。挂载成功后,执行...

公测期间使用文件系统有哪些限制?

文件存储 HDFS 版 在公测期间会对单个文件系统的使用进行一定的限制,包括:单个用户可以创建的文件系统数量:1 单个文件系统最大容量:10 TB 单个文件系统目录+文件数最大数量:10万 单个文件系统最多包含挂载点数量:2 单个用户可以创建...

应用场景

本文介绍文件存储NAS数据存储的主要应用场景。企业应用上云 阿里云NAS提供标准的NFS和SMB接口,云下建立在NAS上的应用程序可以轻松迁移到阿里云。阿里云NAS基于云原生架构,具有99.95%高可用性,PB级容量弹性,同时支持目录配额、ACL、回收...

logging(日志转存)

访问对象存储OSS的过程中会产生大量的访问日志,您可以通过日志转存功能将这些日志按照固定命名规则,以小时为单位生成日志文件写入您指定的Bucket。您可以通过 logging 命令开启、查询、关闭Bucket的日志转存配置。注意事项 要开启日志...

对象存储OSS

OSS存储费用的抵扣顺序为:地域存储包>中国大陆通用存储包>SCU>按量计费 抵扣案例 用户A于2021年6月在华东1(杭州)购买了500 GB的 标准-本地冗余存储包 和20 GB的SCU,其6月份在华东1(杭州)地域标准存储(本地冗余)类型文件存储量为...

新功能发布记录

本文列举了文件存储NAS产品功能发布的时间、发布地域及相关文档。2024年02月 功能名称 功能概述 发布时间 发布地域 相关文档 通用高级型NAS 通用型NAS新增一个存储规格类型为高级型的文件系统。适用于容器数据持久化、AI训练数据存储、工业...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据库文件存储 文件存储 CPFS 云存储网关 对象存储 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用