在文件存储 HDFS 版上使用Presto
本文主要介绍如何在 文件存储 HDFS 版 上搭建及使用Presto。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。...如果返回信息与创建表中的信息一致，则表示Presto可读取 文件存储 HDFS 版 上的数据并计算。
SDK示例
通过调用FileSystem实例的open方法获取读文件的输入流，然后使用该输入流读取 文件存储 HDFS 版 的指定文件的内容。读文件代码样例如下。读文件*@param filePath*@return*@throws IOException*/private StringBuffer readFile(final Path ...
在文件存储 HDFS 版上使用Apache Spark
步骤四：验证Apache Spark配置 使用Spark读取 文件存储 HDFS 版 上面的文件进行WordCount计算，并将计算结果写入 文件存储 HDFS 版。执行以下命令，在 文件存储 HDFS 版 上生成测试数据。hadoop jar${HADOOP_HOME}/share/hadoop/mapreduce/...
查看低频/归档存储文件
在下拉框中选择 低频存储文件 或 归档存储文件，可查看目标文件系统已转储至低频存储或归档存储中的 文件名、文件大小、存储类型 及该文件最近一次被访问的时间等信息。您还可以单击 生命周期策略 页签，查看该文件系统配置的生命周期策略...
常见问题排查
本文介绍使用 文件存储 HDFS 版 文件系统SDK时遇到的常见问题及排查方法。提示 java.lang.ClassNotFoundException 信息 执行 hadoop 命令或者任务失败，提示 java.lang.ClassNotFoundException:Class ...
监控与日志
监控与日志可有效保障您文件存储NAS资源的可用性、业务的正常运行和健康度。您可通过对应的监控能力，持续收集监控数据。阿里云提供了各种监控与日志审计相关的服务，例如云监控、配置审计等，帮助您实时监控云资源的使用情况和业务运行...
关于NAS和CPFS计费项名称调整的公告
计费项（调整前）计费项（调整后）通用型NAS 按量计费存储量 通用型存储容量（容量型/性能型）低频存储容量 低频介质存储容量 二级存储读流量 低频存储读流量 二级存储写流量 低频存储写流量 极速型NAS 存储容量 极速型配置容量 文件存储...
用量查询
如果您希望查看文件存储CPFS的使用记录明细，可导出文件存储CPFS的用量明细表。操作步骤 登录 用户中心。在左侧导航栏，选择 账单管理>账单详情。在 用量明细 页签，按以下要求完成各配置项。参数 说明 产品 选择 文件存储NAS。计量规格 ...
什么是文件存储NAS
它提供了简单的可扩展文件存储以供与ECS配合使用，多个ECS实例可以同时访问NAS文件系统，并且存储容量会随着您添加和删除文件而自动弹性增长和收缩，为在多个实例或服务器上运行产生的工作负载和应用程序提供通用数据源。NAS提供了通用型和...
OSS归档存储类型文件解冻后访问提示“The operation ...
问题描述 阿里云对象存储OSS的Bucket设置了生命周期，在将归档存储类型的文件解冻后，无法正常访问文件，提示以下错误：StatusCode=403,ErrorCode=InvalidObjectState,ErrorMessage="The operation is not valid for the object's state...
NAS存储卷概述（ASK）
它提供了简单的可扩展文件存储以供与ECS配合使用，多个ECS实例可以同时访问NAS文件系统，并且存储容量会随着您添加和删除文件而自动弹性增长和收缩，为在多个实例或服务器上运行产生的工作负载和应用程序提供通用数据源。存储规格 NAS提供...
NAS存储卷概述
它提供了简单的可扩展文件存储以供与ECS配合使用，多个ECS实例可以同时访问NAS文件系统，并且存储容量会随着您添加和删除文件而自动弹性增长和收缩，为在多个实例或服务器上运行产生的工作负载和应用程序提供通用数据源。存储规格 NAS提供...
什么是文件存储 HDFS 版
文件存储 HDFS 版（Apsara File Storage for HDFS）是面向阿里云ECS实例及容器服务等计算资源的文件存储服务。产品概述 文件存储 HDFS 版 允许您就像在Hadoop分布式文件系统（Hadoop Distributed File System）中一样管理和访问数据。您...
Web服务和内容管理
文件存储NAS可用于各种内容管理系统和Web服务应用程序，为网站及应用程序提供高效存储服务。本文列举了Web服务的最佳实践案例。使用Nginx代理服务器代理阿里云NAS 通过Windows IIS服务访问阿里云NAS 容器服务ACK+文件存储NAS快速搭建NGINX...
文件系统存储类型
存储类型 通用型NAS文件系统提供了为实现低成本存储而设计的不同存储类型，分别为标准存储、低频存储和归档存储。标准存储：提供高可靠、高可用、高性能的文件存储服务，适用于存储频繁访问的热数据。在创建文件系统后，文件系统数据首先...
管理文件概述
您可以通过一系列的接口管理存储空间（Bucket）下的文件（Object），包括以下操作：判断文件是否存在 管理文件访问权限 管理文件元数据 转换文件存储类型 列举文件 查询文件 删除文件 拷贝文件 解冻归档文件 管理软链接
管理文件概述
您可以通过一系列的接口管理存储空间（Bucket）下的文件（Object），包括以下操作：判断文件是否存在 管理文件访问权限 管理文件元数据 转换文件存储类型 列举文件 拷贝文件 禁止覆盖同名文件 解冻文件 单链接限速 对象标签 删除文件 解冻...
查询文件系统详情
您可以在文件系统概览页了解您的文件系统概况，例如各地域文件系统数量、文件系统资源使用量等信息。前提条件 已创建文件系统。具体操作，请参见 创建文件系统。查询文件系统资源使用量 您可以通过以下方式快速查询当前阿里云账号下文件...
ListUserGroupsMappings-查看用户和组的映射关系
查看文件存储 HDFS 版文件系统实例的用户和组的映射关系。接口说明 文件存储 HDFS 版的文件系统权限管理依赖文件的用户和组，用户和组映射关系需要通过 OpenAPI 进行管理。有关文件存储 HDFS 版文件系统目录和文件访问权限的信息，请参见 ...
常见问题
产品简介FAQ 什么是文件存储NAS？文件存储NAS支持哪些访问协议？如何选择NFS和SMB文件系统协议？每个账户可以创建多少个文件系统、文件系统有什么限制？更多产品简介常见问题 产品定价FAQ 开通NAS服务后，就开始计费吗？购买了存储包为什么...
查询文件系统详情
查询存储用量 在文件系统列表查看 在文件系统列表页面，拖动列表下方的滑动条，即可查看到目标文件系统的 存储总量、标准型存储量、低频介质存储量 和 回收站存储量（标准/低频）。存储总量：通用型NAS：表示标准型存储量和低频介质存储量...
文件管理
背景信息 设备也可通过MQTT协议将文件上传至您自己的OSS空间存储，方便您直接访问OSS空间文件并使用，但不支持在物联网平台控制台管理。若设备将文件上传至您自己的OSS空间存储，相关操作，请参见：MQTT文件上传至用户OSS空间：设备端编译...
使用NAS实现共享存储和持久化存储-Flexvolume
可在文件存储控制台，单击左侧导航栏的 文件系统列表，选择目标文件系统，单击 操作 列 管理，在管理页面单击左侧 挂载使用，在 挂载点 区域，挂载地址 即为NAS数据盘的挂载点。path NAS的挂载目录，支持挂载NAS的子目录，当子目录不存在时...
卸载并释放CDH6 HDFS服务使用的云盘
背景信息 当CDH已经成功运行在阿里云 文件存储 HDFS 版 上时，ECS挂载的云盘只用来存储运算中的临时Shuffle文件，可以选择卸载原来用于构建CDH HDFS服务的云盘，降低集群的拥有成本。重要 从数据安全性考虑，数据迁移后建议进行数据完整性...
安装文件系统SDK
本文档主要介绍 文件存储 HDFS 版 文件系统SDK的安装及使用方式。前提条件 已创建 文件存储 HDFS 版 文件系统并添加挂载点。具体操作，请参见 创建文件系统 和 添加挂载点。已为ECS实例安装JDK，且JDK版本不低于1.8。背景信息 本文以hadoop...
CreateUserGroupsMapping-创建用户和组的映射关系
创建文件存储 HDFS 版文件系统实例的用户和组的映射关系。接口说明 文件存储 HDFS 版的文件系统权限管理依赖文件的用户和组，用户和组映射关系需要通过 OpenAPI 进行管理。有关文件存储 HDFS 版文件系统目录和文件访问权限的信息，请参见 ...
迁移开源HDFS的数据到文件存储 HDFS 版
本文档介绍如何将开源HDFS的数据平滑地迁移到 文件存储 HDFS 版。背景信息 当前业界有很多公司是以Hadoop技术构建数据中心，而越来越多的公司和企业希望将业务顺畅地迁移到云上。文件存储 HDFS 版 可以帮助您实现将开源HDFS的数据迁移到云...
DeleteUserGroupsMapping-删除用户和组的映射关系
删除文件存储 HDFS 版文件系统实例的用户和组的映射关系。接口说明 文件存储 HDFS 版的文件系统权限管理依赖文件的用户和组，用户和组映射关系需要通过 OpenAPI 进行管理。有关文件存储 HDFS 文件系统目录和文件访问权限的信息，请参见文件...
数据处理费用
按量付费：归档直读数据取回费用=直读文件大小（GB）×归档存储文件数据直读单价 资源包：不支持 冷归档存储数据取回容量（RetrievalData）解冻冷归档存储类型文件产生的费用。按取回模式和文件大小计费。文件从解冻完成到再次归档前被访问...
归档直读
归档直读是指在对象存储OSS中，直接访问归档存储类型的文件，而无需先对其解冻。归档直读适用于实时读取极低频访问数据的场景。本文介绍如何开启并使用归档直读。前提条件 已创建有地域属性的Bucket。具体操作，请参见 创建存储空间。RAM...
目录和文件访问权限
权限名称 文件 目录 Read（R）可以读取文件的内容。查看目录需要Read和Execute权限。Write（W）可以在文件中写入或追加内容。在目录下创建节点需要Write和Execute权限。Execute（X）HDFS 中文件的Execute权限没有意义。遍历目录时需要目录...
OSS与文件系统的对比
对象存储 OSS 文件系统 Object 文件 Bucket 主目录 Region 无 Endpoint 无 AccessKey 无 无 多级目录 GetService 获取主目录列表 GetBucket 获取文件列表 PutObject 写文件 AppendObject 追加写文件 GetObject 读文件 DeleteObject 删除...
文件存储
只读节点的pg_control文件仅在启动时从共享存储中读取，启动后在内存中维护。目录/文件 说明 存储位置 base 每个库的子目录。共享存储 global 集群全局表的目录。pg_tblspc 表空间。pg_wal WAL日志目录。pg_dynshmem 用于动态共享内存的...
OSS和NAS之间的数据迁移
本文介绍如何通过ossutil工具或在线迁移服务实现阿里云对象存储OSS和文件存储NAS之间的数据双向迁移。费用说明 使用ossutil工具迁移 ossutil工具本身不收取费用，但是由于迁移数据时涉及到API请求，所以会产生一定的API请求费用。OSS数据...
查看CPFS容量监控
通过容量监控功能，您可以实时查看CPFS文件系统的存储空间使用状况和文件数信息。本文介绍如何查看CPFS文件系统的容量监控数据。前提条件 已开通云监控服务。您可以登录 云监控产品详情页，根据页面提示开通服务。已创建文件系统。具体操作...
NFS协议
ECS-1再次读文件X的0~4K：第三次读，如果时间距离第一次大于T，则去访问服务端，获取新的FileAttr，然后发现mtime变了，因此丢弃cache中的数据，去服务端读。目录子项Cache示例：ECS-1尝试查找/a：第一次查找，发现a不存在，于是在目录/下...
计费常见问题
本文列举 文件存储 HDFS 版 的计费常见问题。计费 开通文件存储 HDFS 版服务后，就开始计费吗？文件存储 HDFS 版服务如何停止计费？删除存储数据后，为什么控制台显示的存储容量不变，账单没有减少？使用文件系统上传下载数据时，是否计费...
文件存储 HDFS 版和对象存储OSS双向数据迁移
本文档介绍 文件存储 HDFS 版 和对象存储OSS之间的数据迁移操作过程。您可以将 文件存储 HDFS 版 数据迁移到对象存储OSS，也可以将对象存储OSS的数据迁移到 文件存储 HDFS 版。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和...
元数据性能测试
如果为true,则读取文件并报告平均读取时间.默认为false.非必选项>create_write性能测试 使用20个Map，10个Reduce的MapReduce作业，创建1000个文件。hadoop jar./share/hadoop/mapreduce/hadoop-mapreduce-client-jobclient-2.7.6-tests.jar...
计费项
当您使用CPFS存储文件时，CPFS会根据您存储的类型、大小、时长收取费用。如果您的业务涉及数据流动和协议服务时，CPFS会收取带宽费用。说明 本文仅说明相关计费项及付费方式。有关CPFS计费项的定价详情，请参见 CPFS产品定价。CPFS计费项 ...
- 产品推荐
- 这些文档可能帮助您