生命周期管理FAQ

那么目录中的14天未访问的文件会被转储至低频存储中,而父目录或更上层目录策略在扫描当前目录时,会跳过已转储至低频存储的文件。生命周期管理策略是对目标路径所有数据生效吗?是的。目标目录的所有文件数据只要满足生命周期管理策略,即...

新功能发布记录

2024年01-31 华东1(杭州)西南1(成都)华东2(上海)华南1(深圳)华北3(张家口)华北2(北京)产品规格 CPFS智算版(邀测)CPFS智算版是阿里云文件存储CPFS推出的一款超高性能的文件存储服务,支持端到端RDMA网络,应用于AIGC、自动...

高级管理FAQ

那么目录中的14天未访问的文件会被转储至低频存储中,而父目录或更上层目录策略在扫描当前目录时,会跳过已转储至低频存储的文件。生命周期管理策略是对目标路径所有数据生效吗?是的。目标目录的所有文件数据只要满足生命周期管理策略,即...

挂载文件存储 HDFS 版文件系统

确认不再使用 文件存储 HDFS 版 文件系统后,您需要参考 挂载文件系统 中的内容,删除所有已部署 文件存储 HDFS 版 Java SDK和所有core-site.xml文件中 文件存储 HDFS 版 相关配置,完成卸载文件系统。如果您想释放 文件存储 HDFS 版 ...

创建数据取回任务

如果您需要频繁访问低频介质中存储的文件,建议您创建数据取回任务,将指定文件或目录中的数据取回至通用型NAS存储空间,避免频繁访问产生读写流量费用。本文介绍如何创建数据取回任务。计费说明 在执行数据取回任务时,NAS会根据目标文件...

什么是文件存储 HDFS 版

文件存储 HDFS 版(Apsara File Storage for HDFS)是面向阿里云ECS实例及容器服务等计算资源的文件存储服务。产品概述 文件存储 HDFS 版 允许您就像在Hadoop分布式文件系统(Hadoop Distributed File System)中一样管理和访问数据。您...

概述

阿里云提供针对各种存储资源...云存储网关 云存储网关(Cloud Storage Gateway)是一款可以部署在用户IDC和阿里云上的网关产品,以阿里云对象存储OSS为后端存储,为云上和云下应用提供业界标准的文件服务(NFS和SMB)和块存储服务(iSCSI)。

快速入门

文件存储 HDFS 版 是面向阿里云ECS实例及容器服务等计算资源的文件存储服务。文件存储 HDFS 版 兼容了标准的HadoopFS协议接口,使您无需对现有大数据分析应用做任何修改,即可使用具备无限容量及性能扩展、单一命名空间、高可靠和高可用的...

常见问题

如果您长时间(超过14天)未使用NAS中存储的文件,但是仍然希望保留文件,建议您通过生命周期策略将文件从标准存储类型转换为低频存储或归档存储类型,可以节省约50%到80%的费用。通过生命周期转换存储类型的具体步骤,请参见 设置生命周期...

入门概述

文件存储NAS概述 阿里云文件存储NAS(Apsara File Storage NAS)是面向阿里云ECS实例、E-HPC、容器服务等计算节点的文件存储服务。它是一种可共享访问、弹性扩展、高可靠以及高性能的分布式文件系统。NAS兼容了POSIX文件接口,可支持数千台...

基本概念

存储包与支持的文件系统的存储类型相关。例如,删除绑定存储包的容量型文件系统后,解绑的存储包无法绑定到性能型文件系统上。删除绑定存储包的性能型文件系统后,解绑的存储包无法绑定到容量型文件系统上。挂载 挂载是将计算节点与NAS文件...

SDK示例

通过调用FileSystem实例的open方法获取读文件的输入流,然后使用该输入流读取 文件存储 HDFS 版 的指定文件的内容。读文件代码样例如下。读文件*@param filePath*@return*@throws IOException*/private StringBuffer readFile(final Path ...

什么是文件存储NAS

阿里云文件存储NAS(Apsara File Storage NAS)是面向阿里云ECS实例、E-HPC、容器服务等计算节点的文件存储服务。它是一种可共享访问、弹性扩展、高可靠以及高性能的分布式文件系统。产品概述 NAS基于POSIX文件接口,天然适配原生操作系统...

计费常见问题

账单为上一小时的账单,控制台上显示的文件系统使用量是上一小时存储空间的最大值,控制台显示和实际存在延迟,请您耐心等待更新。使用文件系统上传下载数据时,是否计费?本地数据迁移至 文件存储 HDFS 版 本地数据迁移至 文件存储 HDFS ...

存储费用

当您在OSS内存储文件时,OSS会根据您存储的文件类型、大小和时长收取一定的存储费用。说明 本文仅说明相关计费项及付费方式。有关计费项的定价详情,请参见 OSS产品定价。计费项 计费项 计费规则 计费周期 付费方式 标准存储(本地冗余)...

一般性问题

数据库文件存储DBFS是面向数据库场景优化的POSIX兼容的共享读写的文件存储系统。主要适用于:OLTP及OLAP数据库场景:例如,MySQL、PostgreSQL等。NoSQL数据库场景:例如,MongoDB、RocksDB等。2.挂载点是什么概念、有什么作用?挂载点是...

CDH6数据迁移

本文介绍如何将CDH中本地HDFS的数据迁移到 文件存储 HDFS 版,实现存储计算分离。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作,请参见 文件存储HDFS版快速入门。已在阿里云上创建ECS实例并安装CDH6集群。...

文件网关支持的OSS Bucket类型说明

如果文件写入后长时间不会修改,可以考虑使用标准类型或者低频类型的存储桶,然后以生命周期的方式修改文件的存储类型到归档类型或者冷归档类型,减少不必要的解冻动作,这种方案从成本以及效率的角度来看都更优于其他方案。

0016-00000330

如果源文件的存储类型为归档类型,您还可以:先为源文件所在的存储空间开启归档直读。开启归档直读后,存储空间下的所有归档存储类型文件无需解冻,就支持CopyObject请求。具体操作,请参见 归档直读。相关文档 CopyObject RestoreObject ...

推荐的挂载方式

阿里云容器服务ACK的CNFS将阿里云的文件存储NAS抽象为一个K8s对象(CRD)进行独立管理,包括创建、删除、描述、挂载,监控及扩容等运维操作。并在CSI插件中利用NAS的加速客户端功能,实现NAS访问速度的大幅提升。CNFS是免费功能,开启加速...

文件管理

一个实例下,可存储的文件总大小不能超过1 GB。一个设备下,可存储的文件数量不能超过1,000个。设备端通过MQTT协议上传的单个文件大小不能超过16 MB。若单个文件大小大于16 MB,您可使用对象存储服务(OSS),将文件上传到您自己的OSS空间...

上传到OSS的文件存储类型为归档存储无法下载文件

问题原因 OSS文件上传时会继承Bucket的存储类型,因此上传到OSS的文件存储类型为归档存储的原因如下:Bucket的存储类型为标准存储,但是需要下载的文件为归档存储,则说明上传文件时的代码中设置的存储类型为归档存储。Bucket的存储类型为...

常见问题排查

本文介绍使用 文件存储 HDFS 版 文件系统SDK时遇到的常见问题及排查方法。提示 java.lang.ClassNotFoundException 信息 执行 hadoop 命令或者任务失败,提示 java.lang.ClassNotFoundException:Class ...

E-MapReduce数据迁移

本文介绍如何将E-MapReduce HDFS上的数据迁移到 文件存储 HDFS 版 文件系统。背景信息 阿里云E-MapReduce是构建在阿里云云服务器ECS上的开源Hadoop、Spark、Hive、Flink生态大数据PaaS产品。提供用户在云上使用开源技术建设数据仓库、离线...

安装文件系统SDK

部署依赖 下载最新 文件存储 HDFS 版 的文件系统 Java SDK。将下载的SDK拷贝至Hadoop生态系统组件的CLASSPATH上。推荐将其部署到 hadoop-common-x.y.z.jar 所在的目录内,并复制到所有Hadoop节点。对于MapReduce组件,该目录为${HADOOP_...

文件存储 HDFS 版和对象存储OSS双向数据迁移

以 文件存储 HDFS 版 到对象存储OSS的数据迁移为例,数据迁移任务打开 文件存储 HDFS 版 的文件F,根据当前系统状态决定文件F的长度L,将L字节迁移到对象存储OSS。如果在数据迁移过程中,有并发的写者写入,文件F的长度将超过L,但是数据...

申请与创建

使用场景 使用数据库文件存储的应用场景。性能等级 容量越大,可供选择的性能级别越高(460 GB 以上可选 PL2,1260 GB 以上可选 PL3),性能级别越高相应的费用也越高。存储加密 开启存储加密能够最大限度保护您的数据安全,您的业务和应用...

阿里云存储服务

冷归档存储 提供高持久性、比归档存储的存储成本更低的对象存储服务。有最小计量单位(64 KB)和最低存储时间(180天)的要求。数据需解冻后访问,解冻时间根据数据大小和选择的解冻模式决定,解冻会产生数据取回费用。适用于需要超长时间...

转换Bucket的存储冗余类型

冷归档存储和深度冷归档存储的文件转换后依然为本地冗余存储。冷归档存储和深度冷归档存储的Bucket不支持转换存储冗余类型。RAM用户必须有以下权限:oss:CreateBucketDataRedundancyTransition、oss:GetBucketDataRedundancyTransition、...

NAS存储卷概述

功能介绍 阿里云文件存储NAS(Apsara File Storage)是面向阿里云ECS实例、E-HPC和容器服务等计算节点的文件存储服务。它是一种可共享访问、弹性扩展、高可靠以及高性能的分布式文件系统。NAS基于POSIX文件接口,天然适配原生操作系统,...

NAS存储卷概述(ASK)

功能介绍 阿里云文件存储NAS(Apsara File Storage)是面向阿里云ECS实例、E-HPC和容器服务等计算节点的文件存储服务。它是一种可共享访问、弹性扩展、高可靠以及高性能的分布式文件系统。NAS基于POSIX文件接口,天然适配原生操作系统,...

文件存储HDFS版

文件存储HDFS版(Apsara File Storage for HDFS)是面向阿里云ECS实例及容器服务等计算资源的文件存储服务。您可以像在Hadoop分布式文件系统(Hadoop Distributed File System)中管理和访问数据那样使用文件存储HDFS版。您无需对现有大...

文件存储 HDFS 版上使用Apache Spark

您可以 下载最新的文件存储 HDFS 版的Java SDK,将其部署在Hadoop生态系统组件的CLASSPATH上,具体操作,请参见 挂载文件存储 HDFS 版文件系统。cp aliyun-sdk-dfs-x.y.z.jar/usr/local/hadoop-2.7.2/share/hadoop/hdfs 执行如下命令将${...

极速型NAS

极速型NAS是基于阿里云最新一代网络架构和全闪存储打造的高性能共享文件存储产品,全托管的云存储服务与阿里云丰富的计算服务...建议:单个极速型NAS文件系统的文件数量超过2000万个后,建议单个目录下存储的文件或子目录数量不超过1万个。

文件存储 HDFS 版上使用Apache Flink

您可以 下载最新的文件存储HDFS版的Java SDK,将其部署在Hadoop生态系统组件的CLASSPATH上,具体操作,请参见 挂载文件存储 HDFS 版文件系统。cp aliyun-sdk-dfs-x.y.z.jar/usr/local/hadoop-2.7.2/share/hadoop/hdfs 执行如下命令将${...

功能特性

软链接 管理文件元信息 OSS存储的文件(Object)信息包含Key、Data和Object Meta。Object Meta是对文件的属性描述,包括HTTP标准属性(HTTP Header)和用户自定义元数据(User Meta)两种。您可以通过设置HTTP标准属性来自定义HTTP请求的...

常见问题

低频存储或标准存储的文件是否支持同步文件操作?低频存储或标准存储的文件支持同步文件操作。关于同步文件的更多信息,请参见 简介。如何设置不覆盖同名文件 在ossutil执行命令中增加-u 参数,则不会覆盖同名文件。使用-u参数上传文件时...

使用云企业网跨VPC访问文件存储 HDFS 版

telnet f-xxxxxx.cn-xxxx.dfs.aliyuncs.com 10290 验证ECS是否能通过 文件存储 HDFS 版 挂载点访问 文件存储 HDFS 版 上的文件。hadoop fs-ls dfs:/f-xxxxxx....

新功能发布记录

2024年02月 功能名称 功能概述 发布时间 发布地域 相关文档 通用高级型NAS 通用型NAS新增一个存储规格类型为高级型的文件系统。适用于容器数据持久化、AI训练数据存储、工业仿真、基因计算等时延敏感型且对时延响应要求较高的文件共享业务...

CPFS并行文件存储

产品架构 CPFS并行文件存储 是针对高性能和超大规模存储场景推出的文件存储产品,可结合云上、云下多级存储池,拥有全新的文件存储架构。该产品单集群最大可扩展至16384个节点,提供高性能、高可扩展性、低时延的分布式文件存储服务。可...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据库文件存储 文件存储HDFS版 文件存储 CPFS 对象存储 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用