使用Fuse-DFS挂载文件存储 HDFS 版

本文主要介绍如何使用Fuse-DFS工具实现 文件存储 HDFS 版 在本地文件系统的映射。前提条件 已 创建文件系统 和 添加挂载点。已为Hadoop集群所有节点安装JDK,且JDK版本不低于1.8。建议您使用的Hadoop版本不低于2.7.2,本文使用的Hadoop版本...

迁移数据至阿里云NAS

配置数据传输中转节点后,您还要使用迁移工具迁移数据至阿里云文件存储NAS。本文介绍如何通过迁移工具将非阿里云的数据迁移至文件存储NAS。前提条件 已配置数据传输中转节点ECS实例。具体操作,请参见 配置数据传输中转节点。使用SFTP客户...

转换文件存储类型

OSS提供标准、低频访问、归档、冷归档和深度冷归档多种存储类型,全面覆盖从热到冷的各种数据存储场景。本文主要介绍如何转换文件(Object)的存储类型。注意事项 当您使用webpack或browserify等打包工具时,请通过 npm install ali-oss 的...

StorageRankDTO

名称 类型 描述 示例值 object 存储排名 dbStorageRank array 库存储排名列表 DbStorageRank 库存储排名 tableStorageRank array存储排名列表 TableStorageRank 表存储排名 smallFileCntRank array文件数量排名列表 SmallFileCntRank...

快速入门(CPFS-POSIX)

POSIX客户端可同时连接多个存储节点,对上层应用提供标准POSIX和MPI-IO接口,可以提供最优的性能和应用接口兼容性。本文以 Alibaba Cloud Linux 操作系统为例,介绍如何快速部署CPFS,并通过CPFS-POSIX客户端访问CPFS文件系统。说明 CPFS-...

如何扩容云存储文件网关缓存

关于扩容云存储文件网关缓存的具体操作,请参见 云存储文件网关缓存扩容。

生命周期管理FAQ

创建生命周期管理策略时,可以配置低频存储管理规则,将距最近一次访问14天、30天、60天、90天以上的文件转换为低频存储文件;也可以配置归档存储管理规则,将距最近一次访问14天、30天、60天、90天、180天以上的文件转换为归档存储文件。...

API概览

本产品(文件存储(NAS...GetDirectoryOrFileProperties 查询低频介质的文件信息 查询指定目录下是否包含低频存储文件,或者查询指定文件是否为低频存储文件。DescribeLifecyclePolicies 查询生命周期管理策略列表 获取生命周期管理策略列表。...

入门概述

通过NFSv3协议访问CPFS文件系统 协议服务 在服务器中卸载挂载的文件系统 卸载文件系统 删除文件系统 删除文件系统 与对象存储OSS之间实现数据流动 数据流动 监测文件的使用量 数据监控 备份文件系统中的数据 文件存储CPFS(NFS协议)备份 ...

什么是文件存储 HDFS 版

文件存储 HDFS 版(Apsara File Storage for HDFS)是面向阿里云ECS实例及容器服务等计算资源的文件存储服务。产品概述 文件存储 HDFS 版 允许您就像在Hadoop分布式文件系统(Hadoop Distributed File System)中一样管理和访问数据。您...

前言

sample.c 分片上传 oss_resumable_sample.c 断点续传上传、断点续传下载 get_object_meta_sample.c 管理文件元数据 oss_list_object_sample.c 列举文件 oss_delete_object_sample.c 删除文件 oss_callback_sample.c 上传回调 oss_progress_...

数据处理费用

按量付费:归档存储数据取回费用=解冻文件大小(GB)×归档存储文件数据取回单价 资源包:不支持 归档直读数据取回容量(RetrievalDataArchiveDirect)直读归档存储类型文件产生的费用。按直读文件的大小计费。重要 对于已解冻的归档存储...

常见问题

文件网关FAQ 数据缓存:如何扩容云存储文件网关缓存?混合云存储网关数据下载功能是什么?云存储网关复制模式新玩法的部分复制是什么?云存储网关文件网关的缓存工作原理是什么?反向同步和极速同步:如何通过极速同步即时处理OSS上传对象...

计费项

当您使用CPFS存储文件时,CPFS会根据您存储的类型、大小、时长收取费用。如果您的业务涉及数据流动和协议服务时,CPFS会收取带宽费用。说明 本文仅说明相关计费项及付费方式。有关CPFS计费项的定价详情,请参见 CPFS产品定价。CPFS计费项 ...

功能特性

数据库文件存储 功能集 功能 功能描述 参考文档 DBFS特性 原子写 支持DIRECT IO的原子写,需按4K,8K,16K对齐-共享读写 一份数据可共享式多点挂载并进行读写,读写可线性扩展-存储加密 通过对数据库文件存储实施加密,可以确保数据库文件...

存储费用

当您在OSS内存储文件时,OSS会根据您存储的文件类型、大小和时长收取一定的存储费用。说明 本文仅说明相关计费项及付费方式。有关计费项的定价详情,请参见 OSS产品定价。计费项 计费项 计费规则 计费周期 付费方式 标准存储(本地冗余)...

操作指南FAQ

文件网关FAQ 数据缓存:如何扩容云存储文件网关缓存?混合云存储网关数据下载功能是什么?云存储网关复制模式新玩法的部分复制是什么?云存储网关文件网关的缓存工作原理是什么?反向同步和极速同步:如何通过极速同步即时处理OSS上传对象...

SORT_ARRAY

select sort_array(c1),sort_array(c2),sort_array(c3)from t_array;示例2:对ARRAY数组 array(10,20,40,30,30,null,50)进行降序排序。命令示例如下。返回[50,40,30,30,20,10,NULL]。select sort_array(array(10,20,40,30,30,null,50),...

新功能发布记录

本文列举了文件存储CPFS产品功能发布的时间、发布地域及相关文档。功能名称 功能概述 发布时间 发布地域 相关文档 文件系统性能升级 CPFS对部分地域的100 MB/s/TiB基线、200 MB/s/TiB基线文件系统吞吐和IOPS进行了升级。升级后,吞吐能力...

生命周期管理概述

更多信息,请参见 查看低频介质存储文件。同一个文件或目录支持同时配置低频存储规则和归档存储规则,若同时选择,低频存储管理规则天数必须小于归档管理规则天数。优势 配置简便,无须编写脚本或手动迁移数据 您只需设置生命周期管理策略...

OSS文件处于冻结状态无法正常访问

文件存在违法违规情况。问题原因 阿里云对象存储OSS中的文件处于冻结状态有以下几种情况:在对象存储OSS中,如果Bucket的存储类型是归档存储或者冷归档存储时,默认存放到该Bucket的文件都是冻结状态。上传文件时设置了文件存储类型为归档...

计费常见问题

本文列举 文件存储 HDFS 版 的计费常见问题。计费 开通文件存储 HDFS 版服务后,就开始计费吗?文件存储 HDFS 版服务如何停止计费?删除存储数据后,为什么控制台显示的存储容量不变,账单没有减少?使用文件系统上传下载数据时,是否计费...

概述

文件存储NAS 阿里云文件存储NAS(Network Attached Storage)是一款面向阿里云ECS实例、E-HPC和容器服务等计算节点的高可靠、高性能的分布式文件系统,可共享访问、弹性扩展。NAS基于POSIX文件接口,天然适配原生操作系统。文件存储CPFS ...

功能特性

文件存储 HDFS 版 具有无缝集成、共享访问、安全控制、线性扩展等多种特性。无缝集成 文件存储 HDFS 版 允许您就像在Hadoop分布式文件系统(HDFS)中一样管理和访问数据。文件存储 HDFS 版 SDK可在所有Apache Hadoop 2.x环境中使用,包括...

计费概述

文件存储NAS支持创建不同类型的NAS文件系统,不同类型的文件系统计费标准不同,本文介绍文件存储NAS的计费情况。付费方式 付费模式 说明 按量付费 默认付费方式。先使用,后付费,适用于业务用量经常有变化的场景。通用型NAS按照各计费项的...

基本概念

NAS专用术语 术语 定义 注意事项 文件系统 存储文件的地方,通过计算节点挂载访问。以传统的目录树形式管理文件的数据和元数据。支持数百个计算节点同时访问,进行数据共享和高并发读写。阿里云文件存储NAS适合通过应用程序使用,而不适合...

一般性问题

1.数据库文件存储DBFS是什么,适合什么场景?数据库文件存储DBFS是面向数据库场景优化的POSIX兼容的共享读写的文件存储系统。主要适用于:OLTP及OLAP数据库场景:例如,MySQL、PostgreSQL等。NoSQL数据库场景:例如,MongoDB、RocksDB等。2...

SDK示例

本文列出了使用Java代码通过Hadoop FileSystem API对 文件存储 HDFS 版 文件系统进行常用操作的示例,您可以参考这些示例代码开发您的应用。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作,请参见 文件存储...

关于NAS和CPFS计费项名称调整的公告

通用型存储容量(容量型/性能型)低频存储容量 低频介质存储容量 二级存储读流量 低频存储读流量 二级存储写流量 低频存储写流量 极速型NAS 存储容量 极速型配置容量 文件存储CPFS 存储容量 CPFS配置容量 调整影响 仅对按量计费的计费项...

迁移开源HDFS的数据到文件存储 HDFS 版

本文档介绍如何将开源HDFS的数据平滑地迁移到 文件存储 HDFS 版。背景信息 当前业界有很多公司是以Hadoop技术构建数据中心,而越来越多的公司和企业希望将业务顺畅地迁移到云上。文件存储 HDFS 版 可以帮助您实现将开源HDFS的数据迁移到云...

扩容文件系统

创建文件存储CPFS文件系统时的配置容量即为您能使用的最大容量,当数据写满后,将导致数据无法写入。为了防止因为数据无法写入影响业务使用,建议您在数据写满前扩容当前文件存储CPFS文件系统的配置容量。本文介绍如何扩容文件存储CPFS文件...

开通文件存储 HDFS 版服务

本文介绍如何开通 文件存储 HDFS 版 服务。前提条件 已注册阿里云账号并完成实名认证。详情请参见 注册阿里云账号 和 个人实名认证。操作步骤 登录 阿里云官网。打开 文件存储 HDFS 版申请公测页面。在申请公测页面,填写必要信息后单击 ...

删除文件系统

警告 删除文件系统后,存储文件系统中的数据将被删除且无法恢复,请在删除前确认数据已不再使用。登录 文件存储控制台。在左侧导航栏,选择 文件系统>文件系统列表。在顶部菜单栏,选择地域。找到目标文件系统,单击操作列的 图标>删除。...

应用场景

文件存储 HDFS 版 适用于对吞吐要求较高的大数据分析与机器学习的业务需求场景。大数据分析与机器学习 在大数据分析与机器学习场景中,应用对数据访问的吞吐性能和延迟有较高要求。而 文件存储 HDFS 版 能够提供高吞吐量和低延迟的访问能力...

入门概述

监测文件的使用量 数据监控 限制文件的目录或文件数 目录配额 备份文件系统中的数据 备份和恢复文件 回收站 快照 将文件系统中的冷数据转存储 低频介质 设置生命周期策略 对文件系统中的数据加密访问 服务器端加密 NFS文件系统传输加密 SMB...

计费常见问题

本文介绍文件存储NAS(通用型NAS/极速型NAS)计费常见问题。包括通用型NAS资源包如何使用或抵扣、NAS服务如何停止计费、购买资源包为什么还欠费等问题。开通NAS服务后,就开始计费吗?仅开通NAS服务,不会产生费用。当您在通用型NAS中写入...

管理文件概述

您可以通过一系列的接口管理存储空间(Bucket)下的文件(Object),包括以下操作:判断文件是否存在 管理文件访问权限 管理文件元数据 转换文件存储类型 列举文件 查询文件 删除文件 拷贝文件 解冻归档文件 管理软链接

用量查询

如果您希望查看文件存储CPFS的使用记录明细,可导出文件存储CPFS的用量明细表。操作步骤 登录 用户中心。在左侧导航栏,选择 账单管理>账单详情。在 用量明细 页签,按以下要求完成各配置项。参数 说明 产品 选择 文件存储NAS。计量规格 ...

修改文件系统

本文介绍如何在 文件存储HDFS版 控制台修改某个文件系统的存储容量、基本信息以及吞吐模式。前提条件 已创建文件系统。具体操作,请参见 创建文件系统。操作步骤 登录 文件存储HDFS版控制台。在顶部菜单栏,选择地域。在左侧导航栏,选择 ...

卸载并释放CDH6 HDFS服务使用的云盘

背景信息 当CDH已经成功运行在阿里云 文件存储 HDFS 版 上时,ECS挂载的云盘只用来存储运算中的临时Shuffle文件,可以选择卸载原来用于构建CDH HDFS服务的云盘,降低集群的拥有成本。重要 从数据安全性考虑,数据迁移后建议进行数据完整性...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
文件存储 CPFS 数据库文件存储 对象存储 混合云存储 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用