存储包(不支持新购)

升级存储包 当文件系统已绑定的存储包容量不满足您的业务需求时,建议您购买 资源包,相比于存储包,资源包无需绑定文件系统,即可抵扣多个通用型NAS文件系统存储容量且支持叠加使用。如果您要继续使用更高规格的存储包,请执行以下步骤...

卸载并释放E-MapReduce HDFS使用的云盘

重要 从数据安全性考虑,数据迁移后建议进行数据完整性校验并让E-MapReduce系统在 文件存储 HDFS 版 上正常运行一段时间后再卸载和释放云盘。云盘释放以后原有数据将无法找回。集群中的每台机器至少需要保留一块数据盘,通常是/mnt/disk1上...

基于NAS部署可更换模型的FC Stable Diffusion进行AI...

使用NAS存储AIGC的模型,NAS将根据文件系统类型、存储容量及时长收取文件存储费用,建议搭配 NAS资源包 使用。更多计费信息,请参见 计费概述。使用在线迁移服务将SD公共模型库转存至NAS时,在线迁移服务将根据迁移类型和迁移场景收取源端...

现代IM系统中的消息系统—实现

以下内容按照聊天系统的消息存储、关系维护、即时感知、多端同步四个功能模块分块,分别介绍每一部分的功能、方案介绍、表设计以及实现代码等。功能模块 功能:消息存储 消息系统中,消息存储是最基本的功能。对于消息存储(提供消息的读、...

创建文件系统

购买成功后,返回 文件存储>文件系统列表,即可看到正在创建的CPFS实例,创建过程需要15分钟~20分钟。创建CPFS智算版文件系统 登录 NAS控制台。在 概览 页面的下方,单击 创建CPFS智算版。在智算CPFS(按量付费)页面,配置集群编号、配置...

资源包概述

资源包是针对按量付费中的文件系统存储用量推出的预付费套餐包。相对于按量付费,资源包提供了更高的折扣优惠。相对于存储包,资源包无需绑定文件系统即可直接使用,同时可以抵扣多个文件系统存储费用。NAS资源包支持叠加购买,叠加购买...

使用Fuse-DFS挂载文件存储 HDFS 版

本文主要介绍如何使用Fuse-DFS工具实现 文件存储 HDFS 版 在本地文件系统的映射。前提条件 已 创建文件系统 和 添加挂载点。已为Hadoop集群所有节点安装JDK,且JDK版本不低于1.8。建议您使用的Hadoop版本不低于2.7.2,本文使用的Hadoop版本...

什么是文件存储NAS

文件存储CPFS:可弹性扩展的POSIX/NFS接口全闪存文件存储系统,提供亚毫秒级的访问延迟和百万级IOPS,供高性能GPU计算使用。更多信息,请详见 CPFS产品详情页。在线迁移服务:您可以使用在线迁移服务将OSS数据迁移至NAS,更多信息,请参见 ...

SDK示例

本文列出了使用Java代码通过Hadoop FileSystem API对 文件存储 HDFS 版 文件系统进行常用操作的示例,您可以参考这些示例代码开发您的应用。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作,请参见 文件存储...

查询文件系统详情

您可以在文件系统概览页了解您的文件系统概况,例如各地域文件系统数量、文件系统资源使用量等信息。前提条件 已创建文件系统。具体操作,请参见 创建文件系统。查询文件系统资源使用量 您可以通过以下方式快速查询当前阿里云账号下文件...

API概览

本产品(文件存储 HDFS 版/2018-06-20)的OpenAPI采用 RPC 签名风格,签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK,开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用需求...

基本概念

术语 描述 文件系统实例 一个拥有全局命名空间,可用来存储数据的文件系统。您可以通过挂载点访问文件系统实例中的数据。挂载点 挂载点是文件系统实例在专有网络或经典网络内的一个访问目标地址。每个挂载点都对应一个域名,您需要修改 ...

文件存储NAS系统权限策略参考

本文描述文件存储NAS支持的所有系统权限策略及其对应的权限描述,供您授权 RAM 身份时参考。什么是系统权限策略 权限策略是用语法结构描述的一组权限的集合,可以精确地描述被授权的资源集、操作集以及授权条件。阿里云访问控制(RAM)产品...

方案选择

本文主要为您介绍针对订单系统的一些传统解决方案,以及面对亿量级订单,表格存储提供的更全面的解决方案。传统方案一:MySQL分库分表 MySQL自身拥有强大的数据查询、分析功能,基于MySQL创建订单系统,可以应对订单数据多维查询和统计场景...

什么是文件存储 HDFS 版

产品概述 文件存储 HDFS 版 允许您就像在Hadoop分布式文件系统(Hadoop Distributed File System)中一样管理和访问数据。您无需对现有大数据分析应用做任何修改,即可使用具备无限容量及性能扩展、单一命名空间、多共享、高可靠和高可用等...

常见问题排查

本文介绍使用 文件存储 HDFS 版 文件系统SDK时遇到的常见问题及排查方法。提示 java.lang.ClassNotFoundException 信息 执行 hadoop 命令或者任务失败,提示 java.lang.ClassNotFoundException:Class ...

ListUserGroupsMappings-查看用户和组的映射关系

查看文件存储 HDFS 版文件系统实例的用户和组的映射关系。接口说明 文件存储 HDFS 版的文件系统权限管理依赖文件的用户和组,用户和组映射关系需要通过 OpenAPI 进行管理。有关文件存储 HDFS 版文件系统目录和文件访问权限的信息,请参见 ...

计量计费项

其中对于多元索引存储部分,您可以通过购买高性能存储套餐按照5:1的系数(由于单价的差异)抵扣存储费用。如何升级实例的VCU配置?当由于业务量增大等情况需要消耗更多计算资源时,请根据实际升级实例VCU配置。具体步骤如下:登录 表格存储...

迁移开源HDFS的数据到文件存储 HDFS 版

文件存储 HDFS 版 可以帮助您实现将开源HDFS的数据迁移到云上,并允许您在云上就像在Hadoop分布式文件系统中管理和访问数据。准备工作 开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作,请参见 文件存储HDFS版快速入门。...

创建文件系统实例后,为什么无法访问文件存储 HDFS 版...

本文介绍了在创建文件系统实例后无法访问 文件存储 HDFS 版 的排查方法。您可以请根据以下几种情况进行排查:确认访问 文件存储 HDFS 版 服务的ECS实例对应的专有网络及虚拟交换机ID,与挂载点的专有网络及虚拟交换机ID是否一致。确认挂载...

冷热分层存储

针对以上问题,OSS-HDFS服务支持数据的冷热分层存储,对于经常需要访问的数据以标准类型进行存储,对于较少访问的数据以低频、归档以及冷归档类型进行存储,从而降低总存储成本。前提条件 已在OSS-HDFS服务中写入数据。华东1(杭州)、华东...

集成概览

OpenAPI集成 文件存储 NAS提供文件系统、权限组、挂载点、生命周期管理、快照等功能的OpenAPI,您可在业务系统中进行集成。关于如何使用阿里云OpenAPI,请参见 使用OpenAPI。版本说明 版本说明 说明 2017-06-26 推荐使用 服务接入点 文件...

E-MapReduce数据迁移

本文介绍如何将E-MapReduce HDFS上的数据迁移到 文件存储 HDFS 版 文件系统。背景信息 阿里云E-MapReduce是构建在阿里云云服务器ECS上的开源Hadoop、Spark、Hive、Flink生态大数据PaaS产品。提供用户在云上使用开源技术建设数据仓库、离线...

产品优势

消息模型:表格存储 自研模型,主要用于消息数据,适用于IM、Feed和物联网设备消息下推等消息系统中消息的存储和同步。多元化数据索引 除了支持主键查询,表格存储 还支持二级索引和多元索引的索引方式,提供强大的数据查询能力。二级索引...

CreateUserGroupsMapping-创建用户和组的映射关系

创建文件存储 HDFS 版文件系统实例的用户和组的映射关系。接口说明 文件存储 HDFS 版的文件系统权限管理依赖文件的用户和组,用户和组映射关系需要通过 OpenAPI 进行管理。有关文件存储 HDFS 版文件系统目录和文件访问权限的信息,请参见 ...

集成概览

OpenAPI集成 文件存储 CPFS提供文件系统、权限组、挂载点、数据流动、协议服务、Fileset等功能的OpenAPI,您可在业务系统中进行集成。关于如何使用阿里云OpenAPI,请参见 使用OpenAPI。版本说明 版本说明 说明 2017-06-26 推荐使用 说明 因...

安装文件系统SDK

本文档主要介绍 文件存储 HDFS 版 文件系统SDK的安装及使用方式。前提条件 已创建 文件存储 HDFS 版 文件系统并添加挂载点。具体操作,请参见 创建文件系统 和 添加挂载点。已为ECS实例安装JDK,且JDK版本不低于1.8。背景信息 本文以hadoop...

产品规格

本文列举了在相同文件系统容量下使用不同客户端访问文件系统时,100 MB/s/TiB基线、200 MB/s/TiB基线、400 MB/s/TiB基线的文件系统性能指标、适用的高级功能、数据流动性能等,您可以根据业务需求选择合适的CPFS存储规格。文件系统实例性能...

现代IM系统中的消息系统—架构

本章节主要介绍现代IM系统中的消息系统架构以及基于表格存储(Tablestore)自研的Timeline模型构建的消息系统。基于Timeline构建的现代消息系统能够同时支持消息系统的多种特性,包括多端同步、消息漫游和在线检索,在性能和规模上能够实现...

性能监控

您可以通过阿里云云监控来监控文件系统读请求频率、读取请求大小、每秒读取字节数、存储空间等。并通过设置报警规则,及时获取异常信息。本文介绍如何查看性能监控详情及创建报警规则。前提条件 已创建 文件存储 HDFS 版 文件系统。具体...

用户和组映射

如果您是初次使用 文件存储 HDFS 版 文件系统,可使用该API创建组并关联用户。DeleteUserGroupsMapping:删除用户和组的映射关系。ListUserGroupsMappings:查看用户和组的映射关系。使用限制 用户名和组名命名规则:必须以字母或者下划线...

文件存储 HDFS 版和对象存储OSS双向数据迁移

本文档介绍 文件存储 HDFS 版 和对象存储OSS之间的数据迁移操作过程。您可以将 文件存储 HDFS 版 数据迁移到对象存储OSS,也可以将对象存储OSS的数据迁移到 文件存储 HDFS 版。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和...

NAS存储卷FAQ

使用NAS存储卷时,提示chown:Operation not permitted 使用NAS动态存储卷时,Controller的任务队列已满且无法创建新的PV NAS存储卷挂载时间延长 使用NAS存储卷时,无法创建或修改目录 当工作负载挂载NAS存储卷时,提示unknown filesystem ...

使用RAM授权访问文件存储 HDFS 版

示例一:授予RAM用户对 文件存储 HDFS 版 管控系统只读权限 {"Version":"1","Statement":[{"Action":["dfs:Get*","dfs:List*"],"Resource":"*","Effect":"Allow"}]} 示例二:授予RAM用户对文件系统的权限 说明为 文件存储 HDFS 版 文件系统...

通过Amazon S3协议挂载OSS

本文介绍如何通过s3fs、goofys以及Rclone在不同操作系统中将OSS Bucket挂载到本地文件系统,让您能够像操作本地文件一样操作OSS的对象(Object),实现数据的共享。前提条件 已创建RAM用户并获取访问密钥(AccessKey)。具体操作,请参见 ...

在文件存储 HDFS 版上使用Apache HBase

前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作,请参见 文件存储HDFS版快速入门。已为Hadoop集群所有节点安装JDK,且JDK版本不低于1.8。已部署Apache HBase分布式集群,且版本必须与Hadoop版本兼容。具体...

应用场景

需要购买和部署第三方商业集群文件系统后才能使用。运营成本 不需要担心过保,存储介质损坏,换盘等问题。价格昂贵,后期运营成本高。存储容量 支持在线扩容,最大可以支持256T。扩容周期长,流程复杂,一般不支持在线扩容。数据安全 支持...

目录和文件访问权限

文件存储 HDFS 版 为目录和文件提供了一种访问权限,该访问权限类似于POSIX文件系统的权限模型。本文简要介绍访问权限的概念、使用方式及其相关注意事项。访问权限介绍 文件存储 HDFS 版 文件系统中的每一个文件或者目录会关联到三个权限...

在文件存储 HDFS 版上使用Apache Spark

前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作,请参见 文件存储HDFS版快速入门。已为Hadoop集群所有节点安装JDK,且JDK版本不低于1.8。已 下载Apache Hadoop压缩包。建议您选用的Hadoop版本不低于2.7.2,...

CreateDataFlow-创建数据流动

创建一个CPFS文件系统与源端存储的数据流动。接口说明 基础操作 文件存储 CPFS 2.2.0 及以上版本、智算 CPFS 2.4.0 及以上版本支持数据流动。文件存储 CPFS、CPFS 智算版状态为运行中,才能创建数据流动。一个文件存储 CPFS 或者 CPFS 智算...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
对象存储 云存储网关 文件存储 CPFS 混合云存储 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用