您可以使用 云备份 备份文件存储CPFS(NFS协议)的数据,并在数据丢失或损坏时及时恢复。本文介绍使用本地NAS方式备份CPFS的操作方法。前提条件 已创建文件存储CPFS,并已获取挂载地址(例如 file-system-id.region.cpfs.aliyuncs....
本文档介绍 文件存储 HDFS 版 和对象存储OSS之间的数据迁移操作过程。您可以将 文件存储 HDFS 版 数据迁移到对象存储OSS,也可以将对象存储OSS的数据迁移到 文件存储 HDFS 版。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和...
数据迁移完成后,您还需要配置CDH上的HDFS服务、YARN服务、Hive服务、Spark服务、HBase服务,才能使用 文件存储 HDFS 版。配置Cloudera Management服务 执行以下命令,将最新的 文件存储 HDFS 版 Java SDK复制到Cloudera Management服务的...
本文主要介绍如何在 文件存储 HDFS 版 上搭建及使用Presto。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作,请参见 文件存储HDFS版快速入门。已搭建Hadoop集群并且所有集群节点已安装JDK,JDK版本不低于1.8...
本视频介绍通过CADT部署NAS的操作配置方法和注意事项。
示例一:授予RAM用户对 文件存储 HDFS 版 管控系统只读权限 {"Version":"1","Statement":[{"Action":["dfs:Get*","dfs:List*"],"Resource":"*","Effect":"Allow"}]} 示例二:授予RAM用户对文件系统的权限 说明为 文件存储 HDFS 版 文件系统...
本文介绍如何在 文件存储 HDFS 版 上使用TensorFlow。前提条件 已开通 文件存储 HDFS 版 服务并。具体操作,请参见 开通文件存储HDFS版服务。已完成创建文件系统、添加挂载点和挂载文件系统。具体操作,请参见 快速入门。已为Hadoop集群...
文件存储 HDFS 版 提供两种SDK,分别为管控系统SDK和文件系统SDK。仅管控系统支持Python SDK,文件系统仅支持Java SDK。更多有关管控系统支持的SDK语言,请参见 OpenAPI。
本文主要介绍如何使用Fuse-DFS工具实现 文件存储 HDFS 版 在本地文件系统的映射。前提条件 已 创建文件系统 和 添加挂载点。已为Hadoop集群所有节点安装JDK,且JDK版本不低于1.8。建议您使用的Hadoop版本不低于2.7.2,本文使用的Hadoop版本...
本文介绍了在创建文件系统实例后无法访问 文件存储 HDFS 版 的排查方法。您可以请根据以下几种情况进行排查:确认访问 文件存储 HDFS 版 服务的ECS实例对应的专有网络及虚拟交换机ID,与挂载点的专有网络及虚拟交换机ID是否一致。确认挂载...
尊敬的阿里云用户,阿里云将于2023年05月04日起调整数据库文件存储计费方式。调整时间 2023年05月04日18:00:00。调整地域 华东1(杭州)、华东2(上海)、华北2(北京)、华南1(深圳)。调整内容 调整前 调整后 计费方式 按小时计费,不足...
在下拉框中选择 低频存储文件 或 归档存储文件,可查看目标文件系统已转储至低频存储或归档存储中的 文件名、文件大小、存储类型 及该文件最近一次被访问的时间等信息。您还可以单击 生命周期策略 页签,查看该文件系统配置的生命周期策略...
本文主要介绍在 文件存储 HDFS 版 上使用Apache HBase的方法。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作,请参见 文件存储HDFS版快速入门。已为Hadoop集群所有节点安装JDK,且JDK版本不低于1.8。已部署...
本文主要介绍如何在挂载 文件存储 HDFS 版 的Hadoop集群上安装及使用Apache Spark。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作,请参见 文件存储HDFS版快速入门。已为Hadoop集群所有节点安装JDK,且JDK...
本文主要介绍在挂载 文件存储 HDFS 版 的Hadoop集群上安装及使用Apache Tez。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作,请参见 文件存储HDFS版快速入门。已为Hadoop集群所有节点安装JDK,且JDK版本不...
本文介绍如何在挂载 文件存储 HDFS 版 的Hadoop集群上安装及使用Apache Flink。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作,请参见 文件存储HDFS版快速入门。已为Hadoop集群所有节点安装JDK,且JDK版本不...
本文档介绍如何将开源HDFS的数据平滑地迁移到 文件存储 HDFS 版。背景信息 当前业界有很多公司是以Hadoop技术构建数据中心,而越来越多的公司和企业希望将业务顺畅地迁移到云上。文件存储 HDFS 版 可以帮助您实现将开源HDFS的数据迁移到云...
尊敬的阿里云用户,阿里云将于2023年01月30日起调整数据库文件存储(公测)按量付费价格。调整时间 2023年01月30日00:00:00。调整地域 华东1(杭州)、华东2(上海)、华北2(北京)、华南1(深圳)。调整内容 版本类型 调整前单价(GB/...
本文介绍如何使用Sqoop工具实现 文件存储 HDFS 版 和关系型数据库MySQL之间的双向数据迁移。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作,请参见 文件存储HDFS版快速入门。已搭建Hadoop集群。建议您使用的...
您也可以使用 文件存储 HDFS 版 的多挂载功能实现单文件系统实例同地域的多VPC访问。属性 VPC1 VPC2 VPC3 网络实例的网段规划 VPC网段:192.168.0.0/16 交换机网段:192.168.0.0/24 VPC网段:10.0.0.0/16 交换机网段:10.0.0.0/24 VPC网段...
本文介绍如何配置E-MapReduce上的HDFS服务、HIVE服务、SPARK服务、HBase服务来使用 文件存储 HDFS 版。前提条件 已完成数据迁移。具体操作,请参见 E-MapReduce数据迁移。配置HDFS服务 登录 阿里云E-MapReduce控制台。在 集群管理 页面,...
关于扩容云存储文件网关缓存的具体操作,请参见 云存储文件网关缓存扩容。
阿里云 文件存储 HDFS 版(Apsara File Storage for HDFS)已与阿里云ActionTrail集成,您可以在ActionTrail中查看和检索用户行为日志,同时通过ActrionTrail将日志投递到日志服务LogStore或指定的OSS Bucket中,满足实时审计、问题回溯...
问题描述 阿里云视频直播将录制文件存储到对象存储OSS时,提示“The record content between starttime and endtime is empty”错误。问题原因 调用视频录制CreateLiveStreamRecordIndexFiles接口时传参的StartTime和EndTime不合规,从而...
最小配置空间 目录 目录 目录 最小转存储文件大小 无 64 KiB 64 KiB 最大转存储文件大小 无 4.88 TiB 4.88 TiB 最低存储时间 无 无 60天 更多有关于标准存储的规格信息,请参见 通用型NAS。应用场景 低频存储 Web内容管理 大多数Web内容...
您可以通过阿里云SDK、命令行工具ossutil、REST API等多种方式,查看Bucket中某个目录下所有文件的存储大小。阿里云SDK 您可以通过 Java SDK、PHP SDK 、Python SDK、Go SDK、C++ SDK、C SDK 查询目录下所有文件各自的存储大小。命令行工具...
问题描述 Dataphin开发模块中上传的资源文件是存储在哪里的?解决方案 如果计算类型选择了具体的计算引擎,那么是存在对应的计算引擎上的,比如计算类型选择了MaxCompute,那么资源文件就是存在MaxCompute上的。如果计算类型选择‘无归属...
扩容极速型NAS文件系统或CPFS文件系统的存储容量。接口说明 仅支持极速型 NAS 文件系统和中国站 CPFS 文件系统扩容。通用型 NAS 按需自动扩容,无须使用本 API。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。...
扩容极速型NAS文件系统或CPFS文件系统的存储容量。接口说明 仅支持极速型 NAS 文件系统和中国站 CPFS 文件系统扩容。通用型 NAS 按需自动扩容,无须使用本 API。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。...
问题描述 阿里云对象存储OSS的Bucket设置了生命周期,在将归档存储类型的文件解冻后,无法正常访问文件,提示以下错误:StatusCode=403,ErrorCode=InvalidObjectState,ErrorMessage="The operation is not valid for the object's state...
本文介绍了由于日志文件过多导致存储空间被占满的问题描述、解决方案以及后续维护等内容。问题描述 PolarDB MySQL版 集群由于Binlog文件、Redo日志或者Undo日志过多,占用了太多存储空间,且在空间分析中确认日志空间使用量较高。如下图所...
本视频介绍如何用ACK CNFS提升NAS文件系统的性能和QoS控制。更多信息,请参见 容器网络文件系统CNFS概述。