CDH6数据迁移
本文介绍如何将CDH中本地HDFS的数据迁移到 文件存储 HDFS 版，实现存储计算分离。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作，请参见 文件存储HDFS版快速入门。已在阿里云上创建ECS实例并安装CDH6集群。...
在文件存储 HDFS 版上使用TensorFlow
本文介绍如何在 文件存储 HDFS 版 上使用TensorFlow。前提条件 已开通 文件存储 HDFS 版 服务并。具体操作，请参见 开通文件存储HDFS版服务。已完成创建文件系统、添加挂载点和挂载文件系统。具体操作，请参见 快速入门。已为Hadoop集群...
挂载文件存储 HDFS 版文件系统
本文介绍挂载及卸载 文件存储 HDFS 版 文件系统的操作。前提条件 已为ECS实例安装JDK，且JDK版本不低于1.8。已创建 文件存储 HDFS 版 文件系统并添加挂载点。具体操作，请参见 创建文件系统 和 添加挂载点。已安装Hadoop客户端，建议您使用...
账单查询
您可以通过阿里云管理控制台查看 文件存储 HDFS 版 的费用账单。查看文件系统费用账单 登录 用户中心。在左侧导航栏，单击 账单管理>账单详情。在 明细账单 页签中，设置查询 账期，并在列表中筛选产品为 文件存储 HDFS 版。您还可以通过 ...
在文件存储 HDFS 版上使用Apache Spark
本文主要介绍如何在挂载 文件存储 HDFS 版 的Hadoop集群上安装及使用Apache Spark。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作，请参见 文件存储HDFS版快速入门。已为Hadoop集群所有节点安装JDK，且JDK...
另存为
另存为文件存储时长：如果您需要调整另存为文件的存储时长，请结合 生命周期规则介绍 配置合理的文件过期策略。参数说明 使用 sys/saveas 参数时，您需要携带以下选项：选项 含义 o 目标Object名称，名称需经过URL安全的Base64编码。具体...
安装文件系统SDK
本文档主要介绍 文件存储 HDFS 版 文件系统SDK的安装及使用方式。前提条件 已创建 文件存储 HDFS 版 文件系统并添加挂载点。具体操作，请参见 创建文件系统 和 添加挂载点。已为ECS实例安装JDK，且JDK版本不低于1.8。背景信息 本文以hadoop...
在文件存储 HDFS 版上使用Apache Tez
本文主要介绍在挂载 文件存储 HDFS 版 的Hadoop集群上安装及使用Apache Tez。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作，请参见 文件存储HDFS版快速入门。已为Hadoop集群所有节点安装JDK，且JDK版本不...
账单查询
本文介绍查询文件存储CPFS账单的操作步骤。登录 用户中心。在左侧导航栏，选择 账单管理>账单详情。在 明细账单 页签中，设置查询 账期，并在列表中筛选产品为 文件存储NAS，产品明细为 CPFS（按量付费）或 CPFS（包年包月）。您还可以通过...
配置CDH6使用文件存储 HDFS 版
数据迁移完成后，您还需要配置CDH上的HDFS服务、YARN服务、Hive服务、Spark服务、HBase服务，才能使用 文件存储 HDFS 版。配置Cloudera Management服务 执行以下命令，将最新的 文件存储 HDFS 版 Java SDK复制到Cloudera Management服务的...
配置高级告警规则
为文件存储NAS添加监控指标。先单击 文件存储NAS，再单击 添加指标。在 添加指标 对话框，先选择目标监控指标，再单击 确定。说明 目前NAS与CPFS共用云监控控制台，添加指标弹框中会包含CPFS监控指标。您只需要选择 Metric Category 列为 ...
使用RAM授权访问文件存储 HDFS 版
示例一：授予RAM用户对 文件存储 HDFS 版 管控系统只读权限 {"Version":"1","Statement":[{"Action":["dfs:Get*","dfs:List*"],"Resource":"*","Effect":"Allow"}]} 示例二：授予RAM用户对文件系统的权限 说明为 文件存储 HDFS 版 文件系统...
配置E-MapReduce服务使用文件存储 HDFS 版
本文介绍如何配置E-MapReduce上的HDFS服务、HIVE服务、SPARK服务、HBase服务来使用 文件存储 HDFS 版。前提条件 已完成数据迁移。具体操作，请参见 E-MapReduce数据迁移。配置HDFS服务 登录 阿里云E-MapReduce控制台。在 集群管理 页面，...
消息通知
使用处理参数处理文档转换并接收MNS消息通知 转换信息 转换前 文件类型：DOCX 文件名称：example.docx 转换后 文件类型：PNG 文件存储路径：oss:/test-bucket/doc_images/消息通知 将转换结果通知发送到主题名称为 test-topic 的MNS。...
样式
创建样式 说明 一个存储空间（Bucket）最多可创建50个样式，这些样式仅支持作用于该Bucket下的文件。如您的业务有更多样式的需求，请联系 技术支持。登录 OSS管理控制台。在左侧导航栏，单击 Bucket列表，然后单击目标Bucket名称。在左侧...
什么是文件存储 HDFS 版
文件存储 HDFS 版（Apsara File Storage for HDFS）是面向阿里云ECS实例及容器服务等计算资源的文件存储服务。产品概述 文件存储 HDFS 版 允许您就像在Hadoop分布式文件系统（Hadoop Distributed File System）中一样管理和访问数据。您...
容量和清理说明
为了保证平台资源不被恶意滥用，同时保障每位用户流畅的使用体验，推荐单个代码库保持 Git 数据保持在 5GB 以内，二进制大文件请使用 Git LFS 大文件存储管理。单个代码库容量即将到达 推荐阈值时，需要自行进行容量清理，强烈建议二进制...
使用Fuse-DFS挂载文件存储 HDFS 版
本文主要介绍如何使用Fuse-DFS工具实现 文件存储 HDFS 版 在本地文件系统的映射。前提条件 已 创建文件系统 和 添加挂载点。已为Hadoop集群所有节点安装JDK，且JDK版本不低于1.8。建议您使用的Hadoop版本不低于2.7.2，本文使用的Hadoop版本...
上传到OSS的文件存储类型为归档存储无法下载文件
问题描述 将文件上传到阿里云对象存储OSS后，文件存储类型为归档存储，下载按钮为灰色，无法下载文件。问题原因 OSS文件上传时会继承Bucket的存储类型，因此上传到OSS的文件存储类型为归档存储的原因如下：Bucket的存储类型为标准存储，...
OSS文件处于冻结状态无法正常访问
上传文件时设置了文件存储类型为归档存储或者冷归档存储，也会导致文件出现冻结状态。通过生命周期将其他类型文件转化成归档存储或者冷归档存储后，文件会出现冻结状态。文件被举报，存在违法违规情况，文件为私有状态。解决方案 当您的OSS...
哪些操作会更新Object的LastModified？
LastModified（最后修改时间）是OSS文件（Object）的一个重要属性，在计费、增量迁移、生命周期规则等场景中都会涉及。您在使用OSS时，部分针对...另外，因低频访问类型文件最低存储时长要求为30天，还将产生18天的存储不足规定时长容量费用。
0016-00000330
例如，源文件存储类型为归档类型。问题示例 以下CopyObject请求中x-oss-copy-source请求头指向的源文件archived-object为归档类型，归档类型文件处于不可读取状态。PUT/target-object ...
功能特性
数据库文件存储 功能集 功能 功能描述 参考文档 DBFS特性 原子写 支持DIRECT IO的原子写，需按4K，8K，16K对齐-共享读写 一份数据可共享式多点挂载并进行读写，读写可线性扩展-存储加密 通过对数据库文件存储实施加密，可以确保数据库文件...
存储容量单位包SCU
抵扣示例 陈先生2021年01月在华北2（北京）购买了500 GiB的通用型NAS资源包和100 GiB SCU，其02月份在华北2（北京）通用容量型NAS每小时文件存储量为600 GiB，则陈先生当月的存储费用抵扣情况如下所示：文件系统类型 资源包抵扣 SCU抵扣 ...
对象存储OSS
地域存储包>中国大陆通用存储包＞SCU＞按量计费 抵扣案例 用户A于2021年6月在华东1（杭州）购买了500 GB的 标准-本地冗余存储包 和20 GB的SCU，其6月份在华东1（杭州）地域标准存储（本地冗余）类型文件存储量为600 GB、归档存储（本地冗余...
存储容量单位包SCU
地域存储包>中国内地通用存储包＞SCU＞按量计费 抵扣案例 用户A于2021年6月在华东1（杭州）购买了500 GB的 标准-本地冗余存储包 和20 GB的SCU，其6月份在华东1（杭州）地域标准存储（本地冗余）类型文件存储量为600 GB、归档存储（本地冗余...
文件存储NAS
抵扣顺序 NAS存储费用抵扣顺序为：存储包>资源包>SCU>按量付费 抵扣案例 陈先生2021年01月在华北2（北京）购买了500 GiB的通用型NAS资源包和100 GiB SCU，其01月份在华北2（北京）仅使用了容量型NAS，且容量型NAS每小时文件存储量为600 GiB...
创建CNFS管理NAS文件系统（推荐）
容器网络文件系统CNFS（Container Network File System）将阿里云的文件存储抽象为一个K8s对象（CRD）进行独立管理，包括创建、删除、描述、挂载、监控及扩容等运维操作。您可以通过CNFS创建一个新的NAS文件系统或管理已存在的NAS文件系统...
0042-00000310
问题描述 UploadPartCopy请求中 x-oss-copy-source 参数指定的拷贝源文件为归档存储（Archive）类型。问题原因 您发起了UploadPartCopy请求来从一个已存在的Object中拷贝数据来上传一个Part，x-oss-copy-source 参数用来指定拷贝源。该参数...
变量
在使用数据处理功能的批处理或触发器功能时，每个Object都会触发一个任务，任务中需要指定处理后的文件保存的输出路径，如果多个任务输出路径是同一个路径，则会产生文件覆盖，因此需要保证输出路径为动态路径，所以引入变量。此外，您可以...
API概览
本产品（文件存储 HDFS 版/2018-06-20）的OpenAPI采用 RPC 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用需求...
LFS空间如何清理以及清理后有什么影响？
库管理员点击代码库 设置，可见大文件存储菜单，勾选期望删除的文件后进行删除：说明 通过以下命令，可查看当前仓库正在关联的 LFS 资源文件，然后根据实际需要，按需删除此列表之外的 LFS 资源文件。git-lfs-ls-files(1)Show information ...
集成概览
本文为您介绍文件存储 NAS支持的集成方案。OpenAPI集成 文件存储 NAS提供文件系统、权限组、挂载点、生命周期管理、快照等功能的OpenAPI，您可在业务系统中进行集成。关于如何使用阿里云OpenAPI，请参见 使用OpenAPI。版本说明 版本说明 ...
SDK示例
本文列出了使用Java代码通过Hadoop FileSystem API对 文件存储 HDFS 版 文件系统进行常用操作的示例，您可以参考这些示例代码开发您的应用。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作，请参见 文件存储...
E-MapReduce数据迁移
本文介绍如何将E-MapReduce HDFS上的数据迁移到 文件存储 HDFS 版 文件系统。背景信息 阿里云E-MapReduce是构建在阿里云云服务器ECS上的开源Hadoop、Spark、Hive、Flink生态大数据PaaS产品。提供用户在云上使用开源技术建设数据仓库、离线...
CreateDataFlowTask-创建数据流动任务
Evict：释放 CPFS 上文件的数据块，释放后文件在 CPFS 上只保留元数据，您仍能查询该文件，但文件数据块已清除，不占用 CPFS 上的存储容量。当访问该文件数据时，将再从源端存储按需加载。Inventory：获取 CPFS 上数据流动管理的文件清单，...
通过CNFS方式使用NAS文件系统
容器网络文件系统CNFS（Container Network File System）将阿里云的文件存储抽象为一个K8s对象（CRD）进行独立管理，包括创建、删除、描述、挂载、监控及扩容等运维操作，为了提升NAS文件系统的性能，您可以通过CNFS（Container Network ...
计费项
本文为您介绍 文件存储 HDFS 版 服务的计费说明。产品定价 关于 文件存储 HDFS 版 的计费定价，请参见 文件存储 HDFS 版产品定价。计费周期 文件存储 HDFS 版 每小时统计前一小时的实际用量并进行结算，从账户余额中扣除实际消费金额。例如...
修改文件系统
本文介绍如何在 文件存储HDFS版 控制台修改某个文件系统的存储容量、基本信息以及吞吐模式。前提条件 已创建文件系统。具体操作，请参见 创建文件系统。操作步骤 登录 文件存储HDFS版控制台。在顶部菜单栏，选择地域。在左侧导航栏，选择 ...
文件存储CPFS监控概述
通过查看文件存储CPFS文件系统的容量监控和性能信息，您可以了解文件系统的存储容量使用情况和读写吞吐、读写IOPS等情况。通过为文件系统的重要监控指标设置报警规则，您可以及时获知指标异常并快速处理异常。本文介绍文件存储CPFS支持的...
- 产品推荐
- 这些文档可能帮助您