创建文件系统
在使用 文件存储HDFS版 前，您需要先创建文件系统实例。前提条件 已开通 文件存储HDFS版 服务。具体操作，请参见 开通文件存储HDFS版服务。操作步骤 登录 文件存储HDFS版控制台。在顶部菜单栏选择要创建文件系统实例的区域。例如 华东1...
创建文件系统
如果您未选择资源组，在创建文件系统成功后，文件系统将自动归类到默认资源组。如果您需要新建资源组，请单击 创建资源组，并在 创建资源组 对话中配置 资源组标识 和 资源组名称，然后单击 确定。专有网络 选择已创建的VPC网络。必须选择...
快速入门
操作视频 步骤一：创建文件系统 您可以通过 文件存储 HDFS 版 控制台创建文件系统或调用 CreateFileSystem 创建文件系统。登录 文件存储HDFS版控制台。在顶部菜单栏选择要创建文件系统实例的区域。例如 华东1（杭州）。在 概览 页面，单击 ...
脚本文件管理
如果想在某个脚本文件夹下新建脚本文件，右键点击目标文件夹，在弹出的右键菜单中选择 新建，即可弹出新建文件的对话框。在 文件名 输入框中输入自定义的脚本文件名称，然后单击 确认，脚本文件创建完成。编辑脚本 文件 多方安全分析支持...
管理数据集文件夹
新建文件夹 登录 Quick BI控制台。按照图示方式进入数据集管理页面。在 数据集 管理页面，单击 新建文件夹。您也可以右键单击目标数据集文件夹并选择 新建文件夹。在 新建文件夹 对话框中，输入文件夹名称并单击 确定。说明 数据集文件夹...
编辑脚本
操作步骤 当成功创建脚本文件后，单击脚本文件名，然后在脚本文件编辑页面中，单击 输入配置。当成功创建脚本文件后，单击待编辑的脚本文件名，即可在脚本文件编辑框中通过 Python 语言编辑联邦脚本。Python 编码规范及封装的 FL 能力请...
文件夹
新建文件夹 登录 Hologres管理控制台。在顶部菜单栏左侧，选择相应的地域。单击 前往HoloWeb，进入HoloWeb开发页面。在HoloWeb开发页面的顶部菜单栏，单击 SQL编辑器>新增文件夹。您也可以在左侧导航栏，鼠标右击 我的SQL查询，选择 新建...
文件系统存储类型
在创建文件系统后，文件系统数据首先存储在标准存储中，然后才能使用生命周期策略将数据转储至低频存储或归档存储。更多关于通用型NAS标准存储的信息，请参见 通用型NAS。低频存储：提供高持久性、较低存储成本的文件存储服务。支持数据...
资源中心
本文为您介绍如何创建文件和上传文件。使用限制 每个账号在每个地域的资源中心，允许的文件上传总量上限为5 GB。创建文件 进入资源中心页面。使用阿里云账号（主账号）或RAM用户登录 E-MapReduce控制台。在左侧导航栏，选择 EMR Workbench>...
管理文件夹
创建文件夹 登录控制台，从左侧导航栏选择 自定义监控>新建>新建文件夹，或直接点击页面右上方的 新建文件夹。在 新文件夹 窗口，填写文件夹名，点击 确定 完成添加。删除文件夹 选择目标文件夹，将鼠标悬浮在监控文件夹上方，点击操作图标...
API概览
文件系统 API 标题 API概述 CreateFileSystem 创建文件系统 创建一个文件系统。DeleteFileSystem 删除文件系统 删除一个文件系统。ModifyFileSystem 修改文件系统的描述信息 修改文件系统的描述信息。DescribeFileSystems 查询文件系统信息...
脚本文件夹管理
重命名脚本文件夹 文件夹创建完成后，支持对文件夹进行重命名。在 脚本文件 区域，右键点击待重命名的文件夹，在弹出的右键菜单中选择 重命名，即可弹出重命名文件夹的对话框。文件夹重命名后，单击 确认。删除脚本文件夹 删除脚本文件夹时...
目录和文件访问权限
操作/Dir1/Dir2/file 创建目录/Dir1-WX-创建目录/Dir1/Dir2-X-WX-创建文件/Dir1/Dir2/file-X-X-WX-读打开/Dir1/Dir2/file-X-X-X R-写打开/Dir1/Dir2/file-X-X-X-W-删除目录/Dir1-WX RWX RWX-删除文件/Dir1/Dir2/file-X-X-Stat file-X-X-X-...
参数文件
若压缩为ZIP文件后，单个文件大小依然超过600 MB或100 MB的，可使用OSS地址上传。说明 OSS地址上传文件大小限制为2 GB。文件不能超过21亿行，文件中单行不能超过2万个字符。若需要多个数据关联组合为一组参数，无需将关联组合强制放到一个...
参数文件
若压缩为ZIP文件后，单个文件大小依然超过600 MB或100 MB的，可使用OSS地址上传。说明 OSS地址上传文件大小限制为2 GB。文件不能超过21亿行，文件中单行不能超过2万个字符。若需要多个数据关联组合为一组参数，无需将关联组合强制放到一个...
创建文件系统实例后，为什么无法访问文件存储 HDFS 版...
本文介绍了在创建文件系统实例后无法访问 文件存储 HDFS 版 的排查方法。您可以请根据以下几种情况进行排查：确认访问 文件存储 HDFS 版 服务的ECS实例对应的专有网络及虚拟交换机ID，与挂载点的专有网络及虚拟交换机ID是否一致。确认挂载...
通用型NAS计费
即删除容量型文件系统中的文件后，该文件暂存在回收站中将按照容量型存储容量计费；删除低频存储中的文件后，该文件暂存在回收站中将按照低频存储容量计费；删除归档存储中的文件后，该文件暂存在回收站中将按照归档存储容量计费。更多信息...
创建RAID阵列（Linux）
独立冗余磁盘阵列RAID（Redundant Array of Independent Disks）是将多块云盘按一定的方式组成一个磁盘阵列组。相比单块云盘，RAID能够有效地提高磁盘的容量、读写带宽...df-Th 结果如下所示，出现新建文件系统的信息，表示文件系统挂载成功。
使用Fuse-DFS挂载文件存储 HDFS 版
执行以下命令在已映射 文件存储 HDFS 版 文件系统的本地目录中创建文件，创建成功后，您可以在 文件存储 HDFS 版 文件系统上查看到该文件。cd/mnt/dfs_mount mkdir fuse_test echo"hello dfs">fuse_test/fuse.txt 可选：卸载挂载目录。...
配置数据传输中转节点
前提条件 已创建文件系统。具体操作，请参见 创建文件系统。使用新购ECS作为数据传输中转节点 上传下载文件数据需要占用ECS公网带宽，建议您新购一台ECS实例专门负责文件数据的上传与下载，避免占用业务带宽。新购ECS挂载NAS文件系统有以下...
OSS触发器概述
为了避免循环触发函数产生不必要的费用，建议您配置文件前缀或文件后缀，例如将触发函数的文件的文件前缀设置为 src，函数执行完成后生成文件的文件前缀设置为 dst，生成的文件将不会再次触发函数。如果不设置文件前缀和文件后缀，表示匹配...
性能监控
前提条件 已创建 文件存储 HDFS 版 文件系统。具体操作，请参见 创建文件系统。已开通云监控服务。您可以登录 云监控产品详情页，根据页面提示开通服务。性能监控指标说明 指标 指标名称 单位 描述 read_iops 文件系统读请求频率 次/秒 该...
管理数据流动任务
删除（Evict）将释放CPFS上文件的数据，删除后文件在CPFS上只保留元数据，您仍能看到该文件，但文件的数据块已清除，不占用CPFS上的存储空间，访问该文件数据时，再从源端存储（例如OSS）按需加载。说明 删除前，请务必确认对应文件在OSS上...
创建文件数据源
自定义文件名称 上传文件后，系统会自动识别文件名作为自定义文件的名称，您可以修改文件名称。文件名称只能由中英文、数字及下划线（_）、斜线（/）、反斜线（\）、竖线（|）、小括号（()）、中括号（[]）组成，不超过50个字符。物理表名 ...
迁移开源HDFS的数据到文件存储 HDFS 版
具体操作，请参见 创建文件系统实例后，为什么无法访问文件存储 HDFS 版？准备迁移工具。您可以通过Hadoop社区标准的DistCp工具实现全量或增量的HDFS数据迁移。更多关于DistCp工具使用说明，请参见 Hadoop DistCp工具官方说明文档。说明 ...
CreateDataFlowTask-创建数据流动任务
Evict：释放 CPFS 上文件的数据块，释放后文件在 CPFS 上只保留元数据，您仍能查询该文件，但文件数据块已清除，不占用 CPFS 上的存储容量。当访问该文件数据时，将再从源端存储按需加载。Inventory：获取 CPFS 上数据流动管理的文件清单，...
DescribeDataFlowTasks-查询数据流动任务列表
Evict：释放 CPFS 上文件的数据块，释放后文件在 CPFS 上只保留元数据，您仍能查询该文件，但文件数据块已清除，不占用 CPFS 上的存储容量。当访问该文件数据时，将再从源端存储按需加载。Inventory：获取 CPFS 上数据流动管理的文件清单，...
设置或取消自动快照策略
到达创建时间后，文件系统会自动新增 dbfs-auto 开头命名的快照。说明 如果在创建时间点，数据库文件系统的前一个创建快照任务还在进行中，此时文件系统将不会创建自动快照。如果设置的时间正好在打快照的整点或接近这个整点上，由于网络...
目录配额
重要 设置限制型配额后，如果文件使用量超过限制会导致写入操作（包括增加文件长度、创建文件、目录、移动文件到目录等操作）失败，应用层会收到IOError。您可以参照 为什么向文件系统写入数据时，返回Disk quota exceeded错误信息？进行...
查询文件系统详情
前提条件 已创建文件系统。具体操作，请参见 创建文件系统。查询文件系统资源使用量 您可以通过以下方式快速查询当前阿里云账号下文件系统资源使用情况，例如总存储空间、使用容量、计费容量、文件数和目录数。说明 文件系统概览页的数据均...
管理文件
文件操作 新建 单击右上角的 图标，选择 文件，输入文件名称并编写文件内容，完成后单击 保存 即可新建文件。编辑 找到目标文件，单击对应操作列的 图标，即可编辑文件内容。重命名 找到目标文件，单击对应操作列的 图标，选择 重命名，...
修改文件系统
前提条件 已创建文件系统。具体操作，请参见 创建文件系统。操作步骤 登录 文件存储HDFS版控制台。在顶部菜单栏，选择地域。在左侧导航栏，选择 文件系统。在 文件系统 页面，单击待修改的文件系统实例名称，然后单击 基础设置 页签。在 ...
API概览
文件系统 API 标题 API概述 CreateFileSystem 创建文件系统 创建文件系统。DeleteFileSystem 删除文件系统 删除已有的文件系统。ModifyFileSystem 修改文件系统属性 修改文件系统属性。ListFileSystems 批量获取文件系统详细信息 批量获取...
在文件存储 HDFS 版上使用TensorFlow
已完成创建文件系统、添加挂载点和挂载文件系统。具体操作，请参见 快速入门。已为Hadoop集群所有节点安装JDK，且版本不能低于1.8。已根据目前使用的TensorFlow版本下载 源码。本文使用的TensorFlow版本为1.15.0。背景信息 TensorFlow是...
验证同步任务
在 新建文件夹 弹框中，填写文件夹 名称。单击 确定，完成即席查询文件夹的创建。新建 即席查询 文件。在 即席查询 页面，单击 即席查询 后的 图标。在 新建文件 页面，填写文件的 名称、描述 和 选择目录。单击 确定，完成即席查询文件的...
验证同步任务
在 新建文件夹 弹框中，填写文件夹 名称。单击 确定，完成即席查询文件夹的创建。新建 即席查询 文件。在 即席查询 页面，单击 即席查询 后的 图标。在 新建文件 页面，填写文件的 名称、描述 和 选择目录。单击 确定，完成即席查询文件的...
SetDirQuota-设置文件系统的目录配额
Enforcement：限制型配额，当使用量超过限制后，会导致创建文件或目录、追加写入等操作失败。Accounting UserType string 是 用户类型。取值：Uid：用户 ID Gid：用户所属组 ID AllUsers：所有用户 Uid UserId string 否 要限制的 Uid 或 ...
安装文件系统SDK
前提条件 已创建 文件存储 HDFS 版 文件系统并添加挂载点。具体操作，请参见 创建文件系统 和 添加挂载点。已为ECS实例安装JDK，且JDK版本不低于1.8。背景信息 本文以hadoop-mapreduce-examples为例，介绍文件系统SDK的使用方式。其中...
挂载文件存储 HDFS 版文件系统
已创建 文件存储 HDFS 版 文件系统并添加挂载点。具体操作，请参见 创建文件系统 和 添加挂载点。已安装Hadoop客户端，建议您使用的Hadoop版本不低于2.7.2。Hadoop下载地址，请参见 Hadoop Releases。挂载说明 如果挂载点网络类型是专有...
文件存储 HDFS 版（Apsara File Storage for HDFS）...
文件系统 CreateFileSystem 创建文件系统实例。DeleteFileSystem 删除文件系统实例。ModifyFileSystem 修改文件系统实例属性。GetFileSystem 查询单个文件系统实例详细信息。ListFileSystems 查询文件系统实例详细信息。访问权限 ...
- 产品推荐
- 这些文档可能帮助您