由于日志文件过多导致集群存储空间被占满的解决办法
如下图所示：引发该问题的原因可能是由于大事务在快速生成Binlog文件、Redo文件或Undo文件时，占用了太多的集群存储空间。解决方案 说明 清理Binlog文件、Undo文件或Redo文件时，界面更新有延迟，请耐心等待。由于DML等操作（比如涉及大...
由于数据文件过多导致集群存储空间被占满的解决办法
本文介绍了由于数据文件过多导致存储空间被占满的问题描述、解决方案以及后续维护等内容。问题描述 PolarDB MySQL版 集群可能会由于数据文件长时间未整理导致占用过多存储空间，且在集群的 空间分析 页面的 空间变化趋势 区域中确认数据...
由于临时文件过多导致集群存储空间被占满的解决办法
本文介绍了由于临时文件过多导致存储空间被占满的问题描述、解决方案以及后续维护等内容。问题描述 PolarDB MySQL版 集群可能会由于查询语句的排序、分组、关联表产生临时表文件，或大事务未提交前产生Binlog cache文件，从而出现本地空间...
应用场景
本文介绍文件存储NAS数据存储的主要应用场景。企业应用上云 阿里云NAS提供标准的NFS和SMB接口，云下建立在NAS上的应用程序可以轻松迁移到阿里云。阿里云NAS基于云原生架构，具有99.95%高可用性，PB级容量弹性，同时支持目录配额、ACL、回收...
使用Fuse-DFS挂载文件存储 HDFS 版
本文主要介绍如何使用Fuse-DFS工具实现 文件存储 HDFS 版 在本地文件系统的映射。前提条件 已 创建文件系统 和 添加挂载点。已为Hadoop集群所有节点安装JDK，且JDK版本不低于1.8。建议您使用的Hadoop版本不低于2.7.2，本文使用的Hadoop版本...
常见问题
本文介绍了文件存储NAS产品简介中的常见问题。什么是文件存储NAS？阿里云文件存储NAS是一个可共享访问、弹性扩展、高可靠、高性能的分布式文件系统。NAS兼容了POSIX文件接口，可支持数千台计算节点共享访问，可以挂载到弹性计算ECS、神龙裸...
文件存储
本文为您介绍 PolarDB PostgreSQL版（兼容Oracle）的文件存储。主节点和只读节点的数据和WAL日志保存在共享存储中。配置文件、Log文件和临时文件在每个节点都会单独保存。主节点的CLOG文件存储在共享存储中；只读节点的CLOG文件会在各自...
配置CDH6使用文件存储 HDFS 版
数据迁移完成后，您还需要配置CDH上的HDFS服务、YARN服务、Hive服务、Spark服务、HBase服务，才能使用 文件存储 HDFS 版。配置Cloudera Management服务 执行以下命令，将最新的 文件存储 HDFS 版 Java SDK复制到Cloudera Management服务的...
数据安全
可用性说明 对象存储 OSS 数据备份和容灾 文件存储 NAS 备份和恢复文件 云原生大数据计算服务 MaxCompute 备份与恢复 同时PAI EasyCkpt是PAI为PyTorch大模型训练场景而开发的高性能Checkpoint框架，通过实现接近零开销的模型保存机制，...
配置E-MapReduce服务使用文件存储 HDFS 版
本文介绍如何配置E-MapReduce上的HDFS服务、HIVE服务、SPARK服务、HBase服务来使用 文件存储 HDFS 版。前提条件 已完成数据迁移。具体操作，请参见 E-MapReduce数据迁移。配置HDFS服务 登录 阿里云E-MapReduce控制台。在 集群管理 页面，...
产品规格
文件存储CPFS支持三种存储规格，分别为100 MB/s/TiB基线、200 MB/s/TiB基线和 400 MB/s/TiB基线（CPFS智算版）。本文列举了在相同文件系统容量下使用不同客户端访问文件系统时，100 MB/s/TiB基线、200 MB/s/TiB基线、400 MB/s/TiB基线的...
存储空间占用情况
OSS-HDFS 回收站 OSS-HDFS回收站中的文件未达到指定保存时间前，并没有从HDFS文件系统中彻底删除，仍然继续占用OSS部分存储容量。您可以通过hdfs du命令查看OSS-HDFS回收站空间占用情况。OSS-HDFS 服务内部使用 OSS-HDFS服务内部使用OSS...
文件存储NAS
阿里云文件存储NAS（Apsara File Storage）是面向阿里云ECS实例、E-HPC和容器服务等计算节点的文件存储服务。它是一种可共享访问、弹性扩展、高可靠以及高性能的分布式文件系统，支持NFS和SMB协议。文件存储NAS 目前提供极速型、通用性能型...
管理数据流动任务
本文介绍如何在文件存储控制台创建、管理CPFS数据流动任务及查看任务报告。前提条件 已创建CPFS Fileset。具体操作，请参见 创建Fileset。已创建数据流动。具体操作，请参见 创建数据流动。任务说明 任务类型 按任务对数据的操作，可分为...
计费常见问题
本文介绍文件存储NAS（通用型NAS/极速型NAS）计费常见问题。包括通用型NAS资源包如何使用或抵扣、NAS服务如何停止计费、购买资源包为什么还欠费等问题。开通NAS服务后，就开始计费吗？仅开通NAS服务，不会产生费用。当您在通用型NAS中写入...
云存储网关
普通的文件系统如果在同一目录下存放太多文件，经常会出现问题。而OSS总的存储容量以及单个存储空间的容量均无上限。您可以在一个存储空间内存放无限量的文件，OSS自动将您的数据副本存储至同一地域的不同服务器，所有数据副本共享阿里云的...
set-acl（设置或修改ACL）
job 多文件操作时的并发任务数，默认值为3，取值范围为1~10000。retry-times 发生错误后的重试次数。默认值为10，取值范围为1~500。encoding-type 对 oss:/bucket_name 之后的prefix进行编码，取值为 url。如果不指定该选项，则表示prefix...
开通文件存储 HDFS 版服务
本文介绍如何开通 文件存储 HDFS 版 服务。前提条件 已注册阿里云账号并完成实名认证。详情请参见 注册阿里云账号 和 个人实名认证。操作步骤 登录 阿里云官网。打开 文件存储 HDFS 版申请公测页面。在申请公测页面，填写必要信息后单击 ...
迁移开源HDFS的数据到文件存储 HDFS 版
本文档介绍如何将开源HDFS的数据平滑地迁移到 文件存储 HDFS 版。背景信息 当前业界有很多公司是以Hadoop技术构建数据中心，而越来越多的公司和企业希望将业务顺畅地迁移到云上。文件存储 HDFS 版 可以帮助您实现将开源HDFS的数据迁移到云...
新功能发布记录
本文列举了文件存储CPFS产品功能发布的时间、发布地域及相关文档。功能名称 功能概述 发布时间 发布地域 相关文档 文件系统性能升级 CPFS对部分地域的100 MB/s/TiB基线、200 MB/s/TiB基线文件系统吞吐和IOPS进行了升级。升级后，吞吐能力...
用量查询
如果您希望查看文件存储CPFS的使用记录明细，可导出文件存储CPFS的用量明细表。操作步骤 登录 用户中心。在左侧导航栏，选择 账单管理>账单详情。在 用量明细 页签，按以下要求完成各配置项。参数 说明 产品 选择 文件存储NAS。计量规格 ...
在文件存储 HDFS 版上使用TensorFlow
本文介绍如何在 文件存储 HDFS 版 上使用TensorFlow。前提条件 已开通 文件存储 HDFS 版 服务并。具体操作，请参见 开通文件存储HDFS版服务。已完成创建文件系统、添加挂载点和挂载文件系统。具体操作，请参见 快速入门。已为Hadoop集群...
开发测试
本文列举了基于文件存储NAS实现高性能、低成本自动化CI/CD系统的最佳实践案例。基于K8s、NAS、GitLab、Jenkins的持续集成交付容器环境最佳实践 Serverless ACK弹性低成本CI/CD系统 使用文件存储NAS构建Jenkins持续集成环境 使用极速型NAS...
服务协议
自2021年1月31日起，新版数据库文件存储（DBFS）服务条款生效。请参考《阿里云数据库文件存储服务协议》。
生命周期管理概述
阿里云文件存储NAS推出的生命周期管理功能，可以帮助您将低频访问的冷文件数据从标准存储转换到低频存储或归档存储中，并采用低频存储或归档存储计费方式，从而减少文件系统的存储费用。本文主要介绍生命周期的策略、使用限制、应用场景、...
使用云企业网跨VPC访问文件存储 HDFS 版
您也可以使用 文件存储 HDFS 版 的多挂载功能实现单文件系统实例同地域的多VPC访问。属性 VPC1 VPC2 VPC3 网络实例的网段规划 VPC网段：192.168.0.0/16 交换机网段：192.168.0.0/24 VPC网段：10.0.0.0/16 交换机网段：10.0.0.0/24 VPC网段...
关于NAS和CPFS计费项名称调整的公告
为了给您更好的体验，阿里云将对文件存储NAS和文件存储CPFS实例按量计费的计费项名称进行调整。新的命名将于2023年01月16日00:00:00起生效，生效后您新产生的账单中的计费项名称将按照新的计费项名称显示。调整时间 2023年01月16日00:00:00...
Web服务和内容管理
文件存储NAS可用于各种内容管理系统和Web服务应用程序，为网站及应用程序提供高效存储服务。本文列举了Web服务的最佳实践案例。使用Nginx代理服务器代理阿里云NAS 通过Windows IIS服务访问阿里云NAS 容器服务ACK+文件存储NAS快速搭建NGINX...
卸载并释放CDH6 HDFS服务使用的云盘
背景信息 当CDH已经成功运行在阿里云 文件存储 HDFS 版 上时，ECS挂载的云盘只用来存储运算中的临时Shuffle文件，可以选择卸载原来用于构建CDH HDFS服务的云盘，降低集群的拥有成本。重要 从数据安全性考虑，数据迁移后建议进行数据完整性...
在线扩容
本文主要说明阿里云数据库文件存储服务DBFS的在线扩容功能。进入“数据库文件存储控制台”-》“数据库文件系统列表”。单击“扩容”按钮，弹出“在线扩容数据库文件系统”窗口。填写“扩容后容量”，单击“开始扩容”按钮后提交扩容申请。
创建文件系统实例后，为什么无法访问文件存储 HDFS 版...
本文介绍了在创建文件系统实例后无法访问 文件存储 HDFS 版 的排查方法。您可以请根据以下几种情况进行排查：确认访问 文件存储 HDFS 版 服务的ECS实例对应的专有网络及虚拟交换机ID，与挂载点的专有网络及虚拟交换机ID是否一致。确认挂载...
删除文件系统
您可以在 文件存储HDFS版 控制台删除某个已创建的文件系统。前提条件 已删除该文件系统下添加的挂载点。具体操作，请参见 删除挂载点。操作步骤 登录 文件存储HDFS版控制台。在顶部菜单栏，选择地域。在左侧导航栏，选择 文件系统。在 文件...
什么是文件存储NAS
阿里云文件存储NAS（Apsara File Storage NAS）是面向阿里云ECS实例、E-HPC、容器服务等计算节点的文件存储服务。它是一种可共享访问、弹性扩展、高可靠以及高性能的分布式文件系统。产品概述 NAS基于POSIX文件接口，天然适配原生操作系统...
计费项
本文为您介绍 文件存储 HDFS 版 服务的计费说明。产品定价 关于 文件存储 HDFS 版 的计费定价，请参见 文件存储 HDFS 版产品定价。计费周期 文件存储 HDFS 版 每小时统计前一小时的实际用量并进行结算，从账户余额中扣除实际消费金额。例如...
在文件存储 HDFS 版上使用Presto
本文主要介绍如何在 文件存储 HDFS 版 上搭建及使用Presto。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作，请参见 文件存储HDFS版快速入门。已搭建Hadoop集群并且所有集群节点已安装JDK，JDK版本不低于1.8...
卸载并释放E-MapReduce HDFS使用的云盘
背景信息 当E-MapReduce已经成功运行在阿里云 文件存储 HDFS 版 上时，ECS挂载的云盘只用来存储运算中的临时Shuffle文件，可以选择卸载原来用于构建E-MapReduce HDFS服务的云盘，降低集群的拥有成本。重要 从数据安全性考虑，数据迁移后...
高级配置
CentOS 6.5还需要执行如下命令：chkconfig netfs on CentOS 7.0及以上的系统通过开机自动启动脚本进行挂载 在/etc/init.d/目录下建立文件 ossfs，将 模板文件 中的内容拷贝到这个新文件中。并将其中的your_xxx内容改成您自己的信息。为新...
使用在线迁移服务迁移数据
使用在线迁移服务，您可以轻松实现文件存储NAS之间的数据迁移。本文介绍如何通过在线迁移服务实现阿里云文件存储NAS之间的数据迁移。使用在线迁移服务，您只需在控制台填写源NAS和目标NAS的地址信息，并创建迁移任务即可。迁移任务启动后，...
【公告】数据库文件存储按量付费价格下调
尊敬的阿里云用户，阿里云将于2023年01月30日起调整数据库文件存储（公测）按量付费价格。调整时间 2023年01月30日00:00:00。调整地域 华东1（杭州）、华东2（上海）、华北2（北京）、华南1（深圳）。调整内容 版本类型 调整前单价（GB/...
创建文件系统
前提条件 已开通文件存储NAS服务。首次登录 文件存储NAS产品详情页 时，按照页面引导开通服务。重要 在开通页面购买的产品为NAS资源包，并不是NAS文件系统。NAS资源包仅用于抵扣NAS文件系统存储容量费用。更多信息，请参见 资源包概述。...
- 产品推荐
- 这些文档可能帮助您