计费概述
文件存储CPFS支持创建不同类型的CPFS文件系统，不同类型的文件系统计费标准不同，本文介绍文件存储CPFS的计费情况。计费方式 文件存储CPFS支持以下计费方式。计费方式 说明 按量计费 默认付费方式。先使用，后付费，适用于业务用量经常有...
如何选择合适的文件系统？
阿里云 文件存储 NAS 和文件存储CPFS 提供各种类型的文件系统，您可以根据业务负载选择其中一种或几种文件系统，为业务负载提供必要的可靠性、安全性和持续性。适用的业务场景 通用性能型 NAS：Linux/Windows企业应用、容器...
媒体处理概述
工作原理 离线转码：将视频文件上传到OSS存储空间，创建媒体处理任务，任务执行成功后，转码后的文件存储在OSS中。边转边播：将视频文件上传到OSS存储空间，创建边转边播播放列表，立即播放，对视频实时按需转码并存储在OSS中。处理参数 ...
使用限制
产品规格 限制项 说明 每个账号在单个地域内可创建的文件系统数量 通用型NAS：20个 极速型NAS：200个 单个文件系统可创建挂载点的数量 通用型NAS：2个 极速型NAS：1个 单个文件系统最大文件数 通用型NAS：10亿 极速型NAS：5亿 单个文件系统...
通过ES-Hadoop实现Hive读写阿里云Elasticsearch数据
ES-Hadoop的原理是将Elasticsearch作为MR、Spark或Hive等数据处理引擎的数据源，在计算存储分离的架构中扮演存储的角色。这和MR、Spark或Hive的数据源并无差异，但相对于这些数据源，Elasticsearch具有更快的数据选择过滤能力。这种能力...
新功能发布记录
2024年01-31 华东1（杭州）西南1（成都）华东2（上海）华南1（深圳）华北3（张家口）华北2（北京）产品规格 CPFS智算版（邀测）CPFS智算版是阿里云文件存储CPFS推出的一款超高性能的文件存储服务，支持端到端RDMA网络，应用于AIGC、自动...
配置StarRocks集群以访问高安全数据集群
hive.metastore.kerberos.principal 配置值与DataLake集群 Hive 服务 hive-site.xml 配置文件里的 hive.metastore.kerberos.principal 的值保持一致。保存配置。单击下方的 保存。在弹出的对话框中，输入 执行原因，单击 保存。重启...
JindoFS实战演示
本视频为您介绍如何将HDFS中的文件载入Hive表，然后将Hive中的数据按照分区归档到OSS。OSS访问加速 文档链接 视频链接 视频发布时间 描述 访问OSS这类对象存储最快的方式 访问OSS这类对象存储最快的方式 2021-05-25 JindoFS SDK是一个简单...
数据处理费用
按量付费：归档存储数据取回费用=解冻文件大小（GB）×归档存储文件数据取回单价 资源包：不支持 归档直读数据取回容量（RetrievalDataArchiveDirect）直读归档存储类型文件产生的费用。按直读文件的大小计费。重要 对于已解冻的归档存储...
使用rsync工具迁移数据
切换应用到新的文件系统 在数据迁移完成后，如果您需要将现有业务从旧的文件系统切换到新的文件系统上，请在所有ECS和容器上卸载旧的文件系统，然后挂载新的文件系统。使用ECS直接挂载NAS文件系统。执行 mount|grep nas.aliyuncs.com 记录...
删除文件系统
在 删除文件系统 对话框，确认待删除的文件系统名称，单击 确认。说明 删除CPFS文件系统时会自动删除该文件系统的挂载点、协议服务、数据流动等资源。默认权限组不支持删除或修改。删除CPFS文件系统实例成功后，即表示下一账期不产生扣费。...
使用NAS静态存储卷
您可以通过阿里云提供的Flexvolume插件使用阿里云NAS文件存储服务。本文介绍如何使用NAS静态存储卷。前提条件 使用存储卷时请将Flexvolume插件更新到最新版本。具体操作，请参见 安装与升级Flexvolume组件。已通过kubectl连接Kubernetes...
Hive Metastore使用加密文件访问RDS
DataLake或Custom集群类型 sudo mv/tmp/hive.jceks$HIVE_CONF_DIR sudo chown hive$HIVE_CONF_DIR/hive.jceks Hadoop集群类型 sudo mv/tmp/hive.jceks$HIVE_CONF_DIR sudo chown hadoop$HIVE_CONF_DIR/hive.jceks 在EMR控制台目标集群Hive...
概述
本文简要说明非阿里云数据迁移至阿里云文件存储NAS的费用说明、操作流程及迁移工具选择。费用说明 非阿里云数据迁移至阿里云NAS时，会涉及如下费用：文件存储NAS存储费用，推荐购买资源包抵扣。关于NAS的计费详情，请参见 计费概述。如果您...
包年包月（不支持新购）
使用规则 创建包年包月类型极速型NAS文件系统后，NAS根据您的文件系统的最大容量扣除包年包月额度。购买时配置的容量即为该极速型NAS的最大存储容量，如果超出容量，必须进行扩容，否则无法写入。更多信息，请参见 极速型NAS扩容。续费说明...
API概览
地域 API 标题 API概述 DescribeZones 查询可用区 查询一个地域下的所有可用区及可用区所支持的文件系统类型。DescribeRegions 查询地域 查询可以使用的阿里云地域。文件系统 API 标题 API概述 CreateFileSystem 创建文件系统 创建一个文件...
常见问题
产品原理FAQ 文件网关中的文件与OSS间的映射关系如何？文件网关缓存的淘汰机制是什么？文件网关的缓存有什么作用？云存储网关文件上传原理解析是什么？极速同步如何保证反向同步数据一致性？云上部署FAQ 创建网关时找不到可用交换机如何...
查看选项
passwd_file 用于指定保存存储空间访问密钥的文件，默认为/etc/passwd-ossfs。connect_timeout 指定连接的超时时间，单位为秒，默认值为300秒。readwrite_timeout 指定读或者写请求的超时时间，单位为秒，默认值为60秒。max_stat_cache_...
restore（解冻文件）
使用该选项的步骤如下：您需要指定.txt或者XML格式的本地文件，并在本地文件中换行填写所有待解冻的Object。ossutil读取本地文件中的所有Object，然后对这些Object进行批量解冻。说明 当其中一个Object操作出现错误时，ossutil会将该Object...
使用Robocopy工具迁移数据
切换应用到新的文件系统 在数据迁移完成后，如果您需要将现有业务从旧的文件系统切换到新的文件系统上，请在所有ECS和容器上卸载旧的文件系统，然后挂载新的文件系统。使用ECS直接挂载NAS文件系统。执行 net use 记录现有NAS挂载信息，注意...
计费案例
则支付总费用为8.59元，计费明细如下：计费项 说明 存储费用 100.32 GB×0.08元/GB/月=8.03元 说明 低频存储（本地冗余）类型的文件最小存储单元为64 KB，10000个30 KB的文件实际大小约为0.29 GB，OSS实际计量为0.61 GB。因此存储量计算为...
如何使用OSS更省钱？
通过删除不再需要保留的文件降低存储成本 结合以上案例得知，Bucket内存储的1,000万个文件以低频访问类型存储一段时间后，根据业务使用场景可能有40%数量的文件不再需要保留。您可以遵照以下说明删除这部分文件。确保要删除的文件以低频...
资源包概述
资源包是针对按量付费中的文件系统存储用量推出的预付费套餐包。相对于按量付费，资源包提供了更高的折扣优惠。相对于存储包，资源包无需绑定文件系统即可直接使用，同时可以抵扣多个文件系统的存储费用。NAS资源包支持叠加购买，叠加购买...
删除文件系统
已卸载挂载的文件系统目录。具体操作，请参见 卸载挂载目录。注意事项 包年包月类型的极速型NAS实例不支持在控制台或调用API删除，如果您需要删除包年包月类型的极速型NAS实例，可在 退订管理 页面根据包年包月极速型NAS实例的订购状态进行...
资源包介绍
CPFS资源包是针对于CPFS文件系统的存储费用推出的预付费套餐包。相对于按量付费，资源包提供了更高的折扣优惠并支持叠加购买，抵扣多个文件系统的存储费用。资源包到期或额度全部抵扣完后，如果仍有超出部分，将自动转为按量付费。资源包 ...
欠费说明
本文介绍文件存储CPFS的欠费原因，欠费停服说明及查看欠费金额。欠费原因 当您的CPFS文件系统存在以下情况时，将产生欠费：未购买资源包，而您绑定的账户余额不足。已购买资源包，但使用量超出资源包额度，且绑定的账户余额不足。详细的...
操作指南FAQ
本文介绍使用云存储网关过程中的常见...为什么云存储网关与OSS上的文件不一致？块网关FAQ 如何使用块网关创建文件系统并刷新缓存到iSCSI盘？块网关的数据传输原理是怎样的？挂载iSCSI卷有哪些限制？弹性网关FAQ 如何在ECS上挂载弹性网关共享？
使用Fuse-DFS挂载文件存储 HDFS 版
如果您在本地目录中可以查看 文件存储HDFS版 中的文件和目录，则表示挂载成功。重要 客户端重启后，您需要重新挂载 文件存储 HDFS 版 文件系统到本地，建议您配置开机自动挂载。挂载成功后，您可以在本地访问 文件存储 HDFS 版 文件系统，...
Hive采集字段
该文档描述了云迁移中心CMH的Hive采集工具采集您的Hive的所有核心信息。简介 Hive采集工具通过访问Metastore DB 进行相关资源信息采集，当前支持的类型为MySQL数据库。基本信息 通过对Hive的对象信息进行盘点，采集的字段重点举例为：Hive...
文件存储CPFS监控概述
通过查看文件存储CPFS文件系统的容量监控和性能信息，您可以了解文件系统的存储容量使用情况和读写吞吐、读写IOPS等情况。通过为文件系统的重要监控指标设置报警规则，您可以及时获知指标异常并快速处理异常。本文介绍文件存储CPFS支持的...
挂载访问FAQ
问题现象：在文件存储CPFS控制台为文件系统创建POSIX挂载点时，出现如图报错。原因分析：在创建POSIX挂载点时，文件存储CPFS会在您的阿里云账号下自动创建3个按量付费的ECS实例（ecs.g*.large），该实例用来管理CPFS-POSIX客户端集群。在...
Hive访问EMR Phoenix数据
本文通过示例为您介绍，如何使用EMR上的Hive处理EMR Phoenix数据。前提条件 已创建选择了Hive、HBase、Zookeeper和Phoenix服务的自定义集群（Custom），详情请参见 创建集群。说明 因为当前EMR-4.x和EMR-5.x系列版本未支持Phoenix服务，...
文件存储NAS自定义权限策略参考
本文介绍文件存储NAS使用自定义权限策略的场景和策略示例。什么是自定义权限策略 在基于RAM的访问控制体系中，自定义权限策略是指在系统权限策略之外，您可以自主创建、更新和删除的权限策略。自定义权限策略的版本更新需由您来维护。创建...
创建文件系统
文件存储CPFS提供高吞吐和高IOPS的性能，适合高性能计算业务场景。可通过POSIX协议 或NFS协议 在多个计算节点（ECS、容器、云桌面、PAI）中实现文件系统的共享访问。本文介绍如何 创建CPFS文件系统或 创建CPFS智算版文件系统。前提条件 已...
转换文件存储类型
OSS提供标准、低频访问、归档、冷归档和深度冷归档多种存储类型，全面覆盖从热到冷的各种数据存储场景。本文主要介绍如何转换文件（Object）的存储类型。注意事项 本文以华东1（杭州）外网Endpoint为例。如果您希望通过与OSS同地域的其他...
Hive访问EMR HBase数据
本文通过示例为您介绍，如何使用EMR上的Hive处理EMR HBase数据。前提条件 已创建选择了Hive、HBase和Zookeeper服务的自定义集群（Custom），详情请参见 创建集群。已登录集群，详情请参见 登录集群。Hive通过内表访问HBase 如果HBase中没有...
Hive访问EMR HBase数据
本文通过示例为您介绍，如何使用EMR上的Hive处理EMR HBase数据。前提条件 已创建选择了Hive、HBase和Zookeeper服务的自定义集群（Custom），详情请参见 创建集群。已登录集群，详情请参见 登录集群。Hive通过内表访问HBase 如果HBase中没有...
性能优化最佳实践
您可以通过调整core-site.xml配置、TestDFSIO配置或避免使用小文件来优化集群性能。调整core-site.xml配置 在测试集群吞吐性能之前建议在core-site.xml文件中增加或修改如下配置，同步到所有依赖hadoop-common的节点上并重启集群服务。...
快速入门（FC）
NAS与函数计算无缝集成，您可以在函数计算的服务、应用上配置NAS，实时存储训练中的数据，也可以通过函数计算中的应用部署NAS浏览器，实现可视化管理NAS文件系统上的文件，包括上传文件/文件夹、下载文件/文件夹、增删改查等。本文介绍如何...
服务器端加密
已开启数据加密功能的文件系统不能关闭此功能。加密方式 当您对文件存储有高安全性或者合规性要求时，建议您开启服务器端加密功能。服务器端加密密钥采用行业标准AES-256加密算法，保护文件系统静态数据，并通过信封加密机制防止未经授权的...
- 产品推荐
- 这些文档可能帮助您