应用场景

文件存储 HDFS 版 适用于对吞吐要求较高的大数据分析与机器...将Hadoop或其他机器学习应用部署在多个计算资源上,这样应用可以直接通过HadoopFS接口访问数据进行离线或在线计算,也可以直接将计算结果输出到 文件存储 HDFS 版 做永久保存

CDH6数据迁移

本文介绍如何将CDH中本地HDFS的数据迁移到 文件存储 HDFS 版,实现存储计算分离。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作,请参见 文件存储HDFS版快速入门。已在阿里云上创建ECS实例并安装CDH6集群。...

文件存储HDFS版

文件存储HDFS版(Apsara File Storage for HDFS)是面向阿里云ECS实例及容器服务等计算资源的文件存储服务。您可以像在Hadoop分布式文件系统(Hadoop Distributed File System)中管理和访问数据那样使用文件存储HDFS版。您无需对现有大...

监控与日志

监控与日志可有效保障您文件存储NAS资源的可用性、业务的正常运行和健康度。您可通过对应的监控能力,持续收集监控数据。阿里云提供了各种监控与日志审计相关的服务,例如云监控、配置审计等,帮助您实时监控云资源的使用情况和业务运行...

CPFS并行文件存储

CPFS并行文件存储 提供高性能计算文件存储,支持标准的POSIX和MPI-IO协议,自带的高性能计算程序无需任何接口适配和性能优化即可高效执行,满足高性能文件存储需求。产品架构 CPFS并行文件存储 是针对高性能和超大规模存储场景推出的文件...

E-MapReduce数据迁移

本文介绍如何将E-MapReduce HDFS上的数据迁移到 文件存储 HDFS 版 文件系统。背景信息 阿里云E-MapReduce是构建在阿里云云服务器ECS上的开源Hadoop、Spark、Hive、Flink生态大数据PaaS产品。提供用户在云上使用开源技术建设数据仓库、离线...

文件存储 HDFS 版和对象存储OSS双向数据迁移

本文档介绍 文件存储 HDFS 版 和对象存储OSS之间的数据迁移操作过程。您可以将 文件存储 HDFS 版 数据迁移到对象存储OSS,也可以将对象存储OSS的数据迁移到 文件存储 HDFS 版。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和...

生命周期管理概述

阿里云文件存储NAS推出的生命周期管理功能,可以帮助您将低频访问的冷文件数据从标准存储转换到低频存储或归档存储中,并采用低频存储或归档存储计费方式,从而减少文件系统的存储费用。本文主要介绍生命周期的策略、使用限制、应用场景、...

账单和用量查询

您可以通过查询文件存储NAS的账单,及时了解其收费明细,更好地从费用分配角度进行业务决策。本文为您介绍查询费用账单和用量明细的操作方法。查看文件系统费用账单 登录 用户中心。在左侧导航栏,选择 账单管理>账单详情。在 明细账单 页...

文件存储

本文为您介绍 PolarDB PostgreSQL版(兼容Oracle)的文件存储。主节点和只读节点的数据和WAL日志保存在共享存储中。配置文件、Log文件和临时文件在每个节点都会单独保存。主节点的CLOG文件存储在共享存储中;只读节点的CLOG文件会在各自...

生命周期管理FAQ

为了方便您选择生命周期管理策略和需配置的目录,阿里云文件存储NAS提供了NAS分层策略分析工具。您可以使用该工具设置的生命周期管理策略,对指定目录及该目录下的子目录进行扫描并按照冷数据量降序排序,将指定目录中冷数据量最高的几个子...

Web服务和内容管理

使用Nginx代理服务器代理阿里云NAS 通过Windows IIS服务访问阿里云NAS 容器服务ACK+文件存储NAS快速搭建NGINX网站 WordPress网站如何使用文件存储NAS 基于函数计算与WordPress构建serverless网站 阿里云Serverless应用引擎(SAE)支持一键...

配置CDH6使用文件存储 HDFS 版

数据迁移完成后,您还需要配置CDH上的HDFS服务、YARN服务、Hive服务、Spark服务、HBase服务,才能使用 文件存储 HDFS 版。配置Cloudera Management服务 执行以下命令,将最新的 文件存储 HDFS 版 Java SDK复制到Cloudera Management服务的...

数据安全

可用性说明 对象存储 OSS 数据备份和容灾 文件存储 NAS 备份和恢复文件 云原生大数据计算服务 MaxCompute 备份与恢复 同时PAI EasyCkpt是PAI为PyTorch大模型训练场景而开发的高性能Checkpoint框架,通过实现接近零开销的模型保存机制,...

创建文件系统

前提条件 已开通文件存储NAS服务。首次登录 文件存储NAS产品详情页 时,按照页面引导开通服务。重要 在开通页面购买的产品为NAS资源包,并不是NAS文件系统。NAS资源包仅用于抵扣NAS文件系统存储容量费用。更多信息,请参见 资源包概述。...

高级管理FAQ

当您使用安全服务(例如云安全中心的防勒索服务)扫描通用型NAS低频存储或归档存储中的文件时,安全服务会读取目标文件中的数据,文件存储NAS将收取低频存储或归档存储访问流量费用。更多信息,请参见 通用型NAS计费。创建经典网络挂载点时...

配置E-MapReduce服务使用文件存储 HDFS 版

本文介绍如何配置E-MapReduce上的HDFS服务、HIVE服务、SPARK服务、HBase服务来使用 文件存储 HDFS 版。前提条件 已完成数据迁移。具体操作,请参见 E-MapReduce数据迁移。配置HDFS服务 登录 阿里云E-MapReduce控制台。在 集群管理 页面,...

新购ECS时挂载NAS文件系统

挂载多个文件系统 如果要在新购买的ECS实例上同时挂载多个NAS文件系统,请您继续单击 添加文件存储 进行配置。并注意以下几点配置事项:挂载地址:所有的挂载地址必须属于同一个专有网络VPC。如果没有同属于一个VPC的挂载地址,可以为NAS...

开启Binlog

Binlog文件保存时长 保存策略 Binlog文件有如下两种保存策略:开启Binlog后,文件默认保存3天,超过3天的Binlog文件会被自动删除。说明 在2023年11月23日前购买的 PolarDB MySQL版 集群,其Binlog文件默认保存两周(14天)。在2024年1月17...

存储空间占用情况

OSS-HDFS服务使用OSS Bucket存储HDFS数据及其辅助数据,这些数据均存储于Bucket中的.dlsdata/路径下,并产生相应的OSS存储容量的计量和计费。OSS-HDFS文件数据块block OSS-HDFS文件的所有数据块block均占用OSS Bucket的存储空间。OSS-HDFS...

logging(日志转存)

prefix 日志文件存储的目录。如果指定此项,则日志文件将保存在目标Bucket的指定目录下。如果不指定此项,则日志文件将保存在目标Bucket的根目录下。重要 生成日志的源Bucket和存储日志的目标Bucket可以相同也可以不同,但是必须位于同一...

身份管理

推荐的做法是使用RAM身份(即RAM用户和RAM角色)来访问文件存储NAS。RAM用户 RAM用户需要由阿里云账号(即主账号)或拥有管理员权限的RAM用户、RAM角色来创建,且必须在获得授权后才能登录控制台或使用API访问阿里云账号下的资源。对于RAM...

数据流动概述

文件存储CPFS与对象存储OSS之间已实现数据流动。您可以通过创建数据流动任务实现不同源端的数据同步。背景信息 当CPFS Fileset 与OSS Bucket创建数据流动后,CPFS文件系统会自动同步OSS Bucket中的对象元数据。同步完成后您能通过高性能且...

另存为

另存为文件存储时长:如果您需要调整另存为文件的存储时长,请结合 生命周期规则介绍 配置合理的文件过期策略。参数说明 使用 sys/saveas 参数时,您需要携带以下选项:选项 含义 o 目标Object名称,名称需经过URL安全的Base64编码。具体...

断点续传上传

同步的方式 以下代码以同步的方式断点续传上传examplefile.txt文件到目标存储空间examplebucket中exampledir目录下的exampleobject.txt文件,并将断点记录文件保存到本地。填写Bucket名称,例如examplebucket。String bucketName=...

create-symlink(创建软链接)

软链接功能用于快速访问存储空间(Bucket)内的常用文件(Object)。通过 create-symlink 创建软链接后,您可以通过软链接文件快速打开源文件,类似于Windows的快捷方式。注意事项 要创建软链接,您必须具有 oss:PutObject 权限。具体操作...

日志转存

访问OSS的过程中会产生大量的访问日志。您可以通过日志转存功能将这些日志按照固定命名规则,以小时为单位...try {/设置日志文件存储的目录为log/。如果指定此项,则日志文件将保存在目标Bucket的指定目录下。如果不指定此项,则日志文件将...

日志转存

日志前缀:日志文件存储的目录。如果指定此项,则日志文件将保存在目标Bucket的指定目录下。如果不指定此项,则日志文件将保存在目标Bucket的根目录下。例如,日志前缀指定为 log/,则日志文件将被记录在 log/目录下。单击 保存。使用阿里...

CreateSnapshot-创建快照

接口说明 该功能免费公测中,公测期间不保障 文件存储 NAS 服务等级协议(SLA)。仅极速型 NAS 高级型支持创建快照。一个文件系统最多支持创建 128 份快照。文件系统挂载的实例必须处于正常状态,否则无法创建快照。如果创建快照还未完成,...

变量

变量 说明 示例值 bucket 原始文件存储空间(Bucket)名称。test-bucket key 原始文件保存在存储空间中的资源名。重要 使用该变量时请避免将输出文件和输入文件设置为相同文件,否则会覆盖源文件或在批处理时循环触发。path1/path2/name....

使用NAS实现共享存储和持久化存储-Flexvolume

已在文件存储控制台创建一个文件系统,请参见 Linux系统挂载NFS协议文件系统。创建的文件系统需要与您的Kubernetes集群在同一可用区。已在创建好的文件系统中添加容器服务Kubernetes集群的挂载点,请参见 管理挂载点。文件系统挂载时的VPC...

在本地控制台上使用文件网关

步骤一:添加缓存 文件存储网关的每个共享目录都对应唯一一个缓存盘,创建多个共享目录则需要创建多个缓存盘。您可以将共享目录下的数据通过缓存盘传至阿里云OSS,也可以通过缓存盘将阿里云OSS数据同步到本地。在浏览器中,输入 https://<...

基础管理FAQ

文件存储服务默认使用AliyunNASManageENIRole角色来访问您在其他云产品中的资源。解决方案:登录 NAS控制台。在 概览 页面的 常用入口 区域,单击 授权管理。在 极速型和CPFS默认服务授权 卡片,单击 前往授权。在 云资源访问授权 页面,...

管理数据流动任务

本文介绍如何在文件存储控制台创建、管理CPFS数据流动任务及查看任务报告。前提条件 已创建CPFS Fileset。具体操作,请参见 创建Fileset。已创建数据流动。具体操作,请参见 创建数据流动。任务说明 任务类型 按任务对数据的操作,可分为...

媒体处理概述

工作原理 离线转码:将视频文件上传到OSS存储空间,创建媒体处理任务,任务执行成功后,转码后的文件存储在OSS中。边转边播:将视频文件上传到OSS存储空间,创建边转边播播放列表,立即播放,对视频实时按需转码并存储在OSS中。处理参数 ...

ModifyAutoSnapshotPolicy-修改自动快照策略

接口说明 该功能免费公测中,公测期间不保障 文件存储 NAS 服务等级协议(SLA)。仅极速型 NAS 高级型支持该功能。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK...

快照

目前,快照功能免费公测中,公测期间不保障 文件存储NAS服务等级协议(SLA)。注意事项 一个文件系统最多支持手动创建128个快照实例和自动创建128个快照实例。如果文件系统存在创建中的快照,您无法为该文件系统再次创建快照。如果创建快照...

cp(拷贝文件

examplebucket2/desfolder/-include"*abc*"-exclude"*.jpg"-exclude"*.txt"-r 修改文件存储类型 您可以在 覆写 文件时,添加-meta 选项来修改文件存储类型。存储类型可选值为:Standard:标准存储 说明 在OSS ON云盒使用场景中,仅支持...

消息通知

使用处理参数处理文档转换并接收MNS消息通知 转换信息 转换前 文件类型:DOCX 文件名称:example.docx 转换后 文件类型:PNG 文件存储路径:oss:/test-bucket/doc_images/消息通知 将转换结果通知发送到主题名称为 test-topic 的MNS。...

数据加密

适合于对于文件存储有高安全性或者合规性要求的应用场景。例如,深度学习样本文件的存储、在线协作类文档数据的存储。针对不同的应用场景,OSS有以下两种服务器端加密方式:使用KMS托管密钥进行加解密(SSE-KMS)上传文件时,可以使用默认...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据库文件存储 文件存储 CPFS 文件存储HDFS版 对象存储 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用