在文件存储 HDFS 版上使用Presto
本文主要介绍如何在 文件存储 HDFS 版 上搭建及使用Presto。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作，请参见 文件存储HDFS版快速入门。已搭建Hadoop集群并且所有集群节点已安装JDK，JDK版本不低于1.8...
文件存储NAS自定义权限策略参考
本文介绍文件存储NAS使用自定义权限策略的场景和策略示例。什么是自定义权限策略 在基于RAM的访问控制体系中，自定义权限策略是指在系统权限策略之外，您可以自主创建、更新和删除的权限策略。自定义权限策略的版本更新需由您来维护。创建...
文件存储NAS的审计事件
文件存储NAS已与操作审计服务集成，您可以在操作审计中查询用户操作文件存储产生的管控事件。操作审计支持将管控事件投递到日志服务SLS的LogStore或对象存储OSS的存储空间中，满足实时审计、问题回溯分析等需求。操作审计记录了用户通过...
数据库文件存储的审计事件
操作审计记录了用户通过OpenAPI或控制台等方式操作云资源时产生的管控事件，数据库文件存储支持在操作审计中查询的事件如下表所示。事件名称 事件含义 AddTagsBatch 批量增加DBFS实例标签。AttachDbfs 为一台ECS实例挂载一块按量付费数据库...
文件存储 HDFS 版支持Python SDK吗？
文件存储 HDFS 版 提供两种SDK，分别为管控系统SDK和文件系统SDK。仅管控系统支持Python SDK，文件系统仅支持Java SDK。更多有关管控系统支持的SDK语言，请参见 OpenAPI。
在文件存储 HDFS 版上使用Apache Spark
本文主要介绍如何在挂载 文件存储 HDFS 版 的Hadoop集群上安装及使用Apache Spark。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作，请参见 文件存储HDFS版快速入门。已为Hadoop集群所有节点安装JDK，且JDK...
文件存储NAS系统权限策略参考
本文描述文件存储NAS支持的所有系统权限策略及其对应的权限描述，供您授权 RAM 身份时参考。什么是系统权限策略 权限策略是用语法结构描述的一组权限的集合，可以精确地描述被授权的资源集、操作集以及授权条件。阿里云访问控制（RAM）产品...
在文件存储 HDFS 版上使用Apache Flink
本文介绍如何在挂载 文件存储 HDFS 版 的Hadoop集群上安装及使用Apache Flink。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作，请参见 文件存储HDFS版快速入门。已为Hadoop集群所有节点安装JDK，且JDK版本不...
创建文件系统实例后，为什么无法访问文件存储 HDFS 版...
本文介绍了在创建文件系统实例后无法访问 文件存储 HDFS 版 的排查方法。您可以请根据以下几种情况进行排查：确认访问 文件存储 HDFS 版 服务的ECS实例对应的专有网络及虚拟交换机ID，与挂载点的专有网络及虚拟交换机ID是否一致。确认挂载...
文件存储NAS服务关联角色
文件存储NAS使用服务关联角色获取其他云服务或云资源的访问权限。通常情况下，服务关联角色是在您执行某项操作时，由系统自动创建。在自动创建服务关联角色失败或文件存储NAS不支持自动创建时，您需要手动创建服务关联角色。阿里云访问控制...
什么是Git LFS大文件存储?
什么是Git大文件存储？Git LFS(Large File Storage）是一个开源的Git大文件版本控制的解决方案和工具集，工具自身是基于 Golang 进行实现，并在Github上开源。原理上是通过对Git客户端进行扩展的方式，从而集成并兼容了原生的Git客户端。...
在文件存储 HDFS 版上使用Apache Tez
本文主要介绍在挂载 文件存储 HDFS 版 的Hadoop集群上安装及使用Apache Tez。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作，请参见 文件存储HDFS版快速入门。已为Hadoop集群所有节点安装JDK，且JDK版本不...
查看低频/归档存储文件
您可以通过NAS控制台查看已转储至低频存储或归档存储中的文件、低频存储或归档存储使用量以及该文件最近一次被访问的时间等信息。查看低频/归档存储文件使用量 登录 NAS控制台。在左侧导航栏，选择 生命周期管理>低频/归档存储文件管理。在...
文件存储 HDFS 版和数据库MySQL双向数据迁移
本文介绍如何使用Sqoop工具实现 文件存储 HDFS 版 和关系型数据库MySQL之间的双向数据迁移。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作，请参见 文件存储HDFS版快速入门。已搭建Hadoop集群。建议您使用的...
如何查看Bucket中某个目录下所有文件的存储大小？
您可以通过阿里云SDK、命令行工具ossutil、REST API等多种方式，查看Bucket中某个目录下所有文件的存储大小。阿里云SDK 您可以通过 Java SDK、PHP SDK 、Python SDK、Go SDK、C++ SDK、C SDK 查询目录下所有文件各自的存储大小。命令行工具...
在文件存储 HDFS 版上使用Apache HBase
说明 如果您使用的是CDH或者阿里云E-MapReduce中内置的HBase，请参见 在文件存储HDFS版上使用CDH6 和 在文件存储HDFS版上使用E-MapReduce。步骤一：Hadoop集群挂载 文件存储 HDFS 版 实例 在Hadoop集群中配置 文件存储 HDFS 版 实例。具体...
使用RAM授权访问文件存储 HDFS 版
示例一：授予RAM用户对 文件存储 HDFS 版 管控系统只读权限 {"Version":"1","Statement":[{"Action":["dfs:Get*","dfs:List*"],"Resource":"*","Effect":"Allow"}]} 示例二：授予RAM用户对文件系统的权限 说明为 文件存储 HDFS 版 文件系统...
【公告】数据库文件存储计费方式调整
尊敬的阿里云用户，阿里云将于2023年05月04日起调整数据库文件存储计费方式。调整时间 2023年05月04日18:00:00。调整地域 华东1（杭州）、华东2（上海）、华北2（北京）、华南1（深圳）。调整内容 调整前 调整后 计费方式 按小时计费，不足...
【公告】数据库文件存储按量付费价格下调
尊敬的阿里云用户，阿里云将于2023年01月30日起调整数据库文件存储（公测）按量付费价格。调整时间 2023年01月30日00:00:00。调整地域 华东1（杭州）、华东2（上海）、华北2（北京）、华南1（深圳）。调整内容 版本类型 调整前单价（GB/...
使用云企业网跨VPC访问文件存储 HDFS 版
已在需要访问 文件存储 HDFS 版 的ECS上配置Hadoop环境。具体操作，请参见 配置Hadoop 和 部署依赖。背景信息 云企业网CEN（Cloud Enterprise Network）是运行在阿里云私有全球网络上的一张高可用网络。通过转发路由器TR（Transit Router）...
云监控控制台的对象存储OSS监控中文件上传和下载存在...
问题描述 在阿里云云监控控制台中，查看阿里云对象存储OSS监控时，发现文件上传和下载存在延迟问题。问题原因 OSS和云监控是两个独立的产品，OSS将数据推送至云监控，由云监控产品进行分析处理。云监控控制台中查看到的数据是云监控产品...
UpgradeFileSystem-扩容文件系统存储容量
扩容极速型NAS文件系统或CPFS文件系统的存储容量。接口说明 仅支持极速型 NAS 文件系统和中国站 CPFS 文件系统扩容。通用型 NAS 按需自动扩容，无须使用本 API。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。...
UpgradeFileSystem-扩容文件系统存储容量
扩容极速型NAS文件系统或CPFS文件系统的存储容量。接口说明 仅支持极速型 NAS 文件系统和中国站 CPFS 文件系统扩容。通用型 NAS 按需自动扩容，无须使用本 API。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。...
配置E-MapReduce服务使用文件存储 HDFS 版
本文介绍如何配置E-MapReduce上的HDFS服务、HIVE服务、SPARK服务、HBase服务来使用 文件存储 HDFS 版。前提条件 已完成数据迁移。具体操作，请参见 E-MapReduce数据迁移。配置HDFS服务 登录 阿里云E-MapReduce控制台。在 集群管理 页面，...
视频直播将录制文件存储到OSS提示“The record ...
问题描述 阿里云视频直播将录制文件存储到对象存储OSS时，提示“The record content between starttime and endtime is empty”错误。问题原因 调用视频录制CreateLiveStreamRecordIndexFiles接口时传参的StartTime和EndTime不合规，从而...
如何存储函数程序产生的较大文件？
如果需要在磁盘中存储较大文件，例如，超过500 MB的文件，您可以按照以下方式处理：直接在 函数计算控制台，...函数计算 为您提供临时文件存储目录/tmp，您还可以使用 文件存储 NAS 持久化存储您的文件。使用流式方式处理数据，减小内存消耗。
如何存储函数程序产生的较大文件？
如果需要在磁盘中存储较大文件，例如，超过500 MB的文件，您可以按照以下方式处理：使用性能实例，当前性能实例...函数计算 为您提供临时文件存储目录/tmp，您还可以使用文件存储NAS持久化存储您的文件。使用流式方式处理数据，减小内存消耗。
将表格存储数据下载到本地文件
表格存储支持通过命令行工具或者DataX工具直接下载数据到本地文件。您也可以通过DataWorks工具将数据同步到OSS后再在OSS侧下载数据到本地文件。下载方式 请根据所需文件格式选择合适的方式进行数据下载，详细说明请参见下表。导出文件格式 ...
Dataphin开发模块中上传的资源文件是存储在哪里的
问题描述 Dataphin开发模块中上传的资源文件是存储在哪里的？解决方案 如果计算类型选择了具体的计算引擎，那么是存在对应的计算引擎上的，比如计算类型选择了MaxCompute，那么资源文件就是存在MaxCompute上的。如果计算类型选择‘无归属...
存储在OSS中的GIF文件使用图片样式后变成静态图片
问题描述 在使用阿里云对象存储OSS的图片处理服务时，GIF格式的文件使用图片样式进行图片缩放或添加水印后，变成静态图片。原图URL和图片处理后的URL示例如下：原图URL为：...
OSS归档存储类型文件解冻后访问提示“The operation ...
问题描述 阿里云对象存储OSS的Bucket设置了生命周期，在将归档存储类型的文件解冻后，无法正常访问文件，提示以下错误：StatusCode=403,ErrorCode=InvalidObjectState,ErrorMessage="The operation is not valid for the object's state...
文件存储NAS
本视频介绍通过CADT部署NAS的操作配置方法和注意事项。
由于数据文件过多导致集群存储空间被占满的解决办法
本文介绍了由于数据文件过多导致存储空间被占满的问题描述、解决方案以及后续维护等内容。问题描述 PolarDB MySQL版 集群可能会由于数据文件长时间未整理导致占用过多存储空间，且在集群的 空间分析 页面的 空间变化趋势 区域中确认数据...
由于日志文件过多导致集群存储空间被占满的解决办法
本文介绍了由于日志文件过多导致存储空间被占满的问题描述、解决方案以及后续维护等内容。问题描述 PolarDB MySQL版 集群由于Binlog文件、Redo日志或者Undo日志过多，占用了太多存储空间，且在空间分析中确认日志空间使用量较高。如下图所...
由于临时文件过多导致集群存储空间被占满的解决办法
本文介绍了由于临时文件过多导致存储空间被占满的问题描述、解决方案以及后续维护等内容。问题描述 PolarDB MySQL版 集群可能会由于查询语句的排序、分组、关联表产生临时表文件，或大事务未提交前产生Binlog cache文件，从而出现本地空间...
- 产品推荐
- 这些文档可能帮助您