配置Hive输出组件

根据Hive中数据存储格式不同,支持选择压缩格式不同:数据存储格式为 orc:支持选择的压缩格式包括 zlib、snappy。数据存储格式为 parquet:支持选择的压缩格式包括 snappy、gzip。数据存储格式为 textfile:支持选择的压缩格式包括 gzip、...

入门概述

什么文件存储CPFS 产品规格 使用限制 文件存储CPFS的文件系统类型 文件存储CPFS支持两种文件系统类型,分别为CPFS和CPFS智算版。您可以根据业务负载选择其中一种或几种文件系统,为业务负载提供必要的可靠性、安全性和持续性。更多详情,...

基于gzip压缩格式的堆分析

简介 除了正常的二进制堆转储文件(Heap dump)之外,ATP也支持gzip压缩格式的堆转储文件。用户可以生成gzip压缩格式的堆转储文件,然后上传到ATP直接分析。使用gzip压缩格式使得堆转储文件更小,上传更快,但是另一方面会使得分析过程轻微...

存储格式与SerDe

通过SerDe,DLA可以对OSS上的多种格式的文件进行查询分析,包括纯文本文件(CSV、TSV等)、ORC、PARQUET、JSON、RCFILE以及AVRO格式的文件。在DLA中创建OSS文件表时,您需要通过 STORED AS 指定OSS上的数据文件格式。例如,以下示例指定...

常见问题

产品简介FAQ 云存储网关提供哪些服务?云存储网关支持哪些协议?产品原理FAQ 文件网关中的文件与OSS间的映射关系如何?文件网关缓存的淘汰机制是什么文件网关的缓存有什么作用?云存储网关文件上传原理解析是什么?极速同步如何保证反向...

操作指南FAQ

本文介绍使用云存储网关过程中的常见问题。云上部署FAQ 创建网关时找不到可用交换机如何处理?云存储网关升级失败了该如何处理?本地部署FAQ 如何检测网关网络的联通性?如何在本地数据中心部署云存储网关?云存储网关升级失败了该如何处理...

集成概览

本文为您介绍文件存储 NAS支持的集成方案。OpenAPI集成 文件存储 NAS提供文件系统、权限组、挂载点、生命周期管理、快照等功能的OpenAPI,您可在业务系统中进行集成。关于如何使用阿里云OpenAPI,请参见 使用OpenAPI。版本说明 版本说明 ...

集成概览

云产品 资源类型 CPFS ALIYUN:NAS:DataFlow:创建一个CPFS文件系统与源端存储的数据流动 ALIYUN:NAS:FileSystem:创建文件系统 ALIYUN:NAS:Fileset:创建一个Fileset ALIYUN:NAS:ProtocolMountTarget:创建协议服务导出目录 ALIYUN:NAS:...

最佳实践

Paraformer语音识别 了解如何通过从视频文件中提取音轨、并进行合理的压缩以显著降低文件尺寸,从而减少API调用过程中的文件传输耗时、加快文件转写吞吐效率,请查阅:预处理视频文件以提高文件转写效率。通过OSS可以提高文件转写的效率和...

最佳实践

Paraformer语音识别 了解如何通过从视频文件中提取音轨、并进行合理的压缩以显著降低文件尺寸,从而减少API调用过程中的文件传输耗时、加快文件转写吞吐效率,请查阅:预处理视频文件以提高文件转写效率。通过OSS可以提高文件转写的效率和...

通过控制台投递数据到OSS

投递文件格式 投递的数据Parquet列存格式存储,数据湖投递默认使用PLAIN编码方式,PLAIN编码方式支持任意类型数据。Schema生成方式 指定需要投递的数据列,可以选择任意字段任意顺序、名称写入列存文件,OSS的列存数据会按Schema数组中...

对象存储OSS

OSS没有文件夹的概念,所有元素都是以文件存储,但是您可以通过创建正斜线(/)结尾的文件名(如folder1/folder2/file)来模拟文件夹。开发者一般使用工具或封装了API接口的SDK来开发应用。OSS目前提供包括Java、Python、PHP、Go、...

集成概览

本文为您介绍数据库文件存储DBFS支持的集成方案。OpenAPI集成 数据库文件存储DBFS提供实例、快照、标签等功能的OpenAPI,您可在业务系统中进行集成。关于如何使用阿里云OpenAPI,请参见 使用OpenAPI。版本说明 版本说明 说明 2020-04-18 ...

列举文件

这个文件可以被上传和下载,控制台会对以正斜线(/)结尾的文件以文件夹的方式展示。通过delimiter和prefix两个参数可以模拟文件夹功能:如果设置prefix为某个文件夹名称,则会列举以此prefix开头的文件,即该文件夹下所有的文件和子文件夹...

列举文件

这个文件可以被上传和下载,控制台会对以正斜线(/)结尾的文件以文件夹的方式展示。通过delimiter和prefix两个参数可以模拟文件夹功能:如果设置prefix为某个文件夹名称,则会列举以此prefix开头的文件,即该文件夹下所有的文件和子文件夹...

生命周期管理概述

如果文件以归档类型存储时长不足60天将收取归档存储不足归档时长容量费用。更多信息,请参见 通用型NAS计费。转储时间和文件系统的大小和转储数据量有关。功能开启后,符合生命周期管理策略的文件,第一次转储最快2个小时完成,一般在24...

一般性问题

1.数据库文件存储DBFS是什么,适合什么场景?数据库文件存储DBFS是面向数据库场景优化的POSIX兼容的共享读写的文件存储系统。主要适用于:OLTP及OLAP数据库场景:例如,MySQL、PostgreSQL等。NoSQL数据库场景:例如,MongoDB、RocksDB等。2...

Windows系统挂载SMB协议文件系统

当您想在Windows系统中共享文件时,可以在服务器挂载支持SMB协议的NAS文件系统。本文介绍如何在阿里云Windows ECS实例中挂载SMB协议文件系统。前提条件 在创建NAS SMB协议文件系统的地域,已有可用的云服务器ECS(Windows)。具体操作,请...

常见问题

本文介绍文件存储CPFS的用户咨询和关注的一些问题,帮助您快速了解CPFS。问题概览 产品咨询类 什么文件存储CPFS?CPFS适用什么场景?CPFS的优势有哪些?如何开通服务,并创建文件存储CPFS文件系统?如何选择CPFS的性能规格?CPFS-POSIX...

新功能发布记录

2020-09-30 全部 什么文件存储CPFS 文件存储CPFS 1.0(商用)文件存储CPFS 1.0版本提供高可用、高可靠、高可扩展、高性能的能力,适用各种高性能计算HPC场景。2019-08-09 部分 什么文件存储CPFS 文件存储CPFS(公测)CPFS并行文件系统...

文件处理概述

文件处理是由智能媒体管理IMM提供的对多种文件格式进行压缩、解压等操作的处理能力。您可以将原始文件上传到阿里云对象存储OSS,通过OSS的RESTful数据处理接口 x-oss-process 在任何时间、任何地点、任何互联网设备上对文件进行压缩、解压...

OSS文件处于冻结状态无法正常访问

问题描述 阿里云对象存储OSS中的文件在以下场景处于冷冻状态,无法正常访问。文件存储类型是归档存储、冷归档存储或者深度冷归档存储文件存在违法违规情况。问题原因 阿里云对象存储OSS中的文件处于冻结状态有以下几种情况:在对象存储...

性能优化概述

性能优化指的是通过去除页面冗余内容、文件压缩、图像处理、过滤参数(提高缓存命中率)等方式来提升用户请求的响应速度和文件下载速度。性能衡量指标:请参考 CDN的性能衡量指标。您可以通过性能优化功能,对域名执行如下操作。功能 说明 ...

性能优化概述

性能优化指的是通过去除页面冗余内容、文件压缩、图像处理、过滤参数(提高缓存命中率)等方式来提升用户请求的响应速度和文件下载速度。您可以通过性能优化功能,对域名执行如下操作。功能 说明 页面优化 开启页面优化功能,全站加速会...

压缩和上传网站文件

本文网站文件压缩为.zip格式为例,介绍压缩和上传网站文件的方法。前提条件 已安装软件压缩工具。建议您使用7-Zip,您可以前往 7-Zip官网 下载。已安装FTP客户端。建议您使用FileZilla工具,具体操作,请参见 使用FileZilla管理文件。已...

快照概述

什么是数据库文件系统快照 数据库文件系统快照是某一时间点文件系统状态的备份文件文件系统部署在云盘上,因此文件系统快照服务实际上基于云盘快照,对某个文件系统打快照相当于对该文件系统所部署的所有云盘同时打快照。文件系统第一份...

压缩文件失败

本文介绍压缩文件失败的可能原因和解决方案。问题现象 在主机管理控制台压缩文件后,没有在指定的保存位置找到压缩文件。可能原因 主机的可用网页空间不足。待压缩文件正在被访问或使用。解决方案 登录 主机管理控制台。在左侧导航栏,...

镜像常见格式

VHD文件格式可以被压缩成单个文件存放到本地物理主机的文件系统上,主要包括云服务器启动所需的文件系统。维护简单。可以在不影响物理分区的前提下对它进行分区、格式化、压缩、删除等操作。轻松备份。备份时仅需要将创建的VHD文件进行备份...

点云压缩

点云是海量点的集合,存储点云不仅会消耗大量的存储空间,而且传输不经过压缩的点云文件需要消耗大量的带宽,传输成本很高,因此需要对点云进行压缩。使用场景 自动驾驶:压缩自动驾驶场景中雷达扫描产生的点云数据。数字文博:为文物数字...

导入结构和数据

上传的文件格式需要与所选择的导入文件格式相同,ZIP 压缩文件支持上传.zip 结尾的文件、SQL 文件支持上传.sql 文件以及 CSV 文件支持上传.csv 文件。选择文件编码。ODC 目前支持 ASCII、ISO-8859-1、GB2312、GBK、GB18030、Unicode(UTF-8...

基本概念

本文将向您介绍文件存储NAS产品的使用架构以及涉及的基本概念,便于您更好地理解和使用NAS。文件存储NAS使用架构 文件存储NAS是一个可共享访问、弹性扩展、高可靠、高性能的分布式文件系统。可支持上千台弹性计算ECS、容器服务ACK等计算...

0016-00000814

问题示例 以下请求中通过CompressionType参数指定了目标文件采用GZIP压缩,如果服务端在处理该请求的过程中对目标文件解压失败,则导致该错误。POST/oss-select/bigcsv_normal.csv?x-oss-process=csv%2Fselect HTTP/1.1 Date: Fri,25 May ...

在线解压功能

本文介绍在线解压功能,您可以通过此功能在网盘中直接查看或者下载压缩包内的文件,免去下载后再次解压查看的烦恼,目前支持任意解压或者下载压缩包内的文件,支持 RAR、Zip和7z 格式的压缩包。功能说明 支持在线解压压缩包内单个及多个...

创建文件系统

文件系统实例是运行 文件存储HDFS版 的实体。在使用 文件存储HDFS版 前,您需要先创建文件系统实例。前提条件 已开通 文件存储HDFS版 服务。具体操作,请参见 开通文件存储HDFS版服务。操作步骤 登录 文件存储HDFS版控制台。在顶部菜单栏...

入门概述

文件系统常用操作 如果您想…您可以参考…创建文件系统 创建文件系统 添加挂载点 管理挂载点 创建权限组和规则 管理权限组 挂载文件系统 ECS实例挂载文件系统 容器挂载文件系统 函数计算挂载文件系统 跨网络或账户访问文件系统 本地数据...

如何使用OSS更省钱?

确保要删除的文件以低频访问类型存储的时间已满30天,原因是不足30天的低频访问数据提前删除涉及不足规定时间存储容量费用。关于如何查看Object的LastModifiedTime,请参见 ls(列举账号级别下的资源)。删除40%的低频访问文件。如果删除的...

在线解压功能

本文介绍Basic UI模式的在线解压功能,您可以通过此功能在网盘中直接查看或者下载压缩包内的文件,免去下载后再次解压查看的烦恼,目前支持任意解压或者下载压缩包内的文件,支持 RAR、Zip和7z 格式的压缩包。功能说明 支持在线解压压缩包...

CPFS存储卷概述

更多信息,请参见 什么文件存储CPFS。适用场景 推荐在容器场景对低延迟,百万以上小文件的读写需求,包括AI深度训练、自动驾驶、基因计算、EDA仿真、石油勘探、气象分析以及影视渲染等需要超高吞吐场景的使用。根据业务需求,您可以对...

多台ECS实例批量挂载同一NAS文件系统

如果您的业务场景需要多台ECS实例共享同一NAS文件系统中的数据,您可以通过云助手仅执行一次操作,实现多台ECS实例批量挂载同一NAS文件系统。前提条件 已创建文件系统。具体操作,请参见 创建文件系统。网络环境 当您的业务的网络符合或...

查询文件系统详情

您可以在文件系统的详情页面了解文件系统的概况,例如文件系统存储规格、文件系统资源使用量、文件系统版本、协议类型、版本号等信息。查询文件系统资源使用量 登录 NAS控制台。在左侧导航栏,选择 文件系统>文件系统列表。在顶部菜单栏,...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
文件存储NAS 文件存储HDFS版 数据库文件存储 对象存储 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用