Hudi概述
Apache Hudi是一种数据湖的存储格式，在Hadoop文件系统之上提供了更新数据和删除数据的能力以及消费变化数据的能力。Hudi表类型 Hudi支持如下两种表类型：Copy On Write 使用Parquet格式存储数据。Copy On Write表的更新操作需要通过重写...
Parquet
Parquet是Apache开源项目Hadoop支持的一种列存储文件格式，同一份数据以ORC格式和Parquet格式存储时，其数据扫描性能要优于普通文本CSV格式。本文介绍如何在DLA中为Parquet类型的文件创建表。前提条件 请参见文档 文件格式转换，准备...
最佳实践
容器与云原生 如何利用云存储网关作为Windows Docker存储访问OSS 在Linux Docker容器中挂载使用云存储网关 Windows应用 利用云存储网关搭建Windows文件共享服务器 利用云存储网关的SMB共享搭建windows FTP服务器访问对象存储OSS 如何基于云...
大文件上传如何续传
归档存储数据的上传方式有两种：一种是直接上传完整的文件，这种方式简单快速直接，但是会限制上传文件最大为 6GB。另外一种方式是分段上传，称为Multipart Upload。将上传文件分块，逐步上传每个分块，最后调用完成文件上传接口。由于 ...
混合云备份HBR
存储容量单位包SCU（Storage Capacity Unit）是一种预付费的存储容量资源包，可以抵扣多种不同类型云存储产品的按量付费账单。抵扣系数 SCU可以抵扣多款云产品的部分存储费用，下表列出中国内地SCU抵扣HBR存储费用时的抵扣系数。说明 其他...
网盘与相册服务PDS
存储容量单位包SCU（Storage Capacity Unit）是一种预付费的存储容量资源包，可以抵扣多种不同类型云存储产品的按量付费账单。抵扣系数 阿里云网盘与相册服务PDS分为开发者版和企业版，SCU仅支持抵扣网盘与相册服务（开发者版）。下表列出...
快照服务
存储容量单位包SCU（Storage Capacity Unit）是一种预付费的存储容量资源包，可以抵扣多种不同类型云存储产品的按量付费账单。相比于随包年包月ECS实例购买的云盘或者其他单一产品流量包，SCU可以与多种云产品搭配使用，兼具了性价比与资源...
文件存储NAS
存储容量单位包SCU（Storage Capacity Unit）是一种预付费的存储容量资源包，可以抵扣多种不同类型云存储产品的按量付费账单。抵扣系数 SCU可以抵扣多款云产品的部分存储费用，下表列出中国内地SCU抵扣NAS存储费用时的抵扣系数。说明 其他...
存储容量单位包SCU
存储容量单位包SCU（Storage Capacity Unit）是一种预付费的存储容量资源包，可以抵扣多种不同类型云存储产品的按量付费账单。购买方式 SCU的购买方式，请参见 创建存储容量单位包。抵扣规则 SCU可以抵扣多款云产品的部分存储费用，下表列...
对象存储OSS
存储容量单位包SCU（Storage Capacity Unit）是一种预付费的存储容量资源包，可以抵扣多种不同类型云存储产品的按量付费账单。抵扣系数 SCU可以抵扣多款云产品的部分存储费用，下表列出中国内地SCU抵扣OSS各存储类型费用时的抵扣系数。说明...
更改列存表的数据存储格式
从Hologres V0.10版本开始，Hologres创建的列存表数据存储格式升级为AliORC，该存储格式能够进一步压缩数据存储大小，降低存储成本。本文将会为您介绍在Hologres中如何更改列存表的数据存储格式。使用限制 在Hologres中更改列存表的数据...
创建文件系统
说明 任一可用区仅支持标准型或高级型中的一种类型，建议您将业务部署在支持高级型的可用区。协议类型 极速型NAS仅支持 NFS 协议。极速型配置容量 移动滑块选择文件系统的存储容量，范围为100 GiB~256 TiB。加密类型 服务器端加密类型。...
块存储云盘EBS
存储容量单位包SCU（Storage Capacity Unit）是一种预付费的存储容量资源包，可以抵扣多种不同类型云存储产品的按量付费账单。相比于随包年包月ECS实例购买的云盘或者其他单一产品流量包，SCU可以与多种云产品搭配使用，兼具了性价比与资源...
在文件存储 HDFS 版上使用Apache Tez
Tez主要使用在Apache Hive中，作为Hive的一种执行引擎。与Hive on MR（MapReduce）相比，Hive on Tez具有更好的查询性能和稳定性。步骤一：Hadoop集群挂载 文件存储 HDFS 版 实例 在Hadoop集群中配置 文件存储 HDFS 版 实例。具体操作，请...
存储容量单位包SCU概述
存储容量单位包SCU（Storage Capacity Unit）是一种预付费存储售卖形态，可同时用来抵扣多款云存储产品的按量付费账单。相比于单一产品的存储包，存储容量单位包可以与多种云产品搭配使用，兼具性价比与资源使用的灵活性。适用场景 SCU能...
Network ACL
客户端只要满足设置的网络类型或者来源类型中的任意一种即可正常访问表格存储。限定控制台或绑定VPC访问：支持使用控制台或绑定 VPC 访问 表格存储。限定绑定VPC访问：只能使用SDK或其他接口通过 VPC 访问 表格存储。允许网络类型 允许使用...
用户密钥安全
背景信息 V4签名提供了一种新的身份认证方式，它是由阿里云账号或者RAM用户的AccessKey Secret、日期、地域和产品码四个信息通过一定方式计算得到的字符串。使用V4签名后，如果某一个V4签名被窃取，则该账号下其他地域、其他产品不会受到...
存储包（不支持新购）
存储包是一种预付费的计费方式，只能抵扣已绑定存储包的文件系统的存储容量。本文主要介绍如何升级和续费通用型NAS存储包。说明 文件存储NAS新推出 NAS资源包 后，存储包不再支持新购，但仍然支持续费和升级。相比于存储包，资源包无需绑定...
生命周期配置元素
第三条规则会将前缀为 logs2/，标签为 xx:1，且最后更新时间是60天前的Object存储类型修改为Archive（归档存储）。生命周期规则涉及的各项配置元素例如ID元素、操作元素等将在下文提供详细介绍。ID元素 为存储空间配置的生命周期规则ID。最...
存储格式
AnalyticDB PostgreSQL支持多种存储格式。当您创建一个表时，可以选择表的存储格式为行存表或者列存表。行存表 默认情况下，AnalyticDB PostgreSQL创建的是行存表。行存表使用和 PostgreSQL 相同的堆存储模型（Heap Table），在 OLTP 类型...
方案设计
查询meta表有两种方式：一种是通过GridDataSetId直接查询，另外一种是通过多元索引。可以根据多种属性条件组合进行查询，例如筛选某种类型的数据，按照入库时间从新到老返回等。data表设计 data表的设计要解决五维数据在不同的切分模式下的...
存储格式与SerDe
通过SerDe，DLA可以对OSS上的多种格式的文件进行查询分析，包括纯文本文件（CSV、TSV等）、ORC、PARQUET、JSON、RCFILE以及AVRO格式的文件。在DLA中创建OSS文件表时，您需要通过 STORED AS 指定OSS上的数据文件格式。例如，以下示例指定...
RAM和STS介绍
基本概念 描述 RAM用户 RAM用户也叫RAM账号，是RAM的一种实体身份类型，有确定的身份ID和身份凭证，它通常与某个确定的人或应用程序一一对应。RAM用户具备以下特点：一个阿里云账号下可以创建多个RAM用户，对应企业内的员工、系统或应用...
事件告警
查看事件告警 查看网关事件告警有两种方式，一种是查看当前地域下所有网关的事件告警，另外一种是查看单个网关的事件告警。方式一 登录 云存储网关控制台。单击左侧 事件告警，进入网关事件告警页面。参数 说明 告警类型 目前文件网关仅...
功能特性
数据存储 功能集 功能 功能描述 参考文档 通用型NAS 容量型 通用型NAS的一个细分存储类型，适用于数据库备份、日志存储、Windows用户目录、Linux home目录等成本敏感型且对时延响应要求不高的文件共享业务。通用型NAS 性能型 通用型NAS的...
访问控制
为保证您资源的数据安全，您可以通过访问控制的RAM Policy、资源目录的Control Policy、表格存储实例的Network ACL、表格存储实例的Instance Policy功能对云资源的访问进行控制，只允许被授权的用户访问表格存储资源。表格存储 支持使用的...
Bucket Policy常见示例
Bucket Policy是OSS提供的一种针对存储空间（Bucket）的授权策略，使您可以精细化地授权或限制有身份的访问者（阿里云账号、RAM用户、RAM角色）或匿名访问者对指定OSS资源的访问。例如，您可以为其他阿里云账号的RAM用户授予指定OSS资源的...
索引介绍
这样的排列组合会有非常多，因此不太可能预先将任何一种查询条件的数据放到一起来加快查询的效率，这需要建立很多的二级索引。而如果采用Filter方式，则可能需要扫描全表，效率不高。折中方式是先对某个字段建立二级索引缩小数据范围，然后...
概览
文件系统SDK 文件系统SDK实现了 Hadoop FileSystem 接口，提供一种Hadoop兼容的文件系统，对外输出为一个单独的JAR文件，即 aliyun-sdk-dfs-x.y.z.jar。借助该SDK，Apache Hadoop的计算分析应用（如MapReduce、Hive、Spark等）可以使用 ...
概述
同一份数据以不同的格式保存，数据所占用的存储空间不同，使用DLA扫描数据时所花费的时间和费用也不同。通常情况下，同一份数据以ORC格式和PARQUET格式存储时，其数据扫描性能要优于普通文本CSV格式。因此，您可以将文本类型的数据转换为...
录音存储统计
通话录音存储格式：可选择MP3或者WAV格式的录音，保存后录音的存储格式为选择的格式 是否保存双轨录音：每通正常通话都会生成双轨录音，如果您不使用质检产品，可以选择不保存 录音文件存储：限量存储：限量存储指的是可用量的上限固定，...
NAS存储卷概述（ASK）
它是一种可共享访问、弹性扩展、高可靠以及高性能的分布式文件系统。NAS基于POSIX文件接口，天然适配原生操作系统，提供共享访问，同时保证数据一致性和锁互斥。它提供了简单的可扩展文件存储以供与ECS配合使用，多个ECS实例可以同时访问...
包年包月（不支持新购）
包年包月是一种预付费的计费方式，只能抵扣已创建的包年包月类型的CPFS文件系统存储容量费用。本文介绍包年包月CPFS文件系统的计费规则。说明 CPFS文件系统支持购买 资源包 后，包年包月类型CPFS文件系统不再支持新购，但仍然支持续费及扩...
渐进显示
图片格式为jpg时有两种呈现方式：自上而下的扫描式 是先模糊后逐渐清晰（在网络环境比较差时明显）默认保存为第一种，如果要指定先模糊后清晰的呈现方式，请使用渐进显示参数。参数 名称 描述 取值范围 pr 1：表示保存成渐进显示的jpg格式...
图片URL规则
一个典型的转换字符串，如@100w_100h_90Q.jpg，代表需要一张宽（w）100px、高（h）100px、绝对质量（Q）90%、jpg格式的图片。通过样式访问原图 为了简化使用，用户可以将特定的处理方法保存为样式，这样以后调用同样的处理方法只需要指定...
NAS存储卷概述
它是一种可共享访问、弹性扩展、高可靠以及高性能的分布式文件系统。NAS基于POSIX文件接口，天然适配原生操作系统，提供共享访问，同时保证数据一致性和锁互斥。它提供了简单的可扩展文件存储以供与ECS配合使用，多个ECS实例可以同时访问...
411错误
本文介绍OSS返回411错误的原因和解决方案。...解决方案：OSS有三种类型的Object，分别为Normal、Appendable和Multipart。只有Appendable类型的Object才能执行 AppendObject 操作。请通过 ListObjects（GetBucket）接口获取Object的存储类型。
表设计
说明 有一种局部热点情况，假设10.10.0.0/16这个网段的机器写入量很大，而表格存储是按照分区键的一个范围进行分区的，刚好这些机器又都分在一个分区内，会不会产生热点呢？如果写入压力超过或接近单分区的上限，确实是一个热点，但是表格...
录制存储至OSS
重要 同一路直播流不能同时选择录制到OSS和录制到VOD，只能选择一种方式存储。关于录制存储至VOD，请参见 录制存储至VOD。配置录制模板 登录 视频直播控制台。在视频直播控制台左侧导航栏，单击 域名管理，进入 域名管理 页面。选择您要...
常见问题
可以指定压缩格式和存储格式吗？MaxCompute的表格类型有几种，分别是什么？如果想使用MaxCompute的自定义函数（UDF）或MapReduce功能需要依赖什么资源来完成？MaxCompute常见错误信息如何理解，怎么定位问题？使用MaxCompute需要具备什么...
- 产品推荐
- 这些文档可能帮助您