更改列存表的数据存储格式
从Hologres V0.10版本开始，Hologres创建的列存表数据存储格式升级为AliORC，该存储格式能够进一步压缩数据存储大小，降低存储成本。本文将会为您介绍在Hologres中如何更改列存表的数据存储格式。使用限制 在Hologres中更改列存表的数据...
存储格式与SerDe
STORED AS TEXTFILE 数据文件的存储格式为纯文本文件，默认文件类型。文件中的每一行对应表中的一条记录。STORED AS PARQUET 数据文件的存储格式为PARQUET。STORED AS ORC 数据文件的存储格式为ORC。STORED AS RCFILE 数据文件的存储格式为...
存储格式
AnalyticDB PostgreSQL支持多种存储格式。当您创建一个表时，可以选择表的存储格式为行存表或者列存表。行存表 默认情况下，AnalyticDB PostgreSQL创建的是行存表。行存表使用和 PostgreSQL 相同的堆存储模型（Heap Table），在 OLTP 类型...
概述
存储格式 数据来源及特点 数据量增大或减少 详细数据量 JSON 大量应用产生JSON类型的数据，冗余数据量大。增大151.7%3.02GB AVRO Hadoop生态格式的数据，数据由大部分遗留系统产生。增大8.3%1.3GB RCFile Hadoop生态格式的数据，数据由大...
录音存储统计
功能概述 查看当前账号中录音存储使用情况 查看各个实例中的录音存储使用情况 配置录音的存储格式 配置录音的存储模式，按时存储或者按量存储 模块介绍 计费逻辑 计费逻辑：每个自然月1日开始，记录每日最大存储量，每日超出50G的部分做...
通过缓存优化性能
它不支持其他存储格式，如CSV、JSON和ORC。注意 Delta缓存适用于所有Parquet文件，并且不仅限于 Delta Lake格式的 文件。Delta和Apache Spark缓存 Databricks提供两种类型的缓存：增量缓存和Apache Spark缓存。这是每种类型的特征：存储的...
通过SLS完成日志数据入湖OSS
如果未设置文件后缀，则日志服务会根据存储格式和压缩类型自动生成后缀，例如suffix。写OSS RAM角色 选择 默认角色，表示授权OSS投递作业使用阿里云系统角色AliyunLogDefaultRole将数据写入到OSS Bucket中。如果您还没有生成默认角色，需...
数据湖投递概述
表格存储 数据湖投递可以全量备份或实时投递数据到数据湖OSS中存储，以满足更低成本的历史数据存储，以及更大规模的离线和准实时数据分析需求。应用场景 利用数据湖投递可以实现如下场景需求：冷热数据分层 数据湖投递结合 表格存储 的 ...
创建投递任务
Format：投递的数据的存储以Parquet列存格式存储，数据湖投递默认使用PLAIN编码方式，PLAIN编码方式支持任意类型数据。EventTimeColumn：事件时间列，用于指定按某一列数据的时间进行分区。如果不设置此参数，则按数据写入表格存储的时间...
创建投递任务
format：投递的数据的存储以Parquet列存格式存储，数据湖投递默认使用PLAIN编码方式，PLAIN编码方式支持任意类型数据。eventTimeColumn：事件时间列，用于指定按某一列数据的时间进行分区。如果不设置此参数，则按数据写入表格存储的时间...
产品架构
投递的数据兼容开源生态标准，按照Parquet列存格式存储，兼容Hive命名规范。您可以使用E-MapReduce直接对投递到OSS的数据进行外表分析。计算生态对接 支持对接主流开源流批计算引擎，包括Flink、Spark、Presto等。与阿里大数据平台生态组件...
使用SDK
format：投递的数据的存储以Parquet列存格式存储。默认值为Parquet。数据湖投递默认使用PLAIN编码方式，PLAIN编码方式支持任意类型数据。目前仅支持Parquet，一般无需配置，保持默认即可。eventTimeColumn：事件时间列，用于指定按某一列...
通过控制台投递数据到OSS
通过表格存储控制台创建投递任务，将表格存储数据表中的数据投递到OSS Bucket中存储。前提条件 已开通OSS服务且在表格存储实例所在地域创建Bucket，详情请参见 开通OSS服务。说明 数据湖投递支持投递到和表格存储相同地域的任意OSS Bucket...
敏感数据安全防护方案
背景信息 敏感数据主要包括个人隐私信息、密码/密钥、敏感图片等高价值数据，这些数据通常会以不同的格式存储在您的各类存储系统中。如何更好地发现、定位、保护这些数据，对您的企业非常重要。OSS本身提供了细粒度的 权限管理 和 数据加密...
表格存储是否支持存储JSON数据？
当前表格存储未直接支持存储JSON格式的数据。但是您可以通过字符串方式存储JSON数据，然后通过多元索引中的数组和嵌套类型实现JSON数据的灵活查询。更多信息，请参见 数组和嵌套类型。
将表格存储的增量数据转换为全量数据格式
通过DataWorks控制台，您可以在MaxCompute中使用merge_udf.jar包将 表格存储 的增量数据转换为全量数据格式。前提条件 已导出 表格存储 全量数据到MaxCompute，且已配置同步 表格存储 增量数据到MaxCompute。具体操作，请分别参见 全量导出...
概述
为降低数据存储成本，达到冷热数据分离管理的目的，您可以将共享存储中的冷数据转存至OSS：对于普通表，您可以将冷数据 归档为CSV或ORC格式 并存储在OSS上，随后 PolarDB 节点可通过阿里云内网访问OSS上的数据。对于分区表，您可以将冷数据...
OSS图片格式转换提示“Maximum width and height ...
问题描述 转换存储在阿里云对象存储OSS内图片的格式时，提示“Maximum width and height allowed is 16383 pixels for converting webp”错误。问题原因 WebP格式图片的边长限制为16383像素，您的图片超过了这个限制。解决方案 在转换存储...
功能特性
挂载DBFS 卸载DBFS 从ECS云服务器上卸载数据库文件存储 卸载DBFS 扩容DBFS 支持业务友好地在线扩充存储容量 在线扩容 格式化DBFS 格式化数据库文件存储操作会清空已写入的数据，建议操作前创建快照备份数据库文件存储的数据-重命名DBFS ...
SingleColumnValueFilter
当某些列中存储了自定义格式数据（例如JSON格式字符串）时，如果用户希望通过某个子字段值来过滤查询该列数据，则需要设置此参数。相关操作 条件更新 PutRow UpdateRow DeleteRow BatchWriteRow 过滤器 GetRow GetRange BatchGetRow
格式转换
通过格式转换参数，您无需将图片下载到本地进行转换，只需指定URL转换存储在OSS内原图的格式。本文介绍对图片进行格式转换时所用到的参数及示例。使用场景 适应不同设备和平台：不同的浏览器、操作系统或移动设备可能支持不同的图片格式。...
revert-versioning（恢复版本）
ossutil64 revert-versioning oss:/examplebucket-r-start-time 1592295778-end-time 1592296778 将所有匹配指定条件且已删除的Object恢复为最近的版本 结合-r 选项，将目标存储空间examplebucket下所有格式为TXT且已删除的Object恢复为...
日常运营
步骤与注意事项等 运营内容设置 文本，支持标签与动态参数 图片/视频：图片和视频支持最多添加9张 图片：大小限制2M，格式限制jpg、png、jpeg、gif 视频：大小限制10M，格式支持MP4格式 小程序海报：支持将小程序的特定页面转化为带导购...
数据集成服务
数据导入的迁移方案包括同步MySQL数据到表格存储、同步Oracle数据到表格存储、同步Kafka数据到表格存储、同步HBase数据到表格存储、同步MaxCompute数据到表格存储、同步表格存储数据表中数据到另一个数据表和同步表格存储时序表中数据到另...
Kafka数据接入
通过创建Tablestore Sink Connector，将 云消息队列 Kafka 版 实例的数据源Topic导出到 表格存储（Tablestore）。前提条件 云消息队列 Kafka 版 已为实例开启Connector。具体操作，请参见 开启Connector。已为实例创建数据源Topic。更多...
概述
您可以像使用物理硬盘一样格式化并建立文件系统来使用块存储。文件存储NAS 阿里云文件存储NAS（Network Attached Storage）是一款面向阿里云ECS实例、E-HPC和容器服务等计算节点的高可靠、高性能的分布式文件系统，可共享访问、弹性扩展。...
块存储
您可以像使用物理硬盘一样格式化并建立文件系统来使用块存储，可满足绝大部分通用业务场景下的数据存储需求。适用场景 阿里云为您的云服务器ECS提供了丰富的 块存储产品类型，包括基于分布式存储架构的云盘以及基于物理机本地硬盘的本地盘...
阿里云存储服务
您可以像使用物理硬盘一样格式化并建立文件系统来使用块存储。阿里云为您的云服务器ECS提供了丰富的 块存储产品类型，包括基于分布式存储架构的云盘以及基于物理机本地硬盘的本地盘产品。其中：云盘是阿里云为云服务器ECS提供的数据块级别...
OSS小时数据
取值如下：standard：标准存储-本地冗余 IA：低频访问-本地冗余 archive：归档存储-本地冗余 coldarchive：冷归档存储 deepcoldarchive：深度冷归档存储 standard-zrs：标准存储-同城冗余 IA-zrs：低频访问-同城冗余 archive-zrs：归档存储...
服务地址
每个 表格存储 实例对应一个服务地址（Endpoint），应用程序进行表和数据操作时需要指定服务地址。不同访问场景下需使用相应的服务地址格式。说明 每个地域对应的RegionID请参见 地域。服务地址类型 服务地址包括公网地址、公网（双栈）...
使用Go语言驱动
本文介绍如何使用Go语言驱动连接表格存储。注意事项 目前支持使用SQL查询功能的地域有华东1（杭州）、华东2（上海）、华北2（北京）、华北3（张家口）、华北5（呼和浩特）、华北6（乌兰察布）、华南1（深圳）、西南1（成都）、中国香港、...
对象存储优化
存储空间清单功能以周为单位，对您存储空间内的对象进行扫描，扫描完成后会生成CSV格式的清单报告，并存储到您指定的存储空间内。在清单报告中，您可以有选择地导出指定对象的元数据信息，如文件大小、加密状态等。数据监控 OSS监控服务 为...
CreateDataFlow-创建数据流动
创建一个CPFS文件系统与源端存储的数据流动。接口说明 基础操作 文件存储 CPFS 2.2.0 及以上版本、智算 CPFS 2.4.0 及以上版本支持数据流动。文件存储 CPFS、CPFS 智算版状态为运行中，才能创建数据流动。一个文件存储 CPFS 或者 CPFS 智算...
NAS存储卷概述
您可以在容器服务Kubernetes集群中使用阿里云NAS存储卷。本文介绍NAS存储卷的使用场景、注意事项等。前提条件 使用NAS数据卷之前，您需要在 文件存储管理控制台 上创建文件系统，并在文件系统中添加挂载点。创建的NAS文件系统挂载点需要和...
获取存储空间的存储容量
本文介绍如何获取指定存储空间（Bucket）的存储容量以及Bucket内不同存储类型文件（Object）的数量及其存储容量。注意事项 本文以华东1（杭州）外网Endpoint为例。如果您希望通过与OSS同地域的其他阿里云产品访问OSS，请使用内网Endpoint。...
音频转码
存储空间优化：高品质无损音频（如FLAC）占用大量存储空间，为了在移动设备上节省空间，用户会选择将其转码为有损但压缩率高的格式，如MP3。在线流媒体服务：在线音乐平台或广播电台会将原始音频文件转码成多种比特率版本，以适应不同网络...
媒体处理概述
媒体处理是由智能媒体管理（IMM）提供的对多种视频格式进行转换的处理能力。您可以将原始视频上传保存到阿里云对象存储OSS上，通过OSS的RESTful数据处理接口 x-oss-async-process，在任何时间、任何地点、任何互联网设备上对视频进行视频...
概述
增量数据同步到MaxCompute后，您可以在MaxCompute中使用merge_udf.jar包将表格存储的增量数据转换为全量数据格式。具体操作，请参见 将表格存储的增量数据转换为全量数据格式。准备工作 已确认和记录表格存储中要同步到MaxCompute的实例和...
如何选用NAS、OSS和EBS？
本文介绍文件存储NAS与对象存储OSS、块存储EBS的区别和部署架构，帮助您更好地选用合适的阿里云存储服务。产品对照表 文件存储NAS、对象存储OSS和块存储EBS的主要区别如下表所示。对比项 文件存储NAS 对象存储OSS 块存储EBS 特点 原有使用...
NAS存储卷FAQ
NAS存储卷挂载时间延长 NAS存储卷挂载失败时出现timeout错误 使用NAS存储卷时，提示chown:option not permitted 挂载NAS存储卷失败 使用NAS动态存储卷时Controller的任务队列已满且无法创建新的PV NAS存储卷挂载时间延长 问题现象：NAS存储...
- 产品推荐
- 这些文档可能帮助您