格式化为内部存储设备-格式化为内部存储设备文档介绍内容-阿里云

概述

同一份数据以不同的格式保存，数据所占用的存储空间不同，使用DLA扫描数据时所花费的时间和费用也不同。通常情况下，同一份数据以ORC格式和PARQUET格式存储时，其数据扫描性能要优于普通文本CSV格式。因此，您可以将文本类型的数据转换为...

什么是混合云存储

产品描述 SA混合云存储阵列软硬一体的存储设备，专为对存储有高性能和稳定性要求，并且希望无缝上云的企业客户而设计。集成了阿里云存储服务，融合了公共云存储和传统存储阵列的简单、灵活、高效和可靠的优点。CPFS并行文件存储高性能...

SA混合云存储阵列

阿里云混合云存储阵列作为软硬一体的存储设备，集成了阿里云存储服务，融合了公共云存储和传统存储阵列的优点：简单客户无需更改原有的IT架构，就可以像使用本地存储设备一样使用阿里云混合云存储阵列，同时使用本地存储空间和云端存储...

时序数据存储概述

您可使用物联网平台中数据服务提供的数据存储功能，存储设备时序数据。设备时序数据包括设备上报的物模型（属性、服务和事件）数据和通过时序数据存储规则配置的自定义Topic数据。本文介绍时序数据存储的相关概念和使用。相关概念名词 ...

PutBucket

取值范围如下：LRS（默认）本地冗余LRS将您的数据冗余存储在同一个可用区的不同存储设备上，可支持两个存储设备并发损坏时，仍维持数据不丢失，可正常访问。说明创建无地域属性Bucket时，仅支持LRS类型。ZRS 同城冗余ZRS 采用多可用区（AZ...

产品概述

数据存储：海量数据按需存储，多模数据统一存储支持设备时序数据每秒千万点高并发写入多节点多副本高可靠存储，最高1:20压缩比高性价比存储按照设备和属性按需灵活定义存储时长设备数据和业务数据分级存储设备监控：对设备资产进行...

关闭或开启物模型数据存储

如果需要长时间存储设备数据、降低存储成本、进一步处理设备数据例如数据分析、数据报表、数据API，可以开启设备数据备份。开启产品数据备份后，会自动在离线存储中创建相应产品的时序/快照表，包括产品属性时序表、产品属性快照表 ...

数据湖投递概述

表格存储数据湖投递可以全量备份或实时投递数据到数据湖OSS中存储，以满足更低成本的历史数据存储，以及更大规模的离线和准实时数据分析需求。应用场景利用数据湖投递可以实现如下场景需求：冷热数据分层数据湖投递结合表格存储的 ...

数据迁移概述

将数据迁移至OSS 您可以基于实际业务需求将本地、第三方存储设备或者OSS源存储空间（Bucket）内的数据迁移至OSS目标Bucket，具体如下表所示：迁移方式说明相关文档在线迁移使用在线迁移服务，您可以将第三方数据轻松迁移至阿里云对象...

什么是文件存储NAS

单个NAS文件系统的性能能够随存储容量线性扩展，使用户无需购买高端的文件存储设备，大幅降低硬件成本。使用NAS文件存储，您只需为文件系统使用的存储空间付费，不需要提前配置存储，并且不存在最低费用或设置费用。更多信息，请参见产品...

产品介绍

作为本地工作站的存储设备进行使用。设备外观微型闪电立方正面有设备状态、网络和硬盘指示灯用于识别设备当前状态，背面有电源开关、HDMI接口、网络接口、USB接口和电源接口，方便您接入和操作设备。关于设备各指示灯和接口的详细说明，请...

数据服务简介

数据存储时序存储：物联网平台中数据服务提供的时序存储功能，可以存储设备时序数据。设备时序数据包括设备上报的物模型（属性、服务和事件）数据和通过时序存储规则配置的自定义Topic数据。离线存储：物联网平台的数据服务提供离线存储...

更改列存表的数据存储格式

从Hologres V0.10版本开始，Hologres创建的列存表数据存储格式升级为AliORC，该存储格式能够进一步压缩数据存储大小，降低存储成本。本文将会为您介绍在Hologres中如何更改列存表的数据存储格式。使用限制在Hologres中更改列存表的数据...

功能特性

数据存储 存储设备的热数据和冷数据，以进一步利用和分析数据。热数据存储：包括设备上报的物模型（属性、服务和事件）数据和通过热数据存储规则配置的自定义Topic数据。冷数据存储：包括平台系统表、时序/快照表和自定义存储表。数据指标...

存储格式

AnalyticDB PostgreSQL支持多种存储格式。当您创建一个表时，可以选择表的存储格式为行存表或者列存表。行存表默认情况下，AnalyticDB PostgreSQL创建的是行存表。行存表使用和 PostgreSQL 相同的堆存储模型（Heap Table），在 OLTP 类型...

客户部署混合云存储阵列时，现有IT架构或应用是否需要...

客户无需改变现有IT架构或应用，就可以像使用本地存储一样，使用混合云存储阵列，同时利用本地存储空间和云端存储空间，无需关注本地设备存储协议和云存储协议之间的兼容转换，配置简单，易于使用。

录音存储统计

功能概述查看当前账号中录音存储使用情况查看各个实例中的录音存储使用情况配置录音的存储格式 配置录音的存储模式，按时存储或者按量存储模块介绍计费逻辑计费逻辑：每个自然月1日开始，记录每日最大存储量，每日超出50G的部分做...

创建产品

产品是设备的集合，通常是一组具有相同功能定义的设备集合。例如，产品指同一个型号的产品，设备就是该型号下的某个设备。使用物联网平台接入设备前，您需在物联网平台控制台创建产品。本文介绍创建产品的具体操作。前提条件开通物联网...

敏感数据安全防护方案

本文介绍如何将阿里云对象存储OSS与阿里云数据安全中心DSC（Data Security Center）结合，对敏感数据进行识别、分类、分级和保护。前提条件已开通DSC 开通步骤请参见快速实现数据分类分级。已开通OSS 开通步骤请参见开通OSS服务。背景...

通过控制台投递数据到OSS

通过表格存储控制台创建投递任务，将表格存储数据表中的数据投递到OSS Bucket中存储。前提条件已开通OSS服务且在表格存储实例所在地域创建Bucket，详情请参见开通OSS服务。说明数据湖投递支持投递到和表格存储相同地域的任意OSS Bucket...

创建投递任务

Format：投递的数据的存储以Parquet列存格式存储，数据湖投递默认使用PLAIN编码方式，PLAIN编码方式支持任意类型数据。EventTimeColumn：事件时间列，用于指定按某一列数据的时间进行分区。如果不设置此参数，则按数据写入表格存储的时间...

存储格式与SerDe

DLA内置了处理各类数据文件的Serialize/Deserilize（简称SerDe，用于序列化和反序列化），您无需编写程序，直接选用一款或多款SerDe来匹配OSS上的数据文件格式。通过SerDe，DLA可以对OSS上的多种格式的文件进行查询分析，包括纯文本文件...

创建投递任务

format：投递的数据的存储以Parquet列存格式存储，数据湖投递默认使用PLAIN编码方式，PLAIN编码方式支持任意类型数据。eventTimeColumn：事件时间列，用于指定按某一列数据的时间进行分区。如果不设置此参数，则按数据写入表格存储的时间...

使用SDK

创建投递任务后，表格存储数据表中的数据会自动投递到OSS Bucket中存储。注意事项目前支持使用数据湖投递功能的地域有华东1（杭州）、华东2（上海）、华北2（北京）和华北3（张家口）。数据湖投递不支持同步删除操作，表格存储中的删除...

UNLOAD

完成上述授权的前期准备后，您需要根据导出数据的格式类型，选择对应的导出方式：通过内置Extractor导出（StorageHandler）导出其他开源格式数据通过内置Extractor导出（StorageHandler）命令格式 unload from {|[partition()]} into ...

UNLOAD

完成上述授权的前期准备后，您需要根据导出数据的格式类型，选择对应的导出方式：通过内置Extractor导出（StorageHandler）导出其他开源格式数据通过内置Extractor导出（StorageHandler）命令格式 unload from {|[partition()]} into ...

内置存储与用户OSS

数据库备份DBS提供数据库的备份恢复能力，备份数据保存在云存储上，云存储支持内置存储、用户OSS。对比项 DBS内置存储用户OSS 安全性客户无法直接访问备份集。已接入DBS安全权限体系。客户可直接访问备份集。需要自行管理备份集安全。...

租户产品

产品是设备的集合，通常是一组具有相同功能定义的设备集合。例如：产品指同一个型号的产品，设备就是该型号下的某个设备。创建产品登录物联网平台控制台。左侧导航栏选择设备管理>租户产品，单击创建产品。按照页面提示填写信息，然后...

通过SLS完成日志数据入湖OSS

数据湖支持在低存储成本的情况下，更好地满足数据长期存储、查询、分析、读取等需求。本文介绍通过日志服务SLS完成日志数据入湖的操作方式。前提条件已在日志服务Project所在的地域创建Bucket。具体操作，请参见控制台创建存储空间。背景...

管理Paimon Catalog

配置Paimon Catalog后，您就可以在Flink全托管控制台直接访问阿里云对象存储OSS中的Paimon表。本文为您介绍如何在Flink全托管模式下创建、查看、使用和删除Paimon Catalog。重要由于平台正在逐步灰度中，如果在使用过程中无法找到运行按钮...

计费常见问题

备份计划存储费用（可选）：配置包年包月备份计划时，当备份目标存储类型选择为 DBS内置存储，系统将根据存入DBS内置存储中的实际数据量的大小与时长收取存储费用。费用详情，请参见存储费用。备份计划备份费用（可选）：若备份计划备份的...

存储费用

数据库备份DBS内置存储池和云数据库存储池默认为按量付费，如需降低存储费用，可购买存储包进行抵扣。存储费用（按量付费）当您在DBS控制台、RDS控制台、PolarDB控制台、MongoDB控制台执行某些备份操作时，产生的备份文件将存储于备份目标...

备份集下载功能概览

数据库备份DBS 为云数据库、ECS自建数据库提供灵活的备份与恢复功能，同时也支持将云上备份集下载到本地，进一步增强数据的安全性。您可通过手动或自动模式进行数据下载，...相关文档 DBS内置存储和用户OSS的区别，请参见 内置存储与用户OSS。

概述

若集群中某些库表的数据几乎没有更新、插入和修改操作，且读取频率非常低，如果您有降本需求，可以使用 PolarDB MySQL版提供的冷数据归档功能，将这部分数据转存至低成本的OSS上存储，以降低数据存储成本。本章节介绍了冷数据归档方法、...

设备使用物模型通信

物模型数据存储设备上报的物模型数据默认会自动写入时序数据存储空间，您可以根据业务需要，执行以下操作：关闭物模型数据存储：手动关闭指定产品部分或全部物模型的时序数据存储服务。设置存储时效：2022年12月01日后创建的企业版实例，...

什么是消息解析

物联网平台定义设备消息的标准数据格式为Alink JSON。对于低配置且资源受限或者对网络流量有要求的设备，不适合直接构造JSON数据与物联网平台通信，可将原数据透传到物联网平台。物联网平台提供消息解析功能，可以根据您提交的脚本，将消息...

物联网存储介绍

其中设备元数据使用宽表模型存储，设备消息数据使用消息模型存储，设备时序数据使用时序模型存储。Serverless架构采用存储计算分离架构，存储层、计算层、写入层支持独立弹性。支持单表10 PB级数据量、万亿条记录数以及千万级别的TPS能力...

开发Link Visual的功能介绍

建议设备实现时默认开启，要求开机上报是 App和设备开发者需要关注并处理该物模型 FormatStorageMedium 服务格式化存储介质 App发起并由设备端响应格式化存储介质按需 App和设备开发者需要关注并处理该物模型 StorageRecordMode 属性 ...

使用Topic通信

如果设备的消息格式不是 Alink JSON，必须使用消息解析将设备上报的自定义格式数据解析为 Alink JSON 格式，将物联网平台下发的 Alink JSON 格式数据解析为设备自定义格式的数据。消息解析的概念和使用步骤，请参见什么是消息解析。...

格式化为内部存储设备

新品推荐