时序分析存储概述
高数据压缩率存储 列存储能更好地利用数据重复性，结合RLE、DICTIONARY、DELTA、BIT-PACKING等方法进行压缩编码，将数据进行压缩，存储空间利用率高，从而节省存储成本。灵活分层的TTL设置 在同一张时序表上，时序数据存储和时序分析存储...
多元索引计量计费
存储 行数 费用计算 8 GB 900万行 存储费用：8*0.0015元/GB/小时=0.012元/小时 预留读吞吐量生成规则：8 GB对应80 CU，900万行对应45 CU。由于当数据存储量大于200 MB且数据行数大于40万行，预留读吞吐量系统最低会设置为100 CU，因此预留...
EMQX数据接入
将模拟温湿度数据通过MQTT协议上报到EMQX Cloud后，使用EMQX Cloud数据集成将数据转存到表格存储（Tablestore）。前提条件 EMQX Cloud 已在EMQX Cloud上创建专业版EMQX集群。已完成与阿里云平台的VPC对等连接创建，用于VPC之间的网络连接。...
方案设计
这四列主键列标记一行表格存储中的数据，这行数据需要保存后两维的数据，即一个格点平面。这种设计下，五维中的前三维都可以通过主键列的值来定位，即对于前三维的每一种情况，都对应表格存储中的一行。由于前三维分别代表变量、时间和高度...
产品优势
多元索引：基于倒排索引和列式存储，支持多字段自由组合查询、模糊查询、地理位置查询、全文检索等，可解决大数据的复杂查询难题。多计算生态接入 表格存储 支持接入开源生态体系与阿里自研生态体系。表格存储 支持对接MaxCompute、Spark等...
方案背景
多元索引基于倒排索引、列式存储、空间索引等，可解决大数据的复杂查询、分析聚合等需求。通过为数据表创建多元索引，可实现全文检索、前缀查询、模糊查询、组合查询、统计聚合等功能。样例场景 某大型连锁超市会实时产生大量的消费数据，...
常见问题
本文列举了阿里云 表格存储 的常见问题，帮助您快速了解 表格存储。一般性常见问题 什么是 表格存储？表格存储 面向海量结构化数据提供Serverless表存储服务，同时针对物联网场景深度优化提供一站式的IoTstore解决方案。适用于海量账单、IM...
宽表模型介绍
模型介绍 表格存储 宽表模型是类Bigtable/HBase模型，通过数据表采用三维结构（行、列和时间）存储数据。数据表的每一行可以有不同的列，可以动态增加或者减少属性列，创建表时无需为表的属性列定义严格的Schema。模型构成 宽表模型如上图...
通过控制台使用分析存储
在 表格存储 控制台创建时序模型实例后，您可以在实例下创建分析存储并使用SQL查询时序数据。注意事项 时序分析存储功能将从2023年12月20日正式开始收费。目前支持使用时序分析存储功能的地域有华东1（杭州）、华东2（上海）、华北2（北京...
表设计
属性列设计 表格存储支持宽行，即一行可以非常宽，例如几十万个属性列。但是很宽的行，如果一次性读取，可能会读不出（超时），需要指定列或者分页读取某些列。因此，原则上不太建议非常宽的行（万列以上），可能会使某些功能受限。属性列...
ListBucketInventory
ListBucketInventory 用于批量获取某个存储空间（Bucket）中的所有清单（Inventory）任务。说明 单次请求最多可获取100条清单配置项内容。若需获取超过100条清单配置项，则需发送多次请求，并保留相应的token，作为下一次请求的参数。调用...
通过控制台使用宽表模型
主键列设置为自增列后，在写入一行数据时，该主键列无需填值，表格存储 会自动生成该主键列的值。自动生成的主键列的值在分区键内严格递增且唯一。表主键名称的命名规则为由大小写字母、数字或下划线（_）组成，且只能以字母或下划线（_）...
数据湖投递概述
表格存储 数据湖投递可以全量备份或实时投递数据到数据湖OSS中存储，以满足更低成本的历史数据存储，以及更大规模的离线和准实时数据分析需求。应用场景 利用数据湖投递可以实现如下场景需求：冷热数据分层 数据湖投递结合 表格存储 的 ...
原子计数器
假设您需要使用表格存储来存储图片元信息并统计图片数信息，数据表内每一行对应某一个用户ID，行上的其中一列用于存储上传的图片，另一列用于实时统计上传的图片数。使用UpdateRow接口增加一张新图片时，原子计数器+1。使用UpdateRow接口...
SQL概述
由于表格存储中原始表的列名大小写敏感，当使用SQL时，原始表的列名会统一转换为小写字母进行匹配，即如果要操作表格存储表中的Aa列，在SQL中使用AA、aa、aA、Aa均可，因此表格存储原始表的列名不能同时为AA、aa、aA和Aa。保留字与关键字 ...
产品架构
本文介绍 表格存储 的系统架构和典型应用架构。系统架构 表格存储 的架构如下图所示。业务场景 表格存储 适用于元数据、消息数据、时空数据、大数据等场景下的系统搭建。数据接入 表格存储 提供SDK、DataWorks、IoT规则引擎等多种数据接入...
预留模式和按量模式的区别
存储部分按照多元索引存储单独按小时计费 计算部分根据存储空间和行数消耗预留CU 存储部分根据多元索引的数据总量按小时计费 弹性能力 计算部分按购买使用，无弹性能力 存储部分弹性扩容 计算与存储均支持弹性扩容 场景推荐 计费模式 付费...
如何选用NAS、OSS和EBS？
本文介绍文件存储NAS与对象存储OSS、块存储EBS的区别和部署架构，帮助您更好地选用合适的阿里云存储服务。产品对照表 文件存储NAS、对象存储OSS和块存储EBS的主要区别如下表所示。对比项 文件存储NAS 对象存储OSS 块存储EBS 特点 原有使用...
创建投递任务
format：投递的数据的存储以Parquet列存格式存储，数据湖投递默认使用PLAIN编码方式，PLAIN编码方式支持任意类型数据。eventTimeColumn：事件时间列，用于指定按某一列数据的时间进行分区。如果不设置此参数，则按数据写入表格存储的时间...
创建投递任务
Format：投递的数据的存储以Parquet列存格式存储，数据湖投递默认使用PLAIN编码方式，PLAIN编码方式支持任意类型数据。EventTimeColumn：事件时间列，用于指定按某一列数据的时间进行分区。如果不设置此参数，则按数据写入表格存储的时间...
通过控制台投递数据到OSS
通过表格存储控制台创建投递任务，将表格存储数据表中的数据投递到OSS Bucket中存储。前提条件 已开通OSS服务且在表格存储实例所在地域创建Bucket，详情请参见 开通OSS服务。说明 数据湖投递支持投递到和表格存储相同地域的任意OSS Bucket...
资源包抵扣规则
资源包类型 抵扣计费项 抵扣说明 通用型NAS资源包 抵扣通用型NAS如下计费项的费用：通用型存储容量（容量型/性能型/高级型）低频介质存储容量 通用型NAS资源包根据存储空间内通用型NAS文件系统所产生的存储容量进行抵扣，通用型存储容量...
使用SDK
format：投递的数据的存储以Parquet列存格式存储。默认值为Parquet。数据湖投递默认使用PLAIN编码方式，PLAIN编码方式支持任意类型数据。目前仅支持Parquet，一般无需配置，保持默认即可。eventTimeColumn：事件时间列，用于指定按某一列...
方案实现
步骤四：读取数据 数据读取包括如下两种方式：主键读取 通过getRow,getRange,batchGetRow等接口基于原生表格存储的主键列读取数据。主键读取用于索引（自动）反查，您也可以提供主键（文件编号md5）的单条查询的页面，亿量级下查询速度保持...
测试环境
表格存储实例 本次测试使用了两个表格存储实例：高性能实例：位于华东1区域 容量型实例：位于华东1区域 说明 高性能实例与容量型实例的区别在于其磁盘类型不同，高性能实例使用了SSD磁盘，而容量型实例则混合使用了SSD磁盘和SATA磁盘。...
创建数据表
表格存储每行的数据列都可以不同，属性列的列名在写入时指定。表格存储可包含1个~4个主键列。主键列是有顺序的，与用户添加的顺序相同，例如PRIMARY KEY（A,B,C）与PRIMARY KEY（A,C,B）是不同的两个主键结构。表格存储会按照主键的大小为...
生命周期概述
您可以基于最后一次修改时间（Last Modified Time）以及最后一次访问时间（Last Access Time）的策略创建生命周期规则，定期将存储空间（Bucket）内的多个文件（Object）转储为指定存储类型，或者将过期的Object和碎片删除，从而节省存储...
实例
实例（Instance）是您使用和管理 表格存储 服务的实体，每个实例相当于一个数据库。表格存储 对应用程序的访问控制和资源计量都在实例级别完成。开通 表格存储 服务后，您需要通过 表格存储 管理控制台来创建实例，然后在实例内进行表的...
创建数据表
表格存储每行的数据列都可以不同，属性列的列名在写入时指定。表格存储可包含1个~4个主键列。主键列是有顺序的，与用户添加的顺序相同，例如PRIMARY KEY（A,B,C）与PRIMARY KEY（A,C,B）是不同的两个主键结构。表格存储会按照主键的大小为...
对象命名
命名示例 根据Object存储于Bucket内的不同位置，Key的表示方法也有所区别，具体说明如下：Object所在Bucket的位置 Key的表示方法 目标存储空间examplebucket根目录下存放了名为exampleobject.txt的Object exampleobject.txt 目标存储空间...
模型介绍
时间（WHEN）时间是时序数据最重要的特征，是区别于其他数据的关键属性。时空（WHERE）时空通常是通过纬度二维坐标定位到地点。科学计算领域（例如气象）通过经纬度和高度三维坐标来定位。状态（WHAT）用于描述特定个体在某一刻的状态，...
CDN加速和OSS传输加速的区别
概述 本文主要介绍阿里云对象存储OSS的传输加速功能和CDN加速OSS资源的区别，以便您根据实际业务进行选择。详细信息 阿里云对象存储OSS以海量、安全、低成本、高可靠等特点已经成为用户存储静态资源和文件的首要选择，实际使用中面向全球...
如何使用阿里云CDN和OSS等产品实现跨境加速
本文主要介绍如何使用阿里云CDN、DCDN（全站加速）、全球加速和对象存储OSS产品避免业务出现跨境限制。详细信息 CDN加速的原理是通过节点的缓存，从而实现加速的效果。如果节点无缓存，则需要回源获取。当回源涉及跨境时，则会导致链路限制...
使用教程
下表列出了从表格存储的数据类型（行）转换到Hive或Spark数据类型（列）的支持情况。类型转换 TINYINT SMALLINT INT BIGINT FLOAT DOUBLE BOOLEAN STRING BINARY INTEGER 支持，损失精度 支持，损失精度 支持，损失精度 支持 支持，损失...
Kafka数据接入
kafka_table 表格存储 存储同步数据的表类型。推荐使用时序模型，作为物联网场景中的标准数据。取值范围如下：宽表模型 时序模型 时序模型 消息 Key 格式 消息Key的输入格式。支持 String 和 JSON 两种格式，默认值为 JSON。当 表格存储 ...
常见问题
以下列场景为例，说明使用版本控制时的存储费用（假定当月有30天）：当月第1天：通过PutObject操作向某一存储空间（Bucket）上传了20 GB大小的Object，存储类型为标准存储（本地冗余）。当月第16天：通过PutObject操作对同一个Bucket中的同...
资源包介绍
存储套餐 高性能存储：筛选 实例类型 列为 ssd，然后对 数据存储（Byte）列求和得到1天的高性能存储总量，最后根据总量计算每个小时的平均用量。容量型存储：筛选 实例类型 列为 hybrid，然后对 数据存储（Byte）列求和得到1天的高性能存储...
数据集成服务
数据导入的迁移方案包括同步MySQL数据到表格存储、同步Oracle数据到表格存储、同步Kafka数据到表格存储、同步HBase数据到表格存储、同步MaxCompute数据到表格存储、同步表格存储数据表中数据到另一个数据表和同步表格存储时序表中数据到另...
将表格存储数据下载到本地文件
表格存储支持通过命令行工具或者DataX工具直接下载数据到本地文件。您也可以通过DataWorks工具将数据同步到OSS后再在OSS侧下载数据到本地文件。下载方式 请根据所需文件格式选择合适的方式进行数据下载，详细说明请参见下表。导出文件格式 ...
数据操作篇
如果应用程序不方便使用 OSS，可以将超过 2 MB 的单个值拆分成多个行，存储在表格存储中。错误重试加入时间间隔 表格存储可能会遇到软硬件问题，导致应用程序的部分请求失败，并返回可重试的错误。建议应用程序遇到此类错误时等待一段时间...
- 产品推荐
- 这些文档可能帮助您