快速玩转Tablestore入门与实战
通道服务：表格存储全增量一体消费通道 Tablestore表设计最佳实践 Tablestore+DeltaLake（快速开始）架构原理-架构设计思想 数据中台之结构化大数据存储设计 结构化大数据分析平台设计 云上应用系统数据存储架构演进 Lambda plus：云上大...
数据操作篇
如需在单个属性列存储超过 2 MB 的数据，如图片、音乐、文件等，可以使用 OSS（Object Storage Service）对其进行存储。OSS 是阿里云提供的开放存储服务，用以应对海量数据的存储和访问。OSS 的存储单价比表格存储更低，更适合存储文件。...
时序分析存储概述
高数据压缩率存储 列存储能更好地利用数据重复性，结合RLE、DICTIONARY、DELTA、BIT-PACKING等方法进行压缩编码，将数据进行压缩，存储空间利用率高，从而节省存储成本。灵活分层的TTL设置 在同一张时序表上，时序数据存储和时序分析存储...
实例选型和集群规划
列存储支持较高的数据压缩率，可以达到2~5倍的压缩比，即对于1 TB原始数据，入库后若采用了列存储压缩设置，数据在0.5 TB以内，那么可以按1 TB的用户数据存储空间来规划集群实例规格。云原生数据仓库PostgreSQL版也支持OSS外表的扩展，可...
持续架构优化
在云环境中，各类暂态数据、结构化和非结构化持久数据都可以采用云来保存，从而依靠“云”天生的计算存储分离架构进行实现。拥抱Serverless 拥抱Serverless是架构优化的方向，是面向下一代的应用架构。服务化、模块化、可编排和可组装的...
阿里云存储服务
对象存储 对象存储OSS（Object Storage Service）是阿里云提供的海量、安全、低成本、高可靠的云存储服务，尤其适合非结构化数据（如图片、音视频）的存储。OSS在阿里云上提供高级别的数据持久性和可用性。其存储类型分为标准存储、低频...
数据服务集群
特性介绍 Apache HBase是具有高可靠性、高性能、列存储、可伸缩、实时读写的开源NoSQL分布式系统。特别适用于需要实时读写随机访问超大规模数据集的场景。Apache HBase和Apache Hadoop生态系统无缝集成，并且可以和Apache Phoenix搭配使用...
存储格式
列存表 列存表（Column-Oriented Table）的按列存储格式，数据访问只会读取涉及的列，适合少量列的数据查询、聚集等数据仓库应用场景，在此类场景中，列存表能够提供更高效的 I/O。但列存表不适合频繁的更新操作或者大批量的INSERT写入场景...
使用冷存储
更改表属性为热存储 如果表的列存储类型为冷存储，想更改为热存储，可以通过修改表属性的方式实现。如果这个列簇中已经有数据，那么只有在major compaction之后，数据才会回到热存储中 HBase Shell hbase(main):014:0>alter 'coldTable',{...
EMQX数据接入
将模拟温湿度数据通过MQTT协议上报到EMQX Cloud后，使用EMQX Cloud数据集成将数据转存到表格存储（Tablestore）。前提条件 EMQX Cloud 已在EMQX Cloud上创建专业版EMQX集群。已完成与阿里云平台的VPC对等连接创建，用于VPC之间的网络连接。...
导出全量数据到MaxCompute
如果需要使用MaxCompute备份 表格存储 数据或者迁移 表格存储 数据到MaxCompute中使用，您可以通过在DataWorks数据集成控制台新建和配置离线同步任务来实现全量数据导出。全量数据导出到MaxCompute后，您可以使用DataWorks数据分析功能查看...
CPFS并行文件存储
产品架构 CPFS并行文件存储 是针对高性能和超大规模存储场景推出的文件存储产品，可结合云上、云下多级存储池，拥有全新的文件存储架构。该产品单集群最大可扩展至16384个节点，提供高性能、高可扩展性、低时延的分布式文件存储服务。可...
持续的存储优化
维护一个规模适中且价格合理的存储架构是一个持续的过程。为了更有效地利用存储支出，您每个月都应该进行存储优化工作。您可以通过以下方式简化这项工作：建立用于优化存储和设置存储策略的持续机制。通过监控服务和账单密切监控存储成本。...
新功能发布记录
它基于共享存储架构设计，通过文件协议提供数据库定制功能，具备企业级存储特性。主要服务于云上自建数据库、基于传统存储区域网络（SAN）的应用等，为用户提供低成本、高性能、高可用的存储服务。2020-06-29 华东1（杭州）产品简介
如何优化高并发IM系统架构
介绍如何使用表格存储的主键增列功能优化高并发IM系统架构。背景 在构建社交IM和朋友圈应用时，最基本的需求是将用户发送的消息和朋友圈的更新及时、准确地更新给该用户的好友。这需要为用户发送的每一条消息或者朋友圈更新设置一个序号...
什么是数据库存储DBFS
它基于共享存储架构设计，通过文件协议提供数据库定制功能，具备企业级存储特性。主要服务于云上自建数据库，基于传统SAN的应用等，为用户提供高IO性能和高可用性。同时减少数据库直接基于块的架构复杂度和成本（例如数据库做主备容灾的...
DefinedColumnSchema
表示表的预定义列结构定义。数据结构 message DefinedColumnSchema { required string name=1;required DefinedColumnType type=2;} 参数 类型 是否必选 描述 name string 是 预定义列名称。type DefinedColumnType 是 预定义列类型。相关...
块存储
适用场景 阿里云为您的云服务器ECS提供了丰富的 块存储产品类型，包括基于分布式存储架构的云盘以及基于物理机本地硬盘的本地盘产品。其中：云盘是阿里云为云服务器ECS提供的数据块级别的块存储产品，采用多副本的分布式机制，具有低时延、...
AddDefinedColumn
调用AddDefinedColumn接口为数据表添加预定义列。预定义列可用作索引表的主键列或者属性列。注意事项 只有使用二级索引时才需要为数据表添加预定义列。使用多元索引时，无需为数据表添加预定义列。预定义列最多支持创建32个。请求消息结构 ...
产品技术服务
服务内容 服务类型 服务内容 方案咨询与设计 针对用户的实际业务需求，提供 表格存储 技术架构选型、表结构设计、资源评估、权限安全等各方面专业建议，保障架构选型满足未来业务的快速发展。数据迁移支持 根据不同的数据源和应用场景，...
列式JSONB
同时因为JSONB中的Value是按列式存储的，在存储层可以达到像普通结构化数据一样的存储和压缩效率，从而有效降低存储，实现降本增效。说明 JSONB列式存储优化功能对JSON类型数据不适用，实际使用过程中请不要对JSON类型开启列式存储优化。...
计算与分析概述
表格存储支持通过MaxCompute、Spark、Hive或者HadoopMR、函数计算、Flink、Presto、表格存储多元索引以及表格存储SQL查询进行计算与分析。分析工具选择 表格存储支持 宽表模型、时序模型 等多种数据模型。使用不同数据模型时支持的分析工具...
如何理解主键、数据分区和数据分区键
列ToAddr、MailSize、Subject、Read分别表示收件人、邮件大小、邮件主题和邮件是否已读，这些为普通的列，存储邮件的相关信息。图中表格存储把UserID为U0001和U0002的用户信息划在一个数据分区中，而把UserID为U0003和U0004的用户信息划分...
产品优势
宽表模型：经典模型，目前绝大部分半结构化、结构化数据均使用宽表模型进行存储。时序模型：适用于时序数据、时空数据等核心数据场景。消息模型：表格存储 自研模型，主要用于消息数据，适用于IM、Feed和物联网设备消息下推等消息系统中...
常见问题
本文列举了阿里云 表格存储 的常见问题，帮助您快速了解 表格存储。一般性常见问题 什么是 表格存储？表格存储 面向海量结构化数据提供Serverless表存储服务，同时针对物联网场景深度优化提供一站式的IoTstore解决方案。适用于海量账单、IM...
列存索引技术架构介绍
同时，结合 PolarDB 基于共享存储一写多读的架构特征，其包含如下几个关键的技术创新点：存储引擎（InnoDB）支持存储列式索引（Columnar Index），用户可以通过DDL语句为一张表中的全部列或者部分列创建列索引，列索引采用列压缩存储，其...
功能概述
表格存储 面向海量结构化数据提供Serverless表存储服务，适用于海量账单、IM消息、物联网、车联网、风控、推荐等场景中的结构化数据存储，提供海量数据低成本存储、毫秒级的在线数据查询和检索以及灵活的数据分析能力。基本概念 在使用 ...
SingleColumnValueFilter
当某些列中存储了自定义格式数据（例如JSON格式字符串）时，如果用户希望通过某个子字段值来过滤查询该列数据，则需要设置此参数。相关操作 条件更新 PutRow UpdateRow DeleteRow BatchWriteRow 过滤器 GetRow GetRange BatchGetRow
PolarDB HTAP实时数据分析技术解密
最后，列存中的大块存储结构，结合MIN、MAX等粗糙索引信息可以实现大范围的数据过滤。所有这些行为都极大的提升了IO的效率。在存储计算分离架构下，减少网络读取的数据量，可以缩短对查询处理的响应时间。列式存储同样能提高CPU在处理数据...
概述
PolarDB MySQL版 内置了一系列存储过程，您可以使用这些存储过程获取SQL语句中未被索引覆盖的列名，同时可以获取创建列存索引的DDL语句。本文介绍了 PolarDB MySQL版 内置的存储过程以及如何使用存储过程辅助创建列存索引。简介 PolarDB ...
功能特性
数据存储 功能集 功能 功能描述 参考文档 元数据存储 宽表模型 宽表模型（WideColumn）是类Bigtable/HBase模型，可应用于元数据、大数据等多种场景。宽表模型通过数据表存储数据，单表支持PB级数据存储和千万QPS。数据表具有Schema-Free、...
什么是表格存储
表格存储（Tablestore）面向海量结构化数据提供Serverless表存储服务，同时针对物联网场景深度优化提供一站式的IoTstore解决方案。适用于海量账单、IM消息、物联网、车联网、风控、推荐等场景中的结构化数据存储，提供海量数据低成本存储、...
概述
使用Spark计算引擎访问表格存储时，您可以通过E-MapReduce SQL或者DataFrame编程方式对表格存储中数据进行复杂的计算和高效的分析。应用场景 功能特性 对于批计算，除了基础功能外，Tablestore On Spark提供了如下核心优化功能：索引选择：...
原子计数器
假设您需要使用表格存储来存储图片元信息并统计图片数信息，数据表内每一行对应某一个用户ID，行上的其中一列用于存储上传的图片，另一列用于实时统计上传的图片数。使用UpdateRow接口增加一张新图片时，原子计数器+1。使用UpdateRow接口...
多元索引介绍
多元索引基于倒排索引和列式存储，可以解决大数据的复杂查询难题，包括非主键列查询、全文检索、前缀查询、模糊查询、多字段自由组合查询、嵌套查询、地理位置查询、统计聚合（max、min、count、sum）等功能。多元索引在车联网场景中主要...
通过控制台使用分析存储
在 表格存储 控制台创建时序模型实例后，您可以在实例下创建分析存储并使用SQL查询时序数据。注意事项 时序分析存储功能将从2023年12月20日正式开始收费。目前支持使用时序分析存储功能的地域有华东1（杭州）、华东2（上海）、华北2（北京...
什么是云存储网关CSG
产品架构 云存储网关的云上服务和部署在客户数据中心的存储网关实例可以形成存储网关集群。通过这个集群，文件数据可以在云上集群和线下集群之间自由流动，帮助实现数据和业务的协同迁移，典型的场景有文件备份、数据分发和容灾。同时通过...
ListBucketInventory
ListBucketInventory 用于批量获取某个存储空间（Bucket）中的所有清单（Inventory）任务。说明 单次请求最多可获取100条清单配置项内容。若需获取超过100条清单配置项，则需发送多次请求，并保留相应的token，作为下一次请求的参数。调用...
配置冷存储
开通 云原生多模数据库 Lindorm 的冷存储功能后，需要配置数据库中的表或者列簇，本文介绍配置冷存储的方法。背景信息 冷存储功能仅支持 云原生多模数据库 Lindorm 引擎版本为2.1.8及以上。Lindorm支持在表级别设置存储属性，可以将整个表...
对象命名
与传统文件系统中的层级结构不同，OSS内部使用扁平结构存储数据。即所有数据均以对象（Object）的形式保存在存储空间（Bucket）中。对象（Object）是OSS存储数据的基本单元，也被称为OSS的文件。OSS通过键名（Key）唯一标识存储的Object。...
- 产品推荐
- 这些文档可能帮助您