执行引擎
内存复用：向量化执行引擎中每个算子一次是生成多行执行结果、并存储在一块行式/列式内存空间中。该空间会在算子间最大可能复用，避免重复的内存申请/释放。批量内存分配：向量化执行引擎预测计算每个算子需求的内存空间，结合执行引擎...
Doris概述
在存储引擎方面，Doris采用列式存储，按列进行数据的编码压缩和读取，能够实现极高的压缩比，同时减少大量非相关数据的扫描，从而更加有效利用IO和CPU资源。Doris也支持比较丰富的索引结构，来减少数据的扫描：Sorted Compound Key Index：...
数据服务集群
特性介绍 Apache HBase是具有高可靠性、高性能、列存储、可伸缩、实时读写的开源NoSQL分布式系统。特别适用于需要实时读写随机访问超大规模数据集的场景。Apache HBase和Apache Hadoop生态系统无缝集成，并且可以和Apache Phoenix搭配使用...
创建数据表
表格存储每行的数据列都可以不同，属性列的列名在写入时指定。每一项的顺序是主键名，主键类型PrimaryKeyType，主键设置PrimaryKeyOption（可选）。PrimaryKeyType可以是INTEGER、STRING（UTF-8编码字符串）、BINARY三种，分别用 ...
生成列
STORED：生成列的值在数据行插入或更新时由存储节点DN计算，并将结果储存下来，需要占用存储空间。LOGICAL：与STORED类型相似，生成列的值在数据行插入或更新时计算，区别是生成列的值在计算节点CN计算，随后以普通列的形式存储到DN中。该...
ORDER BY 子句
可选的 ORDERBY 子句具有以下形式：ORDER BY expression[ASC|DESC][,.]expression 可以是输出列的名称或序号（SELECT 列表项），也可以是由输入列值组成的任意表达式。ORDER BY 子句使结果行根据指定的表达式进行排序。根据最左边的表达式...
列存索引技术架构介绍
简介 PolarDB In-Memory Column Index功能提供了列式存储以及内存计算能力，让用户可以在一套数据库上同时运行TP和AP型混合负载，在保证现有 PolarDB 优异的OLTP性能的同时，大幅提升了在大数据量上运行复杂查询的性能。原理图如下：列存...
使用Java SDK写入数据时报错The count of attribute ...
问题现象 使用 表格存储 Java SDK写入数据到数据表时出现如下报错：The count of attribute columns exceeds the maximum:128 可能原因 写入数据到 表格存储 数据表时，一行最多支持写入1024列。在使用TableStoreWriter的过程中，客户端会...
表表达式
最简单的表表达式只是引用磁盘上的一个表，一个所谓的基本表，但是我们可以用更复杂的表表达式以多种方法修改或组合基本表。表表达式里可选的 WHERE、GROUP BY 和 HAVING 子句指定一系列对源自 FROM 子句的表的转换操作。所有这些转换最后...
更改列存表的数据存储格式
从Hologres V0.10版本开始，Hologres创建的列存表数据存储格式升级为AliORC，该存储格式能够进一步压缩数据存储大小，降低存储成本。本文将会为您介绍在Hologres中如何更改列存表的数据存储格式。使用限制 在Hologres中更改列存表的数据...
快速入门
文件存储 HDFS 版 适用于互联网行业、金融行业等有大数据计算与存储分析需求的行业客户进行海量数据存储和离线计算的业务场景，充分满足以Hadoop为代表的分布式计算业务类型对分布式存储性能、容量和可靠性的多方面要求。开通 文件存储 ...
虚拟列
使用虚拟列功能时，您可以通过修改多元索引Schema或者新建多元索引来实现新字段新数据类型的查询功能，而无需修改表格存储的存储结构及数据。前提条件 已初始化Client。具体操作，请参见 初始化。已创建数据表，且数据表的数据生命周期...
表表达式
最简单的表表达式只是引用磁盘上的一个表，一个所谓的基本表，但是我们可以用更复杂的表表达式以多种方法修改或组合基本表。表表达式里可选的 WHERE、GROUP BY 和 HAVING 子句指定一系列对源自 FROM 子句的表的转换操作。所有这些转换最后...
时序模型介绍
基于物联网场景中多源异构数据存储、高并发吞吐、海量数据高性价比存储、多维度数据处理与分析等需求，表格存储推出了一站式物联网存储IoTstore解决方案，为物联网设备元数据、消息数据、时序轨迹等海量数据提供存储、查询、检索、分析、...
通过命令行工具快速使用云存储网关软件版
本文介绍如何通过命令行工具快速使用云存储网关软件版。前提条件 已注册阿里云账号，并完成实名认证。具体操作，请参见 注册阿里云账号。说明 建议您使用RAM用户登录云存储网关控制台进行相关操作。更多信息，请参见 账号访问控制。已开通...
常见问题
您可以通过OSS文档获取咨询类和错误排除类等常见问题答案。本文提供OSS各类常见问题的入口链接汇总。错误码 203错误 400错误 403错误 404错误 405错误 409错误 411错误 412错误 416错误 424错误 500错误 503错误 售前常见问题 在购买和使用...
INSERT
该表达式可以使用 table_name 指定的表中的任何列。写成可返回被插入或更新行的所有列。output_name：要用于被返回列的名称。ON CONFLICT 子句 可选的 ON CONFLICT 子句为出现唯一性违反或排除约束违反错误时提供另一种可供选择的动作。...
产品架构
本文介绍 表格存储 的系统架构和典型应用架构。系统架构 表格存储 的架构如下图所示。业务场景 表格存储 适用于元数据、消息数据、时空数据、大数据等场景下的系统搭建。数据接入 表格存储 提供SDK、DataWorks、IoT规则引擎等多种数据接入...
列存索引（IMCI）发布说明
技术原理 列存索引特性在 PolarDB MySQL版 中的功能架构图如下：从以上架构图可以看到，PolarDB MySQL版 从存储引擎、执行算子、优化器三个层面设计了列存索引的特性：存储引擎：支持实时事务级别一致性的行列混合存储；执行算子：面向列存...
概述
技术原理 列存索引特性在 PolarDB MySQL版 中的功能架构图如下：从以上架构图可以看到，PolarDB MySQL版 从存储引擎、执行算子、优化器三个层面设计了列存索引的特性：存储引擎：支持实时事务级别一致性的行列混合存储；执行算子：面向列存...
技术面临的挑战与革新
随着云的概念不断发展，公有云厂商使用基于网络的块存储逐步代替了单机的本地存储，在这样的基础架构下计算和存储耦合的架构已经变得不透明不合理，此时存储计算分离的架构的优势体现了出来，存储计算分离，分布式存储系统使用高密度，低...
pg_attrdef
pg_attrdef 存储列的默认值。列的主要信息存储在 pg_attribute。只有那些显式指定了一个默认值的列才会在这个目录中有一个项。列名称 列类型 描述 oid oid 行标识符。adrelid oid 该列所属的表。adnum int2 列的编号。adbin pg_node_tree ...
更新数据
例如，如果你想把所有产品的价格提高 10%，你可以用：UPDATE products SET price=price*1.10;如你所见，用于新值的表达式也可以引用行中现有的值。我们还忽略了 WHERE 子句。如果我们忽略了这个子句，那么就意味着表中的所有行都要被更新。...
表数据格式
数据文件会按照列式压缩存储，可有效减少存储的数据量，节省成本，也可有效地提升IO读写效率。数据存储分桶 为了进一步优化读写效率，Transactional Table 2.0支持按照BucketIndex对数据进行切分存储，BucketIndex数据列默认复用PK列，...
方案背景
表格存储作为阿里云提供的一款全托管、分布式NoSql型数据存储服务，具有【海量数据存储】、【热点数据自动分片】、【海量数据多维检索】等功能，天然地解决了数据大爆炸这一挑战；在应对数据横向、纵向扩展上能充分发挥其优势。多元索引...
如何对JSON类型进行高效分析
本文介绍了PolarDB IMCI为应对海量结构化与半结构化数据分析场景，通过整合列式JSON、虚拟列、秒级加减列、表列数扩展及列存索引等系列功能而构建出的扩展流计算方案，以及该方案的应用案例。背景 随着应用场景多样化与快速迭代，业务系统...
离线批量读取数据
表格存储提供了BulkExport接口用于在大数据场景下批量读取数据表中的数据。数据写入到数据表后，您可以根据指定条件进行数据读取。前提条件 已初始化OTSClient。具体操作，请参见 初始化OTSClient。已创建数据表并写入数据。参数 参数 说明...
表格存储和传统关系型数据库（例如MySQL、SQL Server...
表格存储是阿里云自研的多模型结构化数据存储，提供海量结构化数据存储以及...相对于传统关系型数据库严格的SCHEMA，表格存储的表是稀疏的，每一行可以有不同的列，可以动态增加或者减少属性列，创建表时无需为表的属性列定义严格的SCHEMA。
查询数据
列表达式（select_expr）通过列表达式指定需要查询的列。使用规则如下：使用星号（*）查询所有列，支持配合WHERE子句指定查询条件。SELECT*FROM orders;使用WHERE子句作为查询条件的示例如下：SELECT*FROM orders WHERE orderprice>=100;...
概览
支持行存储及列存储 建议使用行存储或行列共存 Hologres V0.8版本只支持行存储，V0.9及以上版本支持行存储及列存储。建议使用行存储。不支持 不支持 使用Bayes开发平台。推荐使用阿里云Flink全托管。开源Flink1.10 不支持 支持行存储及列...
过滤器
正则匹配并转换数据类型后再过滤结果 当某些列中存储了自定义格式数据（例如JSON格式字符串）时，如果用户希望过滤查询该列的某个子字段值，则可以通过正则表达式匹配并转换子字段值类型后，再使用过滤器来过滤需要的数据。例如列中存储的...
CREATE INDEX
Lindorm提供了 三种 高效易用的索引：二级索引、搜索索引和列存索引，分别适用于非主键匹配场景、多维查询场景 和列存储数据查询场景。在使用CREATE INDEX语法创建索引时，您可以指定索引类型并添加索引属性。引擎与版本 CREATE INDEX语法...
名词解释
为贴合业务场景并进一步提升查询性能，您可以在创建时序表时指定标签列作为主键，显式指定数据在多个节点分片（Data Sharding）上的分片规则。FIELD ✖️ 〇 Field（量测列）是指时序表中标签列和时间戳列以外的列。TIME SERIES ✖️ 〇 ...
Hudi概述
Merge On Read 使用列式文件格式（Parquet）和行式文件格式（Avro）混合的方式来存储数据。Merge On Read使用列式格式存放Base数据，同时使用行式格式存放增量数据。最新写入的增量数据存放至行式文件中，根据可配置的策略执行COMPACTION...
对接DataV
通过DataV控制台添加表格存储数据源后，您可以使用DataV可视化展现表格存储的数据。前提条件 首次使用表格存储时，请开通表格存储服务以及创建实例和数据表等。具体操作，请参见 通过控制台使用 或者 通过命令行工具使用。首次使用DataV时...
概述
例如，如果 table1 有叫做 a、b 和 c 的列（可能还有其他），那么你可以用下面的查询：SELECT a,b+c FROM table1;（假设 b 和 c 都是数字数据类型）。FROM table1 是一种非常简单的表表达式：它只读取了一个表。通常，表表达式可以是基本表...
PolarDB PostgreSQL版架构介绍
PolarDB PostgreSQL版 整体架构概述 存储计算分离架构概述 PolarDB PostgreSQL版 是存储计算分离的设计，存储集群和计算集群可以分别独立扩展：当计算能力不够时，可以单独扩展计算集群。当存储容量不够时，可以单独扩展存储集群。基于...
应用场景
表格存储 有互联网应用架构（包括数据库分层架构和分布式结构化数据存储架构）、数据湖架构和物联网架构三种典型应用架构。本文结合 表格存储 的典型应用架构介绍了不同应用架构下的应用场景。互联网应用 目前互联网已在日常生活中广泛应用...
云存储网关软件版公测
云存储网关软件版是一款可以安装在阿里云用户ECS上或者用户本地数据中心客户端的产品，提供类似ossfs的功能，使用云存储网关软件版可以将OSS桶挂载到客户端本地以POSIX文件接口进行访问，从而您可以像操作本地文件一样操作OSS里面的文件。...
产品优势
兼容性保障 分布式事务是一个抽象的基于 Service 层的概念，与底层事务实现无关，也就是说在分布式事务的范围内，无论是关系型数据库 MySQL、Oracle，还是 KV 存储 MemCache，或是列存数据库 HBase，只要将对它们的操作包装成分布式事务的...
- 产品推荐
- 这些文档可能帮助您