分区表简介
分区表特性 分区表相比于普通表的内部实现更加复杂，但是这一切对于用户而言是不需要感知的，分区表的管理与使用时与普通表相比也有些区别，更加清楚地了解分区表的特性，有利于用户可以正确高效地使用分区表。案例1：CREATE TABLE ...
分区表简介
分区表特性 分区表相比于普通表的内部实现更加复杂，但是这一切对于用户而言是不需要感知的，分区表的管理与使用时与普通表相比也有些区别，更加清楚地了解分区表的特性，有利于用户可以正确高效地使用分区表。案例1：CREATE TABLE ...
ACID语义
数据对象：指持有实际数据的对象，例如非分区表、分区。INTO类作业：指INSERT INTO、DYNAMIC INSERT INTO等包含关键字INTO的SQL作业。OVERWRITE类作业：指INSERT OVERWRITE、DYNAMIC INSERT OVERWRITE等包含关键字OVERWRITE的SQL作业。...
ODPS-0123031
错误码：ODPS-0123031:ODPS partition exception 错误1：maximum 60000 partitions allowed 错误信息示例 ODPS-0123031:ODPS partition exception-maximum 60000 partitions allowed 错误描述 每张MaxCompute的分区表最多允许存在 60000 个...
分区剪裁合理性评估
背景信息 MaxCompute分区表是指在创建表时指定分区空间，即指定表内的几个字段作为分区列。使用数据时，如果指定了需要访问的分区名称，则只会读取相应的分区，避免全表扫描，提高处理效率，降低费用。分区剪裁是指对分区列指定过滤条件，...
USER_PART_TABLES
USER_PART_TABLES 视图提供当前用户拥有的数据库中的所有分区表的信息。名称 类型 说明 schema_name TEXT 表所在 schema 的名称。table_name TEXT 表的名称。partitioning_type TEXT 用于定义表分区的分区类型。subpartitioning_type TEXT ...
概述
PolarDB 分区表完全兼容原生MySQL的语法和功能。同时，PolarDB 分区表相对于原生MySQL进行了性能增强，支持丰富的分区类型及组合，使您可以更加便捷、简单和高效的使用分区表。分区表是将一个大的逻辑表，按照分区规则分割成多个小的物理表...
ALL_PART_TABLES
ALL_PART_TABLES 视图提供位于数据库中的所有分区表的信息。名称 类型 说明 owner TEXT 分区表的所有者。schema_name TEXT 表所在 schema 的名称。table_name TEXT 表的名称。partitioning_type TEXT 用于定义表分区的分区类型。...
PartitionedTable Scan Node
背景信息 查询算子Append是分区表的常用算子，但是它的性能低下，为了解决这个问题，PolarDB 推出了PartitionedTable Scan算子，它是一个分区表的查询算子，比Append更加高效。用于解决分区表分区数量过多时，查询性能慢的问题。使用限制 ...
REORGANIZE PARTITION
示例 拆分 sales_range_range 表分区 p_2021 为 p_2021_1、p_2021_2，及其对应的所有子分区：ALTER TABLE sales_range_range REORGANIZE PARTITION p_2021 INTO(PARTITION p_2021_1 VALUES LESS THAN(2021)(SUBPARTITION q1_2021_1 VALUES ...
PartitionedTable Scan Node
背景信息 查询算子Append是分区表的常用算子，但是它的性能低下，为了解决这个问题，PolarDB 推出了PartitionedTable Scan算子，它是一个分区表的查询算子，比Append更加高效。用于解决分区表分区数量过多时，查询性能慢的问题。使用限制 ...
CREATE PARTITION TABLE
CREATE PARTITION TABLE语句用于创建分区表。本文为您介绍CREATE PARTITION TABLE的用法。命令说明 Partition Table，也叫分区表。父表按分区键（Partition Key）的值划分为不同的子表，子表对外可见。下文无特殊说明的父表和子表皆指分区...
DBA_PART_TABLES
DBA_PART_TABLES 视图提供数据库中的所有分区表的相关信息。名称 类型 说明 owner TEXT 分区表的所有者。schema_name TEXT 表所在的 schema。table_name TEXT 表的名称。partitioning_type TEXT 用于定义表分区的类型。subpartitioning_...
pg_partitioned_table
列名称 列类型 描述 partrelid oid 这个分区表的 pg_class 项的OID。partstrat char 分区策略。取值范围如下：h：哈希分区表。l：列表分区表。r：范围分区表。partnatts int2 分区键中的列数。partdefid oid 这个分区表的默认分区的 pg_...
管理分区计划
本文档旨在介绍如何在 ODC 上使用分区计划，包括对新建和删除的表分区进行自动管理。背景信息 分区计划是专门针对 Range 分区的扩展功能，ODC 支持依据用户设置的分区策略对 Range 分区表进行自动管理，用户无需手动创建新分区，以方便维护...
SQL使用限制
单表分区数 60000个 数量限制 单表的分区个数最多为60000个。表的分区层级 6级 数量限制 在表中创建的分区层次不能超过6级。屏显 10000行 数量限制 SELECT语句屏显最多输出10000行。INSERT 目标个数 256个 数量限制 MULTI-INSERT 场景，...
通过联邦分析同步数据
开启高级配置后可配置 同步库表选择 和 大表分区键设置 参数。同步库表选择 您可以选择需要同步的数据库和数据表。默认同步源端所有的库表。重要 不支持同步无主键的表，无主键的表会被自动过滤。AnalyticDB MySQL 每个集群最多可创建2048...
通过联邦分析功能同步至湖仓版
开启高级配置后可配置 同步库表选择 和 大表分区键设置 参数。同步库表选择 您可以选择需要同步的数据库和数据表。默认同步源端所有的库表。重要 不支持同步无主键的表，无主键的表会被自动过滤。AnalyticDB MySQL 每个集群最多可创建2048...
原理
本文概述了分区表模块的主要实现原理，便于用户了解分区表在底层实现时的一些细节，从而能够更好地学习如何去使用分区表。分区表创建原理 分区表的创建主要涉及语法解析模块和执行模块。语法解析模块 分区表创建是分区表整个功能的核心部分...
INTERVAL RANGE简介
例如，您可以创建一个INTERVAL RANGE分区表，该表分区范围为1个月且当前的转换点为2021年9月15日。如果您尝试为2021年12月10日插入数据，那么将创建2021年9月15日至12月15日所需的3个分区，并将数据插入该分区。使用限制 INTERVAL RANGE...
并发控制
这意味着：跨多个集群的多个编写器可以同时修改表分区，并查看表的一致性快照视图，并且这些写入操作将具有序列顺序。即使在作业过程中修改了某个表，读取器仍会继续查看Databricks 作业开始使用的表的一致快照视图。乐观并发控制 Delta ...
Iceberg连接器
本文为您介绍Iceberg连接器相关的内容和操作，具体如下：配置Iceberg连接器 示例：查询Iceberg表数据 SQL语法 分区表 按分区删除 回滚 系统表和列 Iceberg表属性 物化视图 前提条件 已创建DataLake集群或Hadoop集群，并选择了Presto服务，...
SQL使用限制
单表分区数 60000个 数量限制 单表的分区个数最多为60000个。表的分区层级 6级 数量限制 在表中创建的分区层次不能超过6级。屏显 10000行 数量限制 SELECT语句屏显最多输出10000行。INSERT 目标个数 256个 数量限制 MULTI-INSERT 场景，...
DROP TABLE
删除非分区表或分区表。注意事项 请谨慎操作，确认表可以删除后，再执行删除操作。如果误删了表，当项目开启了备份恢复功能，且删除操作未超过项目设置的备份数据保留天数时，则可以恢复表。更多备份恢复信息，请参见 备份与恢复。删除表...
SQL使用限制项
单表分区数 60000个 数量限制 单表的分区个数最多为60000个。表的分区层级 6级 数量限制 在表中创建的分区层次不能超过6级。屏显 10000行 数量限制 SELECT语句屏显最多输出10000行。INSERT 目标个数 256个 数量限制 MULTI-INSERT 场景，...
谷歌BigQuery数据迁移至AnalyticDB PostgreSQL版
STRUCT CREATE TYPE JSON JSON GEOGRAPHY CREATE TYPE/GEOGRAPHY DDL CREATE TABLE PARTITION BY（分区表）谷歌BigQuery的分区方式主要有以下三大类：整数范围分区 对应 AnalyticDB PostgreSQL版 的数字范围表分区，可以使用数字数据类型的...
分区合并
对于非list/list column策略的分区表，只能合并相邻分区。名词解释 表组：分区列完全相同的一组逻辑表或全局索引表的集合。全局索引：使用另一个维度进行水平分区的数据与主表始终保持强一致的分区表。语法 ALTER { TABLE tbl_name|...
写数据表
前提条件 如果您需要写入分区表，则需要先创建待写入的分区表，再使用该组件写入数据，关于如何创建分区表，详情请参见 创建分区表。使用限制 支持的计算引擎为MaxCompute。可视化配置组件参数 Designer 仅支持通过可视化方式，配置该组件...
分区设计
按自增主键切分，若表分区方式为分区表，主键为自增，且该字段同时为分区键，则此时写入为随机分区，按照非主键查询时需要读取所有分区，适合有数据偏斜且写多读少的场景；至少保证在分区键上有一个索引。业务列 其它的列统归为此类，仅...
变更表的表组（AUTO模式）
在 PolarDB-X 的AUTO模式数据库中，所有表都从属且只属于一个表组，同一个表组内的表分区方式一致，同一表组内的表之间的关联查询可以下推到存储节点执行，执行效率得到了很大的提高。本语法仅适用于AUTO模式数据库。为了方便将表关联到同...
分区和列操作
合并分区 对分区表的分区进行合并，即同一个分区表下的多个分区合并成一个分区，同时删除被合并的分区维度的信息，把数据移动到指定分区。清空分区数据 清空指定分区的数据。列操作 添加列或注释 为已存在的非分区表或分区表添加列或注释。...
全局二级索引（GSI）
使用全局二级索引可以实现透明分区表，即您可以像使用单表一样使用分区表，大大减少分区键对分区表的使用限制。说明 全局二级索引功能当前处于灰度发布阶段，如有需求，请前往 配额中心，根据 配额ID polardb_mysql_gsi 找到配额名称，在...
批量获取元数据分区统计信息
批量获取数据湖元数据表分区的字段统计信息。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求语法 POST/api/...
何时选择间隔（Interval）分区
向RANGE分区表插入数据时，如果插入的数据超出当前已存在分区的范围，将无法插入并且会返回错误；而对于INTERVAL RANGE分区表，当新插入的数据超过现有分区的范围时，允许数据库自动创建新分区，根据INTERVAL子句指定的范围来新增分区。...
数据膨胀、倾斜与索引统计
分区表名 分区表名称。表类型 表的存储类型，例如堆表或AO表。期望表大小 期望的表的大小，单位为Byte。期望表大小为 AnalyticDB PostgreSQL版 判断没有膨胀情况下的表大小。实际表大小 实际表的大小，单位为Byte。膨胀表大小 膨胀表的大小...
ALTER TABLE…RENAME PARTITION
ALTER TABLE…RENAME PARTITION命令用于重命名表分区。语法介绍 ALTER TABLE…RENAME PARTITION命令有两种形式。ALTER TABLE table_name RENAME PARTITION partition_name TO new_name;ALTER TABLE table_name RENAME SUBPARTITION ...
什么是子分区
子分区（SUBPARTITION）用于把分区表划分为更小的子集，这些子集会存储在相同或不同的服务器上。如果对一个分区划分了子分区，那么每个分区都至少有一个子分区。如果对一个表划分了子分区，那么数据不会存储在在任何分区表中，而是会存储于...
转换分区表
您可以通过 ALTER TABLE 命令修改分区属性，实现普通表和RANGE分区表与INTERVAL RANGE分区表之间的相互转换。前提条件 集群版本需为 PolarDB MySQL版 8.0版本且Revision version为8.0.2.2.0及以上。您可以通过 查询版本号 确认集群版本。...
对分区表使用跨机并行查询
PolarDB PostgreSQL版（兼容Oracle）支持对分区表使用跨机并行查询的功能。通过对分区表使用跨机并行查询，提升数据库的性能。功能介绍 当前对分区表使用跨机并行查询支持的功能如下所示：支持range分区的并行查询。支持list分区的并行查询...
对分区表使用跨机并行查询
PolarDB PostgreSQL版（兼容Oracle）支持对分区表使用跨机并行查询的功能。通过对分区表使用跨机并行查询，提升数据库的性能。功能介绍 当前对分区表使用跨机并行查询支持的功能如下所示：支持range分区的并行查询。支持list分区的并行查询...
- 产品推荐
- 这些文档可能帮助您