分区剪裁合理性评估
如果分区剪裁条件放在ON子句中，从表的分区剪裁会生效，主表则不会生效。下面针对三种JOIN具体说明：LEFT OUTER JOIN 分区剪裁条件均放在ON子句中 set odps.sql.allow.fullscan=true;explain select a.seller_id,a.pay_ord_pbt_1d_001 from...
ANALYZE PARTITION
语法 ALTER TABLE.ANALYZE PARTITION 命令用于更新分区或子分区的统计信息：ALTER TABLE table_name ANALYZE PARTITION {partition_names|ALL} 其中，partition_names 为：{partition_name|subpartition_name} 参数 参数 参数说明 table_...
为什么额外增加分区要收费？
云消息队列 Kafka 版 优化了集群增加大量分区后带来的性能下降问题。自建开源Apache Kafka集群分区数大于1000后，集群性能开始急剧下降，遭遇性能瓶颈。阿里云 云消息队列 Kafka 版 对此进行了优化，单个集群的分区数理论上没有上限。但...
初始化概述
Linux：分区数量无限制 Windows：128个 所有分区都是主分区，没有扩展分区与逻辑分区的概念。重要 MBR支持的最大分区容量为2 TiB，GPT最大支持的分区容量为18 EiB。如果您使用的云盘容量大于2 TiB或者后续有可能会扩容到2 TiB以上，分区时...
DEADLOCK（死锁）
若事务中的更新语句一次仅涉及一个分区，死锁的行存在于两个分区，那么死锁过程不会立即被检测出来。多个事务的死锁更新会请求锁，直到锁超时，然后由HybridDB for MySQL通知更新 error。这个 error 结果不会令分区退出事务状态，后续的...
COALESCE PARTITION
本文档介绍了减少基于HASH和KEY分区的分区数和对应分区的所有子分区，并将数据合并到其他分区和子分区中的方法。语法 ALTER TABLE…COALESCE PARTITION 命令用于减少基于HASH和KEY分区的分区数和对应分区的所有子分区，并将数据合并到其他...
普通表转换为分区表
当单张普通表的数据量超过1亿或者1 TB时，建议使用分区表。本文介绍了使用 ALTER 语法将单张普通表转换为分区表的注意事项以及示例。前提条件 普通表中的主键或唯一键需要包含分区表中的分区键字段。注意事项 普通表转换为分区表的过程中，...
全局索引
全局索引（GLOBAL INDEX）是分区表上的一种索引技术，可以创建在分区表的非分区键上，也支持提供唯一约束。前提条件 支持的 PolarDB PostgreSQL版 的版本如下：PostgreSQL 14（内核小版本14.6.4.0及以上）说明 您可通过如下语句查看 ...
全局索引
全局索引（GLOBAL INDEX）是分区表上的一种索引技术，可以创建在分区表的非分区键上，也支持提供唯一约束。前提条件 支持的 PolarDB PostgreSQL版（兼容Oracle）的版本如下：Oracle 2.0（内核小版本2.0.14.4.0及以上）说明 您可通过如下...
在LIST或RANGE 分区表中处理偏离值
定义DEFAULT 分区 分区DEFAULT会捕获那些在LIST分区（或子分区）表中不适用于任何其他分区的记录。如果不包括一个DEFAULT规则，那么任何不匹配分区约束中的其中一个值的记录都会导致错误。每个LIST分区或子分区可能会有自己的DEFAULT规则。...
ADD PARTITION
本文档介绍了将分区和子分区添加到现有分区表中的方法。语法 ALTER TABLE…ADD PARTITION 命令用于将分区和子分区添加到现有的分区表中。ALTER TABLE table_name ADD PARTITION partition_definition;partition_definition 为：{list_...
全局二级索引（GSI）
局部索引单个分区的数据由分区表单个分区的数据构建而成，且局部索引的分区与分区表的分区一一对应，所以，局部索引的索引数据只能保证在单个分区内有序，如果您想创建局部唯一索引，则索引字段必须包含全部的分区键。当分区表上只存在局部...
删除分区
删除分区是指在已有的分区表上删除一个分区。本文介绍了删除分区的语法说明及其示例。语法说明 DROP TABLE[IF EXISTS]name[,.][CASCADE|RESTRICT]说明 PolarDB PostgreSQL版 中删除分区和删除普通表的语法并无区别。注意事项 在分区被删除...
使用OSS Foreign Table分区表
一级分区以"pt"字段为分区键 SUBPARTITION BY LIST(region)-二级分区以"region"字段为分区键(-如下两个一级分区下面可以挂着不同的二级分区。VALUES('20181218')(VALUES('hangzhou'),VALUES('shanghai')),VALUES('20181219')(VALUES('...
EMR控制台管理YARN分区
EMR支持在控制台上通过可视化UI管理YARN分区，同时可以批量建立节点组与分区的映射，方便操作。您可以直接在节点组上配置分区属性，扩容和弹性伸缩后，EMR会自动为新增节点打上Node Label，无需重新配置新节点。本文为您介绍如何在EMR控制...
删除分区
删除分区是指在已有的分区表上删除一个分区。本文介绍了删除分区的语法说明及其示例。语法说明 DROP TABLE[IF EXISTS]name[,.][CASCADE|RESTRICT]说明 PolarDB PostgreSQL版（兼容Oracle）中删除分区和删除普通表的语法并无区别。注意事项 ...
DISCARD PARTITION
本文档介绍了丢弃分区的表空间，删除丢弃分区对应的.ibd文件的方法。语法 ALTER TABLE…DISCARD PARTITION命令丢弃分区的表空间，删除丢弃分区对应的.ibd文件。ALTER TABLE table_name DISCARD PARTITION partition_name[,partition_name]....
分区
分区表是指拥有分区空间的表，即将表数据按照某个列或多个列进行划分，从而将表中的数据分散存储在不同的物理位置上。合理设计和使用分区，可以提高查询性能、简化数据管理，并支持更灵活的数据访问和操作。概述 分区可以理解为分类，通过...
如何确定分区个数
本文介绍如何确定HASH分区、List Default Hash分区以及RANGE分区的分区个数。HASH分区 您可以在创建分区表时多尝试几个分区值，尽量找一个可以使得数据均衡分布的一个值作为分区值。以下命令可以辅助您来评估分区数量。查看按照ID值分为10...
表分区定义
分区表维护 分区表支持多种分区管理操作，包括新增分区，删除分区，重命名分区，清空截断分区，交换分区，分裂分区等，具体信息，请参见 Partitioning Large Tables。分区表子表重命名 AnalyticDB PostgreSQL版 在6.3.10.9版本之后支持对...
删除分区
删除分区是指在已有的分区表上删除一个分区。本文介绍了删除分区的语法说明及其示例。语法说明 删除分区 ALTER TABLE<table_name>DROP PARTITION;删除子分区 ALTER TABLE<table_name>DROP SUBPARTITION;注意事项 在分区被删除后，分区中的...
MAX_PT
返回分区表的一级分区中有数据的分区的最大值，按字母排序，且读取该分区下对应的数据。注意事项 max_pt 函数也可以使用标准SQL实现，select*from table where pt=max_pt("table");可以改写为 select*from table where pt=(select max(pt)...
DML操作常见问题
FAILED:ODPS-0123031:Partition exception-a single instance cannot output data to more than 10000 partitions 产生原因 虽然单个MaxCompute表允许有6万个分区，但是单个作业涉及的输出表分区数量只允许有10000个。出现这个错误，通常是...
ALTER TABLE…ADD SUBPARTITION
ALTER TABLE…ADD SUBPARTITION命令用于添加子分区到现有的分区中，且这个分区必须已经进行了子分区的划分。语法介绍 使用ALTER TABLE…ADD SUBPARTITION命令添加一个子分区到现有的包含子分区的分区中。语法如下：ALTER TABLE table_name ...
分区表视图
PolarDB PostgreSQL版（兼容Oracle）提供五个系统目录视图，您可以使用这五个系统目录视图来查看分区表的具体信息。查询分区表视图 PolarDB PostgreSQL版（兼容Oracle）提供了如下两种方式查询分区表视图：使用SELECT命令 查询方式如下：...
库表
执行以下SQL，可以查看表的所有二级分区及分区的统计信息：SELECT partition_id,-分区名 row_count,-分区总行数 local_data_size,-分区本地存储所占用空间大小 index_size,-分区的索引大小 pk_size,-分区的主键索引大小 remote_data_size-...
ALTER MATERIALIZED VIEW
背景信息 更新物化视图的命令包括：更新物化视图 修改物化视图的生命周期 开启或禁用物化视图的生命周期 删除物化视图分区 更新物化视图 当物化视图的数据对应的表或分区产生插入、覆写、更新、删除等操作时，物化视图会自动失效，无法用于...
CREATE PUBLICATION
publish_via_partition_root（boolean）此参数确定是否会使用分区表的标识和模式而不是实际更改的单个分区的标识和模式来发布中包含的分区表（或其分区）中的更改。单个分区的标识和模式是默认设置。启用此功能可以将更改复制到非分区表或...
分区投影
本文档主要介绍了分区投影功能的背景信息、使用场景和限制，以及如何使用分区投影功能。背景信息 当您把数据存储在OSS或HDFS上，并建立大量的分区管理这些数据。DLA Presto在分析这些数据时，会花费大量的时间从元数据系统中获取分区，从而...
CHECK PARTITION
本文档介绍了检查分区或子分区，并显示分区或子分区中的数据或者索引是否已损坏的方法。语法 ALTER TABLE.CHECK PARTITION 命令用于检查分区或子分区，并显示分区或子分区中的数据或者索引是否已损坏：ALTER TABLE table_name CHECK ...
DBA_TAB_PARTITIONS
DBA_TAB_PARTITIONS 视图提供位于数据库中的所有分区的信息。名称 类型 说明 table_owner TEXT 分区所在表的所有者。schema_name TEXT 表所在 schema 的名称。table_name TEXT 表的名称。composite TEXT 如果表已建立二级分区，则为 YES。...
表设计规范
分区设计与存储逻辑 一张表里有很多个一级分区，每个一级分区都会按时间存储二级分区，每个二级分区都会存储所有的列，如下图所示。分区设计需要注意：设置分区的数量上限。避免每个分区中只存少量数据。以方便数据查询和计算为前提设置...
REMOVE PARTITIONING
语法 ALTER TABLE.REMOVE PARTITIONING 命令用于删除分区和子分区表的分区结构，并转化成单表，且不丢失数据：ALTER TABLE table_name REMOVE PARTITIONING 示例 删除 sales_range_list 表中所有的分区结构：ALTER TABLE sales_range_list ...
日志投递MaxCompute后，如何检查数据完整性
在日志服务数据投递MaxCompute场景下，需要在MaxCompute表分区维度上检查数据完整性，即MaxCompute表中某个分区中数据是否已经完整。使用保留字段_partition_time_作为表分区列，如何判断分区数据是否已完整_partition_time_由日志的time...
一级分区的规划和设计（2.0版）
本章节介绍一级分区表的规划和设计，其中主要是一级分区列的选取。AnalyticDB MySQL 2.0一级分区表采用HASH分区，可指定任意一列（不支持多列）作为分区列。HASH分区通过标准CRC算法计算出CRC值，并将CRC值与分区数作模计算，得出每条记录...
分区表系统视图
PolarDB PostgreSQL版（兼容Oracle）提供了系统视图，您可以使用系统视图来查看分区表的结构信息。PolarDB PostgreSQL版（兼容Oracle）提供了以下几个系统视图和系统函数，供您查看数据库中分区表的相关信息。ALL_PART_TABLES 返回字段说明...
ALL_TAB_PARTITIONS
ALL_TAB_PARTITIONS 视图提供位于数据库中的所有分区的信息。名称 类型 说明 table_owner TEXT 分区所在表的所有者。schema_name TEXT 表所在 schema 的名称。table_name TEXT 表的名称。composite TEXT 如果表已建立二级分区，则为 YES。...
基本数据库对象及概念
本文汇总了 AnalyticDB MySQL版 集群中关于基本数据库对象及概念相关的常见问题和答案。是否支持将表从一个表组移...如果在实际使用中二级分区数过多，建议增大二级分区键的分区粒度，比如将按日分区改为按月分区、将按月分区改为按年分区等。
分区表
分区表使用 AnalyticDB PostgreSQL支持的分区表类型包括范围（Range）分区、值（List）分区和多级分区表，下图为一个多级分区表设计实例，一级分区采用按月的区间（Range）分区，二级分区采用按地区的值（List）分区设计。使用场景 是否...
GetQualityEntity
调用GetQualityEntity获取分区表达式。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 Action String 是 ...
- 产品推荐
- 这些文档可能帮助您