增加分区
场景2：目标分区是含有二级分区的一级分区 示例1：增加一个一级分区，但同时指定二级分区定义 说明 该种用法仅适用于非模板化的二级分区。假设r_h_t1与r_h_t2都采用Range+Key的非模板化二级分区，建表SQL如下所示：CREATE TABLE `r_k_ntp_t...
8.0.2版本发布说明
支持Interval分区 Interval分区是RANGE分区的扩展，当新插入的数据超过现有分区的范围时，该分区允许数据库自动创建新分区。更多信息请参见 INTERVAL RANGE简介。子查询解关联 关联子查询在分析场景中被广泛使用，例如在决策支持基准TPC-H...
何时选择间隔（Interval）分区
Interval Range分区是Range分区的扩展，在数据到达时自动创建间隔分区，不需要再手动创建新分区，方便了Range分区维护操作。向RANGE分区表插入数据时，如果插入的数据超出当前已存在分区的范围，将无法插入并且会返回错误；而对于INTERVAL ...
配置MaxCompute输出
其中 时间自动分区 是根据_execute_time_字段进行分区的，详情请参见 实时同步字段格式。根据字段内容动态分区 通过指定源端表某字段与目标MaxCompute表分区字段对应关系，实现源端对应字段所在数据行写入到MaxCompute表对应的分区中。分区...
自动扩容失败时如何手动扩容Linux系统盘
fdisk-u/dev/vda 系统显示类似如下，保存分区信息时，会出现警告信息，由于系统盘分区是busy状态，重新读取分区表会失败。Welcome to fdisk(util-linux 2.23.2).Changes will remain in memory only,until you decide to write them.Be ...
何时选择RANGE分区
RANGE分区是对历史数据进行分区的一种方便的方法。RANGE分区用边界定义了表或索引中分区的范围和分区间的顺序。RANGE分区通常用于在DATE类型的列上按时间间隔组织数据。因此，大多数访问RANGE分区的SQL语句都关注时间范围。这方面的一个...
热点分区分裂
对于热点分裂，只适用于包含key分区策略（一级分区或者二级分区是key分区皆可）的数据表。名词解释 表组：分区列完全相同的一组逻辑表或全局索引表的集合。全局索引：使用另一个维度进行水平分区的数据与主表始终保持强一致的分区表。语法 ...
原理
分区表的管理可以分为以下10个主要模块：MODIFY：管理分区，是一类操作的集合，对象是一个一级分区，可以通过该指令管理这个分区下的二级分区。MOVE：移动分区，通常是移动其存储位置。ADD：增加分区，为分区表增加一个一级分区。COLESCE：...
扩容分区和文件系统（Windows）
如果您的磁盘存在多个分区，建议扩容的分区是与未分配分区左相邻的分区，否则，Windows会将选定的基本磁盘转换成动态磁盘。根据 扩展卷向导 的默认设置完成扩展卷操作。扩容完成后，新增容量会自动合入原来的C盘。如下图所示，按照示例容量...
上下游存储
Source出现finish split response timeout异常，是什么原因？在MySQL CDC全量阶段发生表结构变更有什么影响？如果CTAS/CDAS同步期间发生了不支持的表结构变更，导致作业报错同步失败，该怎么解决？ClickHouse结果表 ClickHouse结果表是否...
Dataphin资产中表分区存在记录数，但是表分区记录数...
问题描述 Dataphin资产中表分区存在记录数，但是表分区记录数显示为空。问题原因 该分区记录数是T+1更新数据，这里的T指的是分区的创建时间。解决方案 无需解决，待T+1后看下分区记录数即可。适用于 Dataphin 公共云
pg_partitioned_table
目录 pg_partitioned_table 存放有关表如何被分区的信息。列名称 列类型 描述 partrelid oid 这个分区表的 pg_class 项的OID。partstrat char 分区策略。取值范围如下：h：哈希分区表。l：列表分区表。r：范围分区表。partnatts int2 分区...
修改分区
场景2：目标分区是模板化的二级分区 假设k_l_tp_t1与k_l_tp_t2都采用Key+List的二级分区，建表SQL如下所示：CREATE TABLE `k_l_tp_t1`(`a` bigint(20)UNSIGNED NOT NULL,`b` bigint(20)UNSIGNED NOT NULL,`c` datetime NOT NULL,`d` ...
重组分区
list:(list_subpartition[,list_subpartition.])list_subpartition:SUBPARTITION subpartition_name VALUES IN(list_bound_value)[partition_spec_options]场景1：目标分区是不含二级分区的一级分区 示例1：重组多个一级RANGE分区 假设r_t1...
PartitionedTable Scan Node
背景信息 查询算子Append是分区表的常用算子，但是它的性能低下，为了解决这个问题，PolarDB 推出了PartitionedTable Scan算子，它是一个分区表的查询算子，比Append更加高效。用于解决分区表分区数量过多时，查询性能慢的问题。使用限制 ...
初始化大于2 TiB数据盘
align-check optimal 1 如果分区是对齐的，结果如下所示：1 aligned 说明 如果返回的是 1 not aligned，说明分区未对齐。如何处理，请参见 初始化云盘FAQ。输入以下内容，查看分区表。print 输入以下内容，退出Parted工具。quit Parted工具...
概述
为此，PolarDB-X 2.0的AUTO模式数据库分区表配套了非常完善的分区变更及管理能力，具体的分区管理能力包括以下几种：分裂分区 分裂热点 合并分区 迁移分区 重命名分区 增加分区 删除分区 修改分区 重组分区 清空分区 分区变更操作对不同...
表分区
BEFORE ROW 触发器无法更改哪个分区是新行的最终目标。不允许在同一个分区树中混杂临时关系和持久关系。因此，如果分区表是持久的，则其分区也必须是持久的，反之亦然。在使用临时关系时，分区数的所有成员都必须来自于同一个会话。使用...
创建和管理自定义存储表
回流的孪生空间 园区孪生 是否分区 是 开启存储表数据自动分区，分区粒度为天。分区粒度 天 描述 此表描述了设备和分组的关系 存储表的用途。Flink任务 时序表显示该配置项，默认关闭。支持开启Flink任务，将时序表数据集成到阿里云实时...
CREATE TABLE（AUTO模式）
Hash分区与Key分区是 原生MySQL的标准分区语法 之一，PolarDB-X 为提供灵活强大的分区管理能力（例如分裂、合并与迁移等）以及考虑支持向量分区键下热点散裂，PolarDB-X 不仅在语法上尽量兼容了MySQL的Hash分区与Key分区的建表语法...
MaxCompute（原ODPS）数据源配置
2:分区过滤规则，支持指定多个分区字段的值，不同分区字段用逗号分隔，如：pt1=1,pt2=2,pt3=3 将匹配同时满足pt1=1，pt2=2，pt3=3的所有分区【多分区目前不支持function功能，即不支持%Y%m%d|-1 days这样的，单分区是可以支持的】。...
MaxCompute（原ODPS）数据源配置
2:分区过滤规则，支持指定多个分区字段的值，不同分区字段用逗号分隔，如：pt1=1,pt2=2,pt3=3 将匹配同时满足pt1=1，pt2=2，pt3=3的所有分区【多分区目前不支持function功能，即不支持%Y%m%d|-1 days这样的，单分区是可以支持的】。...
初始化小于等于2 TiB数据盘（Linux）
align-check optimal 1 如果分区是对齐的，结果如下所示：1 aligned 说明 如果返回的是 1 not aligned，表示分区未对齐。如何处理，请参见 初始化云盘FAQ。输入以下内容，查看分区表。print 输入以下内容，退出Parted工具。quit 分区过程...
pg_depend
例如：子分区索引与其所基于的分区表和父分区索引是分区相关的，因此只要其中一个删除，则子分区索引就消失，否则，就不消失。父索引上的依赖关系是主要的，故如果用户试图删除子分区索引，错误消息反而会建议删除父索引（不是表）。...
分区表系统视图
PolarDB PostgreSQL版 提供了系统视图，您可以使用系统视图来查看分区表的结构信息。PolarDB PostgreSQL版 提供了以下几个系统视图和系统函数，供您查看数据库中分区表的相关信息。pg_partitioned_table 返回字段说明 列名 描述 partrelid ...
分区表索引
分区表索引类型 PolarDB PostgreSQL版 支持分区上的两种索引类型：本地索引 在分区表本地索引（Local Index）中，本地索引与分区表的分区一一对应，具有与其表相同的分区数和相同的分区范围。每个索引分区都与基础表的一个分区相关联，因此...
使用JindoTable实现对OSS上表或分区的归档和解冻
本文介绍了JindoTable中的archiveTable和unarchiveTable命令，这两个命令可以用于对OSS上的表或分区进行归档和解冻操作。使用限制 该文档仅适用于使用Hive Metastore存储元数据的情况。archiveTable命令 archiveTable 命令可以对OSS上的表...
动态分区
本文介绍 云数据库 SelectDB 版 动态分区相关的概念和示例，帮助您进行分区的动态管理，降低您的使用成本。概述 在某些场景下，可能会将数据库表按照天进行分区划分。如果需要手动管理分区，可能由于没有创建分区导致数据导入失败，这给...
数据脱敏
分区是指在创建MaxCompute数据表时指定的分区空间，用于限定不同区域，方便快速和高效地对指定内容进行查询。更多信息，请参见 分区。说明 源产品 选择RDS和PolarDB时，无需配置 源分区。源分区 为选填项，不填写则代表会对整个表中的敏感...
JindoTable MoveTo命令介绍
MoveTo命令可以实现表和分区数据的迁移功能。本文为您介绍MoveTo命令的使用方法。前提条件 本地安装了Java JDK 8。已创建集群，详情请参见 创建集群。背景信息 MoveTo命令可以在拷贝底层数据结束后，自动更新元数据，使表和分区的数据完整...
JindoTable MoveTo命令介绍
MoveTo命令可以实现表和分区数据的迁移功能。本文为您介绍MoveTo命令的使用方法。前提条件 本地安装了Java JDK 8。已创建集群，详情请参见 创建集群。背景信息 MoveTo命令可以在拷贝底层数据结束后，自动更新元数据，使表和分区的数据完整...
JindoTable MoveTo命令介绍
MoveTo命令可以实现表和分区数据的迁移功能。本文为您介绍MoveTo命令的使用方法。前提条件 本地安装了Java JDK 8。已创建集群，详情请参见 创建集群。背景信息 MoveTo命令可以在拷贝底层数据结束后，自动更新元数据，使表和分区的数据完整...
宽表模型介绍
表格存储 按照分区键对数据表的数据进行分区，具有相同分区键的行会被划分到同一个分区，实现数据访问负载均衡。属性列（Attribute Column）一行中除主键列外，其余都是属性列。属性列会对应多个值，不同值对应不同的版本，每行的属性列...
对象存储OSS
这需要Job支持watermark生成，分区是根据时间来切割的，例如，按小时或按天分区。一旦watermark超过了分区创建系统时间和 sink.partition-commit.delay 之和立即提交分区。sink.partition-commit.delay 分区被提交的最大延迟时间。表明该...
表设计规范
分区设计与存储逻辑 一张表里有很多个一级分区，每个一级分区都会按时间存储二级分区，每个二级分区都会存储所有的列，如下图所示。分区设计需要注意：设置分区的数量上限。避免每个分区中只存少量数据。以方便数据查询和计算为前提设置...
分区剪枝
PolarDB PostgreSQL版（兼容Oracle）支持分区剪枝功能，可以显著提高对分区表的查询速度。概述 PolarDB PostgreSQL版（兼容Oracle）提供了分区剪枝（Partition Pruning）功能，如果启用了分区剪枝，规划器将会检查每个分区的定义并且检验该...
如何实现一键转冷存
参数 参数名称 描述 relname 分区表（父表）名称 reserved_subparts_cnt 存储位置不变的子分区表数量 说明 该函数只用于分区表，且只会将分区表子分区表数据转为OSS存储，子分区表上的索引数据存储位置不变。如果 reserved_subparts_cnt 为...
迁移Hive表和分区数据到OSS-HDFS服务
本文介绍如何使用JindoTable MoveTo命令将Hive表和分区数据迁移至OSS-HDFS服务。前提条件 已创建EMR-3.36.0及以上版本（除3.39.x版本以外）或EMR-5.2.0（除5.5.x版本以外）及以上版本的集群。具体步骤，请参见 创建集群。已通过Hive命令...
全局二级索引（GSI）
局部索引单个分区的数据由分区表单个分区的数据构建而成，且局部索引的分区与分区表的分区一一对应，所以，局部索引的索引数据只能保证在单个分区内有序，如果您想创建局部唯一索引，则索引字段必须包含全部的分区键。当分区表上只存在局部...
2021年
对分区表使用跨机并行查询 GLOBAL INDEX支持对分区表进行DDL操作 支持在对分区表进行DDL操作时（如DROP、SPLIT、MERGE等），操作该分区表下的所有GLOBAL INDEX。支持对分区表进行DDL操作 优化 ORA_HASH函数兼容性 ORA_HASH函数替换为DBMS_...
- 产品推荐
- 这些文档可能帮助您