MaxCompute分区表数据导入
本文为您介绍如何将MaxCompute分区表数据导入到Hologres分区表。前提条件 已购买并开通Hologres实例，开通方法请参见 购买Hologres。已开通MaxCompute并创建项目，详情请参见 开通MaxCompute和DataWorks。已开通DataWorks服务并创建...
镜像检测项说明
Linux检测项 Linux操作系统镜像检测项的详细说明及修复建议如下表所示。检测项 检测说明 修复建议 GUESTOS.Platform 系统平台，只能是Linux操作系统。不涉及 GUESTOS.OSVersion 系统版本。例如：Centos 7.9。不涉及 GUESTOS.Architecture ...
概述
示例：首先指定一个LIST分区表：CREATE TABLE sales_hist(.,country text,.)PARTITION BY LIST(country)(PARTITION americas VALUES('US','CA','MX'),PARTITION europe VALUES('BE','NL','FR'),PARTITION asia VALUES('JP','PK','CN'),...
何时选择间隔（Interval）分区
向RANGE分区表插入数据时，如果插入的数据超出当前已存在分区的范围，将无法插入并且会返回错误；而对于INTERVAL RANGE分区表，当新插入的数据超过现有分区的范围时，允许数据库自动创建新分区，根据INTERVAL子句指定的范围来新增分区。...
实例启动异常常见错误与对应解决方案
1662001142：Windows系统的注册表丢失或者损坏 问题现象 通过VNC登录实例时，Windows系统启动失败，启动界面显示 Windows未能启动，原因可能是最近更改了硬件或软件 错误信息。问题原因 该问题可能是因为Windows系统注册表丢失或者破坏，...
节点/数据库/表/分区/二级分区
分区表（一级分区）HybridDB for MySQL中的表从建模的维度看，可以分为事实表（fact table）和维度表（dimension table），事实表是指分区表（通常是一级分区表），即需要被拆分到不同节点去存储的表，在建表的时候指定分区键就可以生成...
CREATE PUBLICATION
publish_via_partition_root（boolean）此参数确定是否会使用分区表的标识和模式而不是实际更改的单个分区的标识和模式来发布中包含的分区表（或其分区）中的更改。单个分区的标识和模式是默认设置。启用此功能可以将更改复制到非分区表或...
生命周期
不同于非分区表，分区表的最后一个分区被回收后，该表不会被删除。说明 生命周期回收为每天定时启动，扫描全量分区。LastModifiedTime 需要超过生命周期指定的时间才会回收。假设某个分区表生命周期为1天，该分区数据最后一次被修改的时间...
动态分区管理
Hologres的动态分区功能无需预先设定所有分区信息，可依据创建分区表时配置的动态分区规则，自动创建并管理分区子表。同时，还支持将符合条件的分区数据迁移到低频存储设备，在保证查询性能的同时，有效降低存储费用。功能介绍 动态分区...
并行查询
PolarDB PostgreSQL版 支持分区表的并行查询（Parallel Append）功能，可以更好地处理大规模数据的查询。概述 当代计算机往往有更多的核心可以使用，并行查询是现代数据库必不可少的能力。PolarDB PostgreSQL版 对分区表的并行查询，和普通...
并行查询
PolarDB PostgreSQL版（兼容Oracle）支持分区表的并行查询（Parallel Append）功能，可以更好地处理大规模数据的查询。概述 当代计算机往往有更多的核心可以使用，并行查询是现代数据库必不可少的能力。PolarDB PostgreSQL版（兼容Oracle）...
并行查询
PolarDB PostgreSQL版（兼容Oracle）支持分区表的并行查询（Parallel Append）功能，可以更好地处理大规模数据的查询。概述 当代计算机往往有更多的核心可以使用，并行查询是现代数据库必不可少的能力。PolarDB PostgreSQL版（兼容Oracle）...
分区表索引
分区表通常有巨大的数据量。为了加快查询速度，通常会使用索引功能。本文介绍了分区表的索引功能。分区表索引类型 PolarDB PostgreSQL版（兼容Oracle）支持分区上的两种索引类型：本地索引 在分区表本地索引（Local Index）中，本地索引与...
主键与唯一键（AUTO模式）
示例2：自动分区表中的Global主键#自动分区表 CREATE TABLE auto_tbl(id bigint NOT NULL AUTO_INCREMENT,name varchar(30),PRIMARY KEY(id));手动分区表 Global主键 在手动分区表中，如果主键列包含了全部分区列，该主键就是Global主键，...
分区和列操作
合并分区 对分区表的分区进行合并，即同一个分区表下的多个分区合并成一个分区，同时删除被合并的分区维度的信息，把数据移动到指定分区。清空分区数据 清空指定分区的数据。列操作 添加列或注释 为已存在的非分区表或分区表添加列或注释。...
ADD PARTITION
本文档介绍了将分区和子分区添加到现有分区表中的方法。语法 ALTER TABLE…ADD PARTITION 命令用于将分区和子分区添加到现有的分区表中。ALTER TABLE table_name ADD PARTITION partition_definition;partition_definition 为：{list_...
DDL语句
创建非分区表的示例如下所示：创建表类型为 cow，主键为 id 的非分区表。create table if not exists h0(id bigint,name string,price double)using hudi options(type='cow',primaryKey='id');创建表类型为 mor，主键为 id 和 name 的非...
Hologres结果表
false createparttable 当写入分区表时，是否根据分区值自动创建分区表。Blink独享 3.7及以上版本支持该功能。默认值为 false。重要 请您谨慎使用该功能，确保分区值不会出现脏数据，从而导致创建了错误的分区表。false 说明 ...
数据分层存储
分区表 创建分区表的存储策略 分区表也可以通过 SET_TABLE_PROPERTY 来设置表的存储策略，分区子表默认继承父表的存储属性，也可以分别设置父表和子表的存储策略。支持的选项有：hot（热存储）。cold（冷存储）。例如将分区父表（tbl2）...
镜像检测概述
检测项说明 Linux检测项 Linux操作系统镜像检测项的详细说明及修复建议如下表所示。检测项 检测说明 修复建议 GUESTOS.Platform 系统平台，只能是Linux操作系统。不涉及 GUESTOS.OSVersion 系统版本。不涉及 GUESTOS.Architecture 系统架构...
polar_ddl_manager
背景信息 在PostgreSQL中，增加分区表varchar列长度时，会自动重建被修改列相关的索引，导致 ALTER TABLE 执行效率很低。此外，ALTER TABLE 需要持有 ACCESS EXCLUSIVE 锁，会长时间阻塞其他连接对该表的访问。PolarDB PostgreSQL版 支持 ...
PartitionedTable Scan Node
背景信息 查询算子Append是分区表的常用算子，但是它的性能低下，为了解决这个问题，PolarDB 推出了PartitionedTable Scan算子，它是一个分区表的查询算子，比Append更加高效。用于解决分区表分区数量过多时，查询性能慢的问题。使用限制 ...
PartitionedTable Scan Node
背景信息 查询算子Append是分区表的常用算子，但是它的性能低下，为了解决这个问题，PolarDB 推出了PartitionedTable Scan算子，它是一个分区表的查询算子，比Append更加高效。用于解决分区表分区数量过多时，查询性能慢的问题。使用限制 ...
Check节点
DataWorks的Check节点可用于检查目标对象（MaxCompute分区表、FTP文件或OSS文件）是否可用，当Check节点满足检查策略后会返回运行成功状态。如果某任务的运行依赖目标对象，您可使用Check节点检查目标对象，并设置该任务为Check节点的下游...
读数据表
本文介绍读数据表算子的...最新分区（仅MaxCompute）：在运行时，读取分区表的一级分区中分区值最大的分区里的数据，分区最大值按字母排序。区间：读取“开始分区”到“结束分区”之间的所有分区的数据。自定义：读取指定单个指定分区的数据。
为什么建表必须有分区键？
HybridDB for MySQL 目前仅支持分区表，用户可以指定一个分区键，HybridDB for MySQL 会根据该分区键为用户自动分布数据，如果没有分区键，HybridDB for MySQL 无法决定数据按何种方式分布最优。
CREATE TABLE AS
从分区父表或者子表复制出一张新的非分区表，分区表只能复制成非分区表。准备一张分区表、分区子表以及表数据。BEGIN;CREATE TABLE public.src_table_partitioned("a"int NOT NULL,"b"text,PRIMARY KEY(a))PARTITION BY LIST(a);CREATE ...
8.0.2版本发布说明
分区表能力增强 支持更多的分区表类型 组合分区（分区+子分区）支持更多的分区表类型RANGE-RANGE、RANGE-LIST、LIST-RANGE、LIST-LIST、HASH-HASH、HASH-KEY、HASH-RANGE、HASH-LIST、KEY-HASH、KEY-KEY、KEY-RANGE、KEY-LIST、LIST ...
如何实现不锁表转冷存
repack-U user1-dbname=db01-index=tblname_partial_idx-tablespace=oss 分区表不锁表转冷存-prt是一个分区表，包含4个分区：prt_p_0、prt_p_1、prt_p_2、prt_p_def（默认分区）-通过pg_repack将分区表转存到oss（不包含索引）pg_repack-U ...
如何实现不锁表转冷存
repack-U user1-dbname=db01-index=tblname_partial_idx-tablespace=oss 分区表不锁表转冷存-prt是一个分区表，包含4个分区：prt_p_0、prt_p_1、prt_p_2、prt_p_def（默认分区）-通过pg_repack将分区表转存到oss（不包含索引）pg_repack-U ...
归档为CSV或ORC格式
归档分区表 说明 归档分区表功能目前处于灰度阶段，如需使用，请前往 配额中心，根据 配额ID polardb_mysql_hybrid_partition 找到配额名称，在对应的操作列单击 申请 来开通该功能。企业版 集群版本为 PolarDB MySQL版 8.0.2版本且修订...
DISCARD PARTITION
其中，partition_name 为：{partition_name|subpartition_name} 参数 参数 参数说明 table_name 分区表的名称（可以采用模式限定的方式引用）。partition_name 要删除的分区名称。subpartition_name 要删除的子分区名称。示例 丢弃 sales_...
全局索引
全局索引（Global Index）是分区表上的一种索引技术，可以创建在分区表的非分区键上，也支持提供唯一约束。背景信息 分区表的Local Index，指每个分区都以一个Local Index分区，Local Index的分区规则和表的分区规则保持一致，因此Local ...
Hologres开发：周期性调度
因此，您可以将MaxCompute的分区表或非分区表导入Hologres的分区或非分区表，可以根据实际业务情况选择是否需要分区。前往DataWorks调度会产生一定的调度费用，详细收费情况，请参见 DataWorks资源组概述。如果需要实现写入更新，您需要...
应用场景
只需要将原来的 N 份数据，每一份都通过分区表打散为 M 个数据分区，利用分区表打破单机的容量限制，就可以从数据层完成这一拆分过程，无需业务改造，极大地节省了成本，降低了技术风险。同时，OceanBase 数据库的分区表方案也可以使得用户...
分区
分区表是指拥有分区空间的表，即将表数据按照某个列或多个列进行划分，从而将表中的数据分散存储在不同的物理位置上。合理设计和使用分区，可以提高查询性能、简化数据管理，并支持更灵活的数据访问和操作。概述 分区可以理解为分类，通过...
新建分区
新建分区是指在已有的分区表上新增一个分区。本文介绍了新建分区的语法及其示例。语法说明 CREATE TABLE[IF NOT EXISTS]table_name PARTITION OF parent_table[({ column_name[WITH OPTIONS][column_constraint[.]]|table_constraint }[,.]...
PolarDB MySQL版8.0.2版本发布日志
修复分区表的所有分区在分区剪枝阶段都被裁剪掉的情况下，使用RANGE INDEX访问分区表的全局二级索引时，触发ASSERT CRASH（断言错误）的问题。修复将冷数据归档为ORC格式时，因表中存在Blob类型的字段导致归档失败的问题。修复MRR等场景下...
在RANGE分区表中指定多个分区键
您可以通过给RANGE分区表指定多个关键列来提高性能。如果您经常在小的列集上使用比较运算符（基于大于或小于值）来选择记录，那么可以考虑在RANGE分区规则中使用这些列。在范围分区表中指定多个键 在分区键中，范围分区表定义也许包括多个...
HASH-KEY
本文档介绍了创建HASH-KEY分区表的方法。语法 创建一个或多个HASH-KEY分区表，其中每个分区可能有一个或一个以上的子分区：CREATE TABLE[schema.]table_name table_definition PARTITION BY[LINEAR]HASH(expr)[PARTITIONS num]SUBPARTITION...
- 产品推荐
- 这些文档可能帮助您