创建分区表
PolarDB PostgreSQL版 创建分区表的语法完全兼容PostgreSQL。本文详细介绍了其语法及创建不同类型分区表的示例。语法说明 CREATE TABLE[IF NOT EXISTS]table_name([{ column_name data_type[COMPRESSION compression_method][COLLATE ...
创建分区表
PolarDB PostgreSQL版（兼容Oracle）创建分区表的语法完全兼容PostgreSQL。本文详细介绍了其语法及创建不同类型分区表的示例。语法说明 CREATE TABLE[IF NOT EXISTS]table_name([{ column_name data_type[COMPRESSION compression_method]...
动态分区
历史分区创建规则 当 create_history_partition 为 TRUE，即开启创建历史分区功能时，SelectDB会根据 dynamic_partition.start 和 dynamic_partition.history_partition_num 来决定创建历史分区的个数。例如：需要创建的历史分区数量为 ...
原理
语法解析模块 分区表创建是分区表整个功能的核心部分，任何分区表都需要经过一个完整的语法树创建出来，这个语法树上包含了诸多分区表的特性，如下图所示。其中主要的关键字包括：PARTITION BY：指定一级分区的类型和字段。SUBPARTITION BY...
创建分区
RANGE 分区、LIST 分区、HASH 分区支持函数分区键（分区键为表达式或函数）和列分区键（分区键为字段），KEY 分区仅支持列分区键。支持指定 PARTITIONS number 和 SUBPARTITIONS number。不支持的范围 创建分区时，不支持创建 LINEAR HASH ...
创建分区表
创建二级分区表 说明 PolarDB PostgreSQL版（兼容Oracle）在创建分区表时需要指定分区，同样在创建分区时也可指定二级分区，Oracle语法中最大的分区级别为二级分区（也称为子分区）。CREATE TABLE sales(dept_no number,part_no varchar2,...
动态分区管理
Hologres的动态分区功能无需预先设定所有分区信息，可依据创建分区表时配置的动态分区规则，自动创建并管理分区子表。同时，还支持将符合条件的分区数据迁移到低频存储设备，在保证查询性能的同时，有效降低存储费用。功能介绍 动态分区...
DDL语句
创建非分区表的示例如下所示：创建表类型为 cow，主键为 id 的非分区表。create table if not exists h0(id bigint,name string,price double)using hudi options(type='cow',primaryKey='id');创建表类型为 mor，主键为 id 和 name 的非...
CREATE PARTITION TABLE
CREATE PARTITION TABLE语句用于创建分区表。本文为您介绍CREATE PARTITION TABLE的用法。命令说明 Partition Table，也叫分区表。父表按分区键（Partition Key）的值划分为不同的子表，子表对外可见。下文无特殊说明的父表和子表皆指分区...
写数据表
前提条件 如果您需要写入分区表，则需要先创建待写入的分区表，再使用该组件写入数据，关于如何创建分区表，详情请参见 创建分区表。使用限制 支持的计算引擎为MaxCompute。可视化配置组件参数 Designer 仅支持通过可视化方式，配置该组件...
CREATE TABLE.PARTITION BY
使用CREATE TABLE命令的PARTITION BY子句来创建一个分区表，这个分区表中的数据分配在一个或多个分区（和子分区）中。语法介绍 CREATE TABLE命令语法有下面的三种形式：列表分区语法 使用第一种形式创建一个列表分区表：CREATE TABLE...
创建表
创建分区表的示例数据包含20列，新创建表的列数可设定为21列，其中一列为分区列，您需要在创建表时定义分区。表的列字段 从示例数据中识别表列字段信息如下：非分区表的列字段包含：age：年龄 job：工作类型 marital：婚否 education：教育...
新建分区
新建分区是指在已有的分区表上新增一个分区。本文介绍了新建分区的语法及其示例。语法说明 创建分区 ALTER TABLE<table_name>ADD PARTITION;Where partition_definition is:{|<range_partition>} and list_partition is:PARTITION[]VALUES...
RDS迁移至MaxCompute实现动态分区
本文为您介绍如何使用DataWorks数据集成同步功能自动创建分区，动态地将RDS中的数据迁移至MaxCompute大数据计算服务。前提条件 准备DataWorks环境 开通MaxCompute。在DataWorks上完成创建业务流程，本例使用DataWorks简单模式。详情请参见 ...
Hologres结果表
Blink独享模式3.7版本才支持自动创建分区，如果您使用的是Blink独享模式3.7以下的版本，需要在Hologres中提前创建分区子表，否则会导入数据失败。Blink独享创建作业。在Blink独享模式中创建作业的示例语句如下。说明 以下示例适用于独享在...
如何确定分区个数
HASH分区 您可以在创建分区表时多尝试几个分区值，尽量找一个可以使得数据均衡分布的一个值作为分区值。以下命令可以辅助您来评估分区数量。查看按照ID值分为10个分区后每个分区的数据量。select id%10 as part_id,count(1)from table_name...
出错提示S3磁盘分区数据同步出错
本文主要介绍在使用SMC迁移时，迁移任务出错提示“S3磁盘分区数据同步出错”的问题描述、问题原因及其解决方案。问题描述 在SMC迁移时，迁移任务出错提示“S3_*磁盘分区数据同步出错”。其中S3_*可能的错误码如下：S3_F30 S3_F32 S3_F6 S3_...
DDL操作常见问题
您可以重新创建一张分区表，使用动态分区SQL将源表数据导入至新分区表，详情请参见 插入或覆写动态分区数据（DYNAMIC PARTITION）。如何查看指定的分区是否存在？可以使用函数PARTITION_EXISTS查看指定的分区是否存在，更多函数信息，请...
CREATE EXTERNAL TABLE
AnalyticDB MySQL 湖仓版（3.0）支持创建多种外表，包括：OSS外表、RDS MySQL外表、MongoDB外表、Tablestore外表、MaxCompute外表。前提条件 集群的产品系列为 湖仓版（3.0）。集群的内核版本为3.1.8.0及以上版本。说明 如何查看集群内核...
Iceberg连接器
本文为您介绍Iceberg连接器相关的内容和操作，具体如下：配置Iceberg连接器 示例：查询Iceberg表数据 SQL语法 分区表 按分区删除 回滚 系统表和列 Iceberg表属性 物化视图 前提条件 已创建DataLake集群或Hadoop集群，并选择了Presto服务，...
创建部分索引
您可以在 创建分区表的同时创建部分索引 或 在已创建好的分区表上创建部分索引。创建分区表的同时创建部分索引 语法 CREATE[TEMPORARY]TABLE[IF NOT EXISTS]table_name[(create_definition,.)][table_options]partition_options.其中，...
使用OSS Foreign Table分区表
例如，分区表需要按照year列划分一级分区，再按照month划分二级分区，其中某个一级分区为 year=2022、二级分区为 month=07，那么属于这个分区的数据文件必须要放在 oss:/bucket/year=2022/month=07 的目录下。创建OSS Server和创建OSS User...
通过DataWorks周期性导入MaxCompute数据最佳实践
在Hologres中不支持直接将分区数据直接写入分区父表，因此需要在Hologres中创建对应MaxCompute分区表中分区键值的分区子表，然后将分区数据导入对应的分区子表。分区键值由参数${bizdate} 控制，在调度系统中自动赋值完成周期性调度，调度...
CREATE TABLE LIKE
在Hologres中使用 CREATE TABLE LIKE 创建一张分区表示例如下：创建一个分区表-新增一个字段ds，并将表设置为以ds为分区的分区表 CALL hg_create_table_like('new_table',$select*,"b"as ds from src_table$,'partition by list(ds)');...
写入数据到分区表
创建OSS分区表后，可以通过INSERT OVERWRITE重写OSS数据。本文介绍如何写入数据到分区表。步骤一：创建Schema 登录 DLA控制台。单击左侧导航栏的 Serverless Presto>SQL访问点。单击 登录到DMS，执行以下SQL创建OSS Schema。您也可以通过...
新建分区
新建多级分区 PolarDB PostgreSQL版 在创建分区时，也可以将分区作为分区表再一次进行分区，不同的分区策略可以自由组合。新建多级范围分区 CREATE TABLE tab_range_p1 PARTITION OF tab_range FOR VALUES FROM(minvalue)TO(100)PARTITION ...
转换MBR分区为GPT分区
转换Linux数据盘的分区类型 您可以参考如下操作将Linux数据盘的MBR分区转换为GPT分区。本操作以公共镜像Alibaba Cloud Linux 3.2104 LTS 64位、数据盘/dev/vdb 为例，请您根据实际环境进行操作。（可选）为云盘创建快照，做好数据备份。...
分区管理
分区计划是专门针对 Range 分区的扩展功能，ODC 支持依据用户设置的分区策略对 Range 分区表进行自动管理，用户无需手动创建新分区，以方便维护 Range 分区表。创建策略：表按照指定的时间间隔和数据范围将数据划分到对应的分区。创建分区...
管理MaxCompute Catalog
在Flink DDL的Schema末尾添加分区列，并在 PARTITIONED BY 语句中声明分区列名，执行完成后查看对应MaxCompute项目中的表，可以看到已创建对应名字的分区表，其普通列为f0、f1、f2、f3，分区列为ds。重要 MaxCompute中列名均为小写，而...
全局索引
全局索引（GLOBAL INDEX）是分区表上的一种索引技术，可以创建在分区表的非分区键上，也支持提供唯一约束。前提条件 支持的 PolarDB PostgreSQL版 的版本如下：PostgreSQL 14（内核小版本14.6.4.0及以上）说明 您可通过如下语句查看 ...
创建关系表
table_properties 仅支持创建分区，详情请参见 创建分区。忽略的属性 说明 如果同步的 DDL 中包含以下属性的定义，则这些属性不会被解析和转换，最终会被忽略。不支持 immutable_table_clauses 子句定义不可变表的删除时间，会忽略该 ...
分区索引
数据分区策略 HASH分区 时间范围分区 多级HASH分区（高级用法）准备工作 使用分区索引前需要创建测试表，语句如下：CREATE TABLE IF NOT EXISTS search_table(user_id bigint,storeId varchar,goodsId varchar,goodsPrice smallint,...
全局索引
全局索引（GLOBAL INDEX）是分区表上的一种索引技术，可以创建在分区表的非分区键上，也支持提供唯一约束。前提条件 支持的 PolarDB PostgreSQL版（兼容Oracle）的版本如下：Oracle 2.0（内核小版本2.0.14.4.0及以上）说明 您可通过如下...
创建分区表
分区表与OSS目录的关系 在DLA中，可以将存储在OSS中的目录或文件映射成一张分区表，表中的数据是OSS的文件内容，分区列对应OSS中的目录，该目录需遵守以下命名规则：分区列对应表的LOCATION下的一个子目录，目录的命名规则为 分区列名=分区...
全局索引
全局索引（Global Index）是分区表上的一种索引技术，可以创建在分区表的非分区键上，也支持提供唯一约束。背景信息 分区表的Local Index，指每个分区都以一个Local Index分区，Local Index的分区规则和表的分区规则保持一致，因此Local ...
分区表常见问题
针对 PolarDB MySQL版 分区表，您可以选择以下几种索引：部分索引（Partial Index）您可以根据实际业务场景，在分区表的不同分区上创建不同的索引，以满足不同分区上的查询需求。全局二级索引（GSI）针对查询条件中不包含分区键的等值查询...
MaxCompute分区表数据导入
本文为您介绍如何将MaxCompute分区表数据导入到Hologres分区表。前提条件 已购买并开通Hologres实例，开通方法请参见 购买Hologres。已开通MaxCompute并创建项目，详情请参见 开通MaxCompute和DataWorks。已开通DataWorks服务并创建...
CREATE TABLE
创建搜索表，按照storeId列和goodsId列组合进行HASH分区（也就是二级HASH分区），加盐因子为2，分区数量为16，最多支持三级分区组合。CREATE TABLE dt_partition(storeId integer,goodsId varchar,goodsPrice integer,constraint pk ...
OSS数据源
元数据发现任务可以在单次运行中自动为OSS上面的数据文件创建和更新数据湖元数据（一张或多张表），具有自动探索文件数据字段及类型、自动映射目录和分区、自动感知新增列及分区、自动对文件进行分组建表的能力。OSS数据源配置模式 OSS数据...
通过Spark SQL读写OSS外表
创建非分区表。CREATE TABLE IF NOT exists test_db.test_tb1(id int,name string,age int)using parquet location 'oss:/<bucket_name>/test/test_tb1/' tblproperties('parquet.compress'='SNAPPY');创建分区表。CREATE TABLE IF NOT ...
- 产品推荐
- 这些文档可能帮助您