CREATE TABLE（AUTO模式）
分区表 分区类型介绍 PolarDB-X 允许创建表时通过指定分区子句的语法，来创建符合业务需求的分区表。PolarDB-X 支持四大类型的分区：Hash类型：基于用户指定的分区列或分区函数表达式的值，使用内置的一致性哈希算法计算其哈希值并进行分区...
AUTO模式数据库与DRDS模式数据库
PRIMARY KEY(`a`))ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 1 row in set(0.02 sec)上述DDL在AUTO模式数据库建来的表将是一分区表（如下图所示，默认按主键自动分区）：执行 SHOW 语句，查看完整建表语句：SHOW FULL CREATE TABLE tb \G*1....
主键与唯一键（AUTO模式）
分区表 在AUTO模式下，建表时如果没有指定分区键、分区算法，则称为自动分区表；建表时如果指定了分区键或者分区算法，称为手动分区表。自动分区表 自动分区表中的主键都是Global主键，能保证全局唯一。示例2：自动分区表中的Global主键#...
2020年
从自建Db2迁移至RDS MySQL 支持Oracle迁移分区表至MySQL（自建MySQL、RDS MySQL）、PolarDB O引擎集群。从自建Oracle迁移至阿里云 从自建Oracle迁移至 PolarDB O引擎 集群（迁移结构）从自建Oracle迁移至PolarDB O引擎集群（迁移数据）支持...
修改、删除和新增分区
不支持 set_subpartition_template 子句为每个表分区创建或替换现有的默认 range、list 或 hash 子分区，会报错。不支持 move_table_partition 子句将分区移动至另一个 segment，会报错。不支持 move_table_subpartition 子句将子分区移动...
分区表自动冷存
场景描述 带有时间序列的数据采用分区表存储，并按月进行分区，随着时间的推移，一段时间之前的数据访问频率大大降低（过期），为了降低存储成本，需要自动将超过某个固定时间的分区表进行冷存处理。对于这种场景，PolarDB PostgreSQL版 ...
INTERVAL RANGE简介
例如，您可以创建一个INTERVAL RANGE分区表，该表分区范围为1个月且当前的转换点为2021年9月15日。如果您尝试为2021年12月10日插入数据，那么将创建2021年9月15日至12月15日所需的3个分区，并将数据插入该分区。使用限制 INTERVAL RANGE...
HBase数据同步与迁移
客户自建的目标表可能会和源表分区很不一致，这可能会导致迁移完成之后，目标表会进行频繁的split、compaction，如果表的数据量十分庞大，可能会导致这个过程非常耗时。如果源表带有coprocessor，在创建目标表的时候需要确保目标集群包含...
CREATE TABLE LIKE
用于指定分区键，不会自动创建分区子表，需要手动建分区子表。使用示例 如在Hologres中存在如下源表：BEGIN;CREATE TABLE public.src_table("a"int8 NOT NULL,"b"text NOT NULL,PRIMARY KEY(a));CALL SET_TABLE_PROPERTY('public.src_table...
分区表管理（auto_partition）
AnalyticDB PostgreSQL版 支持将大表定义为分区表，并支持通过auto_partition插件对分区表进行自动删除或新增，当您进行条件查询时，系统只会扫描满足条件的分区，避免全表扫描，从而提升查询性能。...相关文档 表分区定义
MMA概述
获取源项目中的所有表、分区，在目的项目中建表、分区。执行SQL命令 INSERT OVERWRITE ⽬的表 FROM 源表 迁移数据。EMR+DLF+OSS迁移MaxCompute。该场景需要通过MaxCompute+DLF建⽴MaxCompute的外部项目（External Project）。获取源项目中...
普通表快速转换为RANGE分区表
背景信息 PolarDB 普通表快速转RANGE分区表时，普通表的数据不经校验直接作为分区表的第一个分区的数据，其他分区为空分区。PolarDB 普通表快速转RANGE分区表通常用于想把历史数据放入第一个分区，同时避免使用普通的 ALTER PARTITION BY ...
分区管理
本文档旨在介绍如何在 ODC 上使用分区计划，包括对新建和删除的表分区进行自动管理。注意事项 仅支持 OceanBase MySQL 数据源。仅支持Timestamp 字段类型的 Range 分区表及 Date 字段类型的 Range Columns 分区表。新建分区计划 重要 ODC V...
CREATE DATABASE
参数取值如下：当DEFAULT_SINGLE='on' 时，AUTO模式数据库建表且不显式指定分区定义时，默认建单表并自动打散到实例的不同的DN节点；当DEFAULT_SINGLE='off' 或没指定值时，AUTO模式数据库建表且不显式指定分区定义时，默认按主键自动分区...
如何分析数据分布不均衡
除此之外，分区表还支持通过 select*from information_schema.table_detail where logical_table='test_tb' 查询分区级的详细信息，部分参数说明如下：PARTITION_NAME：分区名 TABLE_ROWS：分区的数据行数 DATA_LENGTH：分区的数据大小 ...
创建和管理自定义存储表
物联网平台数据服务提供离线数据存储功能，支持自定义分区表、事务表和时序表。自定义存储表可以作为数据服务中数据解析、SQL分析任务和数据可视化的数据源，可以作为数据解析、SQL分析任务的结果输出表，可以集成时序表数据到实时计算...
CREATE TABLE
创建非分区表、分区表、外部表或聚簇表。限制条件 分区表的分区层级不能超过6级。例如某张表以日期为分区列，分区层级为 年/月/周/日/时/分。一张表允许的分区个数支持按照具体的项目配置，默认为6万个。更多表的限制条件，请参见 SQL使用...
使用OSS Foreign Table分区表
具体信息，请参见 表分区定义。更多关于CREATE FOREIGN TABLE语法的介绍，请参见 创建OSS FDW。说明 目前OSS Foreign Table仅支持值（LIST）分区。创建分区表 ossfdw_parttable 并指定分区模板，示例如下：CREATE FOREIGN TABLE ossfdw_...
MSCK REPAIR TABLE
示例 自动同步全表分区。MSCK REPAIR TABLE adb_external_db.partition_table_test;自动同步指定分区。MSCK REPAIR TABLE adb_external_db.partition_table_test SYNC_DIR 'oss:/testBucketName/test_db/partition_table_test/dt=20220619'...
手动创建分区表（AUTO模式）
注意事项 使用分区表语法之前，请务必确认创建当前的逻辑库时模式指定为自动分区模式（mode='auto'），非自动分区模式不允许使用分区表的建表语法。您也可以通过 SHOW CREATE DATBASE db_name 语法查看当前逻辑库的建表模式。示例如下：...
Jindo sql命令介绍
使用Jindo sql分析OSS访问日志 注意 分析OSS访问日志需要指定OSS访问日志目录和指定是否为分区表，指定分区表会自动按照Bucket或date进行日志归档，能够支持使用过滤语句指定查询某个分区，极大的提升了查询效率，但是开启分区表之后必须...
Jindo sql命令介绍
使用Jindo sql分析OSS访问日志 注意 分析OSS访问日志需要指定OSS访问日志目录和指定是否为分区表，指定分区表会自动按照Bucket或date进行日志归档，能够支持使用过滤语句指定查询某个分区，极大的提升了查询效率，但是开启分区表之后必须...
Jindo sql命令介绍
使用Jindo sql分析OSS访问日志 注意 分析OSS访问日志需要指定OSS访问日志目录和指定是否为分区表，指定分区表会自动按照Bucket或date进行日志归档，能够支持使用过滤语句指定查询某个分区，极大的提升了查询效率，但是开启分区表之后必须...
分区分桶
多列分区 在创建表分区时，添加如下多列分区设置。示例如下。PARTITION BY RANGE(`date`,`id`)(PARTITION `p201701_1000` VALUES LESS THAN("2017-02-01","1000"),PARTITION `p201702_2000` VALUES LESS THAN("2017-03-01","2000"),...
表操作
非分区表：自最后一次修改表数据开始计算，经过 days 天后数据无改动，则您无需干预此表，MaxCompute会自动回收（类似drop table操作）。分区表：系统根据各分区的LastModifiedTime判断是否需要回收分区。不同于非分区表，分区表的最后一个...
概述
PolarDB-X对于上述的每一种分区策略下的每一种分区变更的类型，均支持不同变更层级（表级与表组级）、不同变更对象（主表、索引表）的变更：表级：变更单个分区表的分区，又可细分为主表与索引表 变更主表分区：变更一个主表的分区 变更...
DDL语句
表操作 功能 当前是否支持 创建表 是 说明 对于创建的外部表，Dataphin支持使用msck repair补全外部表分区数据语法格式。具体操作，请参见 内置Extractor访问OSS。修改表的注释 是 修改表的修改时间 是 修改表的聚簇属性 支持增加聚簇属性 ...
DDL语句
表操作 功能 当前是否支持 创建表 是 说明 对于创建的外部表，Dataphin支持使用msck repair补全外部表分区数据语法格式。具体操作，请参见 创建OSS外部表。修改表的注释 是 修改表的修改时间 是 修改表的聚簇属性 支持增加聚簇属性 不支持...
迁移方案概览
源库 目标库 迁移类型 配置文档 自建MySQL 5.1、5.5、5.6、5.7、8.0版本 RDS MySQL 所有版本 自建MySQL 5.1、5.5、5.6、5.7、8.0版本 RDS MySQL 所有版本 库表结构迁移 全量数据迁移 增量数据迁移 自建MySQL迁移至RDS MySQL RDS MySQL实例...
上下游存储
增量MaxCompute源表监听到新分区时，如果该分区还有数据没有写完，如何处理？MaxCompute连接器运行报错：ErrorMessage=Authorization Failed[4019],You have NO privilege 如何填写增量MaxCompute的startPartition参数？为什么带有增量...
CREATE PARTITION TABLE
分区子表和父表约束一览表 分区子表在绑定父表时，其约束关系如下表所示。其中：与父表保持一致：即对应的属性分区子表必须和父表保持一致，若不一致，在分区子表绑定（ATTACH）父表时会报错，需要重新创建分区子表。不要求与父表一致：即...
表格存储建表注意事项
当表拥有多个分区时，每个分区所存储的数据对应的是该表分区键列值某个范围内所有的数据。所有的分区键列值范围是按照其列值自然序切分的，即按照Integer或String（主键列数据类型）的自然序切分。除了会影响到数据访问的性能，数据的分区...
变更表类型及分区策略（AUTO模式）
表类型 PolarDB-X 实例支持3种类型的表：分区表、广播表和单表。您可以通过ALTER TABLE语句将表的类型在分区表、广播表和单表之间进行转换，同时还能对分区表的分区策略进行变更。分区表 使用 partition_options 分区子句进行创建的表。...
PolarDB MySQL版DDL操作指南
本文将从如下几个方面介绍 PolarDB MySQL版 的各个版本常见的DDL操作的行为特征：是否锁表（允许并发DML）：非锁表的DDL（Online DDL）只在修改元数据时申请表互斥锁（持续时间一般不超过1秒），在表结构变更期间允许对目标表进行读写操作...
RestAPI Reader最佳实践
实践2：读取一个接口数据，该接口为一个分页的RestAPI接口 示例场景：接口定义 本实践示例的场景为读取一个RESTful接口数据并写入一个MaxCompute分区表中，其中使用的示例RESTful接口为一个自建的测试GET接口，本示例的接口详情如下。...
全局索引
全局索引（GLOBAL INDEX）是分区表上的一种索引技术，可以创建在分区表的非分区键上，也支持提供唯一约束。前提条件 支持的 PolarDB PostgreSQL版 的版本如下：PostgreSQL 14（内核小版本14.6.4.0及以上）说明 您可通过如下语句查看 ...
创建Hologres内部表
DataWorks作为数据加工的开发平台，提供了便捷的可视化建表方式，同时，您也可以直接使用Hologres通过DDL语句建表，详情请参见 建表概述。使用限制 当前仅华东2（上海）、华北2（北京）地域支持使用该功能。操作步骤 进入 数据开发 页面。...
创建OSS外部表
示例：通过自定义解析器创建OSS外部表 示例：通过自定义解析器创建OSS外部表-非文本数据 说明 如果您创建的OSS外部表为分区表时，需要在执行 msck 或 alter 命令后才可以使用，详情请参见 补全OSS外部表分区数据语法。更多示例请参见 示例...
Dataphin管道任务表分区如何配置当天时间
问题描述 Dataphin管道任务表分区配置当天时间的方法。解决方案 需要在调度配置页面配置“参数配置”，并且表分区中使用配置的变量，在运维环境中执行。适用于 Dataphin 版本v3.6.2 运维环境
确认表血缘
若上游节点产出的表分区值与下游节点依赖的表分区不匹配，您可根据业务需要综合考量，是否需要修改节点的调度参数配置，以此方式实现节点产出的表分区与节点依赖的表分区数据相匹配。若需依赖上游节点上一周期产出的表分区数据，您可考虑...
- 产品推荐
- 这些文档可能帮助您