表分区定义
说明 目前不支持对有默认分区的分区表增加分区，如需增加分区请通过分裂默认分区的方法来增加分区。如何分裂分区，请参见 分裂一个分区。指定分区子表表名 AnalyticDB PostgreSQL版 在6.3.10.9版本之后支持在创建分区表的时候指定分区表子...
新建表
有关分区方法，请参见 OceanBase 数据库分区表。字段 选择作为分区键的字段。表达式 根据表达式的返回值进行分区（Oracle 模式下不支持分区表达式）。分区 根据所选的 分区方法，可能需要指定 分区名称、分区数量、区间上限值 或 值枚举 等...
通过DataWorks操作Hologres的多个分区子表
向源表增加分区20240110并写入数据 ALTER TABLE odps_sale_detail ADD IF NOT EXISTS PARTITION(sale_date='20240110');INSERT OVERWRITE TABLE odps_sale_detail PARTITION(sale_date='20240110')VALUES('s1','c1',100.1),('s2','c2',100....
分区裁剪
分区裁剪（Partition Pruning）是数据库分区表中常用的性能优化手段。使用限制 仅支持分区表。仅支持在Range或List分区列上使用范围、等式和IN列表谓词。AnalyticDB PostgreSQL 7.0版 支持Hash分区，Hash分区只能通过等值条件进行裁剪。...
JindoTable使用说明
jindo table-showPartition-t db1.t1-p date=2020-10-12-listTables 语法 jindo table-listTables[-db]功能 展示指定数据库中的所有表。不指定[-db]时默认展示default库中的表。示例：展示default库中的表。jindo table-listTables 列出...
JindoTable使用说明
jindo table-showPartition-t db1.t1-p date=2020-10-12-listTables 语法 jindo table-listTables[-db]功能 展示指定数据库中的所有表。不指定[-db]时默认展示default库中的表。示例：展示default库中的表。jindo table-listTables 列出...
JindoTable使用说明
jindo table-showPartition-t db1.t1-p date=2020-10-12-listTables 语法 jindo table-listTables[-db]功能 展示指定数据库中的所有表。不指定[-db]时默认展示default库中的表。示例：展示default库中的表。jindo table-listTables 列出...
JindoTable使用说明
jindo table-showPartition-t db1.t1-p date=2020-10-12-listTables 语法 jindo table-listTables[-db]功能 展示指定数据库中的所有表。不指定[-db]时默认展示default库中的表。示例：展示default库中的表。jindo table-listTables 列出...
原理
本文概述了分区表模块的主要实现原理，便于用户了解分区表在底层实现时的一些细节，从而能够更好地学习如何去使用分区表。分区表创建原理 分区表的创建主要涉及语法解析模块和执行模块。语法解析模块 分区表创建是分区表整个功能的核心部分...
JindoTable使用说明
jindo table-showPartition-t db1.t1-p date=2020-10-12-listTables 语法 jindo table-listTables[-db][dbName]功能 展示指定数据库中的所有表。不指定[-db]时默认展示default库中的表。示例：展示default库中的表。jindo table-listTables...
JindoTable使用说明
jindo table-showPartition-t db1.t1-p date=2020-10-12-listTables 语法 jindo table-listTables[-db][dbName]功能 展示指定数据库中的所有表。不指定[-db]时默认展示default库中的表。示例：展示default库中的表。jindo table-listTables...
JindoTable使用说明
jindo table-showPartition-t db1.t1-p date=2020-10-12-listTables 语法 jindo table-listTables[-db][dbName]功能 展示指定数据库中的所有表。不指定[-db]时默认展示default库中的表。示例：展示default库中的表。jindo table-listTables...
JindoTable使用说明
jindo table-showPartition-t db1.t1-p date=2020-10-12-listTables 语法 jindo table-listTables[-db][dbName]功能 展示指定数据库中的所有表。不指定[-db]时默认展示default库中的表。示例：展示default库中的表。jindo table-listTables...
MaxCompute分区表数据导入
向源表增加分区20210815 ALTER TABLE odps_sale_detail ADD IF NOT EXISTS PARTITION(sale_date='20210815');向分区写入数据 INSERT OVERWRITE TABLE odps_sale_detail PARTITION(sale_date='20210815')VALUES('s1','c1',100.1),('s2','c2'...
使用存储过程将数据导入Hologres内部表（Beta）
向源表增加分区20210815 ALTER TABLE odps_sale_detail ADD IF NOT EXISTS PARTITION(sale_date='20210815');向分区写入数据 INSERT OVERWRITE TABLE odps_sale_detail PARTITION(sale_date='20210815')VALUES('s1','c1',100.1),('s2','c2'...
polar_ddl_manager
背景信息 在PostgreSQL中，增加分区表varchar列长度时，会自动重建被修改列相关的索引，导致 ALTER TABLE 执行效率很低。此外，ALTER TABLE 需要持有 ACCESS EXCLUSIVE 锁，会长时间阻塞其他连接对该表的访问。PolarDB PostgreSQL版 支持 ...
INSERT INTO|OVERWRITE
向源表增加分区。alter table sale_detail add partition(sale_date='2013',region='china');向源表追加数据。其中：insert into table table_name 可以简写为 insert into table_name，但 insert overwrite table table_name 不可以省略 ...
管理分区
DDM目前支持对MySQL、Oracle、DB2和GaussDB等数据库进行表分区操作。在逆向数据库时，支持抽取MySQL和Oracle数据库的表分区信息至模型工具中。操作步骤 在模型设计区，右键单击 编辑表，进入 表编辑器。在 表编辑器 页面，您可以编辑 分区 ...
分区表自动冷存
postgres 数据库中执行以下 SQL，为 db01 数据库创建一个名为 task1 的任务，该任务为每分钟检查子分区表数据，并自动将超过3个子分区的历史子分区转为冷存，并返回任务 ID：每分钟执行 postgres=>SELECT cron.schedule_in_database('task1...
插入或覆写数据（INSERT INTO|INSERT OVERWRITE）
给目标表增加分区。alter table sale_detail_insert add partition(sale_date='2013',region='china');从源表sale_detail中取出数据插入目标表sale_detail_insert。注意不需要声明目标表字段，也不支持重排目标表字段顺序。对于静态分区...
CLONE TABLE
向源表增加分区。alter table sale_detail add partition(sale_date='2013',region='china')partition(sale_date='2014',region='shanghai');向源表追加数据。insert into sale_detail partition(sale_date='2013',region='china')values('...
CLONE TABLE
向源表增加分区。alter table sale_detail add partition(sale_date='2013',region='china')partition(sale_date='2014',region='shanghai');向源表追加数据。insert into sale_detail partition(sale_date='2013',region='china')values('...
应用场景
同时，OceanBase 数据库的分区表方案也可以使得用户完全无需关注数据的分布细节，轻松支持跨分区的分布式事务、多分区的关联，真正实现“透明”访问分布式数据库。会员系统的多维度查询 会员系统在很多企业中也都是存在的，系统中保存了很...
分区表系统视图
PolarDB PostgreSQL版 提供了以下几个系统视图和系统函数，供您查看数据库中分区表的相关信息。pg_partitioned_table 返回字段说明 列名 描述 partrelid 分区表 pg_class 项的OID。partstrat 分区策略。取值如下：h：哈希分区表 l：列表...
数据规范
为了使数据更新事件能够被aime感知，并及时将离线数据同步到召回引擎中，您的ODPS数据表需要满足以下规范：数据表为分区表，关于分区的操作详见 MaxCompute文档。有且仅有一个分区字段，字段类型为 STRING，最新的数据分区的分区字段值必须...
如何实现一键转冷存
参数 参数名称 描述 relname 分区表（父表）名称 reserved_subparts_cnt 存储位置不变的子分区表数量 说明 该函数只用于分区表，且只会将分区表子分区表数据转为OSS存储，子分区表上的索引数据存储位置不变。如果 reserved_subparts_cnt 为...
读数据表
参数 分区参数，通过该参数来过滤分区表数据。同时筛选多个分区使用半角逗号（,）分隔。如果未配置该参数，则表示输入全表。例如：动态分区表，输入格式为 dt=${yyyyMMdd}，其中${yyyyMMdd} 是系统参数，表示当前日期，${yyyyMMdd-1d} 表示...
PyMySQL 连接 OceanBase 数据库示例程序
本文将介绍如何使用 PyMySQL 库和 OceanBase 数据库构建一个应用程序，实现基本的数据库操作，包括创建表、插入数据、查询数据和删除表等。点击下载 python-pymysql 示例工程 前提条件 您已安装 Python 3.x 和 pip。您已安装 OceanBase ...
分区表系统视图
PolarDB PostgreSQL版（兼容Oracle）提供了以下几个系统视图和系统函数，供您查看数据库中分区表的相关信息。ALL_PART_TABLES 返回字段说明 列名 描述 owner 表的所有者。schema_name 表所在的schema。table_name 表名。partitioning_type ...
分区表扫描算子
背景信息 对数据库的分区表进行扫描时，优化器会对每个子分区生成最优的执行计划，然后通过Append算子将子分区的执行计划串联起来，作为分区表扫描的最优执行计划。如果子分区的数量不多，上述过程将会快速完成。然而，PolarDB PostgreSQL...
分区表简介
概述 在 PolarDB PostgreSQL版 数据库中，分区表(Partitioned Table)是将一个表或索引物理地分解为多个更小、更便于管理的部分，这个部分称为分区(Partition)。每个分区都是一个独立的对象，具有自己的名称和可选的存储特性。从数据库管理...
分区表简介
概述 在 PolarDB PostgreSQL版（兼容Oracle）数据库中，分区表(Partitioned Table)是将一个表或索引物理地分解为多个更小、更便于管理的部分，这个部分称为分区(Partition)。每个分区都是一个独立的对象，具有自己的名称和可选的存储特性。...
PyODPS读取分区表数据
本文为您介绍如何通过PyODPS读取分区表数据。前提条件 您需要完成以下操作：已 开通MaxCompute。已 开通DataWorks。在DataWorks上完成业务流程创建，本例使用DataWorks简单模式。详情请参见 创建业务流程。操作步骤 准备测试数据。创建表并...
手动创建分区表（AUTO模式）
DATABASE|CREATE DATABASE|+-+-+|part_db|CREATE DATABASE `part_db`/*MODE='auto'*/|+-+-+1 row in set(0.18 sec)创建数据库的语法详情，请参见 CREATE DATABASE。如果分区表的主键不含分区键，且不是自增主键，需要业务保证主键的唯一性...
管理问题数据
数据质量支持您保留数据质量监控过程中从数据表中发现的非预期数据，帮助您快速排查、定位问题，提升数据质量。本文为您介绍如何管理数据质量监控过程中从数据表中发现的非预期数据。背景信息 问题数据表 数据质量支持在部分规则校验不通过...
API概览
本产品（数据湖构建/2020-07-10）的OpenAPI采用 ROA 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接...ListPartitionsProfile 获取分区数据概况 获取分区数据概况的详细信息。
表分区
只要分区表中不存在分区，则支持使用 ONLY 仅在分区表上增加或者删除约束。一旦分区存在，那样做就会导致错误，因为当分区存在时是不支持仅在分区表上增加或删除约束的。不过，分区表本身上的约束可以被增加（如果它们不出现在父表中）和...
Hive采集字段
基本信息 通过对Hive的对象信息进行盘点，采集的字段重点举例为：Hive版本 Hive db名称 Hive db大小 表个数 分区表个数 外部表个数 事物表个数 视图个数 函数个数 Top对象信息 通过对Hive DB进行元数据统计获取Top对象信息，采集的字段重点...
Check节点
DataWorks的Check节点可用于检查目标对象（MaxCompute分区表、FTP文件或OSS文件）是否可用，当Check节点满足检查策略后会返回运行成功状态。如果某任务的运行依赖目标对象，您可使用Check节点检查目标对象，并设置该任务为Check节点的下游...
版本发布说明
修复AUTO模式数据库中分区表的分区列包含反引号字符时，创建表报错的问题。修复在扩缩容或者UGSI创建过程中，insert ignore（returning）可能导致数据校验不通过的问题。修复GSI和Local Index索引名重复的问题。修复创建UGSI时，如果索引名...
- 产品推荐
- 这些文档可能帮助您