概述
PolarDB-X 2.0的AUTO模式数据库分区表支持使用一级分区与二级分区，并且一级分区的分区策略与二级分区的分区策略具备完全正交的能力，相互组合没有限制，详情请参考 手动创建分区表（AUTO模式）。为此，PolarDB-X 2.0的AUTO模式数据库分区...
新建表
有关分区方法，请参见 OceanBase 数据库分区表。字段 选择作为分区键的字段。表达式 根据表达式的返回值进行分区（Oracle 模式下不支持分区表达式）。分区 根据所选的 分区方法，可能需要指定 分区名称、分区数量、区间上限值 或 值枚举 等...
分区表常见问题
在源端的数据库中某张表是不分区的，通过DTS迁移到目标数据库中，需要对该表进行分区，是否支持？支持。在数据同步任务中手动创建好分区表的结构，然后配置映射关系进行数据同步即可。大版本升级过程中，是否可以把普通单表转换为分区表？...
JindoTable使用说明
jindo table-showPartition-t db1.t1-p date=2020-10-12-listTables 语法 jindo table-listTables[-db]功能 展示指定数据库中的所有表。不指定[-db]时默认展示default库中的表。示例：展示default库中的表。jindo table-listTables 列出...
JindoTable使用说明
jindo table-showPartition-t db1.t1-p date=2020-10-12-listTables 语法 jindo table-listTables[-db]功能 展示指定数据库中的所有表。不指定[-db]时默认展示default库中的表。示例：展示default库中的表。jindo table-listTables 列出...
JindoTable使用说明
jindo table-showPartition-t db1.t1-p date=2020-10-12-listTables 语法 jindo table-listTables[-db]功能 展示指定数据库中的所有表。不指定[-db]时默认展示default库中的表。示例：展示default库中的表。jindo table-listTables 列出...
JindoTable使用说明
jindo table-showPartition-t db1.t1-p date=2020-10-12-listTables 语法 jindo table-listTables[-db]功能 展示指定数据库中的所有表。不指定[-db]时默认展示default库中的表。示例：展示default库中的表。jindo table-listTables 列出...
JindoTable使用说明
jindo table-showPartition-t db1.t1-p date=2020-10-12-listTables 语法 jindo table-listTables[-db][dbName]功能 展示指定数据库中的所有表。不指定[-db]时默认展示default库中的表。示例：展示default库中的表。jindo table-listTables...
JindoTable使用说明
jindo table-showPartition-t db1.t1-p date=2020-10-12-listTables 语法 jindo table-listTables[-db][dbName]功能 展示指定数据库中的所有表。不指定[-db]时默认展示default库中的表。示例：展示default库中的表。jindo table-listTables...
JindoTable使用说明
jindo table-showPartition-t db1.t1-p date=2020-10-12-listTables 语法 jindo table-listTables[-db][dbName]功能 展示指定数据库中的所有表。不指定[-db]时默认展示default库中的表。示例：展示default库中的表。jindo table-listTables...
JindoTable使用说明
jindo table-showPartition-t db1.t1-p date=2020-10-12-listTables 语法 jindo table-listTables[-db][dbName]功能 展示指定数据库中的所有表。不指定[-db]时默认展示default库中的表。示例：展示default库中的表。jindo table-listTables...
分区表自动冷存
postgres 数据库中执行以下 SQL，为 db01 数据库创建一个名为 task1 的任务，该任务为每分钟检查子分区表数据，并自动将超过3个子分区的历史子分区转为冷存，并返回任务 ID：每分钟执行 postgres=>SELECT cron.schedule_in_database('task1...
在线分区维护
场景一：长事务阻塞DDL 此场景下对分区表做分区维护DDL操作，由于存在未提交的长事务，从而阻塞DDL操作的进行。被阻塞的DDL操作会进一步阻塞所有新产生的DML操作，导致了数据库流量跌零。从上图可以看到，在功能关闭时，当DDL操作发生后，...
确认表血缘
若上游节点产出的表分区值与下游节点依赖的表分区不匹配，您可根据业务需要综合考量，是否需要修改节点的调度参数配置，以此方式实现节点产出的表分区与节点依赖的表分区数据相匹配。若需依赖上游节点上一周期产出的表分区数据，您可考虑...
数据规范
数据表分区 依赖数据源产出新分区 aime对接的离线数据往往是周期性更新的，这种情况下您可以将数据表的全量调度策略设置为“依赖数据源产出新分区”，这种策略下，aime会自动检测您的数据表是否有更新。为了使数据更新事件能够被aime...
创建数据库
若要使用云数据库RDS，您需要在实例中创建数据库。...如果您使用 一键上云 等迁移方式将本地自建数据库迁移上云时，表空间将与本地自建数据库表空间名称相同，支持将数据库和表的表空间修改为 pg_default。下一步 连接PostgreSQL实例。
分区表系统视图
PolarDB PostgreSQL版 提供了以下几个系统视图和系统函数，供您查看数据库中分区表的相关信息。pg_partitioned_table 返回字段说明 列名 描述 partrelid 分区表 pg_class 项的OID。partstrat 分区策略。取值如下：h：哈希分区表 l：列表...
DDL语句
表操作 功能 当前是否支持 创建表 是 说明 对于创建的外部表，Dataphin支持使用msck repair补全外部表分区数据语法格式。具体操作，请参见 内置Extractor访问OSS。修改表的注释 是 修改表的修改时间 是 修改表的聚簇属性 支持增加聚簇属性 ...
DDL语句
表操作 功能 当前是否支持 创建表 是 说明 对于创建的外部表，Dataphin支持使用msck repair补全外部表分区数据语法格式。具体操作，请参见 创建OSS外部表。修改表的注释 是 修改表的修改时间 是 修改表的聚簇属性 支持增加聚簇属性 不支持...
数据质量入门
步骤二：创建质量规则 确定校验的表分区后，需为其创建校验该表分区数据的质量规则。您可直接使用数据质量提供的模板规则，也可自定义规则。DataWorks支持自定义规则强弱，控制规则产生的影响，当数据质量校验不符合预期时，用于决定是否...
PyMySQL 连接 OceanBase 数据库示例程序
本文将介绍如何使用 PyMySQL 库和 OceanBase 数据库构建一个应用程序，实现基本的数据库操作，包括创建表、插入数据、查询数据和删除表等。点击下载 python-pymysql 示例工程 前提条件 您已安装 Python 3.x 和 pip。您已安装 OceanBase ...
分区表系统视图
PolarDB PostgreSQL版（兼容Oracle）提供了以下几个系统视图和系统函数，供您查看数据库中分区表的相关信息。ALL_PART_TABLES 返回字段说明 列名 描述 owner 表的所有者。schema_name 表所在的schema。table_name 表名。partitioning_type ...
读数据表
读数据表组件用于读取MaxCompute表数据，默认读取本项目的表数据。如果跨项目读取表数据，则需要在表名前添加项目名。说明 目前 Designer 算法组件支持读取的数据类型为DOUBLE、BIGINT、STRING、BOOLEAN、DATETIME。读数据表组件支持读取...
分布表
创建范围（RANGE）分区表 您可以通过给出一个START值、一个END值以及一个定义分区增量值的子句让数据库自动产生分区。默认情况下，START值总是被包括在内而END值总是被排除在外，例如：CREATE TABLE sales(id int,date date,amt decimal(10...
使用存储过程将数据导入Hologres内部表（Beta）
Hologres V2.0版本新增存储过程（hg_insert_overwrite），使用此存储过程帮助您简单、快捷地将MaxCompute或Hologres表数据导入Hologres内部表。本文为您介绍如何使用存储过程将MaxCompute或Hologres表数据导入Hologres内部表。注意事项 ...
PyODPS读取分区表数据
本文为您介绍如何通过PyODPS读取分区表数据。前提条件 您需要完成以下操作：已 开通MaxCompute。已 开通DataWorks。在DataWorks上完成业务流程创建，本例使用DataWorks简单模式。详情请参见 创建业务流程。操作步骤 准备测试数据。创建表并...
表设计规范
数据集成或DataX 规划写入表分区的频率。数据达到64 MB会执行1次Commit，以免Commit空目录。DTS 规划写入的表存量分区与增量分区的关系。设置Commit频率。客户端（Run SQL or Tunnel upload）需要避免高频小数据量文件的插入或者上传。SDK ...
分区表扫描算子
背景信息 对数据库的分区表进行扫描时，优化器会对每个子分区生成最优的执行计划，然后通过Append算子将子分区的执行计划串联起来，作为分区表扫描的最优执行计划。如果子分区的数量不多，上述过程将会快速完成。然而，PolarDB PostgreSQL...
节点/数据库/表/分区/二级分区
介绍节点、数据库、表、分区表和二级分区的概念。节点 在HybridDB for MySQL中，节点是一个资源单位（比如当前C2规格对应：8 Core 32GB Memory 512GB SSD）。当前在阿里云的控制台中最多能够购买64个节点，如果有需要更多节点，可以通过...
管理问题数据
问题数据表分区结构：分区级别 分区字段名 描述 一级分区 dqc_task_run_dt 当前问题数据的采集时间，即数据质量规则运行时间（格式为yyyymmdd）。二级分区 dqc_task_id 当前问题数据采集对应的DQC规则实例ID。说明 DQC规则执行将产生DQC...
如何使用表分区？
对于数据库中的事实表以及一些比较大的表，建议您使用表分区。使用表分区功能，方便您定期进行数据删除（通过alter table drop partition命令可删除整个分区的数据）和导入（使用交换分区的方式，即alter table exchange partition命令可以...
查看元数据
元数据管理功能主要为您展示当前实例的所有数据库，数据表，分区及各种任务等信息。本文为您介绍如何通过EMR StarRocks Manager查看元数据。前提条件 已创建StarRocks实例，详情请参见 创建实例。使用限制 普通用户无法查看数据库大小、...
Tunnel SDK常见问题
每一次上传只支持将数据上传到一张表或表的一个分区，有分区的表一定要指定上传的分区，多级分区一定要指定到末级分区。使用Tunnel SDK上传数据时，编写完UDF打成JAR包后上传，对JAR包大小有要求吗？JAR包不能超过10 MB，如果JAR包超过10 ...
Check节点
说明 仅支持选择所选数据源下的MaxCompute分区表。分区 待检查的MaxCompute表的分区。配置 表名 参数后，您可先预览表信息，查看分区名称；也可使用调度参数获取分区名称，调度参数的使用，详情请参见 调度参数支持的格式。Check通过条件 ...
计费模式
元数据对象的存储量 元数据对象是指数据湖元数据中存储的数据库、表、分区和索引。计费规则，每月前100万个存储对象免费，超过100万后，超过100万的部分，每10万个对象收费5元/月，不足10万的按10万个收费。计费周期与出账周期，按月统计...
局部事务
key 数据表分区键。创建局部事务时，只需要指定局部事务对应的分区键值。primary_key 数据表主键。创建局部事务后，对局部事务范围内的数据进行读写操作时，需要指定完整主键。transaction_id 局部事务ID，用于唯一标识一个局部事务。创建...
新建并启用物理表质量检查计划
用来设置，包含分区字段的待检查物理表分区数据产出的检测时间，保证分区的数据无遗漏。检查周期 当选中 分区产出检测 参数时，才出现该选项。用来设置待检查的物理表中分区数据 产出时间 的检测周期。新建完质量检查计划后，单击 操作 列...
新建并启用物理表质量检查计划
用来设置，包含分区字段的待检查物理表分区数据产出的检测时间，保证分区的数据无遗漏。检查周期 当选中 分区产出检测 参数时，才出现该选项。用来设置待检查的物理表中分区数据 产出时间 的检测周期。新建完质量检查计划后，单击 操作 列...
可视化管理内部表、外部表或视图
背景信息 MaxCompute Studio支持的表或视图操作如下：创建内部表、外部表或视图 修改内部表或外部表 查看内部表、外部表或视图详细信息 清空表数据或删除分区 删除内部表、外部表或视图 创建内部表、外部表或视图 在IntelliJ IDEA界面的...
RDS MySQL表分区的限制
RDS MySQL对表分区有以下限制：只能对数据表的整型列进行分区，或者数据列可以通过分区函数转化成整型列。最大分区数目不能超过1024。如果含有唯一索引或者主键，则分区列必须包含在所有的唯一索引或者主键内。不支持外键。不支持全文索引...
- 产品推荐
- 这些文档可能帮助您