JindoTable使用说明
jindo table-showPartition-t db1.t1-p date=2020-10-12-listTables 语法 jindo table-listTables[-db][dbName]功能 展示指定数据库中的所有表。不指定[-db]时默认展示default库中的表。示例：展示default库中的表。jindo table-listTables...
JindoTable使用说明
jindo table-showPartition-t db1.t1-p date=2020-10-12-listTables 语法 jindo table-listTables[-db][dbName]功能 展示指定数据库中的所有表。不指定[-db]时默认展示default库中的表。示例：展示default库中的表。jindo table-listTables...
JindoTable使用说明
jindo table-showPartition-t db1.t1-p date=2020-10-12-listTables 语法 jindo table-listTables[-db][dbName]功能 展示指定数据库中的所有表。不指定[-db]时默认展示default库中的表。示例：展示default库中的表。jindo table-listTables...
清空分区
场景2：清空一个含有二级分区的一级分区 由于一级分区下含有二级分区，所以清空一级分区，实际是会同时清空该一级分区下的所有二级分区。假设r_k_tp_t1与r_k_tp_t2都采用Range分区，建表SQL如下所示：CREATE TABLE `r_k_tp_t1`(`a` bigint...
删除分区
场景 2：删除一个包含二级分区的一级分区 对于含有二级分区的一级分区，删除一级分区时，连同一级分区下的所有二级分区都会删除。r_k_tp_t1与r_k_tp_t2都采用Range分区，建表SQL如下所示：CREATE TABLE `r_k_tp_t1`(`a` bigint(20)UNSIGNED...
ALTER（2.0版）
增加列 表创建好之后目前支持增加列。语法 ALTER TABLE table_name ADD column_name data_type;示例 商品表GOODS中增加一列num，类型为bigint。ALTER TABLE goods ADD num bigint;修改二级分区数 最大二级分区数可以...相关文章 二级分区表
增加分区
场景2：目标分区是含有二级分区的一级分区 示例1：增加一个一级分区，但同时指定二级分区定义 说明 该种用法仅适用于非模板化的二级分区。假设r_h_t1与r_h_t2都采用Range+Key的非模板化二级分区，建表SQL如下所示：CREATE TABLE `r_k_ntp_t...
修改分区
若要对二级分区进行修改操作，要求 PolarDB-X 实例版本必须为5.4.17-16952556及以上。Hash/Key/Co_Hash的哈希分区策略，不支持执行该操作。Range/Range Columns的分区策略，不支持执行该操作。List/List Columns的分区策略，若分区定义使用...
分区表自动冷存
postgres 数据库中执行以下 SQL，为 db01 数据库创建一个名为 task1 的任务，该任务为每分钟检查子分区表数据，并自动将超过3个子分区的历史子分区转为冷存，并返回任务 ID：每分钟执行 postgres=>SELECT cron.schedule_in_database('task1...
分区表自动冷存
postgres 数据库中执行以下 SQL，为 db01 数据库创建一个名为 task1 的任务，该任务为每分钟检查子分区表数据，并自动将超过3个子分区的历史子分区转为冷存，并返回任务 ID：每分钟执行 postgres=>SELECT cron.schedule_in_database('task1...
数据规范
数据表分区 依赖数据源产出新分区 aime对接的离线数据往往是周期性更新的，这种情况下您可以将数据表的全量调度策略设置为“依赖数据源产出新分区”，这种策略下，aime会自动检测您的数据表是否有更新。为了使数据更新事件能够被aime...
分区表系统视图
PolarDB PostgreSQL版（兼容Oracle）提供了以下几个系统视图和系统函数，供您查看数据库中分区表的相关信息。pg_partitioned_table 返回字段说明 列名 描述 partrelid 分区表 pg_class 项的OID。partstrat 分区策略。取值如下：h：哈希分区...
分区表系统视图
PolarDB PostgreSQL版 提供了以下几个系统视图和系统函数，供您查看数据库中分区表的相关信息。pg_partitioned_table 返回字段说明 列名 描述 partrelid 分区表 pg_class 项的OID。partstrat 分区策略。取值如下：h：哈希分区表 l：列表...
重组分区
示例2：重组多个一级分区,但不指定二级分区定义 说明 该种用法同时适用于模板化二级分区表与非模板化二级分区表。该种用法与场景1（目标分区是不含二级分区的一级分区）的用法类似。具体用法如下所示：表级用法#基于表名字进行表级的分区...
使用OSS Foreign Table分区表
例如，分区表需要按照year列划分一级分区，再按照month划分二级分区，其中某个一级分区为 year=2022、二级分区为 month=07，那么属于这个分区的数据文件必须要放在 oss:/bucket/year=2022/month=07 的目录下。创建OSS Server和创建OSS User...
归档为CSV或ORC格式
暂不支持对分区表中的二级分区执行冷数据归档操作。暂不支持对LIST DEFAULT HASH分区表的DEFAULT分区执行冷数据归档操作。暂不支持对HASH或KEY类型的分区表执行冷数据归档操作。暂不支持对整张分区表执行手动归档冷数据操作。归档分区中的...
DBA_TAB_PARTITIONS
DBA_TAB_PARTITIONS 视图提供位于数据库中的所有分区的信息。名称 类型 说明 table_owner TEXT 分区所在表的所有者。schema_name TEXT 表所在 schema 的名称。table_name TEXT 表的名称。composite TEXT 如果表已建立二级分区，则为 YES。...
ALL_TAB_PARTITIONS
ALL_TAB_PARTITIONS 视图提供位于数据库中的所有分区的信息。名称 类型 说明 table_owner TEXT 分区所在表的所有者。schema_name TEXT 表所在 schema 的名称。table_name TEXT 表的名称。composite TEXT 如果表已建立二级分区，则为 YES。...
USER_TAB_PARTITIONS
composite TEXT 如果表已建立二级分区，则为 YES。如果表未建立二级分区，则为 NO。partition_name TEXT 分区的名称。subpartition_count BIGINT 分区中二级分区的数量。high_value TEXT CREATE TABLE 语句中指定的高分区值。high_value_...
MaxCompute数据源
done表添加的分区必须是数据表中存在的分区，若数据表的分区有、ds="20220114"、ds="20220115"、ds="20220116"，那么done表新加的分区也必须在数据表分区范围内；done表在插入数据时，attribute字段值为字符串类型的JSON串，如 {"swift_...
MaxCompute数据源
done表添加的分区必须是数据表中存在的分区，若数据表的分区有、ds="20220114"、ds="20220115"、ds="20220116"，那么done表新加的分区也必须在数据表分区范围内；done表在插入数据时，attribute字段值为字符串类型的JSON串，如 {"swift_...
USER_TAB_SUBPARTITIONS
USER_TAB_SUBPARTITIONS 视图提供当前用户拥有的所有二级分区的信息。名称 类型 说明 schema_name TEXT 表所在 schema 的名称。table_name TEXT 表的名称。partition_name TEXT 分区的名称。subpartition_name TEXT 二级分区的名称。high_...
DDL语句
表操作 功能 当前是否支持 创建表 是 说明 对于创建的外部表，Dataphin支持使用msck repair补全外部表分区数据语法格式。具体操作，请参见 内置Extractor访问OSS。修改表的注释 是 修改表的修改时间 是 修改表的聚簇属性 支持增加聚簇属性 ...
DDL语句
表操作 功能 当前是否支持 创建表 是 说明 对于创建的外部表，Dataphin支持使用msck repair补全外部表分区数据语法格式。具体操作，请参见 创建OSS外部表。修改表的注释 是 修改表的修改时间 是 修改表的聚簇属性 支持增加聚簇属性 不支持...
如何实现一键转冷存
参数 参数名称 描述 relname 分区表（父表）名称 reserved_subparts_cnt 存储位置不变的子分区表数量 说明 该函数只用于分区表，且只会将分区表子分区表数据转为OSS存储，子分区表上的索引数据存储位置不变。如果 reserved_subparts_cnt 为...
如何实现一键转冷存
参数 参数名称 描述 relname 分区表（父表）名称 reserved_subparts_cnt 存储位置不变的子分区表数量 说明 该函数只用于分区表，且只会将分区表子分区表数据转为OSS存储，子分区表上的索引数据存储位置不变。如果 reserved_subparts_cnt 为...
重命名分区
注意事项 本文要求 PolarDB-X 实例版本必须为5.4.14-16539836及以上...场景 4：目标分区是非模板化的二级分区 和场景3不一样，当二级分区是非模板化分区时，重命名二级分区就是重命名具体的分区，语法同 场景3：目标分区是模板化的二级分区，
读数据表
读数据表组件用于读取MaxCompute表数据，默认读取本项目的表数据。如果跨项目读取表数据，则需要在表名前添加项目名。说明 目前 Designer 算法组件支持读取的数据类型为DOUBLE、BIGINT、STRING、BOOLEAN、DATETIME。读数据表组件支持读取...
分区迁移
场景 3：目标分区是模板化的二级分区 可以迁移具体的二级分区，也可以迁移模板二级分区，如果迁移模板二级分区，意味着所有一级分区下的该模板二级分区都会同步迁移。表级用法 对于以下表tb1的定义为：create table tb1(a bigint unsigned ...
分区表扫描算子
背景信息 对数据库的分区表进行扫描时，优化器会对每个子分区生成最优的执行计划，然后通过Append算子将子分区的执行计划串联起来，作为分区表扫描的最优执行计划。如果子分区的数量不多，上述过程将会快速完成。然而，PolarDB PostgreSQL...
分区表扫描算子
背景信息 对数据库的分区表进行扫描时，优化器会对每个子分区生成最优的执行计划，然后通过Append算子将子分区的执行计划串联起来，作为分区表扫描的最优执行计划。如果子分区的数量不多，上述过程将会快速完成。然而，PolarDB PostgreSQL...
如何使用表分区？
对于数据库中的事实表以及一些比较大的表，建议您使用表分区。使用表分区功能，方便您定期进行数据删除（通过alter table drop partition命令可删除整个分区的数据）和导入（使用交换分区的方式，即alter table exchange partition命令可以...
API概览
本产品（数据湖构建/2020-...ListDatabases 获取元数据库列表 获取数据湖元数据库列表，分页查询，可以根据数据库名称匹配。表 表 CreateTable 新增元数据表 新增数据湖的元数据表。DeleteTable 删除元数据表 根据名称删除数据湖的元数据表。...
使用存储过程将数据导入Hologres内部表（Beta）
使用示例 示例1：MaxCompute非分区表数据导入Hologres 准备MaxCompute的非分区表数据。在MaxCompute中创建一张非分区源数据表，或直接选用已创建的非分区表。示例选用MaxCompute公告数据集 public_data 项目下的 customer 表数据，其表DDL...
分区分裂
场景 3：目标分区为模板化的二级分区 当二级分区是模板化分区时，可以通过分裂语法直接将某个模板二级分区分裂，分裂模板二级分区会使所有的一级分区下的子分区同时分裂。模板化二级分区是Range/Range column策略的分区表分裂 表级用法 ...
技术架构
由于单个数据库实例的计算能力有限，传统的做法是通过搭建多个数据库副本来分担压力，从而提供数据库Scale out的扩展能力。然而，这种做法需要存储多份全量数据，并且频繁同步日志数据造成了过高的网络开销。此外，在传统数据库集群上，...
Tunnel SDK常见问题
问题现象 使用Tunnel SDK下载分区表数据，返回如下报错。ErrorCode=MissingPartitionSpec,ErrorMessage=You need to specify a partitionspec along with the specified table.产生原因 使用Tunnel SDK下载分区表数据时，需要指定分区列的...
新建并启用物理表质量检查计划
用来设置，包含分区字段的待检查物理表分区数据产出的检测时间，保证分区的数据无遗漏。检查周期 当选中 分区产出检测 参数时，才出现该选项。用来设置待检查的物理表中分区数据 产出时间 的检测周期。新建完质量检查计划后，单击 操作 列...
新建并启用物理表质量检查计划
用来设置，包含分区字段的待检查物理表分区数据产出的检测时间，保证分区的数据无遗漏。检查周期 当选中 分区产出检测 参数时，才出现该选项。用来设置待检查的物理表中分区数据 产出时间 的检测周期。新建完质量检查计划后，单击 操作 列...
TRUNCATE TABLE
TRUNCATE TABLE 用于清空表数据或者表分区数据。语法 清空表数据。TRUNCATE TABLE db_name.table_name;清空表中的指定分区。TRUNCATE TABLE db_name.table_name PARTITION partition_name[,.];分区名的数据类型为bigint，您可以通过以下SQL...
- 产品推荐
- 这些文档可能帮助您