增加分区
全局索引：使用另一个维度进行水平分区的数据与主表始终保持强一致的分区表。语法 ALTER alter_target_definition add_partition_operation_definition alter_target_definition:TABLE[db_name.]tbl_name|TABLE tbl_name.index_name|...
分区设计
用户存有海量数据的表应该按照数据规模进行拆解，表的数据将拆解成多个数据分区独立存储，通常的设计原则是：主键（Primary Key）单实例数据库不要求表一定要有主键，但是对于分布式数据库，主键则是必须的，以保证一行数据是全局唯一的，...
Hologres数据源
配置分区表 配置从内存产生的数据同步至Hologres分区表的子表。说明 请注意 partition 的配置。{"type":"job","version":"2.0",/版本号。steps":[{"stepType":"holo",/插件名。parameter":{"endpoint":"instance-id-region-endpoint....
重命名分区
全局索引：使用另一个维度进行水平分区的数据与主表始终保持强一致的分区表。语法 ALTER { TABLE tbl_name|TABLEGROUP tg_name|TABLEGROUP BY TABLE tbl_name } rename_partition_specs_definition|rename_subpartition_specs_definition ...
无锁结构变更
删除主键 ✔️ 表存在非空唯一键 分区 删除分区 ✔️ truncate 分区 ✔️ 重分区 ✔️ 非分区表改为分区表 ✔️ 注意事项 确保数据库磁盘空间充足。表中须 存在主键或非空唯一键 且表中 不存在外键。当前表在执行无锁结构变更同时，执行...
日志投递MaxCompute后，如何检查数据完整性
使用保留字段_partition_time_作为表分区列，如何判断分区数据是否已完整_partition_time_由日志的time字段计算得到，由日志的真实时间按照时间格式字符串向下取整得出。其中，日志真实时间既不是投递数据的时间，也不是日志写入服务端时间...
创建表
单击目标数据库右侧的登录数据库，在DMS for AnalyticDB页面的顶部菜单栏单击创建>表。在新建：表页面，按照提示进行参数配置。基本信息配置：列配置：分区配置：高级属性：配置好上述参数后，单击保存。通过DMS页面创建普通表 登录 分析型...
配置MaxCompute输出
例如：配置MaxCompute表分区字段值来源为源端字段A，当A字段值为aa时，实时同步会将数据写入到MaxCompute表对应的aa分区中，当A字段值为bb时，实时同步会将数据写入到MaxCompute表对应的bb分区中。单击工具栏中的 图标。
分区表命令列表
ALTER TABLE…RENAME PARTITION 重命名表分区。ALTER TABLE…SPLIT PARTITION 将一个分区划分为两个分区，并重新分配新分区的内容。ALTER TABLE…SPLIT SUBPARTITION 将一个子分区划分为两个子分区，并重新分配子分区的内容。ALTER TABLE…...
分区表视图
partitioning_type TEXT 用于定义表分区的分区类型。subpartitioning_type TEXT 用于定义表二级分区的二级分区类型。partition_count BIGINT 表中分区的数量。def_subpartition_count INTEGER 表中二级分区的数量。partitioning_key_count ...
多色仪表盘
多色仪表盘组件可用于展示设备的某个属性（作为设备仪表使用），或接口返回的数值型数据。下文介绍组件的详细配置方法。步骤一：添加组件 创建Web应用。具体操作，请参见 创建Web应用。在Web应用编辑器中，单击最左侧的组件图标。在画布...
使用DTS同步RDS MySQL数据到AnalyticDB MySQL 2.0
如果需要同步的表数量较少且分析型数据库MySQL版表结构与源端表差异较大的话，可以在分析型数据库MySQL版中提前创建表，配置同步链路时候需要把下述步骤6中结构初始化的勾选项去掉即可。数据同步流程介绍 通过DTS实时同步RDS MySQL数据到 ...
Lock Table和Unlock Table
锁定表分区 lock table some_partitioned_table partition(ds='20211130')exclusive;查询锁定的表 命令格式 show locks;参数说明 table_name：必填。锁定的表名称。使用示例 show locks some_table;解锁表 限制条件 仅支持解锁物理表。具有...
分区
部分对分区操作的SQL的运行效率较低，会给您带来较高的费用，例如 插入或覆写动态分区数据（DYNAMIC PARTITION）。对于部分操作MaxCompute的命令，处理分区表和非分区表时语法有差别，详情请参见 表操作 和 INSERT操作。使用限制 单表分区...
通过LOCALITY指定存储位置（AUTO模式）
当前Locality关键字实现的能力如下：允许定义数据库、表、分区级别的Locality属性，其他操作（缩容除外）均会在保证Locality约束的前提下改变数据分布。允许变更表组、分区组级别的Locality属性，修改后将自动触发相应的异步数据迁移任务。...
REMOVE PARTITIONING
语法 ALTER TABLE.REMOVE PARTITIONING 命令用于删除分区和子分区表的分区结构，并转化成单表，且不丢失数据：ALTER TABLE table_name REMOVE PARTITIONING 示例 删除 sales_range_list 表中所有的分区结构：ALTER TABLE sales_range_list ...
DDL操作常见问题
没有索引，Hash Clustering可以提供类似数据库中Cluster index的效果，详情请参见 表操作。如何修改表的Hash Clustering属性？增加表的Hash Clustering属性：alter table table_name[clustered by(col_name[,col_name,.])[sorted by(col_...
重组分区
全局索引：使用另一个维度进行水平分区的数据与主表始终保持强一致的分区表。语法 ALTER alter_target_definition reorg_partition_operation_definition alter_target_definition:TABLE[db_name.]tbl_name|TABLE tbl_name.index_name|...
如何实现一键转冷存
参数 参数名称 描述 relname 分区表（父表）名称 reserved_subparts_cnt 存储位置不变的子分区表数量 说明 该函数只用于分区表，且只会将分区表子分区表数据转为OSS存储，子分区表上的索引数据存储位置不变。如果 reserved_subparts_cnt 为...
如何实现一键转冷存
参数 参数名称 描述 relname 分区表（父表）名称 reserved_subparts_cnt 存储位置不变的子分区表数量 说明 该函数只用于分区表，且只会将分区表子分区表数据转为OSS存储，子分区表上的索引数据存储位置不变。如果 reserved_subparts_cnt 为...
数据迁移服务隐藏列机制说明
源端 目标端 参考文档 OceanBase 数据库 MySQL 租户 OceanBase 数据库 MySQL 租户 OceanBase 数据库之间的数据迁移 OceanBase 数据库 Oracle 租户 OceanBase 数据库 Oracle 租户 OceanBase 数据库之间的数据迁移 OceanBase 数据库 Oracle ...
写数据表
前提条件 如果您需要写入分区表，则需要先创建待写入的分区表，再使用该组件写入数据，关于如何创建分区表，详情请参见 创建分区表。使用限制 支持的计算引擎为MaxCompute。可视化配置组件参数 Designer 仅支持通过可视化方式，配置该组件...
自定义分区
本文为您介绍迁移 Oracle 数据库的数据至 OceanBase 数据库 Oracle 租户时，CREATE TABLE DDL 自定义分区的支持转换范围。自定义 range 分区 自定义 range 分区 range_partition_desc 的语法如下：PARTITION[partition]range_values_clause...
Quick BI数据集报“xxx is full scan with all ...
please specify partition predicates.#问题原因 MaxCompute数据库才会遇到这种报错，MaxCompute语法规则是默认不支持全分区查询，分区表需要指定分区值，或者开启全表扫描。解决方案 可以在数据集的过滤器里设置分区字段的值，比如分区...
普通表转换为分区表
当单张普通表的数据量超过1亿或者1 TB时，建议使用分区表。本文介绍了使用 ALTER 语法将单张普通表转换为分区表的注意事项以及示例。前提条件 普通表中的主键或唯一键需要包含分区表中的分区键字段。注意事项 普通表转换为分区表的过程中，...
数据建模
数据完整率 表分区所选字段值全部非空的count数与表分区总记录数的比率与一个固定值进行比较，符合规则则通过。比较方式包括：>、、>=、、=和!数据唯一性 表分区所选字段值去重后的count数与表分区总记录数的比率与一个固定值进行比较，...
2023年
本文介绍 PolarDB PostgreSQL版（兼容Oracle）的产品功能动态，分别为内核小版本、控制台、时空数据库和API的更新说明。说明 您可通过如下语句查看 PolarDB PostgreSQL版（兼容Oracle）的内核小版本的版本号：show polar_version;2023年12...
对分区表使用跨机并行查询
通过对分区表使用跨机并行查询，提升数据库的性能。功能介绍 当前对分区表使用跨机并行查询支持的功能如下所示：支持range分区的并行查询。支持list分区的并行查询。支持hash分区的并行查询。支持分区裁剪。支持带有索引的分区表并行查询。...
对分区表使用跨机并行查询
通过对分区表使用跨机并行查询，提升数据库的性能。功能介绍 当前对分区表使用跨机并行查询支持的功能如下所示：支持range分区的并行查询。支持list分区的并行查询。支持hash分区的并行查询。支持分区裁剪。支持带有索引的分区表并行查询。...
USER_PART_TABLES
USER_PART_TABLES 视图提供当前用户拥有的数据库中的所有分区表的信息。名称 类型 说明 schema_name TEXT 表所在 schema 的名称。table_name TEXT 表的名称。partitioning_type TEXT 用于定义表分区的分区类型。subpartitioning_type TEXT ...
ALL_PART_TABLES
ALL_PART_TABLES 视图提供位于数据库中的所有分区表的信息。名称 类型 说明 owner TEXT 分区表的所有者。schema_name TEXT 表所在 schema 的名称。table_name TEXT 表的名称。partitioning_type TEXT 用于定义表分区的分区类型。...
全局二级索引（GSI）
当分区表上只存在局部索引时，使用分区表因受到分区键的限制，会遇到一些棘手的问题，如下：查询条件不包含分区键时，查询数据需要扫描分区表上的所有分区，这将带来明显的读放大问题，且分区越多，读放大越严重。查询结果对索引字段有顺序...
分区表管理（auto_partition）
AnalyticDB PostgreSQL版 支持将大表定义为分区表，并支持通过auto_partition插件对分区表进行自动删除或新增，当您进行条件查询时，系统只会扫描满足条件的分区，避免全表扫描，从而提升查询性能。...相关文档 表分区定义
常见问题
Spark查询Hudi表分区裁剪不生效？使用Spark的alter table语句时，报错xxx is only supported with v2 tables，如何处理？Spark查询Hudi数据重复，如何处理？问题原因：出现Spark查询hudi数据重复，通常是因为Hudi不支持Spark DataSource...
转换分区表
您可以通过 ALTER TABLE 命令修改分区属性，实现普通表和RANGE分区表与INTERVAL RANGE分区表之间的相互转换。前提条件 集群版本需为 PolarDB MySQL版 8.0版本且Revision version为8.0.2.2.0及以上。您可以通过 查询版本号 确认集群版本。...
CREATE PARTITION TABLE
注意事项 如果单日分区数据小于1亿条，不建议使用日作为分区条件，或创建分区表。分区表太小，查询加速效果不明显，可以选择较大粒度的分区。如果您需要经常对某分区数据进行整体替换，包括执行truncate操作或者drop操作，建议使用分区表。...
原理
接收到用户的输入后，第一步是将语法树转换为数据库中的Node节点。下图详细解释了这个转换的过程。整个语法树挂在了 CreateStmt 节点下，分区表本质上还是创建一张表的过程；partspec 节点是一级分区管理节点，它承载了分区键和分区策略；...
DBA_PART_TABLES
DBA_PART_TABLES 视图提供数据库中的所有分区表的相关信息。名称 类型 说明 owner TEXT 分区表的所有者。schema_name TEXT 表所在的 schema。table_name TEXT 表的名称。partitioning_type TEXT 用于定义表分区的类型。subpartitioning_...
ECS应用角色（EMR 3.32及之前版本和EMR 4.5及之前版本...
dlf:BatchGetPartitionColumnStatistics 批量获取表分区统计信息。dlf:CreateLock 创建元数据锁。dlf:UnLock 解锁指定的元数据锁。dlf:AbortLock 终止元数据锁。dlf:RefreshLock 刷新元数据锁。dlf:GetLock 获取元数据锁。dlf:...
ALTER TABLE
DROP COLUMN[IF EXISTS]这种形式从表删除一列。涉及到该列的索引和表约束也将会被自动删除。如果该列的移除会导致引用它的多元统计信息仅包含单一列的数据，则该多元统计信息也将被移除。如果在该表之外有任何东西（例如外键引用或者视图）...
- 产品推荐
- 这些文档可能帮助您