分区表索引
每个索引分区都与基础表的一个分区相关联，因此索引分区中的所有键仅引用单个表分区中存储的行。因此数据库会自动将索引分区与其关联的表分区同步，从而使每个表索引相互独立。本地索引通过指定 LOCAL 属性创建。在与基础表相同的列上对...
分区表索引
每个索引分区都与基础表的一个分区相关联，因此索引分区中的所有键仅引用单个表分区中存储的行。因此数据库会自动将索引分区与其关联的表分区同步，从而使每个表索引相互独立。本地索引通过指定 LOCAL 属性创建。在与基础表相同的列上对...
分区表索引
每个索引分区都与基础表的一个分区相关联，因此索引分区中的所有键仅引用单个表分区中存储的行。因此数据库会自动将索引分区与其关联的表分区同步，从而使每个表索引相互独立。本地索引通过指定 LOCAL 属性创建。在与基础表相同的列上对...
Dataphin管道任务运行失败，提示“分区配置错误”
问题描述 Dataphin管道任务运行失败，提示“分区配置...问题原因 输入配置中分区配置异常，写成了ds。解决方案 分区配置需填写具体分区，如需导入多分区，建议分任务执行。适用于 Dataphin 说明：本文适用于公共云v2.9.4-3版本数据集成模块。
创建表
DISTRIBUTE_KEY(column_name)说明 当前必须在DDL内指定分区键，分区键仅支持指定一个列，该列的数据类型只能为整数（TINYINT,SMALLINT,MEDIUMINT,INTEGER,BIGINT）或字符型（CHAR,VARCHAR）中的一种，数据按照分区键维度分散到各个分区中。...
配置MaxCompute输出
例如：配置MaxCompute表分区字段值来源为源端字段A，当A字段值为aa时，实时同步会将数据写入到MaxCompute表对应的aa分区中，当A字段值为bb时，实时同步会将数据写入到MaxCompute表对应的bb分区中。单击工具栏中的 图标。
COALESCE PARTITION
本文档介绍了减少基于HASH和KEY分区的分区数和对应分区的所有子分区，并将数据合并到其他分区和子分区中的方法。语法 ALTER TABLE…COALESCE PARTITION 命令用于减少基于HASH和KEY分区的分区数和对应分区的所有子分区，并将数据合并到其他...
分区表系统视图
取值如下：h：哈希分区表 l：列表分区表 r：范围分区表 partnatts 分区键中的列数。partdefid 分区表默认分区的 pg_class 项的OID。如果分区表没有默认分区，则为零。partattrs 长度为partnatts的数组，表示哪些表列是分区键的组成部分。...
USER_PART_TABLES
USER_PART_TABLES 视图提供当前用户拥有的数据库中的所有分区表的信息。名称 类型 说明 schema_name TEXT 表所在 schema 的名称。table_name TEXT 表的名称。partitioning_type TEXT 用于定义表分区的分区类型。subpartitioning_type TEXT ...
分区表系统视图
取值如下：h：哈希分区表 l：列表分区表 r：范围分区表 partnatts 分区键中的列数。partdefid 分区表默认分区的 pg_class 项的OID。如果分区表没有默认分区，则为零。partattrs 长度为partnatts的数组，表示哪些表列是分区键的组成部分。...
ALL_PART_TABLES
ALL_PART_TABLES 视图提供位于数据库中的所有分区表的信息。名称 类型 说明 owner TEXT 分区表的所有者。schema_name TEXT 表所在 schema 的名称。table_name TEXT 表的名称。partitioning_type TEXT 用于定义表分区的分区类型。...
DBA_PART_TABLES
DBA_PART_TABLES 视图提供数据库中的所有分区表的相关信息。名称 类型 说明 owner TEXT 分区表的所有者。schema_name TEXT 表所在的 schema。table_name TEXT 表的名称。partitioning_type TEXT 用于定义表分区的类型。subpartitioning_...
如何快速测试云消息队列 Kafka 版服务端是否正常？
普通消息：默认情况下，保证相同Key的消息分布在同一个分区中，且分区内消息按照发送顺序存储。集群中出现机器宕机时，可能会造成消息乱序。当 存储引擎 选择 云存储 时，默认选择 普通消息。分区顺序消息：默认情况下，保证相同Key的消息...
分区表视图
subpartition_count BIGINT 分区中二级分区的数量。high_value TEXT CREATE TABLE 语句中指定的高分区值。high_value_length INTEGER 分区值的长度。partition_position INTEGER 仅为了实现兼容性而提供；始终为 NULL。tablespace_name ...
表操作篇
如果有一批数据要上传到表格存储中，同时这批数据是按主键排列顺序的，若按顺序写入数据，可能会导致写入压力集中在某个分区中，而其他的分区处于空闲状态，无法有效利用预留读/写吞吐量，影响数据导入速度。可以采取以下任一措施来提升...
DML操作常见问题
如何更新MaxCompute表或分区中的数据？删除数据 如何删除MaxCompute表或分区中的数据？如果表数据量较大，如何删除非分区表中的重复数据？执行INSERT操作过程中出现错误，会损坏原有数据吗？不会损坏原有数据。MaxCompute满足原子性，...
DBA_TAB_PARTITIONS
subpartition_count BIGINT 分区中二级分区的数量。high_value TEXT CREATE TABLE 语句中指定的高分区值。high_value_length INTEGER 分区值的长度。partition_position INTEGER 1 表示第一个分区；2 表示第二个分区，以此类推。tablespace...
ALL_TAB_PARTITIONS
subpartition_count BIGINT 分区中二级分区的数量。high_value TEXT CREATE TABLE 语句中指定的高分区值。high_value_length INTEGER 分区值的长度。partition_position INTEGER 仅为了实现兼容性而提供；始终为 NULL。tablespace_name ...
作为Input接入
分区顺序消息：默认情况下，保证相同Key的消息分布在同一个分区中，且分区内消息按照发送顺序存储。集群中出现机器宕机时，仍然保证分区内按照发送顺序存储。但是会出现部分分区发送消息失败，等到分区恢复后即可恢复正常。当 存储引擎 ...
作为Input接入
分区顺序消息：默认情况下，保证相同Key的消息分布在同一个分区中，且分区内消息按照发送顺序存储。集群中出现机器宕机时，仍然保证分区内按照发送顺序存储。但是会出现部分分区发送消息失败，等到分区恢复后即可恢复正常。当 存储引擎 ...
列存索引中HashMatch算子的实现
当一个Worker看到其它Worker的内存最高分区号比自己的小时，该Worker也会更新自己的最高分区号，并在适当时机进行内存释放，在DoBuild阶段也会不再构建大于最高分区号的分区中HashMap，但还是会将数据保存到chunk中，当chunk满后直接落盘。...
作为Input接入
分区顺序消息：默认情况下，保证相同Key的消息分布在同一个分区中，且分区内消息按照发送顺序存储。集群中出现机器宕机时，仍然保证分区内按照发送顺序存储。但是会出现部分分区发送消息失败，等到分区恢复后即可恢复正常。当 存储引擎 ...
全局索引
定期（每周或每月）创建新的子分区，新数据进入新的子分区中。定期对旧的子分区进行归档，减轻分区表的运维成本。在以上场景中，时间通常被用作分区键，而一般不会被用作主键或unique ID。因此带来了以下两个问题：对非分区键的查询，由于...
全局索引
定期（每周或每月）创建新的子分区，新数据进入新的子分区中。定期对旧的子分区进行归档，减轻分区表的运维成本。在以上场景中，时间通常被用作分区键，而一般不会被用作主键或unique ID。因此带来了以下两个问题：对非分区键的查询，由于...
初始化概述
3个主分区和1个扩展分区 在扩展分区中创建逻辑分区的数目没有限制，可以创建任意多个逻辑分区。分为主分区、扩展分区和逻辑分区三种类型。GPT 18 EiB（1 EiB=1,048,576 TiB）说明 阿里云云盘支持的最大容量为32 TiB。Linux：分区数量无限制...
USER_TAB_PARTITIONS
subpartition_count BIGINT 分区中二级分区的数量。high_value TEXT CREATE TABLE 语句中指定的高分区值。high_value_length INTEGER 分区值的长度。partition_position INTEGER 1 表示第一个分区；2 表示第二个分区，以此类推。tablespace...
作为Input接入
分区顺序消息：默认情况下，保证相同Key的消息分布在同一个分区中，且分区内消息按照发送顺序存储。集群中出现机器宕机时，仍然保证分区内按照发送顺序存储。但是会出现部分分区发送消息失败，等到分区恢复后即可恢复正常。当 存储引擎 ...
MAX_PT
返回分区表的一级分区中有数据的分区的最大值，按字母排序，且读取该分区下对应的数据。注意事项 max_pt 函数也可以使用标准SQL实现，select*from table where pt=max_pt("table");可以改写为 select*from table where pt=(select max(pt)...
Ubuntu实例中添加swap分区的方法
概述 本文主要讲述在Ubuntu实例中添加swap分区的方法。详细信息 阿里云提醒您：如果您对实例或数据有修改、变更等风险操作...swappiness等于100的时候表示积极的使用swap分区，并且把内存上的数据及时的搬运到swap分区中。适用于 云服务器ECS
ALTER TABLE…SPLIT PARTITION
当您执行ALTER TABLE…SPLIT PARTITION命令时，PolarDB就会创建两个新分区，并在这两个新分区之间（如分区规则约束的一样）重新分配旧分区中的内容。包括TABLESPACE子句指定新分区要所属的表空间。如果您没有指定表空间，那么分区将所属于...
PartitionedTable Scan Node
本文介绍了 PartitionedTable Scan Node的使用方法以及性能对比等内容。背景信息 查询算子Append是分区表的常用算子，但是...如果您在业务中分区表分区的数量较多，且plantime很慢时，我们建议您使用PartitionedTableScan进行一定程度的优化。
PartitionedTable Scan Node
本文介绍了 PartitionedTable Scan Node的使用方法以及性能对比等内容。背景信息 查询算子Append是分区表的常用算子，但是...如果您在业务中分区表分区的数量较多，且plantime很慢时，我们建议您使用PartitionedTableScan进行一定程度的优化。
数据质量风险监控
ODS层表中的数据来源于OSS上的日志文件，作为源头表，您需要尽早判断此表分区中是否有数据。如果这张表中没有数据，则后续任务运行无意义，需要阻止后续任务运行。进入 数据质量 页面。在 数据开发 页面，单击左上角图标，选择 数据质量。...
步骤三：创建资源
普通消息：默认情况下，保证相同Key的消息分布在同一个分区中，且分区内消息按照发送顺序存储。集群中出现机器宕机时，可能会造成消息乱序。当 存储引擎 选择 云存储 时，默认选择 普通消息。分区顺序消息：默认情况下，保证相同Key的消息...
数据质量风险监控
ODS层表中的数据来源于OSS上的日志文件，作为源头表，您需要尽早判断此表分区中是否有数据。如果这张表中没有数据，则后续任务运行无意义，需要阻止后续任务运行。进入 数据质量 页面。在 数据开发 页面，单击左上角图标，选择 数据质量。...
INSERT INTO|OVERWRITE
MaxCompute支持通过 insert into 或 insert overwrite 操作向目标表或静态分区中插入、更新数据。前提条件 执行 insert into 和 insert overwrite 操作前需要具备目标表的修改权限（Alter）及源表的元信息读取权限（Describe）。授权操作请...
计划加速
这是因为分区表在优化器中的原理可以简单理解为：首先对每个分区生成最优的Plan，然后使用 Append 算子把这些Plan并联起来作为分区表的最优Plan。如果分区表的分区数量较少，这个过程会很快，对于用户是无感知的；但是一旦达到一定规模的...
DQL操作常见问题
本文为您介绍在MaxCompute中执行DQL操作过程中的常见问题。问题类别 常见问题 GROUP BY 在执行MaxCompute SQL过程中，报错Repeated key in GROUP BY，如何解决？在执行MaxCompute SQL过程中，报错Expression not in GROUP BY key，如何解决...
计划加速
这是因为分区表在优化器中的原理可以简单理解为：首先对每个分区生成最优的Plan，然后使用 Append 算子把这些Plan并联起来作为分区表的最优Plan。如果分区表的分区数量较少，这个过程会很快，对于用户是无感知的；但是一旦达到一定规模的...
polar_ddl_manager
完整语法如下：ALTER TABLE[IF EXISTS]name ATTACH PARTITION partition_name { FOR VALUES partition_bound_spec|DEFAULT }[NOCHECK_CONSTRAINT]用户需确保ATTACH的分区和DEFAULT的分区中的数据已经满足分区约束，否则会出现数据正确性...
- 产品推荐
- 这些文档可能帮助您