概述
在流计算中每个分区和RDD的Partition一一绑定，通过扩展表的分区，可以完成数据吞吐量的线性扩展。场景案例 Tablestore结合Spark的流批一体SQL实战 海量结构化数据的冷热分层一体化 Tablestore+Delta Lake（快速开始）使用方式 根据业务...
初始化小于等于2 TiB数据盘（Linux）
说明 云盘使用MBR分区形式，最多可以创建4个主分区，或者3个主分区和1个扩展分区，扩展分区不可以直接使用，需要划分成若干个逻辑分区才可以使用。更多信息，请参见 分区格式介绍。以创建一个主要分区为例。输入 p 并按 Enter 键，开始创建...
通道服务概述
增量数据变化保序 通道服务为数据划分一到多个可并行消费的逻辑分区，每个逻辑分区的增量数据按写入时间顺序保序，不同逻辑分区的数据可以并行消费。消费延迟监控 通道服务通过DescribeTunnel API提供了客户端消费数据延迟（即当前消费到的...
CREATE TABLE
使用范围或哈希分区时，分区键可以包含多个列或表达式（最多 32 个，但在构建 PolarDB时可以更改此限制），但对于列表分区，分区键必须由单个列或表达式组成。范围和列表分区需要 btree 运算符类，而哈希分区需要哈希运算符类。如果没有...
数据倾斜调优
数据倾斜排查及解决方法 根据使用经验总结，引起数据倾斜的主要原因有如下几类：Join GroupBy Count（Distinct）ROW_NUMBER（TopN）动态分区 其中出现的频率排序为 JOIN>GroupBy>Count(Distinct)>ROW_NUMBER>动态分区。Join 针对Join端产生...
初始化概述
3个主分区和1个扩展分区 在扩展分区中创建逻辑分区的数目没有限制，可以创建任意多个逻辑分区。分为主分区、扩展分区和逻辑分区三种类型。GPT 18 EiB（1 EiB=1,048,576 TiB）说明 阿里云云盘支持的最大容量为32 TiB。Linux：分区数量无限制...
Linux实例磁盘扩容后同步空间到逻辑卷分区
问题原因 系统分区做了逻辑分区，磁盘扩容成功后，没有进行相应的逻辑分区扩容。解决方案 说明 如果您对实例或数据有修改、变更等风险操作，务必注意实例的容灾、容错能力，确保数据安全。如果您对实例（包括但不限于ECS、RDS）等进行配置...
done分区指南
done分区自动触发回流 iGraph支持通过指定.done 分区来标示对应分区可以回流.done 分区为一个无数据的空分区，只用来提供标识 示例 ds=20160528这个分区,如果您认为这个分区可以回流了，则需要产出对应的done分区:ds=20160528.done，此时，...
KEY
KEY分区与HASH分区的区别在于：KEY分区可以没有分区字段，没有分区字段时，默认将主键字段作为分区键。如果没有主键字段时，则按照唯一键进行分区。KEY分区支持多列分区字段。KEY分区支持INT类型、字符类型、DATE类型、TIME类型、DATETIME...
何时选择虚拟列分区
虚拟列分区可以对表达式进行分区，该表达式可能使用来自其他列的数据，并使用这些列进行计算。虚拟列分区支持所有分区类型。如果查询条件不是某一个列上的原始数据，而是经过计算过的，又不想添加一个单独的列来存储计算过的正确值，可以...
分区
合理设计和使用分区，可以提高查询性能、简化数据管理，并支持更灵活的数据访问和操作。概述 分区可以理解为分类，通过分类把不同类型的数据放到不同的目录下。分类的标准就是分区字段，可以是一个，也可以是多个。MaxCompute将分区列的每...
分区表索引
不同于本地索引中索引分区和表分区一一对应的关系，全局索引分区可以指向所有表分区。全局索引也可以被分区，它的分区键必须是索引键的前缀。语法说明 创建本地索引 CREATE[UNIQUE]INDEX[CONCURRENTLY][[IF NOT EXISTS]name]ON table_name...
分区表索引
不同于本地索引中索引分区和表分区一一对应的关系，全局索引分区可以指向所有表分区。全局索引也可以被分区，它的分区键必须是索引键的前缀。说明 全局索引是分区表所特有的，具体请参见 全局索引。语法说明 创建本地索引 CREATE[UNIQUE]...
分区表索引
不同于本地索引中索引分区和表分区一一对应的关系，全局索引分区可以指向所有表分区。全局索引也可以被分区，它的分区键必须是索引键的前缀。说明 全局索引是分区表所特有的，具体请参见 全局索引。语法说明 创建本地索引 CREATE[UNIQUE]...
AUTO模式核心特性及典型场景
但是，AUTO模式的分区表由于采用了一致性哈希的路由算法，它的分区可以更灵活的进行合并、分裂与迁移，分区可以按需调度到指定的DN中，并且不会影响到不相关的分区数据。通过分区的合并分离等操作并结合分区调度，PolarDB-X 可以将数据均匀...
表分区定义
分裂分区存在如下限制：仅支持分裂最底层的分区，即只有包含数据的分区可以被分裂。分裂分区语句中指定的分裂值会被分在后一个分区中。将2017年1月的分区分裂成两个分区，一个分区包含1月1号至15号，第二个分区包含1月16号至31号，分裂分区...
生命周期
对于分区表，每个分区可以分别被回收。在生命周期内未被修改数据的分区，经过指定的天数后此分区将会被回收，否则会被保留。每个分区的生命周期是从最后一次分区数据被修改的时间（LastModifiedTime）开始计算。不同于非分区表，分区表的...
二级分区表（2.0版）
二级分区可以理解为按队列方式管理分区个数，当超过最大定义数，最小值分区自动删除，循环使用空间，所以二级分区是自动清除历史数据。具体使用例子，请参见 电子商务行业的实践。最佳实践 如果二级分区过多，则会导致多次索引查询、性能...
图编辑
扫描DONE分区 选择【是】，用户在产出分区后同时产出对应分区的DONE分区，由GraphCompute主动探测发现该分区可以进行数据回流。选择【否】，用户产出分区后需调用接口GraphCompute进行分区回流。图信息查看 版本信息 图模型的基础版本信息...
分区表管理（auto_partition）
逻辑分区：将数据库中的数据划分为逻辑上独立的部分，每个分区可以包含一个或多个表。逻辑分区子表其实是一个一级表，仅通过约束条件进行关联。物理分区：将表和索引分割成不同的物理部分，即数据存储在不同的物理存储设备上。安装插件 ...
分区表常见问题
一般情况下，每个分区是一个Innodb表，Hybrid分区可以放在其他存储引擎上。误删了一个表的分区数据，能否恢复？目前仅支持库表级的恢复，不支持分区级的数据恢复。分区数太多，导致内存耗尽，如何解决这个问题？在 PolarDB MySQL版 8.0.1和...
基于CEN-TR实现企业级云上互联
每个分区可以由独立的VPC承载并根据实际情况调整，VPC内按照部署的业务模块选择创建不同的虚拟交换机，不同业务系统之间的互通即不同VPC之间的路由打通。可以使用云企业网CEN及转发路由器快速打通，同时可以按需进行路由表隔离、路由过滤、...
表设计最佳实践
项目空间的表和分区可以通过Package授权的方式进行交换。维度表的设计 描述属性的表通常被设计为维度表。维度表可与任意表组中的任意表进行关联，且创建时无需配置分区信息，但是对单表个数有所限制。通常要求维度表的单表量不超过1000万个...
名称解释
逻辑分区与表 逻辑上，用户创建的数据库由多个数据逻辑分区（Partition）组成，用户创建的表（Table）的数据将分布在这些数据逻辑分区上，数据分布规则依照用户建表时指定的列（PartitionKey）进行Hash计算后来划分。逻辑分区的数量一旦...
CREATE TABLE
本文介绍 AnalyticDB for MySQL 的 CREATE TABLE 建表语法。您将了解到如何创建分区表和维表，以及如何定义表的分布键、分区键、索引、生命周期、冷热数据分层等。设置默认值、自增列 设置主键 设置...为什么要定义分区 分区可以加快数据过滤...
分区表输入示例
本文为您介绍MapReduce的分区表输入示例。示例一：public static void main(String[]args)throws Exception { JobConf job=new JobConf();...示例中applicable函数是用户逻辑，用于决定该分区是否可以作为MapReduce作业的输入。
分区热力图
库表视图 图 2.DN视图 左侧直方图：各个矩形分别代表当前实例下的逻辑库、逻辑表、逻辑分区，DN视图下代表存储节点、逻辑库、逻辑表、逻辑分区，其中表示DN节点和逻辑分区的矩形，通过长度表示拥有数据量的多少，长度越长表示数据量越多。...
分区热力图
库表视图 图 2.DN视图 左侧直方图：各个矩形分别代表当前实例下的逻辑库、逻辑表、逻辑分区，DN视图下代表存储节点、逻辑库、逻辑表、逻辑分区，其中表示DN节点和逻辑分区的矩形，通过长度表示拥有数据量的多少，长度越长表示数据量越多。...
创建逻辑卷
逻辑卷管理LVM（Logical Volume Manager）是Linux系统下的一种管理硬盘分区机制，在磁盘和分区之上建立一个逻辑层，可以灵活、高效地管理磁盘分区，简化了磁盘管理操作。逻辑卷的大小可以动态调整，而且不会丢失现有数据；即使新增了磁盘，...
DML操作常见问题
如果是分区表，您可以执行 alter table table_name drop if exists partition(分区名='具体分区值')命令，删除对应的分区，即可删除分区对应的数据。例如，表testtable的分区列为ds，执行如下命令删除 ds='20170520' 的分区。alter table ...
通过LOCALITY指定存储位置（AUTO模式）
创建逻辑表时指定存储位置 在创建逻辑表时指定存储位置以实现数据隔离，目前支持在单表和Range、Hash、List三种分区方式的分区表中使用Locality关键字。在实例中创建一个逻辑表，并指定其存储位置。详细语法参见 CREATE TABLE（AUTO模式）...
通过整库迁移配置集成任务
若有其他分区需要，可以在生成管道后，单击单条管道修改分区相关的 准备语句。数据源 选择目标数据源。若无所需数据源，您也可以单击 新建数据源 进行创建。数据源创建，请参见 通过整库迁移配置集成任务。AnalyticDB for PostgreSQL目标...
通过整库迁移配置集成任务
若有其他分区需要，可以在生成管道后，单击单条管道修改分区相关的 准备语句。数据源 选择目标数据源。若无所需数据源，您也可以单击 新建数据源 进行创建。数据源创建，请参见 数据集成支持的数据源。TDH Inceptor、ArgoDB目标数据源类型...
设置逻辑表质量规则
通过设置逻辑表质量规则并运行质量检测计划后，您可以查看逻辑表质量检查结果，方便用户掌握当前逻辑表的质量状况，您可以通过可视化方式与自定义SQL方式制定表级与字段级质量规则。本文以可视化方式为例介绍如何设置逻辑表表规则和字段...
设置逻辑表质量规则
通过设置逻辑表质量规则并运行质量检测计划后，您可以查看逻辑表质量检查结果，方便用户掌握当前逻辑表的质量状况，您可以通过可视化方式与自定义SQL方式制定表级与字段级质量规则。本文以可视化方式为例介绍如何设置逻辑表表规则和字段...
列存索引
在创建列存索引时，若宽表数据的主键字段不能直接作为列存索引的普通分区表达式，可以在普通分区表达式中包含计算逻辑，示例如下。对宽表所有字段创建列存索引，将列存索引数据按时间戳字段 ts 按天分区：CREATE INDEX my_ts_idx ...
何时选择RANGE分区
在这些列上对表进行分区可以实现分区剪枝。希望维护数据的滚动窗口。不能在指定的时间内完成大型表的管理操作，例如备份和恢复，但是可以根据分区范围列将它们划分为更小的逻辑块。示例：创建为期9年+的表 orders，并根据列 o_orderdate 按...
新增逻辑表质量规则
如果逻辑表中，添加了分区字段，则这里可以选择具体的分区值，例如“bank=$[yyyymmdd-1]”，详细操作，请参见 步骤二：选择需要配置规则的计算资源以及分区。步骤三：配置规则 配置表规则 当 步骤一：选择规则类型 中选择的规则类型为表...
新增逻辑表质量规则
如果逻辑表中，添加了分区字段，则这里可以选择具体的分区值，例如“bank=$[yyyymmdd-1]”，详细操作，请参见 步骤二：选择需要配置规则的计算资源以及分区。步骤三：配置规则 配置表规则 当 步骤一：选择规则类型 中选择的规则类型为表...
分区表简介
表的每个分区必须具有相同的逻辑属性，例如列名、数据类型和约束，但每个分区可以具有单独的物理属性，例如启用或禁用压缩、物理存储设置和表空间。分区表对于许多不同类型的应用程序很有用，尤其是管理大量数据的应用程序，如数据库。OLTP...
- 产品推荐
- 这些文档可能帮助您