云服务器ECS多分区场景下的磁盘分区扩容方法
系统返回类似如下，若 Disklabel type 参数值为 dos，则分区表格式为MBR，若 Disklabel type 参数值为 gpt，则分区表格式为GPT。执行如下命令，查看文件系统的类型。blkid[$Partition]注：[$Partition]对应当前磁盘的最后一个分区。系统...
创建云盘
挂载数据盘 分区格式化数据盘 一块全新的数据盘挂载到ECS实例后，需要进行分区并创建文件系统。根据云盘容量，可使用不同的分区方式：使用GPT分区：支持2 TiB以上容量。使用MBR分区：不支持2 TiB以上容量。初始化小于等于2 TiB数据盘...
费用优化
优化配置 配置可以从以下两个方面进行优化：分区个数 一个分区最大可以处理5M/s的数据。只有readwrite的分区会收费。请调整分区个数，使其正好能处理5M/s的数据。减少分区个数请合并分区。Logstore 数据保存周期 针对您对日志的查询、存储...
管理数据集
若您的数据集带有分区字段，则会出现分区字段同步设置，具体设置请参见 分区值格式说明。（可选）单击 更多操作>复制，可以复制当前数据集。（可选）单击 更多操作>重命名，可以重命名当前数据集。（可选）单击 更多操作>相关卡片和作品，...
创建OSS投递任务（旧版）
分区格式 按照投递任务的创建时间动态生成OSS Bucket目录，不能以正斜线（/）开头，默认值为%Y/m/d/H/M，相关示例请参见 分区格式，参数详情请参见 strptime API。写OSS RAM角色 授予OSS投递任务将数据写入到OSS Bucket的权限。默认角色：...
新建分区
新建多级分区 PolarDB PostgreSQL版（兼容Oracle）在创建分区时，也可以将分区作为分区表再一次进行分区，不同的分区策略可以自由组合。新建多级范围分区 CREATE TABLE tab_range_p1 PARTITION OF tab_range FOR VALUES FROM(minvalue)TO...
变更TTL表
可以指定物理时间分区名，可通过information_schema.local_partitions获取 ALTER TABLE t_order EXPIRE LOCAL PARTITION p20210401;不指定分区名时，删除所有已过期的分区 ALTER TABLE t_order EXPIRE LOCAL PARTITION;说明 未失效分区不...
块存储FAQ
写入数据与分区格式化有什么关系？回滚云盘问题 数据盘进行二次分区后，此时回滚快照后，数据盘是几个分区？回滚云盘时为什么报错“执行回滚磁盘需要停止实例，并且确保当前磁盘没有创建中的快照和没有更换过操作系统。其他问题 如何转移...
何时选择HASH分区
对于分布规则不明显的数据，并没有明显的范围查找等特征，可以使用HASH分区，将数据分区列的值按照HASH算法打散到不同的分区上，将数据随机分布到各个分区。使用HASH分区的目的如下：使分区间数据分布均匀，分区间可以并行访问；根据分区键...
并行查询
PolarDB PostgreSQL版 支持分区表的并行查询（Parallel Append）功能，可以更好地处理大规模数据的查询。概述 当代计算机往往有更多的核心可以使用，并行查询是现代数据库必不可少的能力。PolarDB PostgreSQL版 对分区表的并行查询，和普通...
并行查询
PolarDB PostgreSQL版（兼容Oracle）支持分区表的并行查询（Parallel Append）功能，可以更好地处理大规模数据的查询。概述 当代计算机往往有更多的核心可以使用，并行查询是现代数据库必不可少的能力。PolarDB PostgreSQL版（兼容Oracle）...
并行查询
PolarDB PostgreSQL版（兼容Oracle）支持分区表的并行查询（Parallel Append）功能，可以更好地处理大规模数据的查询。概述 当代计算机往往有更多的核心可以使用，并行查询是现代数据库必不可少的能力。PolarDB PostgreSQL版（兼容Oracle）...
初始化小于等于2 TiB数据盘（Windows）
一块全新的Windows数据盘挂载到ECS实例后，还不能直接存储数据，通常您需要完成磁盘联机、新建分区、格式化等初始化操作后，才能供系统读写数据。本文介绍如何在Windows系统中初始化一块小于等于2 TiB的数据盘。前提条件 数据盘已挂载到ECS...
何时使用Range-Hash分区
Range-Hash分区是一级分区为Range分区，二级分区为Hash分区的组合分区类型。Range-Hash分区对于存储历史数据的大表很常见，并且经常与其他大表连接。对于这些类型的表（典型的数据仓库系统)，组合Range-Hash分区提供了在Range级别进行分区...
云盘扩容后使用growpart扩展GPT分区失败该如何处理？
问题现象 云盘的分区格式为GPT，云盘进行云盘容量扩容后，使用growpart工具扩展分区（例如/dev/vdb1）或者文件系统时提示如下图所示的报错信息，导致云盘容量扩容了但是分区和文件系统的可用空间没有增加。本文以/dev/vdb1 分区为例进行...
创建混合分区
您可以通过创建混合分区（Hybrid Partition）的方式来访问存储在不同引擎中的数据。混合分区原理如下图所示：混合分区的基本原理是将分区表中的分区存储在不同的存储介质上，以达到冷热数据分离管理的目的。比如将热数据存储在本地PFS上，...
创建同步MaxCompute
目前管控台默认固定的MaxCompute分区格式，分区配置对应为 分区 时间Format 说明 ds%Y%m%d day hh%H hour mm%M minute 分区间隔决定了根据时间戳转换MaxCompute分区时所采用的时间间隔。时间范围是 15分钟~1440分钟（1天），跳变间隔 15...
分区和列操作
如果您希望一次性删除符合某个规则条件的多个分区，可以使用表达式指定筛选条件，通过筛选条件匹配分区并批量删除分区。限制条件 每个分区过滤子句只能访问一个分区列。表达式用到的函数必须是内建的Scalar函数。注意事项 删除分区之后，...
当实例无法启动时扩容云盘
注意 一个已有分区采用了MBR分区格式，则不支持扩容到2 TiB及以上。如果您的MBR分区容量需要扩容到2 TiB以上，建议您先创建一块大于2 TiB的云盘并格式化为GPT分区，再将MBR分区中的数据拷贝到GPT分区中。格式化GPT分区操作，请参见 分区...
扩容分区和文件系统（Windows）
找到待确认分区格式的数据盘（以 磁盘 1 为例），右键单击待确认分区格式的磁盘周边空白区，在弹出菜单中选择 属性。在弹出的对话框中，单击 卷 页签，然后查看 磁盘分区形式。如下图所示，磁盘分区类型为MBR。步骤二：扩容分区和文件系统 ...
初始化大于2 TiB数据盘
关于分区格式的更多介绍，请参见 分区格式介绍。右键单击 磁盘 2 的 未分配 区域，选择 新建简单卷，创建一个3 TiB的NTFS格式的卷。在 新建简单卷向导 对话框中，单击 下一步，然后根据向导完成初始化操作。在 指定卷大小 对话框中，设置 ...
Tunnel常见错误码
产生原因 分区字段不正确或格式有误。解决措施 您可以执行 show partitions;命令查看表的分区。检查分区字段信息，确保满足如下要求：参数中的分区列顺序要与建表语句中分区列顺序保持一致。当分区列值中有引号(pt='a'或pt="a")时，旧版本...
创建MaxCompute投递任务（新版）
时间分区格式 时间分区格式，配置示例和参数详细请参见 参考信息 和 Java SimpleDateFormat。说明 仅当 MaxCompute分区列 中的字段配置为_partition_time_时，时间分区格式才生效。请勿使用精确到秒的日期格式，易导致单表的分区数目超过...
表设计
实际上，单分区也可以达到几万行/秒的写入，但是架构设计上不要依赖单分区能力，尽量控制在很安全的水平内。常见热点问题 下表一个常见的热点案例。这是一个简单的监控场景数据表，每次存储某个机器某个时间的一些指标值。这个表中主键有两...
自动化管理分区
定时新增分区 如果您需要为 orders 分区表定时新增分区，可以通过创建定时任务的方式定时触发新增分区，示例如下：DELIMITER|CREATE EVENT IF NOT EXISTS add_partition ON SCHEDULE EVERY 1 DAY STARTS '2022-05-20 22:00:00' ON ...
使用OSS Foreign Table分区表
在 OSS投递功能 面板中配置投递信息时，分区格式 建议设置为 date=Y%m/userlogin，生成的OSS目录格式示例如下：oss:/testBucketName/adbpgossfdw├─date=202002│├─userlogin_158561762910654*_647504382.csv│└─userlogin_...
Dataphin数据同步报错“分区配置错误，根据您所配置的...
问题描述 Dataphin配置数据同步任务，报错“分区配置错误，根据您所配置的分区没有匹配到源头表中的分区”。com.alibaba.dt.pipeline.plugin.center.exception.DataXException: Code:[OdpsReader-33],Description:[分区配置错误.].-分区...
使用限制
云存储单分区 宕机和升级时可能导致不可用 建议创建的分区数大于1，如果强依赖单分区，可以使用Local存储。说明 仅专业版实例支持在创建Topic时将存储引擎类型选择为Local存储，标准版暂不支持。说明 云消息队列 Kafka 版 不再支持按照...
管理分区
分区表达式 可以对数据进行过滤，您可以选择将需要做分区的字段添加到分区成员中。确定好分区成员后，您可以单击 分区边界，为当前分区类型创建分区边界。填写完毕后，您可以进入 表编辑器 的 SQL预览 页面，实时查看当前SQL语句，其中也...
分区表输入示例
本文为您介绍MapReduce的分区表输入示例。示例一：public static void main(String[]args)throws Exception { JobConf job=new JobConf();LinkedHashMap,String>input=new LinkedHashMap,String>();input.put("pt","123456");InputUtils....
CDM明细层设计规范
事务型事实表一般选用事件发生日期或时间作为分区字段，这种分区方式可以方便下游的作业数据扫描执行分区裁剪。明细层事实表的冗余子集的原则能有利于降低上层数据访问的IO开销。明细层事实表维度退化到事实表原则能有利于减少上层数据访问...
使用快照创建云盘
重要 如果快照容量小于2,048 GiB，但您希望设置的新云盘容量大于2,048 GiB，请提前确认快照对应的历史云盘采用的是GPT分区格式（通过 fdisk-lu 命令查看 Disk label type 值是否为 gpt）。否则，建议您设置为小于2,048 GiB，避免配置分区...
多级分区表静态裁剪与并行扫描
为了方便管理和提高查询性能，用户一般会使用分区表，将大表拆分成多张子分区表，每张子分区表又进一步可以拆成二级子分区表，从而形成了多级分区表。支持多级分区表的静态分区裁剪，避免对无关分区进行扫描。同时，针对被裁剪后的分区表，...
CREATE TABLE
根据业务需求，如果需要将数据按照HASH分区和时间范围分区，可以将两个分区策略组合使用。CREATE TABLE dt_partition(storeId integer,goodsId varchar,goodsPrice integer,orderTime bigint,constraint pk primary key(storeId))PARTITION...
通过联邦分析同步数据
支持设置的分区格式如下：value：按值进行分区。yyyyMMdd：按年、月、日进行分区。yyyyMM：按年、月进行分区。yyyy：按年进行分区。单击 确定。任务自动启动。在 联邦分析 页面，您可以查看已创建的任务，也可以 在 操作 列 查看、编辑、...
挂载数据盘
您可以灵活地将新购买的按量付费云盘手动挂载到现有的ECS实例上，作为数据盘使用，以扩展ECS实例的存储容量并适应新的业务需求。前提条件 被挂载的实例和云盘在同一个可用区。被挂载的实例的状态为 运行中（Running）或者 已停止（Stopped...
通过联邦分析功能同步至湖仓版
支持设置的分区格式如下：value：按值进行分区。yyyyMMdd：按年、月、日进行分区。yyyyMM：按年、月进行分区。yyyy：按年进行分区。单击 确定。任务自动启动。在 联邦分析 页面，您可以查看已创建的任务，也可以 在 操作 列 查看、编辑、...
迁移数据上云
分区数量可以不一致。在同一个分区中的数据迁移后并不保证依旧在同一个分区中。默认情况下，Key相同的消息会分布在同一分区中。普通消息在宕机时可能会乱序，分区顺序消息在宕机时依然保持顺序。VPC接入 配置 consumer.properties。自建...
重命名分区
注意事项 本文要求 PolarDB-X 实例版本必须为5.4.14-16539836及以上...场景 4：目标分区是非模板化的二级分区 和场景3不一样，当二级分区是非模板化分区时，重命名二级分区就是重命名具体的分区，语法同 场景3：目标分区是模板化的二级分区，
表分区
分区可以使用表继承来实现，这能够带来一些声明式分区不支持的特性，例如：对声明式分区来说，分区必须具有和分区表正好相同的列集合，而在表继承中，子表可以有父表中没有出现过的额外列。表继承允许多继承。声明式分区仅支持范围、列表...
- 产品推荐
- 这些文档可能帮助您