初始化小于等于2 TiB数据盘(Linux)

说明 云盘使用MBR分区形式,最多可以创建4个主分区,或者3个主分区和1个扩展分区,扩展分区不可以直接使用,需要划分成若干个逻辑分区才可以使用。更多信息,请参见 分区格式介绍。以创建一个主要分区为例。输入 p 并按 Enter 键,开始创建...

扩容分区和文件系统(Windows)

右键单击磁盘(以 磁盘 0 为例)主分区的空白处,并选择 扩展卷。说明 如果扩容数据盘,则右键单击对应数据盘(例如 磁盘 1)分区进行扩容。如果您的磁盘存在多个分区,建议扩容的分区是与未分配分区左相邻的分区,否则,Windows会将选定的...

扩容数据盘

右键单击 磁盘 1 主分区的空白处,然后单击 扩展卷。在 扩展卷向导 页面,保持默认配置完成扩展卷操作。完成扩展卷操作后,新增空间会自动合入原来的卷中,如下图所示。扩容完成后,您需要根据实际情况检查数据是否正常。如果扩容成功,...

升级配置

右键单击 磁盘 0 主分区的空白处,然后单击 扩展卷。在 扩展卷向导 页面,保持默认配置完成扩展卷操作。完成扩展卷操作后,新增空间会自动合入原来的卷中,如下图所示。扩容完成后,您需要根据实际情况检查数据是否正常。如果扩容成功,...

切换可用区

概念介绍 主可用区(Primary Zone):OceanBase 数据库中同一分区(partition)的数据副本分布在多个可用区中,其中分区的主副本所在的可用区称为主可用区。切换主可用区场景 在主可用区故障时,OceanBase 会根据服务情况自动将主切换至新...

发布者最佳实践

默认情况下,云消息队列 Kafka 版 为了提升可用性,并不保证单个分区内绝对有序,在升级或者宕机时,会发生少量消息乱序(某个分区挂掉后把消息Failover到其它分区)。如果业务要求分区保证严格有序,请在创建Topic时选择使用Local存储。

分区

在运行 ATTACH PARTITION 命令之前,推荐在要被接的表上创建一个 CHECK 约束来匹配期望的分区约束。这样,系统将能够跳过扫描,否则需要验证隐式分区约束。没有 CHECK 约束,将扫描表以验证分区约束,同时对该分区持有 ACCESS EXCLUSIVE ...

常见问题

迁移与同步 为什么OSS外表导入ORC、PARQUET等格式的数据,出现内存报错或OOM挂掉?如何处理导入数据报错:too many parts?为什么DataX导入速度慢?为什么Hive导入后其数据行数跟ClickHouse对不上?为什么Kafka导入后其数据行数跟...

概述

为此,PolarDB-X 2.0的AUTO模式数据库分区表配套了非常完善的分区变更及管理能力,具体的分区管理能力包括以下几种:分裂分区 分裂热点 合并分区 迁移分区 重命名分区 增加分区 删除分区 修改分区 重组分区 清空分区 分区变更操作对不同...

Dataphin管道任务写入ClickHouse表,发现写入分区的...

概述 本文主要介绍管道任务写入ClickHouse表,发现写入分区的数据量少于ClickHouse表分区总量的原因。详细信息 Dataphin管道任务写入ClickHouse表,发现写入分区的数据量少于ClickHouse表分区总量,是什么原因?分析如下:出现这种写入量...

分区表管理(auto_partition)

分区表创建示例 步骤一:创建分区的主表 CREATE TABLE t1(row_id int,record_date timestamp,primary key(row_id,record_date))partition BY range(record_date)(DEFAULT PARTITION others);步骤二:添加分区规则 SELECT pg_auto_...

CREATE TRIGGER

这里,关键词 PROCEDURE 的使用是有历史原因的并且已经被废弃。arguments 一个可选的逗号分隔的参数列表,它在该触发器被执行时会被提供给该函数。参数是字符串常量。简单的名称和数字常量也可以被写在这里,但是它们将全部被转换成字符串...

动态过滤器(Dynamic Filter)

动态分区裁剪功能生效后,MaxCompute会采集小表侧数据生成Bloom Filter,然后过滤大表侧的分区列表,再把需要读取的分区列表聚合,裁剪不需要扫描的分区。如果一个运行进程所有待读的分区都被裁剪了,则该进程不被调度。在上述示例中,...

动态过滤器(Dynamic Filter)

动态分区裁剪功能生效后,MaxCompute会采集小表侧数据生成Bloom Filter,然后过滤大表侧的分区列表,再把需要读取的分区列表聚合,裁剪不需要扫描的分区。如果一个运行进程所有待读的分区都被裁剪了,则该进程不被调度。在上述示例中,...

什么是TTL功能

基本原理 TTL表的每个物理表都会按照时间做Range分区,所有GSI的物理表跟表的分区方式一致。随着时间的推移,新的分区会被创建,失效的分区会被删除,如下图所示:说明 PolarDB-X 默认会自动创建新分区和删除失效分区。您也可以在建表时...

Dataphin资产质量调度日志中调度执行的分区为什么和...

概述 本文主要介绍资产质量调度日志中调度执行的分区和手动执行分区不一致的原因。详细信息 Dataphin资产质量调度日志中调度执行的分区为什么和手动执行分区不一致?原因如下:代码检查触发是基于代码中的分区日期来触发的。手动执行是按照...

Dataphin代码任务分区字段带引号查询表数据时result...

问题原因 分区字段的取值取了11位,导致分区后面多了一个空格。regexp_replace(SUBSTR(od1.paymentdate,1,11),'-','')解决方案 修改分区字段的取值范围,或者在查询的时候对ds分区字段进行RTRIM处理。SELECT*FROM LPPZ_ADS_BI_INST.ADS_CRM...

创建和管理自定义存储表

表类型 分区表 是 可选:分区表:适用于存储定时调度的数据,可设置每小时或者每天一个分区,对应的任务重跑后,会覆盖整个分区的数据。重要 如果您的自定义存储表每次调度产生数据超过3000万行时,为保障您的自定义存储表查询性能,建议...

SQL调优

Join语句优化 当两个表进行Join操作时,建议在如下位置使用WHERE子句:表的分区限制条件可以写在WHERE子句中(建议先用子查询过滤)。表的WHERE子句建议写在SQL语句最后。从表分区限制条件不要写在WHERE子句中,建议写在ON条件或者子...

Logview诊断实践

解决措施:需要优化设计SQL,减少分区的数量,包括:分区裁剪、过滤不需要读的分区、把大作业拆成小作业。如何判断SQL中分区剪裁是否生效,以及分区裁剪失效的常见场景请参考文章:分区剪裁合理性评估。产生原因二:小文件过多。产生小...

何时使用Range-List分区

Range-List分区是指一级分区是Range分区,二级分区是List分区的组合分区类型。Range-List分区通常用于存储历史数据的大表,并且在多个维度上访问。数据的历史视图通常是一个访问路径,但是某些业务用例向访问路径添加了另一种分类。例如,...

分区表常见问题

分区表查询计划不准确主要的原因是统计信息不准确,在8.0.2版本中已经针对这个问题做了分区级别统计信息优化,建议您将版本升级到8.0.2。PolarDB MySQL版 的物理表如何分区?一般情况下,每个分区是一个Innodb表,Hybrid分区可以放在其他...

扩容分区和文件系统(Linux)

例如您有/dev/vdb1(主分区)、/dev/vdb2(扩展分区)、/dev/vdb5(逻辑分区)三个分区,此时您需要依次执行 growpart/dev/vdb 2、growpart/dev/vdb 5 完成分区的扩容。使用growpart工具时,如果出现报错信息,请参见 常见问题 进行排查。...

物化视图操作

指定表数据存储压缩策略"enable_auto_substitute"="true",-指定当分区不存在时是否转化视图来查询"enable_auto_refresh"="true",-指定是否开启自动刷新"refresh_interval_minutes"="120",-指定刷新时间间隔"only_refresh_max_pt"="true"-...

版本发布说明

修复CoHash的Right分区函数计算结果不正确导致的分区路由问题,发布日期:2023-12-27 大版本:V5.4.18 小版本:17034692 类别 说明 新增&优化 新增支持AUTO模式数据库的co_hash分区策略。优化使用AB表方案进行事务日志清理的流程,避免一次...

块存储FAQ

如果您直接测试裸盘分区,会破坏裸盘分区中的文件系统元数据,导致无法访问该裸盘分区中的文件,甚至导致实例宕机。使用FIO的文件系统测试性能方式时,不存在上述问题。如何根据应用需求选择可用区?按量付费的云盘只能挂载到同一可用区的...

重命名分区

注意事项 本文要求 PolarDB-X 实例版本必须为5.4.14-16539836及以上...场景 4:目标分区是非模板化的二级分区 和场景3不一样,当二级分区是非模板化分区时,重命名二级分区就是重命名具体的分区,语法同 场景3:目标分区是模板化的二级分区

分区迁移

注意事项 本文要求 PolarDB-X 实例版本必须为5.4.14-16539836及以上...场景 4:目标分区是非模板化的二级分区 和场景3不一样,当二级分区是非模板化分区时,迁移二级分区就是迁移具体的分区,语法请参见 场景3:目标分区是模板化的二级分区

分区合并

执行以下SQL将表组mytg1的p1、p2合并成一个新分区p12(意味着tb1和tb2的分区p1、p2会同步的合并成一个新分区p12):ALTER TABLEGROUP mytg1 MERGE PARTITIONS p1,p2 TO p12 List/List column 分区分区合并 对于list/list column分区策略...

PolarDB MySQL版8.0.1版本发布日志

8.0.1.1.40.2 类别 说明 发布时间 问题修复 修复当多主集群的主节点负载不均衡时,全局只读节点复制延迟可能变高的问题。修复在多主集群上首次新建只读节点时,只读节点可能无法启动的问题。修复在多主集群上执行DDL时,可能导致主节点重启...

MapReduce常见问题

解决措施 这个报错比较常见的原因是Reduce里做了大循环,例如存在长尾数据或者笛卡尔积。您需要尽量减少这种大循环的情况。执行MaxCompute MapReduce时,报错java.security.AccessControlException,如何解决?问题现象 执行MaxCompute ...

分区和列操作

合并分区分区表的分区进行合并,即同一个分区表下的多个分区合并成一个分区,同时删除被合并的分区维度的信息,把数据移动到指定分区。清空分区数据 清空指定分区的数据。列操作 添加列或注释 为已存在的非分区表或分区表添加列或注释。...

增加分区

全局索引:使用另一个维度进行水平分区的数据与表始终保持强一致的分区表。语法 ALTER alter_target_definition add_partition_operation_definition alter_target_definition:TABLE[db_name.]tbl_name|TABLE tbl_name.index_name|...

分区分裂

场景 3:目标分区为模板化的二级分区 当二级分区是模板化分区时,可以通过分裂语法直接将某个模板二级分区分裂,分裂模板二级分区会使所有的一级分区下的子分区同时分裂。模板化二级分区是Range/Range column策略的分区表分裂 表级用法 ...

分区和列操作

分区和列操作为您提供了变更MaxCompute中表的分区或列的操作方法,您可以根据实际业务场景执行相应操作。本文为您介绍如何添加或删除分区、添加或修改列及注释常用操作。分区和列操作详情请参见 分区和列操作。分区和列操作常用命令如下。...

接口和参数说明

此外,若多次调用此接口会替换原来订阅的分区,并不会增量增加订阅分区的数量。void assign(Collection<TopicPartition>topicPartitions);拉取消息,单次最多拉取maxBatchMessageCount个消息,超时时间您可以自定义,单位为毫秒。List...

ALTER TABLE

alter table 只会影响分区表的新建分区(包括 insert overwrite 生成的),新分区将按新的聚簇属性存储,老数据分区的聚簇属性和存储保持不变。即在一张曾经做过聚簇属性设置的表上,关闭了聚簇属性,再增加聚簇设置,可以在新分区设置不同...

历史版本常见问题

将实例升级至PolarDB-X 2.0,即可主动感知到DN节点的主备切换,并自动重建连接池。版本范围 PolarDB-X 1.0 的所有版本。RDS主机宕机引发主备切换后PolarDB-X 1.0的SQL存在卡住的风险 现象描述 正常的RDS主备切换流程中,对老的连接会进行...

pg_depend

主分区和辅助分区的依赖关系表现相同,除了主分区依赖关系倾向用于错误消息;因此,分区相关的对象应该有一个主分区依赖关系和一个或多个辅助分区依赖关系。注意到分区依赖关系是任何对象所正常拥有的依赖关系的补充,而不是替代。这简化了...

清空分区

全局索引:使用另一个维度进行水平分区的数据与表始终保持强一致的分区表。语法 ALTER alter_target_definition truncate_partition_operation_definition alter_target_definition:TABLE[db_name.]tbl_name|TABLEGROUP tg_name|...
共有122条 < 1 2 3 4 ... 122 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
弹性公网IP 短信服务 人工智能平台 PAI 物联网平台 对象存储 金融分布式架构
新人特惠 爆款特惠 最新活动 免费试用