名称解释

逻辑分区与表 逻辑上,用户创建的数据库由多个数据逻辑分区(Partition)组成,用户创建的表(Table)的数据将分布在这些数据逻辑分区上,数据分布规则依照用户建表时指定的列(PartitionKey)进行Hash计算后来划分。逻辑分区的数量一旦...

分区热力图

库表视图 图 2.DN视图 左侧直方图:各个矩形分别代表当前实例下的逻辑库、逻辑表、逻辑分区,DN视图下代表存储节点、逻辑库、逻辑表、逻辑分区,其中表示DN节点和逻辑分区的矩形,通过长度表示拥有数据量的多少,长度越长表示数据量越多。...

分区热力图

库表视图 图 2.DN视图 左侧直方图:各个矩形分别代表当前实例下的逻辑库、逻辑表、逻辑分区,DN视图下代表存储节点、逻辑库、逻辑表、逻辑分区,其中表示DN节点和逻辑分区的矩形,通过长度表示拥有数据量的多少,长度越长表示数据量越多。...

初始化概述

3个主分区和1个扩展分区 在扩展分区中创建逻辑分区的数目没有限制,可以创建任意多个逻辑分区。分为主分区、扩展分区和逻辑分区三种类型。GPT 18 EiB(1 EiB=1,048,576 TiB)说明 阿里云云盘支持的最大容量为32 TiB。Linux:分区数量无限制...

通道服务概述

增量数据变化保序 通道服务为数据划分一到多个可并行消费的逻辑分区,每个逻辑分区的增量数据按写入时间顺序保序,不同逻辑分区的数据可以并行消费。消费延迟监控 通道服务通过DescribeTunnel API提供了客户端消费数据延迟(即当前消费到的...

Linux实例磁盘扩容后同步空间到逻辑分区

问题原因 系统分区做了逻辑分区,磁盘扩容成功后,没有进行相应的逻辑分区扩容。解决方案 说明 如果您对实例或数据有修改、变更等风险操作,务必注意实例的容灾、容错能力,确保数据安全。如果您对实例(包括但不限于ECS、RDS)等进行配置...

概述

表分区裁剪:根据过滤条件进行逻辑分区(Split)的细化匹配,提前筛选出无效的Split,降低服务端的数据出口量。Projection和Filter下推:将Projection列和Filter条件下推到服务端,降低每个分区的数据出口量。动态指定Split大小:支持调整...

初始化云盘

一块全新的云盘挂载到ENS实例后,还不能直接存储数据,您需要为云盘...说明 如果您的整块云盘只呈现为一个独立的分区(例如:/dev/vdb),不需要划分逻辑分区(例如:/dev/vdb1、/dev/vdb2 等),云盘初始化时直接在云盘上创建文件系统即可。

分区格式化数据盘

MBR目前是最常用的分区形式,MBR只支持处理不大于2 TiB的数据盘,且只支持分4个主区,如果您要将磁盘分成更多的区,需要将某个主区作为扩展区并在其中创建逻辑分区。在 磁盘管理 对话框,右键单击 磁盘 1 的 未分配 区域,单击 新建简单卷...

在裸设备上创建文件系统

如果您的数据盘为裸设备,即只呈现为一个独立的分区(例如/dev/vdb)且不需要划分逻辑分区(例如/dev/vdb1、/dev/vdb2等),云盘初始化时直接在裸设备上创建文件系统即可。本文为您介绍如何在裸设备上创建一个文件系统。说明 在裸设备上...

云服务器ECS多分区场景下的磁盘分区扩容方法

注:本文以主分区为例,逻辑分区在Partition type栏填e。Partition number栏填步骤4中获得的分区Number。First sector栏填步骤4中获得的起始位置。Last sector栏直接回车使用默认值即可。若提示如下信息,请在该栏填No。Partition#X ...

扩容分区和文件系统(Linux)

例如您有/dev/vdb1(主分区)、/dev/vdb2(扩展分区)、/dev/vdb5(逻辑分区)三个分区,此时您需要依次执行 growpart/dev/vdb 2、growpart/dev/vdb 5 完成分区的扩容。使用growpart工具时,如果出现报错信息,请参见 常见问题 进行排查。...

初始化小于等于2 TiB数据盘(Linux)

说明 云盘使用MBR分区形式,最多可以创建4个主分区,或者3个主分区和1个扩展分区,扩展分区不可以直接使用,需要划分成若干个逻辑分区才可以使用。更多信息,请参见 分区格式介绍。以创建一个主要分区为例。输入 p 并按 Enter 键,开始创建...

CREATE TABLE(AUTO模式)

逻辑分区:对应一个或多个物理分区的虚拟分区,相当于一个逻辑概念。例如,当使用二级分区构建分区表时,它的一级分区就是逻辑分区。参数说明 参数 说明 CHARSET|CHARACTER SET 指定表中列的默认字符集,可使用字符集如下:utf8 utf8mb4 ...

分区表管理(auto_partition)

其中 AnalyticDB PostgreSQL 6.0版 仅支持物理分区,AnalyticDB PostgreSQL 7.0版 同时支持物理分区和逻辑分区逻辑分区:将数据库中的数据划分为逻辑上独立的部分,每个分区可以包含一个或多个表。逻辑分区子表其实是一个一级表,仅通过...

使用表格存储过程中返回503错误码

问题原因 表格存储使用共享存储的机制,以数据分区逻辑单位,因此在负载均衡的过程中不会有实际数据的迁移,只是数据表元信息的变更。在元信息变更的过程中,为了保证数据的一致性,涉及到的数据分区会有短暂的不可用时间,正常情况下...

为什么使用表格存储过程中会有少量的500错误

表格存储使用共享存储的机制,数据分区逻辑单位,所以在负载均衡的过程中,不会有实际数据的迁移,仅仅是数据表元信息的变更,在元信息变更的过程中,为了保证数据的一致性,涉及到的数据分区会有短暂的不可用时间,正常情况下影响时间为...

版本发布说明

优化TTL表预分区逻辑。优化pause/cancel/rollback rebalance ddl的中断逻辑。优化TTL表的归档定时任务。优化同一tablegroup中表数量过多时DDL的执行效率。缺陷修复 修复 check global index 可以并发执行的问题。修复 check global index...

文档更新动态(2022年)

逻辑表整体功能优化,如提交详情优化、派生指标支持使用最大分区逻辑表创建优化等功能。更新说明 创建并配置普通维度逻辑表、创建并配置层级维度逻辑表、创建虚拟维度逻辑表、创建枚举维度逻辑表 2022年10月25日 研发菜单树和编辑器升级 ...

Dataphin中代码任务运行报错“Logical table ...

但是如果有以下使用情况,仅需为逻辑表指定分区即可:代码中有引用查询逻辑表数据,并没有为逻辑表指定分区时,会取所有分区。这种情况也会出现报错中提示的分区值和代码中其他表传递的分区值不一致的情况。解决方案 给代码中逻辑表指定...

概述

分区表是将一个大的逻辑表,按照分区规则分割成多个小的物理表,大的逻辑表为分区表,小的物理表为分区,每一个分区在存储引擎上独立组织管理数据和索引。分区规则主要包括 RANGE、LIST、HASH 三种,您需要指定分区键,根据分区键字段的值...

设置逻辑表质量规则

逻辑表存在分区字段,且在 系统设置>工作组管理>更多>全局参数 中设置了分区字段的变量值,则这里可以直接通过校验,使用分区变量的值。更多信息,请参见 新增工作组全局变量。步骤三:设置表规则 在 质量规则 区域的 表规则 页签,单击 ...

设置逻辑表质量规则

逻辑表存在分区字段,且在 系统设置>工作组管理>更多>全局参数 中设置了分区字段的变量值,则这里可以直接通过校验,使用分区变量的值。更多信息,请参见 新增工作组全局变量。步骤三:设置表规则 在 质量规则 区域的 表规则 页签,单击 ...

概述

为此,PolarDB-X 2.0的AUTO模式数据库分区表配套了非常完善的分区变更及管理能力,具体的分区管理能力包括以下几种:分裂分区 分裂热点 合并分区 迁移分区 重命名分区 增加分区 删除分区 修改分区 重组分区 清空分区 分区变更操作对不同...

新建普通维度逻辑

维表版本策略 定义主表(当前维度逻辑表)与关联维度逻辑表的分区,默认使用与当前维度逻辑表相同调度周期。更多说明如下:使用同周期维度(主表与维表使用同周期分区):主表和关联维度逻辑表计算时使用相同周期的时间分区。例如,业务...

新建普通维度逻辑

维表版本策略 定义主表(当前维度逻辑表)与关联维度逻辑表的分区,默认使用与当前维度逻辑表相同调度周期。更多说明如下:使用同周期维度(主表与维表使用同周期分区):主表和关联维度逻辑表计算时使用相同周期的时间分区。例如,业务...

查看并编辑表规范及管控研发流程

时间分区-分钟 逻辑表的分钟调度周期会使用天分区、小时分区和分钟分区作为系统分区字段。通常情况下不建议修改,除非您企业有自己的规范。中文名:默认为 时间分区-分钟,支持修改。包含汉字、字母、数字、下划线(_)或短划线(-),且不...

查看并编辑表规范及管控研发流程

时间分区-分钟 逻辑表的分钟调度周期会使用天分区、小时分区和分钟分区作为系统分区字段。通常情况下不建议修改,除非您企业有自己的规范。说明 AnalyticDB for PostgreSQL 和 StarRocks 计算引擎不支持 时间分区-小时 设置。中文名:默认...

分区表达式介绍

本文为您介绍分区表达式格式说明、分区表达式计算逻辑、内置分区表达式类型以及常用业务示例说明。使用建议 对于不需要明确指定校验分区,而是代码更新哪些分区就校验哪些分区的场景,建议使用 代码检查触发调度-任务更新 的分区。这种情况...

分区表达式介绍

本文为您介绍分区表达式格式说明、分区表达式计算逻辑、内置分区表达式类型以及常用业务示例说明。使用建议 对于不需要明确指定校验分区,而是代码更新哪些分区就校验哪些分区的场景,建议使用 代码检查触发调度-任务更新 的分区。这种情况...

新增逻辑表质量规则

如果逻辑表中,添加了分区字段,则这里可以选择具体的分区值,例如“bank=$[yyyymmdd-1]”,详细操作,请参见 步骤二:选择需要配置规则的计算资源以及分区。步骤三:配置规则 配置表规则 当 步骤一:选择规则类型 中选择的规则类型为表...

新增逻辑表质量规则

如果逻辑表中,添加了分区字段,则这里可以选择具体的分区值,例如“bank=$[yyyymmdd-1]”,详细操作,请参见 步骤二:选择需要配置规则的计算资源以及分区。步骤三:配置规则 配置表规则 当 步骤一:选择规则类型 中选择的规则类型为表...

通过LOCALITY指定存储位置(AUTO模式)

创建逻辑表时指定存储位置 在创建逻辑表时指定存储位置以实现数据隔离,目前支持在单表和Range、Hash、List三种分区方式的分区表中使用Locality关键字。在实例中创建一个逻辑表,并指定其存储位置。详细语法参见 CREATE TABLE(AUTO模式)...

Hive数据源

重要 当导入数据导致文件变更时,分区表会执行ALTER PARTITION的event逻辑,未分区表会执行ALTER TABL的event逻辑。如果绕过HMS直接操作文件系统的话,HMS不会生成对应事件,SelectDB因此也无法感知。该特性在 fe.conf 中由以下参数控制:...

动态分区管理

返回结果如下:c1 c2 Data 1 20231212 分区增减的逻辑如下:时间 事件 结果 2023-12-12 09:00:00 执行如上SQL,创建分区表。创建分区父表:tbl1 创建分区子表:tbl1_20231212、tbl1_20231213、tbl1_20231214 2023-12-13 00:00:00 系统自动...

使用ODPS Foreign Table访问MaxCompute数据

分区外表定义时,不需要指定 partition 属性,这是因为 partition 属性标记的是末级分区外表,与分区外表在逻辑上冲突。当出现MaxCompute上不存在的分区外表,查询外表时,会告警显示,用户可以参考本章的3.5节 如何删除子分区外表 删除...

GetMetaTablePartition

SortCriterion Object 否 表分区的排序逻辑。SortField String 否 name 表分区的排序字段。您可通过name、modify_time排序。默认按照表分区的创建时间排序。Order String 否 desc 表分区的排序顺序,支持使用asc、desc方式排序。默认使用...

功能更新动态(2023年)

查询逻辑表时支持使用max_pt获取最新的一级分区。新建普通维度逻辑表 创建业务限定 通用研发 离线物理表字段配置优化,可设置资产治理相关属性,如可为字段匹配词根、标准和字段的安全分类。编辑器升级优化:支持select字段列表中或where...

文档更新动态(2023年)

查询逻辑表时支持使用max_pt获取最新的一级分区。更新说明 新建普通维度逻辑表 创建业务限定 离线物理表和编辑器优化 离线物理表字段配置优化,可设置资产治理相关属性,如可为字段匹配词根、标准和字段的安全分类。编辑器升级优化:支持...

通过DataWorks周期性导入MaxCompute数据最佳实践

在Hologres中不支持直接将分区数据直接写入分区父表,因此需要在Hologres中创建对应MaxCompute分区表中分区键值的分区子表,然后将分区数据导入对应的分区子表。分区键值由参数${bizdate} 控制,在调度系统中自动赋值完成周期性调度,调度...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
逻辑编排 云工作流 弹性公网IP 短信服务 人工智能平台 PAI 金融分布式架构
新人特惠 爆款特惠 最新活动 免费试用