操作系统监控
Linux 磁盘使用率与inode使用率可以参考 df 命令，磁盘读写可以参考 iostat 命令，便于您理解下表中监控指标的含义。监控指标名称 监控指标含义 单位 MetricName Dimensions Statistics Host.diskusage.used 磁盘的已用存储空间。Byte ...
与Linux实例磁盘空间相关的常见问题
问题原因 Linux系统的磁盘分区有保留区的概念，会给root或指定用户预留5%或更大的空间，当使用到这块保留区的空间时，磁盘空间将会是负数。解决方案 需要通过 rm 命令删除磁盘中的大文件，释放预留空间的占用后，再通过 df 查询磁盘占用，...
内核功能与接口概述
如果您对Linux的内核系统有一定的了解，并且需要使用Linux内核功能，可以通过本文了解Alibaba Cloud Linux已支持的内核功能与接口。内存 文档链接 支持版本 说明 Memcg Exstat功能 Alibaba Cloud Linux 2内核版本 4.19.91-18.al7 及以上 ...
动态分区
p20210517 p20210518 p20210519 p20210520 p20210521 p20210522 p20210523 重要 动态分区使用过程中，如果因为一些意外情况导致 dynamic_partition.start 和 dynamic_partition.end 之间的某些分区丢失，那么当前时间与 dynamic_partition....
使用fdisk扩容新分区起始位置无法与扩容前保持一致
查看vdb1磁盘分区情况，如下图所示，扩容前分区起始位置63。使用fdisk删除分区后，新建分区时最小起始位置为2048，无法与原分区保持一致。问题原因 用户在最初进行分区格式化时，可能使用了其他工具，例如，使用了parted命令指定了小于2048...
列存索引如何实现高效数据过滤
在使用分区剪枝技术时，需要使用符合分区条件的查询语句，并将分区键作为查询条件进行查询。例如，假设有一个订单表orders，根据订单日期分为12个分区，通过以下查询语句可查询某一天的订单：SELECT*FROM orders WHERE order_date='2022-01...
Linux系统挂载SMB协议文件系统
由于Linux系统对SMB协议的兼容程度较低，建议仅在需要跨操作系统共享数据的情况下使用Linux系统挂载SMB协议文件系统。本文主要介绍如何将SMB协议文件系统挂载至云服务器ECS（Linux）上并执行读写操作。前提条件 在创建SMB协议文件系统的...
出错提示S6磁盘分区创建快照出错
本文主要介绍在使用SMC迁移时，迁移任务出错提示“S6_*磁盘分区创建快照出错”的问题描述、问题原因及其解决方案。问题描述 在SMC迁移时，迁移任务出错提示“S6_*磁盘分区创建快照出错”。其中S6_*可能的错误码如下：S6_8 S6_1 问题原因 块...
配置MaxCompute输入组件
使用最新非空分区：使用该表当前的最新非空分区（max_pt）作为需同步的分区，如该表不存在任何有数据的分区，则任务报错并置失败。输出字段 输出字段区域展示了已选中表的所有字段。如果不需要将某些字段输出至下游组件，则您可以删除对应...
配置MaxCompute输入组件
使用最新非空分区：使用该表当前的最新非空分区（max_pt）作为需同步的分区，如该表不存在任何有数据的分区，则任务报错并置失败。输出字段 输出字段区域展示了已选中表的所有字段。如果不需要将某些字段输出至下游组件，则您可以删除对应...
创建RAID阵列（Linux）
独立冗余磁盘阵列RAID（Redundant Array of Independent Disks）是将多块云盘按一定的方式组成一个磁盘阵列组。相比单块云盘，RAID能够有效地提高磁盘的容量、读写带宽、可靠性和可用性。前提条件 已按需创建并挂载多块具有相同容量和类型...
ALTER TABLE
批量删除分区，使用正则表达式匹配分区。alter table sale_detail drop if exists partition(sale_date RLIKE '2019-\\d+-\\d+');创建多级分区表。create table if not exists region_sale_detail(shop_name STRING,customer_id STRING,...
使用说明
自动归档冷数据功能Data Lifecycle Management（简称DLM）支持将低频使用的冷数据定期自动地从PolarStore转存到低成本的OSS存储介质上，以达到降本增效的效果。前提条件 集群版本需满足以下条件之一：PolarDB MySQL版 8.0.1版本且Revision ...
分区和列操作
批量删除分区，使用正则表达式匹配分区。alter table sale_detail drop if exists partition(sale_date RLIKE '2019-\\d+-\\d+');创建多级分区表。create table if not exists region_sale_detail(shop_name STRING,customer_id STRING,...
大数据计算服务MaxCompute
当缓存过期重新加载时会重新解析partition参数拉取最新的分区，使用max_two_pt()时维表可拉取两个分区，其他情况下只支持指定单个分区。参数 说明 数据类型 是否必填 默认值 备注 cache 缓存策略。String 是 无 目前MaxCompute维表仅支持 ...
通过整库迁移配置集成任务
使用最新非空分区：来源库为MaxCompute时，支持使用该表当前的最新非空分区（max_pt）作为需同步的分区，如该表不存在任何有数据的分区，则任务报错并置失败。说明 来源库为FTP时，不支持数据过滤配置。参数配置 来源库为FTP时，支持在来源...
上下游存储
增量MaxCompute源表监听到新分区时，如果该分区还有数据没有写完，如何处理？MaxCompute连接器运行报错：ErrorMessage=Authorization Failed[4019],You have NO privilege 如何填写增量MaxCompute的startPartition参数？为什么带有增量...
通过整库迁移配置集成任务
使用最新非空分区：来源库为MaxCompute时，支持使用该表当前的最新非空分区（max_pt）作为需同步的分区，如该表不存在任何有数据的分区，则任务报错并置失败。Hive来源库不支持配置。说明 来源库为FTP时，不支持数据过滤配置。参数配置 ...
FreeBSD系统盘扩容方法
gpart resize-i 1 vtbd0-i 参数指定分区编号，本示例中为系统盘的分区1 如下图所示，执行扩容分区命令后，返回“vtbd0s1 resized”，说明磁盘分区扩容成功，使用命令 gpart show 查看磁盘分区大小已经扩容到40G。执行如下命令，扩容文件...
使用快照创建的磁盘挂载到Windows系统中无法显示分区...
详细信息 使用DiskGenius工具查看磁盘的使用情况，一般磁盘分区存在问题，排查有可能是将Linux系统ext3、ext4、xfs等文件系统的磁盘，创建的快照挂载到在Windows主机上。注：为了数据安全建议先 创建ECS实例的快照。适用于 云服务器ECS
ODPS-0130071
数据插入表是一个分区表，其中有m个分区字段，但是插入数据SQL里只有n个分区列，导致数据写入找不到分区报错 解决方案 建议修改插入数据SQL，对齐分区字段。示例-创建表 create table if not exists mf_sale_detail(shop_name string,...
分区表命令列表
ALTER TABLE.MERGE SUBPARTITION 将两个子分区合并为一个新子分区，新子分区中包含原有两个子分区的内容。删除 ALTER TABLE…DROP PARTITION 删除分区结构和存储在这个分区上的数据。ALTER TABLE…DROP SUBPARTITION 删除子分区结构及存储...
出错提示S3磁盘分区数据同步出错
本文主要介绍在使用SMC迁移时，迁移任务出错提示“S3磁盘分区数据同步出错”的问题描述、问题原因及其解决方案。问题描述 在SMC迁移时，迁移任务出错提示“S3_*磁盘分区数据同步出错”。其中S3_*可能的错误码如下：S3_F30 S3_F32 S3_F6 S3_...
ALTER TABLE…ADD PARTITION
ALTER TABLE…ADD PARTITION命令用于将分区添加到现有的分区表中。语法介绍 使用ALTER TABLE…ADD PARTITION命令把分区添加到现有的分区表中。语法如下：ALTER TABLE table_name ADD PARTITION partition_definition;其中 partition_...
何时选择RANGE分区
添加新分区后，可以使用 DROP PARTITION 语句删除最后一个月。以下情况下可以考虑使用RANGE分区：经常在某些列上的按照范围扫描非常大的表（例如订单表ORDER或购买明细表LINEITEM）。在这些列上对表进行分区可以实现分区剪枝。希望维护数据...
ALTER TABLE…SPLIT PARTITION
ALTER TABLE…SPLIT PARTITION命令将一个分区划分为两个分区，并重新分配新分区的内容。语法介绍 ALTER TABLE…SPLIT PARTITION命令的语法有两种形式：第一种形式用于将RANGE分区划分为两个分区。ALTER TABLE table_name SPLIT PARTITION ...
追踪IO时延
Alibaba Cloud Linux 2和Alibaba Cloud Linux 3优化了IO时延分析工具iostat的原始数据来源/proc/diskstats 接口，增加了对设备侧的读、写及特殊IO（discard）等耗时的统计，此外还提供了一个方便追踪IO时延的工具bcc。本文将分别介绍优化后...
版本发布说明
修复分区表内的最大物理分区数目限制，在使用二级分区后没有正确生效的问题。修复在网络抖动场景下，DDL执行结果偶发返回错误的问题。修复高频执行DDL时，偶发系统表死锁报错的问题。修复因大小写问题可能导致的InformationSchema的table_...
出错提示S8磁盘分区数据同步准备出错
本文主要介绍在使用SMC迁移时，迁移任务出错提示“S8_*磁盘分区数据同步准备出错”的问题描述、问题原因及其解决方案。问题描述 在SMC迁移时，迁移任务出错提示“S8_*磁盘分区数据同步准备出错”。其中S8_*可能的错误码如下：S8_U28 S8_U7 ...
分区均衡引流
Topic分区引流 如果某一云存储类型的Topic分区分配不均且流量过大，导致集群某个磁盘水位飙升，那么可以针对此Topic使用Topic分区引流功能，将此Topic分区上的流量引流至磁盘水位较低的节点。风险说明 为了保证集群稳定，进行集群分区均衡...
出错提示S7磁盘分区头数据同步准备出错
本文主要介绍在使用SMC迁移时，迁移任务出错提示“S7_*磁盘分区头数据同步准备出错”的问题描述、问题原因及其解决方案。问题描述 在SMC迁移时，迁移任务出错提示“S7_*磁盘分区头数据同步准备出错”。其中S7_*可能的错误码如下：S7_U28 S7...
分区表常见问题
使用自动化分区管理功能时，在RW节点创建的event是否会在RO节点执行？PolarDB MySQL版 是共享存储的架构，在RW节点上创建的event不会在RO节点执行，参数选择 ENABLE 即可。使用自动化分区管理功能时，集群 发生主备切换之后，新的RW节点...
done分区指南
空分区不会被触发 小时回流表可以只使用一级分区，直接产出新的done分区即可，比如ds=2017101011.done或ds＝2017101012.done 小时回流表若使用 多级分区 需要注意分区字段顺序，ds字段要在hh字段之前 重要 1）务必保证.done 在分区字符串的...
出错提示S9磁盘分区头数据同步出错
本文主要介绍在使用SMC迁移时，迁移任务出错提示“S9_*磁盘分区头数据同步出错”的问题描述、问题原因及其解决方案。问题描述 在SMC迁移时，迁移任务出错提示“S9_*磁盘分区头数据同步出错”。其中S9_*可能的错误码如下：S9_F4 S9_F40 问题...
出错提示S2磁盘分区文件数据同步出错
本文主要介绍在使用SMC迁移时，迁移任务出错提示“S2_*磁盘分区文件数据同步出错”的问题描述、问题原因及其解决方案。问题描述 在SMC迁移时，迁移任务出错提示“S2_*磁盘分区文件数据同步出错”。其中S2_*可能的错误码如下：S2_R255 S2_R...
分区投影
本文档主要介绍了分区投影功能的背景信息、使用场景和限制，以及如何使用分区投影功能。背景信息 当您把数据存储在OSS或HDFS上，并建立大量的分区管理这些数据。DLA Presto在分析这些数据时，会花费大量的时间从元数据系统中获取分区，从而...
Kafka Rebalancer工具介绍
balance-disks：基于磁盘空间使用率均衡节点内的磁盘分区副本分配，详情请参见 balance-disks。rebalance：基于磁盘空间使用率均衡集群节点之间的磁盘分区副本分配，详情请参见 rebalance。remove-broker-ids：移除指定Broker列表的所有...
出错提示S4目标磁盘分区初始化出错
本文主要介绍在使用SMC迁移时，迁移任务出错提示“S4_*目标磁盘分区初始化出错”的问题描述、问题原因及其解决方案。问题描述 在SMC迁移时，迁移任务出错提示“S4_*目标磁盘分区初始化出错”。其中S4_*可能的错误码如下：S4_105 S4_U28、S4...
何时选择HASH分区
对于分布规则不明显的数据，并没有明显的范围查找等特征，可以使用HASH分区，将数据分区列的值按照HASH算法打散到不同的分区上，将数据随机分布到各个分区。使用HASH分区的目的如下：使分区间数据分布均匀，分区间可以并行访问；根据分区键...
跨目录配额创建硬链接
背景信息 Linux系统支持三种模式的磁盘配额，分别为：user quota、group quota以及project quota。前两种是针对用户和组的，最后的project quota提供一种更细粒度的磁盘配额，细化到文件系统的目录和文件，使用project id将不同的目录和...
- 产品推荐
- 这些文档可能帮助您