存储资源
磁盘性能下降，读写速度变慢，任务执行时间增加，系统的实时性降低，当磁盘IO负载过大无法承受时，可能导致磁盘故障、系统崩溃或数据丢失。常见的容错策略如下：数据缓存：将数据暂时存储在内存中，减少对磁盘IO的频繁访问。可以利用内存...
PolarDB HTAP实时数据分析技术解密
在按列进行海量数据分析时，按行从磁盘读取数据存在非常大的IO带宽浪费，其次，行式存储格式在处理大量数据时会大量拷贝不必要的列数据，对内存读写效率也存在冲击。PolarDB 并行查询突破CPU瓶颈 PolarDB团队开发的并行查询框架（Parallel ...
列存索引技术架构介绍
MySQL最常用的存储引擎都是按行存储，在按列进行海量数据分析时，按行从磁盘读取数据存在非常大的IO带宽浪费。其次，行式存储格式在处理大量数据时会大量拷贝不必要的列数据，对内存读写效率也存在冲击。PolarDB并行查询突破CPU瓶颈 并行...
IO加速
当业务出现大规模数据读写或频繁数据读写请求时，磁盘IO操作可能成为数据库系统的瓶颈。因此，阿里云数据库RDS PostgreSQL推出新的存储类型——通用云盘。在兼容ESSD云盘所有特性的基础上，通用云盘采用三级存储架构对不同类型的数据进行...
集群自定义监控报表
io_write_time OB 日志盘平均每次写 IO 耗时 集群主机 ob_clog_io_byte OB 日志盘平均每秒 IO 数据量 集群主机 ob_clog_io_read_byte OB 日志盘每秒读 IO 数据量 集群主机 ob_clog_io_write_byte OB 日志盘每秒写 IO 数据量 集群主机 ob_...
Query级别诊断结果
查询读取的数据量较大 问题 查询读取的数据量较大，会占用较多的磁盘IO资源，影响其他查询或者数据的写入过程。说明 您可以在查询详情页面的 查询属性 区域查看 扫描数据 的信息。查看方法，请参见 查看查询属性。建议 先找到读取数据量较...
DBS沙箱功能概览
使用成本：您必须待数据完成恢复后才能使用数据，而在海量的数据下，恢复过程通常会占用大量网络和磁盘IO资源，以及CPU资源。恢复过程不仅产生了大量的成本，同时也导致数据恢复时间（Recovery Time Objective，RTO）长达小时级别以上。DBS...
过滤条件不下推
如果用户业务的查询特征是占用较多的IO资源，或者数据写入较多导致占用了较多IO资源，那么使用索引进行数据过滤时，存在磁盘IO资源的争抢，过滤效果也可能较差。同时有多个条件下推，且下推的条件中有LIKE、字符串比较等比较复杂的操作时，...
集群资源规格评估建议
选择数据盘类型以及块数之后，计算出总的磁盘IO吞吐量。建议选择网卡带宽不低于磁盘IO吞吐量。评估Broker的节点数 理想情况下，Kafka Broker最大流量能够达到节点磁盘IO的最大吞吐量或者网卡最大带宽。因此，可以根据数据峰值流量以及每个...
RDS PostgreSQL主实例规格列表
192GB 19200 200000 2048 pg.x4.13xlarge.2c 104核 384GB 38400 200000 2048 pg.x8.13xlarge.2c 104核 768GB 76800 200000 2048 Intel SGX 安全增强型规格 RDS PostgreSQL提供全密态数据库（硬件加固版）功能，开启此功能，您可以对数据库...
数据量
在数据库备份场景下，有4个概念：数据库磁盘空间、数据文件空间、备份数据量、存储数据量。数据量 说明 数据库磁盘空间 由数据库的数据文件空间、数据库的日志文件空间、操作系统文件空间和空闲空间组成。说明 RDS中为：购买时选择的存储...
Celeborn
Celeborn是一个处理中间数据的服务，能够提升大数据引擎的稳定性、灵活性和性能。本文为您介绍如何使用Celeborn服务。背景信息 目前Shuffle方案的缺点如下：Shuffle Write在大数据量场景下会溢出，导致写放大。Shuffle Read过程中存在大量...
ESS（仅对存量用户开放）
Shuffle Read过程中存在大量小数据量的IO请求和随机读，对磁盘和CPU造成高负载。对于M*N次的连接数，在M和N数千的规模下，作业基本无法完成。NodeManager和Spark Shuffle Service是同一进程，当Shuffle的数据量特别大时，通常会导致...
参数列表说明
参数列表 参数 说明 sys_bkgd_io_low_percentage 系统后台 IO 最少可以占用 IO 的百分比。当值为 0 时，系统自动根据环境配置。clog_transport_compress_all 事务日志传输时是否压缩。enable_rebalance 是否开启分区负载均衡。location_...
ECS数据磁盘开启加密
ECS数据磁盘开启加密，视为“合规”。应用场景 开启ECS数据磁盘加密，使数据以密文形式存储在磁盘中。当磁盘读写数据时，自动加密或解密，提升数据的存储安全。风险等级 默认风险等级：中风险。当您使用该规则时，可以按照实际需求变更风险...
容量中心
展开后可以查看对应数据库中，数据和索引的磁盘占用量。单击 详情 或者数据库名称，可进一步查看不同数据库的表数据信息分布详情。可查看每个表的 表名、行数、磁盘使用大小、数据大小、宏块使用率、分区数量 和 自增列使用率。查看集群...
通用云盘IO加速功能
如果您希望提升磁盘IO效率和系统的响应速度，可以使用RDS MySQL通用云盘的IO加速功能，该功能可以帮助扩展缓存池的大小，实现缓存加速，提升RDS实例的整体读写性能。本文介绍IO加速功能的技术原理、使用方法和性能测试详情等信息。背景 将...
通用云盘IO加速功能
如果您希望提升磁盘IO效率和系统的响应速度，可以使用RDS MySQL通用云盘的IO加速功能，该功能可以帮助扩展缓存池的大小，实现缓存加速，提升RDS实例的整体读写性能。本文介绍IO加速功能的技术原理、使用方法和性能测试详情等信息。背景 将...
通用云盘IO加速功能
如果您希望提升磁盘IO效率和系统的响应速度，可以使用RDS MySQL通用云盘的IO加速功能，该功能可以帮助扩展缓存池的大小，实现缓存加速，提升RDS实例的整体读写性能。本文介绍IO加速功能的技术原理、使用方法和性能测试详情等信息。背景 将...
不存在闲置的ECS数据磁盘
ECS数据磁盘均已挂载到ECS实例，视为“合规”。应用场景 您需要定期清理闲置磁盘，避免资源浪费带来不必要的成本增长。风险等级 默认风险等级：低风险。当您使用该规则时，可以按照实际需求变更风险等级。检测逻辑 所有ECS数据磁盘均已挂载...
弹性伸缩配置中设置数据磁盘加密
弹性伸缩配置中数据磁盘均设置为加密，视为“合规”。应用场景 为弹性伸缩配置中的数据磁盘设置加密可以提高数据的安全性和可靠性，同时满足合规性要求，是一种有效的数据保护措施。风险等级 默认风险等级：中风险。当您使用该规则时，可以...
ECS数据磁盘释放时保留自动快照
设置ECS数据磁盘释放时保留自动快照，视为“合规”。应用场景 设置数据磁盘释放时保留自动快照，避免误操作释放磁盘后无法恢复数据。当您确认自动快照不再需要时，可以进行单独删除。风险等级 默认风险等级：低风险。当您使用该规则时，...
通用云盘IO加速功能技术介绍
相比内存操作，磁盘IO操作运行速度相对较慢，需消耗较多的时间。当出现大规模数据读写或频繁数据读写请求时，IO操作可能成为系统瓶颈。因此，阿里云RDS产品推出新的存储类型——通用云盘。在兼容ESSD云盘所有特性的基础上，通用云盘采用...
待挂载的ECS数据磁盘开启加密
待挂载的ECS数据磁盘已开启加密，视为“合规”。应用场景 为磁盘开启加密，提升数据的安全性，满足相关法规和安全要求。风险等级 默认风险等级：中风险。当您使用该规则时，可以按照实际需求变更风险等级。检测逻辑 待挂载的ECS数据磁盘已...
使用中的ECS数据磁盘开启加密
使用中的ECS数据磁盘已开启加密，视为“合规”。应用场景 为磁盘开启加密，提升数据的安全性，满足相关法规和安全要求。风险等级 默认风险等级：中风险。当您使用该规则时，可以按照实际需求变更风险等级。检测逻辑 使用中的ECS数据磁盘已...
EMR Kafka磁盘故障运维
业务场景 Kafka将日志数据存储到磁盘中，当磁盘出现故障时，会导致磁盘IO能力下降、集群吞吐下降、消息读写延时或日志目录offline等问题。这些情况有可能影响到线上业务平稳运行、数据丢失、Kafka集群容错能力下降，单块盘故障甚至有可能...
查看仪表盘
机器画像相关仪表盘 仪表盘 说明 机器总览 集群维度的数据总览看板，包括目标集群配额信息（机器总数、CPU总数、内存总量、总存储量等）以及监控指标趋势曲线（CPU负载、CPU使用率、内存水位、存储水位、磁盘IO以及流量数据等）。...
ECS启动模板版本中设置数据磁盘加密
ECS启动模板版本中数据磁盘均设置为加密，视为“合规”。应用场景 为ECS启动模板版本中的数据磁盘设置加密可以提高数据的安全性和可靠性，同时满足合规性要求，是一种有效的数据保护措施。风险等级 默认风险等级：中风险。当您使用该规则时...
ConfigInfo
数据盘的磁盘种类可选值：ephemeral-本地磁盘 cloud-普通云盘 数据盘的磁盘大小。以 GB 为单位，取值范围为：ephemeral-5~1024 cloud-5~2000 MountPoint选项，在Windows环境下只能指定到特定的盘符，如“D:”，盘符字母从A-Z，除C以外均可...
磁盘配额管理
Diskquota可以对 AnalyticDB PostgreSQL版 的磁盘配额进行管理，可以允许超级用户为Schema和Role设置磁盘使用配额。本文将介绍如何在 AnalyticDB PostgreSQL版 中创建和使用Diskquota。说明 磁盘配额管理功能仅支持存储弹性模式的 ...
查看监控信息
磁盘IO吞吐量 MB 监控如下信息：计算写吞吐 计算读吞吐 存储写吞吐 存储读吞吐 磁盘IOPS 数值 监控如下信息：计算写磁盘IOPS 计算读磁盘IOPS 存储写磁盘IOPS 存储读磁盘IOPS 存储节点磁盘IO使用率%监控磁盘的平均IO使用率。存储节点磁盘IO...
Configs
数据盘的磁盘种类可选值：cloud_efficiency-高效云盘 cloud_ssd-云SSD 数据盘的磁盘大小。以 GB 为单位，取值范围为：cloud_efficiency-20~32768 cloud_ssd-20~32768 MountPoint选项，在Windows环境下只能指定到特定的盘符，如“D:”，盘符...
配置监控告警
重要 开启此功能后，会创建磁盘IO使用率、CPU空闲率和磁盘使用率相关的报警规则，相关报警规则对阿里云账号下所有的Serverless StarRocks实例生效。进入EMR Serverless StarRocks实例列表页面。登录 E-MapReduce控制台。在左侧导航栏，选择...
存储空间分析
您可以在 AnalyticDB for MySQL 空间总览页面查看集群和表的总数据量、冷数据量、热数据量、索引数据量、分区数量、节点的磁盘使用率等指标。查看集群级别的数据量 通过 空间总览 可以查看当前集群的 总数据量、热数据量、冷数据量、以及 ...
调优集群性能
云原生数据仓库 AnalyticDB MySQL 版 正在进行备份、扩缩容等操作，也会导致磁盘IO吞吐增高。磁盘IOPS增高 磁盘IOPS表示底层存储介质每秒的IO次数，磁盘IOPS的最高值请参见 ESSD云盘。由于该上限值是理想状态下的测试值，与集群实际的负载...
EMR Kafka磁盘写满运维
业务场景 Kafka将日志数据存储到磁盘中，当磁盘写满时，相应磁盘上的Kafka日志目录会出现offline问题。此时，该磁盘上的分区副本不可读写，降低了分区的可用性与容错能力，同时由于leader迁移到其他Broker，增加了其他Broker的负载。因此，...
一对一专家服务工作说明书
ECS自建SQL Server问题排查 服务器性能排查：CPU、内存、磁盘IO 服务器资源&配置排查：磁盘空间、带宽、安全组、系统防火墙 SQL Server服务状态排查 问题定位报告：数据库连接不上、数据库报错、数据库访问慢、用户权限问题；数据库不能...
集群空间
该功能主要帮助用户通过集群维度的空间排行榜，直观查看集群中所有实例的空间使用率、空间剩余可用天数、近一周日均增长量等等。...通过 集群空间 即可以快速确认空间中数据库实例的 数据磁盘用量、数据空间利用率、剩余可用天数 等。
通用云盘
当您需要应对数据库磁盘IO性能瓶颈时，云数据库RDS PostgreSQL的通用云盘IO加速功能为您提供了一个高效的解决方案，帮助您在面临大规模或频繁数据读写需求时显著提升数据库IO性能，更多信息，请参见 IO加速。购买通用云盘 RDS PostgreSQL...
ECS合规管理最佳实践
ECS数据磁盘开启加密 ECS数据磁盘已开启加密，视为“合规”。不存在闲置的ECS数据磁盘 ECS磁盘均已挂载到ECS实例，视为“合规”。安全组入网设置有效 安全组入方向授权策略为允许，当端口范围-1/-1和授权对象0.0.0.0/0未同时出现，或者被...
- 产品推荐
- 这些文档可能帮助您