捕获内核的内存污染问题（KFENCE）
slab可以避免频繁的内存分配和释放操作，提高内存分配的效率。order 0单页 order 0单页也是Linux内核中一种内存分配机制，内存被分割成固定大小的页框（page frame），一般为4 KiB。order 0的单页指的就是一个普通的4 KiB大小的内存页框，...
JVM监控内存详情说明
Java进程占用内存分布 Java进程在运行期间，内存分布的大致情况如下图所示：说明 JVM的运行机制比较复杂，此图仅列出了主要的内存分布区域。ARMS获取JVM内存详情的原理 ARMS应用监控探针通过JDK提供的MemoryMXBean获取JVM运行期间内存详情...
Node应用内存泄漏分析方法论与实战
内存泄漏：是指程序中已动态分配的堆内存由于某种原因未释放或无法释放，通常是应用层不合理的逻辑代码引起的。OOM：Out Of Memory,简单地说就是内存消耗完了，分配不出内存了。内存泄漏是导致OOM的最常见的因素。OOM导致的直接后果就是...
MySQL 实际内存分配情况介绍
共享内存 执行如下命令，即可查询示例的共享内存分配情况：show variables where variable_name in('innodb_buffer_pool_size','innodb_log_buffer_size','innodb_additional_mem_pool_size','key_buffer_size','query_cache_size');...
MySQL实际内存分配情况介绍
内存共享 执行如下命令，即可查询示例的共享内存分配情况：show variables where variable_name in('innodb_buffer_pool_size','innodb_log_buffer_size','innodb_additional_mem_pool_size','key_buffer_size','query_cache_size');...
动态资源超卖
节点的Batch容量根据实际的资源利用率情况动态计算得到，CPU和内存维度默认的计算过程可以按如下公式简单推导：nodeBatchAllocatable=nodeAllocatable*thresholdPercent-podUsage(non-BE)-systemUsage 计算公式中各因子的含义如下：...
实例FAQ
持久内存作为内存使用时，我想用持久内存型实例来运行我的参数服务器（PS），持久内存设置为内存使用方式，可以直接部署吗？购买持久内存型实例后，我如何将持久内存设置为本地盘使用方式？我的哪些应用需要更高性能的本地盘？持久内存作为...
阿里云Elasticsearch实例FAQ
本文列举了阿里云Elasticsearch（ES）相关的常见问题，包括购买、退订、配置、访问、查询、写入、插件、分词、日志、重启、负载或状态异常、备份与恢复、监控报警等相关问题。常见问题概览 购买或退订实例问题 购买ES实例时选错配置，如何...
常见问题
本文汇总了YARN使用时的常见问题。集群问题汇总 集群有状态重启包括哪些内容？如何启用RM HA？如何检查ResourceManager服务是否正常？如何了解应用运行状况？应用问题排查流程 单任务/容器（Container）最大可用资源由哪些配置项决定？资源...
使用负载感知调度
与K8s原生调度策略不同的是，原生调度器主要基于资源的分配情况进行调度，而ACK调度器可以感知节点实际的资源负载情况。通过参考节点负载的历史统计并对新调度Pod进行预估，调度器会将Pod优先调度到负载较低的节点，实现节点负载均衡的目标...
新功能发布记录
本文介绍云数据库Redis版的产品功能动态及对应的文档。说明 更多产品动态请参见 云产品动态。Redis内核版本更新 Redis企业版小版本发布日志 Redis社区版小版本发布日志 Proxy小版本发布日志 功能发布更新 2024年 2024年04月 变更项 说明 ...
Linux系统的ECS实例的系统、内存或进程出现异常，查看...
执行以下命令，检测slab内存分配器的占用情况。cat/proc/meminfo|awk '{sum=$2/1024} {print$1 sum"MB"}' 说明 {print$1 sum"MB"} 命令是将输出结果转换为以MB为单位的形式进行显示。执行 atop 命令，使用atop工具分析slab列的内存占用情况...
查看作业性能
内存分配：查看不同类分配的内存情况。锁耗时：查看锁竞争、死锁导致的性能下降问题。ITimer：在相同时间间隔下，查看每个间隔内所有线程之间CPU的消耗情况。说明 火焰图的详情请参见 火焰图。内存动态 JVM不同内存区域的内存变化。线程...
如何将一棵LSM-Tree塞进NVM
Halloc内存分配器 Halloc是针对LSM-tree专用的PM内存分配器，通过三个关键技术以解决传统通用PM内存分配器存在的效率低、碎片化等问题，基于对象池的内存预留方案、应用亲和的内存管理以及统一化地址空间管理。其主要架构如下图所示，...
Alibaba Cloud Linux 3镜像发布记录
增加内核接口memory.duptext_nodes，用于限制duptext的内存分配节点。kfence增强（自研）Arm64架构新增自研的kfence增强功能，能够灵活动态开关kfence，全量捕获内存污染问题，从而兼顾线上探测和线下调试。新增捕获到内存问题时立即宕机的...
排查Redis实例内存使用率高的问题
说明 大部分OOM场景是由于动态内存管理失效引起，例如限流时请求堆积导致动态内存快速上升、过于复杂或不合理的Lua脚本也可能导致OOM。云数据库Redis企业版（Tair）增强了对动态内存的控制，推荐选用。附录2：查看内存占用情况的其他方法 ...
Fast Query Cache
优化内存管理 取消内存预分配机制，采用更加灵活的动态内存分配机制，及时回收无效的内存，保证内存的真实利用率。优化缓存机制 动态检测缓存利用率，实时调整缓存策略，解决命中率偏低或读写混合等场景下的性能降低问题。相比原生Query ...
OOM常见问题排查指南
V1.1.24版本开始，计算节点运行时内存取消单节点20 GB的限制，采用动态调整节点内存，定期检查内存水位，如果元数据较少时，会尽量将剩余可用内存都分配给查询运行时使用，尽量保证运行时内存最大化分配，保障Query获得足够内存分配。...
如何处理Tair集群数据倾斜
数据倾斜严重时，会导致实例在整体内存使用率不高的情况下，发生内存逐出（Key eviction）、内存溢出OOM（Out Of Memory）、实例响应时间上升等异常情况。为什么会产生数据倾斜 Tair 集群架构作为一个分布式系统，整个数据库空间会被分为...
离线全量Key分析
您可以通过离线全量Key分析功能来分析 Tair 的备份文件，快速发现实例中的大Key，帮助您掌握Key在内存中的占用和分布、Key过期时间等信息，为您的优化操作提供数据支持，帮助您避免因Key倾斜引发的内存不足、性能下降等问题。该功能由 ...
如何处理Redis集群数据倾斜
数据倾斜严重时，会导致实例在整体内存使用率不高的情况下，发生内存逐出（Key eviction）、内存溢出OOM（Out Of Memory）、实例响应时间上升等异常情况。为什么会产生数据倾斜 Redis 集群架构作为一个分布式系统，整个数据库空间会被分为...
Spark
原因3：集群开启了动态资源分配（spark.dynamicAllocation.enabled），状态为 Dead 的Executor节点 日志中包含 Driver commend a shutdown 错误信息。解决方法：该报错不会影响业务的正常运行，您无需处理。除上述原因外，如果还有其他报错...
离线全量Key分析
通过离线全量Key分析功能来分析Redis的备份文件，可以快速发现实例中的大Key，帮助您掌握Key在内存中的占用和分布、Key过期时间等信息，为您的优化操作提供数据支持，帮助您避免因Key倾斜引发的内存不足、性能下降等问题。该功能由 ...
成本洞察功能说明
资源请求量和使用趋势 ③ 资源分配情况和真实消耗情况的趋势，蓝色曲线表示已分配的资源，红色曲线表示真实消耗的资源。Pod调度时，节点会为Pod预分配一定的资源，但容器进程真实消耗的资源通常与预分配资源不一致。③能反映出二者间的关系...
Operator
新风险及解决方案 在上述应对策略下，会出现新的风险，蚂蚁也提出了对应的解决方案，说明如下：风险：Sidecar 与应用“共享”分配到的内存资源，导致在异常情况（比如内存泄露）下，Sidecar 跟应用抢内存资源。解决方案：通过扩展 Pod Spec...
JVM内存配置最佳实践
当容器超过内存限制时，会抛出OOM异常，而不是强制关闭容器。XX:InitialRAMPercentage 设置JVM使用容器内存的初始百分比。建议与-XX:MaxRAMPercentage 保持一致，推荐设置为70.0。XX:MaxRAMPercentage 设置JVM使用容器内存的最大百分比。...
告警规则指标说明
JVM堆内存使用率（%）无 不是 JVM在运行过程中，堆内存已经分配的空间与堆内存总空间之间的比率。它可以用来衡量JVM内存管理的效率和性能。通常情况下，JVM堆内存使用率应该尽量控制在70%以下，这样可以避免出现内存溢出等问题。指标维度 ...
Linux实例中MySQL服务常见的无法启动或启动异常处理
解决办法 需要调整MySQL配置文件 my.cnf 中的 innodb_buffer_pool_size 和 key_buffer_size 的大小设置，适当的调大内存分配，一般调整为系统内存的一半。先使用 free-m 查看下系统内存大小，查看是1G内存。通过 vi/etc/my.cnf，调整 ...
集群成本分析与优化-容器服务ACK
② 资源分配情况和真实消耗情况的趋势，蓝色曲线表示已分配的资源，红色曲线表示真实消耗的资源。在Pod调度时，节点会为Pod预分配一定的资源，但容器进程真实消耗的资源通常与预分配的不一致，该图能够反映出二者间的关系，从而进行资源...
自定义资源组
如何处理自定义资源组下任务执行OOM，无法分配内存给作业线程的情况？如何处理数据集成自定义资源组DataX组件log4j问题？如何安装监控？如果使用自定义调度资源组出现问题，需要首先确认Agent是否安装监控。操作如下所示：登录机器，切换至...
内存诊断
当系统开启透明大页时，内核会根据进程的实际情况动态分配透明大页，透明大页可以减少TLB（Translation Lookaside Buffer）Miss的出现概率，从而提升应用程序的性能。THP带来性能提升的同时，产生了一定副作用，即可能产生Memory bloating...
默认行为变更说明
服务关联角色是一种可信实体为阿里云服务的RAM角色，旨在解决跨云服务的授权访问问题。通过服务关联角色，可以更好地配置云服务所需权限，避免误操作带来的风险。详情请参见 Hologres服务关联角色。V2.1版本默认行为变更说明（2024年03月）...
实例规格族
根据CPU、内存等配置，一种实例规格族又分为多种实例规格。ECS实例规格 定义了实例的基本属性：CPU和内存（包括CPU型号、主频等）。但是，ECS实例只有同时配合块存储、镜像和网络类型，才能唯一确定一台实例的具体服务形态。说明 各个地域...
服务运行
您可查看集群中所有ECS节点的CPU与内存具体分配情况。具体操作，请参见 查看节点列表。从 CPU（请求/限制/使用量）和 内存（请求/限制/使用量）字段可以得出，请求资源使用率≤资源限制使用率。说明 若在容器设置中 request 和 limit 都...
诊断VPN网关实例
您可以使用该功能排查使用VPN网关过程中遇到的问题，例如IPsec-VPN连接协商问题、VPN网关路由配置问题、VPN网关实例状态问题等。诊断VPN网关实例的过程不会影响您的业务。VPN网关诊断项说明 下表为您介绍VPN网关实例支持的诊断项。诊断项...
测试分析及调优
Memory 操作系统为了最大化利用内存，一般都设置大量的Cache，因此，内存利用率高达99%并不是问题，内存的问题主要看某个进程占用的内存是否非常大以及是否有大量的Swap（虚拟内存交换）。磁盘I/O 磁盘I/O一个最显著的指标是繁忙率，可以...
Tair配置参数列表
您可以根据业务场景对 云原生内存数据库Tair 实例的参数进行调优与自定义配置，已提升 Tair 实例的性能与安全性。本文介绍各参数的详细说明。注意事项 若设置参数时报错 Parameter is not supported for current version，请升级小版本后重...
配置弹性伸缩（仅Hadoop集群类型）
系统会根据您选择的vCPU和内存规格，自动匹配出满足条件的实例，并显示在备选实例列表中。您需要选中备选的实例，以便集群按照已选的实例规格进行伸缩。为避免由于ECS库存不足造成的弹性伸缩失败，您最多可以选择3种ECS实例。无论是选择...
计算资源优化
选择合适的内存：在并发量一定的情况下，函数内存越大，分配的CPU资源相应越多，因此冷启动表现越优。降低冷启动概率 使用定时触发器预热函数。使用Initializer回调，函数计算会异步调用初始化接口，消除掉代码初始化的时间，在函数计算...
监控指标常见问题
本文为您介绍Hologres监控指标相关的常见问题。连接数过多时如何查看有哪些连接以及Kill连接？查询延迟过高时如何解决？内存使用率高的原因及解决方法？为什么只有一个任务，Hologres实例CPU使用率就达到100%？写入慢如何解决？CPU使用率...
- 产品推荐
- 这些文档可能帮助您