Linux实例系统总体负载的查询及分析
检查服务器进程与服务否占用过多内存，或者内存没有正常释放，导致出现内存溢出，系统宕机。检查/var/spool/cron 等系统配置中是否有cron（计划任务）在对应时间段内执行。检查Web服务器的参数是否超过了服务器的性能，比如最大连接数过...
发现并处理Redis的大Key和热Key
Redis内存达到 maxmemory 参数定义的上限引发操作阻塞或重要的Key被逐出，甚至引发内存溢出（Out Of Memory）。集群架构下，某个数据分片的内存使用率远超其他数据分片，无法使数据分片的内存资源达到均衡。对大Key执行读请求，会使Redis...
使用Logview 2.0查看作业运行信息
例如以下场景的作业问题可借助Fuxi Sensor进行分析：作业内存溢出时，分析实际使用的内存量。例如，您可以通过Fuxi Sensor查看机器学习作业Fuxi Instance的以下资源使用情况：CPU使用量 CPU指标包括两条线，一条显示申请的CPU量（cpu_plan...
2021年
2021-12-15 智能压测 Redis 自动增加分片 帮助Redis数据库实例快速弹性适配可用内存不足的情况，确保实例内存利用率处于安全水位，帮助您规避Redis内存溢出的风险，可有效保障线上业务稳定性。2021-12-03 自动增加分片 2021年11月 引擎 ...
2023-06-21版本
管理MaxCompute Catalog 重要缺陷修复 修复MySQL CDC连接器结合CTAS、CDAS语句消费源表数据时，出现的内存溢出问题。修复使用Hologres连接器作为维表时的空指针异常问题。修复使用Hologres连接器作为源表时的内存溢出问题。
MAP_AGG
在同一条SQL语句中同时使用多个聚合函数时，如果项目资源不足，会出现内存溢出问题，请您根据实际业务情况优化SQL或购买计算资源。命令格式 map,V>map_agg(K a,V b);参数说明 a：输入字段，将作为Map的Key。b：输入字段，将作为Map的value...
Agent自动扩容能力说明
Agent副本数量不足可能会导致Agent频繁地因内存溢出而重启，进而导致数据采集延迟甚至丢失。借助 可观测监控 Prometheus 版 的Agent副本水平自动扩容功能，可以规避这一问题。Prometheus Agent自动扩容（HPA）的触发时机和策略 Prometheus ...
Agent自动扩容能力说明
Agent副本数量不足可能会导致Agent频繁地因内存溢出而重启，进而导致数据采集延迟甚至丢失。借助 可观测监控 Prometheus 版 的Agent副本水平自动扩容功能，可以规避这一问题。Prometheus Agent自动扩容（HPA）的触发时机和策略 Prometheus ...
自治服务（CloudDBA）
开启自动扩容 当内存平均使用率达到阈值后会自动升级Redis实例的规格，帮助您快速弹性适配业务高峰，避免内存溢出的风险，有效保障线上业务稳定性。基于预测自动弹性伸缩 以实例过去10天的历史数据，预测实例未来24小时性能指标的使用值；...
MULTIMAP_AGG
在同一条SQL语句中同时使用多个聚合函数时，如果项目资源不足，会出现内存溢出问题，请您根据实际业务情况优化SQL或购买计算资源。命令格式 map,array<V>>multimap_agg(K a,V b);参数说明 a：输入字段，将作为Map的Key。b：输入字段，相同...
MongoDB实例内存使用率高问题
在连接数合适的情况下内存占用持续增高，建议升级内存配置，避免可能存在内存溢出和大量清除缓存而导致系统性能急剧下滑。加速tcmalloc释放内存。可以在控制台的参数设置中调整setParameter.tcmallocReleaseRate参数，参数取值为1~10，数值...
排查内存使用率高的问题
当执行客户端Range类操作或大Key收发较慢时，Input buff与Output buff占用的内存会增大，从而影响数据区，甚至会造成内存溢出OOM（Out Of Memory）。数据内存 用户数据区，即实际存储的Value信息，通常作为重点分析的对象。管理内存（静态...
使用Java SDK访问表格存储时出现...
通过jmap、jcmd等工具排查JVM，确认JVM的内存占用情况，确认是否出现内存溢出OOM。如果出现OOM，则会导致HttpClient后台的IO线程直接退出。请根据以下方式进行处理。如果存在不合理的内存使用或内存泄露问题，请优化代码。如果内存使用合理...
Memcg OOM优先级策略功能
Alibaba Cloud Linux 2（内核版本 4.19.91-18.al7 开始）和Alibaba Cloud Linux 3（内核版本 5.10.60-9.al8 开始）新增内存子系统（memcg）内存溢出OOM（Out Of Memory）优先级策略功能。本文主要介绍实现memcg OOM优先级策略功能的接口，...
可观测性能力
相比开源工具redis-rdb-tool的解析速度，离线全量Key分析 在大小Key混合（占比1：9）的场景下实现4倍速度提升，在中大Key场景下实现20倍速度提升，同时保证进程内存占用固定维持在1 GB以内，避免大Key解析可能带来内存溢出的问题。...
如何处理Tair集群数据倾斜
数据倾斜严重时，会导致实例在整体内存使用率不高的情况下，发生内存逐出（Key eviction）、内存溢出OOM（Out Of Memory）、实例响应时间上升等异常情况。为什么会产生数据倾斜 Tair 集群架构作为一个分布式系统，整个数据库空间会被分为...
Dataphin数据集成管道同步内存溢出问题
问题描述 试跑数据集成中的数据同步时候发现试跑报错，内存溢出。问题原因 由于通道配置引起的报错。解决方案 调整通道配置参数 适用于 Dataphin
开源Elasticsearch FAQ
出现内存溢出OOM（OutOfMemory）的错误，如何处理？如何手动对shard进行操作？Elasticsearch的缓存清除策略有哪些？如何重新分配索引分片（reroute）？索引查询时，提示statusCode:500的错误，如何处理？如何修改自动创建索引auto_create_...
Dataphin 同步任务报错“java.lang.OutOfMemoryError:...
2.同步任务并发太高，导致堆内存溢出。解决方案 1.将表数据分批同步，每次同步部分数据。2.把并发改小点，调整成合理的并发数。3.调整为Shell脚本任务，然后修改内存大小。4.修改为管道任务，管道任务增大内存，JVM内存最大为8G。适用于 ...
如何处理Redis集群数据倾斜
数据倾斜严重时，会导致实例在整体内存使用率不高的情况下，发生内存逐出（Key eviction）、内存溢出OOM（Out Of Memory）、实例响应时间上升等异常情况。为什么会产生数据倾斜 Redis 集群架构作为一个分布式系统，整个数据库空间会被分为...
Page Cache限制功能
Alibaba Cloud Linux 3（内核版本 5.10.134-14 开始）增加了Page Cache（文件缓存）限制功能，用于解决因Page Cache无限制使用带来的系统稳定性问题，例如业务抖动、预期外的内存溢出OOM（Out Of Memory）等。背景信息 在内核系统中，系统...
版本特性
父熔断器以当前真实可用内存为基准（indices.breaker.total.use_real_memory），默认为JVM堆内存的95%，以最大内存可用率来避免内存溢出。详细信息，请参见 Circuit Breaker。废除_all 字段的支持，提升检索性能。新增间隔查询（Intervals ...
离线全量Key分析
您可以通过离线全量Key分析功能来分析 Tair 的备份文件，快速发现实例中的大Key，帮助您掌握Key在内存中的占用和分布、Key过期时间等信息，为您的优化操作提供数据支持，帮助您避免因Key倾斜引发的内存不足、性能下降等问题。该功能由 ...
排查Redis实例内存使用率高的问题
当执行客户端Range类操作或大Key收发较慢时，Input buff与Output buff占用的内存会增大，从而影响数据区，甚至会造成内存溢出OOM（Out Of Memory）。数据内存 用户数据区，即实际存储的Value信息，通常作为重点分析的对象。管理内存（静态...
可观测性能力介绍
相比开源工具redis-rdb-tool的解析速度，离线全量Key分析 在大小Key混合（占比1：9）的场景下实现4倍速度提升，在中大Key场景下实现20倍速度提升，同时保证进程内存占用固定维持在1 GB以内，避免大Key解析可能带来内存溢出的问题。...
错误码
E34 内存溢出 Enclave CLI在将Enclave镜像文件加载到即将提供给Enclave的内存中时发生内存错误，如镜像加载的起始地址加上镜像文件长度后的数值超过本系统平台的最大地址。E35 EIF文件解析错误 Enclave CLI从Enclave镜像文件中读取某个节...
变更实例配置
自动扩容实例配置 云数据库Redis集成了 DAS 的自动扩容功能，当内存平均使用率达到阈值后会自动升级Redis实例的规格，帮助您快速弹性适配业务高峰，避免内存溢出的风险，有效保障线上业务稳定性。具体操作，请参见 开启自动扩容。说明 自动...
附录：数据探查典型场景说明
亚信DP5.3 内存溢出 Map端和Reduce端的内存溢出。set mapreduce.map.memory.mb=10150;set mapreduce.map.java.opts=-Xmx6144m;set mapreduce.reduce.memory.mb=10150;set mapreduce.reduce.java.opts=-Xmx8120m;E-MapReduce3.x、E-...
附录：数据探查典型场景说明
亚信DP5.3 内存溢出 Map端和Reduce端的内存溢出。set mapreduce.map.memory.mb=10150;set mapreduce.map.java.opts=-Xmx6144m;set mapreduce.reduce.memory.mb=10150;set mapreduce.reduce.java.opts=-Xmx8120m;E-MapReduce3.x、E-...
Bloom
为防止TairBloom越来越大，甚至导致Redis内存溢出（Out Of Memory），向您提供如下使用建议。拆分业务数据：拆分、细化业务数据，避免将大量数据存入一个TairBloom中，这样不仅会导致这个key过大，影响查询性能，同时也会由于这个key中插入...
2023年
修复Master节点不回收Writer Gang，导致高并发场景下计算节点内存过高，容易出现内存溢出（OOM）的问题。修复列存表索引扫描（INDEX SCAN）结果可能出现错误的问题。修复AOCS表添加列辅助表时未使用正确的快照导致报错的问题。修复AO表和...
Tair配置参数列表
您可以根据业务场景对 云原生内存数据库Tair 实例的参数进行调优与自定义配置，已提升 Tair 实例的性能与安全性。本文介绍各参数的详细说明。注意事项 若设置参数时报错 Parameter is not supported for current version，请升级小版本后重...
离线全量Key分析
通过离线全量Key分析功能来分析Redis的备份文件，可以快速发现实例中的大Key，帮助您掌握Key在内存中的占用和分布、Key过期时间等信息，为您的优化操作提供数据支持，帮助您避免因Key倾斜引发的内存不足、性能下降等问题。该功能由 ...
Quick BI使用Doris数据源提示”Memory exceed limit...
问题原因 查询内存溢出。解决方案 1.执行下面命令查看 exec_mem_limit 内存具体大小（默认2GB）：show variables like"exec_mem_limit;2.通过下面命令修改exec_mem_limit 内存：SET GLOBAL exec_mem_limit=XXX;适用于 Quick BI Doris数据源
Java后台进程自动关闭如何排查
检查是否为 out of memory（内存溢出）。此处以CentOS系统为例，执行以下命令检查。cat/var/log/messages|grep"memory"查看是否有 out of memory 相关信息。如果有此类信息，Java运行就有可能因为内存溢出导致进程被Kill掉。检查系统是否...
ECS实例的服务进程自动关闭，如何排查？
查看是否有 out of memory 相关信息，如果有此类信息，说明有内存溢出。系统内核参数设置不合理。解决方法请参见 Linux实例常用内核网络参数介绍与常见问题处理。根据程序的具体报错日志或者生成的 kump 文件分析程序本身异常退出的原因。...
异常：内存溢出OutOfMemoryException
问题现象 机器人在执行任务时，有时会出现内存不足错误导致机器人闪退的问题。问题排查 1.查看任务管理器-详细信息，查看chrome.exe进程是否为多个，若有多个...若非上述两种情况导致的内存溢出问题，麻烦联系阿里云RPA官网客服反馈问题~
Spark FAQ
Spark Executor除了JVM本身使用内存外，往往还包括堆外内存（Shuffle、Cache），以及Python UDF等使用的内存。解决方案：调大参数spark.executor.memoryOverhead（单位MB）。该参数表示容器内部非Spark Executor进程可使用的内存容量，默认...
操作系统监控
Byte memory_usedspace userId、instanceId Maximum、Minimum、Average 系统已用内存。计算方法：total–free。（Agent）memory.actualused.space 用户实际使用的内存。Byte memory_actualusedspace userId、instanceId Maximum、Minimum、...
ECS服务器内操作出现卡顿的排查步骤
检查服务器内进程与服务否占用过多的内存，或者内存没有正常释放，导致出现内存溢出或系统宕机。检查/var/spool/cron 目录等系统配置中，是否有添加计划任务在对应的时间段执行。检查Web服务器的参数是否超过了服务器的性能，例如最大连接...
- 产品推荐
- 这些文档可能帮助您