日志字段详情
false 是 errorType 函数错误类型，包含以下三种：FunctionOOMError：内存溢出。FunctionTimeoutError：执行时间超限。FunctionUnhandledError：未捕获的其他异常。FunctionUnhandledError 否。仅在函数执行出现错误即 hasFunctionError:...
Page Cache限制功能
Alibaba Cloud Linux 3（内核版本 5.10.134-14 开始）增加了Page Cache（文件缓存）限制功能，用于解决因Page Cache无限制使用带来的系统稳定性问题，例如业务抖动、预期外的内存溢出OOM（Out Of Memory）等。背景信息 在内核系统中，系统...
内存诊断
容器智能运维平台 提供内存诊断功能，可以覆盖Kubernetes集群上常见的内存问题，包括内存泄漏、内存碎片化、OOM等。诊断结果以图表的方式展示系统内存整体使用情况，将容器内的缓存和共享内存归属到具体的文件夹下，清晰展示系统内存使用...
OOM常见问题排查指南
在早期版本中，计算节点（Worker Node）的内存上限是20GB，但Hologres从 V1.1.24版本开始，计算节点运行时内存取消单节点20 GB的限制，采用动态调整节点内存，定期检查内存水位，如果元数据较少时，会尽量将剩余可用内存都分配给查询运行时...
标准架构
Redis进程Fork导致Copy-On-Write，Copy-On-Write导致主节点进程内存消耗，极端情况下造成主节点内存溢出，程序异常退出。Redis主节点生成备份文件导致服务器磁盘IO和CPU资源消耗。发送GB级别大小的备份文件，会导致服务器网络出口爆增，...
缓存淘汰
这导致长连接可能会积累大量的缓存，并导致内存溢出（OOM）。因此，为了提高RDS PostgreSQL的稳定性，需要引入缓存淘汰机制，及时释放不常用的缓存。应用场景 具有大量长连接的SAAS场景 影响 本文中涉及修改的参数均不涉及重启实例。注意...
外部表常见问题
在MaxCompute上访问OSS外部表，编写UDF本地测试通过，上传后报错内存溢出，如何解决？通过外部表处理OSS数据时，报错Inline data exceeds the maximun allowed size，如何解决？如何在MaxCompute中使用OSS外部表读取JSON数据？如何通过OSS...
内核功能与接口概述
Page Cache限制功能 Alibaba Cloud Linux 3内核版本 5.10.134-14 及以上 Alibaba Cloud Linux 3增加了Page Cache（文件缓存）限制功能，用于解决因Page Cache无限制使用带来的系统稳定性问题，例如业务抖动、预期外的内存溢出OOM等。...
Memcg OOM优先级策略功能
Alibaba Cloud Linux 2（内核版本 4.19.91-18.al7 开始）和Alibaba Cloud Linux 3（内核版本 5.10.60-9.al8 开始）新增内存子系统（memcg）内存溢出OOM（Out Of Memory）优先级策略功能。本文主要介绍实现memcg OOM优先级策略功能的接口，...
如何处理Windows Server 2003/2008...虚拟内存不足问题...
本文介绍Windows Server 2003/2008系统的ECS实例虚拟内存不足导致的问题及解决方案。问题现象 一般而言，Windows Server 2003/2008系统的ECS实例缺少虚拟内存时会引起很多问题，包含但不限于如下现象：操作系统运行缓慢，甚至出现宕机，...
变更实例配置
自动扩容实例配置 云数据库Redis集成了 DAS 的自动扩容功能，当内存平均使用率达到阈值后会自动升级Redis实例的规格，帮助您快速弹性适配业务高峰，避免内存溢出的风险，有效保障线上业务稳定性。具体操作，请参见 开启自动扩容。说明 自动...
EventHandle
发现问题 接入 Node.js 性能平台后，我们在全局告警中看到某个客户的应用频繁提醒堆内使用内存占据堆上限超过 80%，这种情况基本上大概率就是发生内存泄漏了，联系到对应的客户后，进过客户的授权，我们看到了有问题的进程内存状况，如下图...
监控项表达式编写
比如内存使用的占比表达如下：内存占用过高，为${@freemem/total*100}%。监控类型与属性 每一种监控类型的上下文并不相同。system@load1，1分钟的平均负载。load5，5分钟的平均负载。load15，15分钟内的平均负载。cpu，CPU使用率，为0-1...
开启自动扩容
数据库自治服务DAS（Database Autonomy Service）提供Redis自动扩容功能，当内存平均使用率达到阈值后会自动升级Redis实例的规格，帮助您快速弹性适配业务高峰，避免内存溢出的风险，有效保障线上业务稳定性。前提条件 实例为：云数据库...
性能参数调优
如果查询需要额外的内存，则会使用磁盘上的临时溢出文件。该计算可用于估计各种情况下的合理值。(gp_vmem_protect_limit GB*0.9)/max_expected_concurrent_queries 将gp_vmem_protect_limit设置为 8192MB(8GB)并假设最大40个并发查询和10%...
如何处理Tair集群数据倾斜
数据倾斜严重时，会导致实例在整体内存使用率不高的情况下，发生内存逐出（Key eviction）、内存溢出OOM（Out Of Memory）、实例响应时间上升等异常情况。为什么会产生数据倾斜 Tair 集群架构作为一个分布式系统，整个数据库空间会被分为...
SET
某些UDF在内存计算、排序的数据量比较大时，会报内存溢出错误，这时候可以调大该参数，但该方法只能暂时缓解，您需要从业务上去优化UDF代码。取值范围：256 MB~12288 MB。默认值为1024 MB。odps.sql.udf.timeout 设置UDF超时时间。取值范围...
Spark常见报错
Spark Executor除了JVM本身使用的内存外，还包括堆外内存（Shuffle、Cache），以及Python UDF等使用的内存。容器使用的内存超过了容器允许使用内存的限制，导致Spark进程被kill命令强制终止。常见于数据挖掘场景或者以Python语言为核心的...
Hive作业异常排查及处理
yarn logs-applicationId application_xxx_xxx-appOwner userName 内存问题引起的报错 Container内存不足引起的OOM 报错日志：java.lang.OutOfMemoryError:GC overhead limit exceeded 或者 java.lang.OutOfMemoryError:Java heap space。...
内存型
推荐 内存型实例规格族r8a 内存型实例规格族r8i 内存平衡增强型实例规格族r8ae 内存型实例规格族r8y 内存增强型实例规格族re7p 内存型实例规格族r7p 存储增强内存型实例规格族r7se 内存型实例规格族r7a 内存型实例规格族r7 安全增强内存型...
2023年
无 内存保护参数 Serverless实例新增了一个内存保护参数Laser，该参数默认为开启状态。无 缺陷修复 修复带SORT KEY的内存攒批任务执行后可能会出现的查询报错问题。修复Serverless实例读取字符串类型数据可能出错的问题。修复WHERE子句中...
Spark
Spark Executor除了JVM本身使用的内存外，还包括堆外内存（Shuffle、Cache），以及Python UDF等使用的内存。容器使用的内存超过了容器允许使用内存的限制，导致Spark进程被kill命令强制终止。此时Driver日志出现如下报错：ERROR ...
云监控
处理方法：如果有计算，且内存水位高，或者SQL发生内存超出报错，这时可以通过检查SQL的执行计划，观察是否合理等手段，改善SQL的内存消耗。出现存储水位高的告警 处理方法：当出现存储水位告警时，代表您实例存储告急，请适当扩容存储。...
时空内存索引
Lindorm Ganos时空服务在Lindorm流引擎中实现了基于内存的RTree索引，即时空内存索引。时空内存索引能够在进行流表JOIN操作时显著提升针对时空数据的查询效率。在使用Lindorm流引擎处理计算任务时，您可以在连接器（Connector）中设置相关...
容器内存QoS
ack-koordinator为容器提供内存服务质量QoS（Quality of Service）保障能力，在确保内存资源公平性的前提下，改善应用在运行时的内存性能。本文介绍如何使用容器内存QoS功能。背景信息 容器在使用内存时主要有以下两个方面的约束：自身内存...
如何将一棵LSM-Tree塞进NVM
我们以X-Engine为基础结合非易失内存的优势与限制，重新设计并实现了存储引擎的主要内存数据结构、事务处理和持久化内存分配器等基础组件，最终实现了不需要记录预写式日志的高性能事务处理，降低了整体系统的写入放大并提高了存储引擎的...
新功能发布记录
2022-08-09 全部 内存型 持久内存型 磁盘型 2022年7月 变更项 说明 发布时间 发布地域 相关文档 发布新功能 Tair（Redis企业版）持久内存型集群架构支持升级小版本。2022-07-29 全部 升级小版本与代理版本 发布新功能 云数据库Redis版 支持...
在离线混部概述
Memory QoS 容器在使用内存时主要存在以下两个方面的约束：自身内存限制：当容器自身的内存（含Page Cache）接近容器上限时，会触发内核的内存回收子系统，这个过程会影响容器内应用的内存申请和释放的性能。节点内存限制：当容器内存超卖...
如何处理Redis集群数据倾斜
数据倾斜严重时，会导致实例在整体内存使用率不高的情况下，发生内存逐出（Key eviction）、内存溢出OOM（Out Of Memory）、实例响应时间上升等异常情况。为什么会产生数据倾斜 Redis 集群架构作为一个分布式系统，整个数据库空间会被分为...
版本特性
父熔断器以当前真实可用内存为基准（indices.breaker.total.use_real_memory），默认为JVM堆内存的95%，以最大内存可用率来避免内存溢出。详细信息，请参见 Circuit Breaker。废除_all 字段的支持，提升检索性能。新增间隔查询（Intervals ...
代码多副本功能
在NUMA架构（尤其是ARM实例）中，不同NUMA节点具有各自的本地内存，当一个NUMA节点上的程序或进程需要访问其他NUMA节点的代码段时，就会引入额外的延迟和性能开销。通过代码多副本功能，可以将远程节点的代码段复制到本地节点，避免了跨...
MemVerge Memory Machine部署使用实践
MemVerge Memory Machine是一款大内存算例加速软件，它可以将DRAM和PMEM进行虚拟化，实现无需更改代码即可访问新的PMEM内存介质，支持可横向扩展的内存节点集群，以提供实时分析和 AI/ML、HPC应用程序所需的大规模内存容量，以及内存系统的...
Query级别诊断结果
建议 先定位查询消耗较大内存的原因，再通过 AnalyticDB MySQL版 SQL诊断中的执行计划找到消耗内存较多的Stage或者算子，更多详情，请参见 消耗内存的慢查询 和 使用执行计划分析查询。查询生成的Stage个数较多 问题 查询生成的Stage个数较...
告警规则指标说明
JVM堆内使用内存量应该被严格控制，避免因为内存泄漏或者过多的内存占用导致系统性能下降或者内存溢出等问题。JVM非堆内存提交值 M 不是 非堆内存中已经被Java程序使用的内存大小。JVM非堆内存的提交值也需要被严格控制，避免因为过多的类...
Bloom
为防止TairBloom越来越大，甚至导致Redis内存溢出（Out Of Memory），向您提供如下使用建议。拆分业务数据：拆分、细化业务数据，避免将大量数据存入一个TairBloom中，这样不仅会导致这个key过大，影响查询性能，同时也会由于这个key中插入...
排查Redis实例内存使用率高的问题
当执行客户端Range类操作或大Key收发较慢时，Input buff与Output buff占用的内存会增大，从而影响数据区，甚至会造成内存溢出OOM（Out Of Memory）。数据内存 用户数据区，即实际存储的Value信息，通常作为重点分析的对象。管理内存（静态...
错误码
E34 内存溢出 Enclave CLI在将Enclave镜像文件加载到即将提供给Enclave的内存中时发生内存错误，如镜像加载的起始地址加上镜像文件长度后的数值超过本系统平台的最大地址。E35 EIF文件解析错误 Enclave CLI从Enclave镜像文件中读取某个节...
发现并处理大Key和热Key
Tair 内存达到 maxmemory 参数定义的上限引发操作阻塞或重要的Key被逐出，甚至引发内存溢出（Out Of Memory）。集群架构下，某个数据分片的内存使用率远超其他数据分片，无法使数据分片的内存资源达到均衡。对大Key执行读请求，会使 Tair ...
使用Logview 2.0查看作业运行信息
例如以下场景的作业问题可借助Fuxi Sensor进行分析：作业内存溢出时，分析实际使用的内存量。例如，您可以通过Fuxi Sensor查看机器学习作业Fuxi Instance的以下资源使用情况：CPU使用量 CPU指标包括两条线，一条显示申请的CPU量（cpu_plan...
处理异常
10201 VM_UNINITIALIZED_TABLE_ELEMENT 检查合约有没有越界、非法指针等异常、合约内存使用超过可用内存等问题。10201 VM_UNDEFINED_TABLE_INDEX 检查合约有没有越界、非法指针等异常、合约内存使用超过可用内存等问题。10201 VM_OUT_OF_...
- 产品推荐
- 这些文档可能帮助您