Cannot Allocate Memory 错误解决方案

Cannot Allocate Memory 错误解决方案

概述

前两天有个系统用着用着突然崩溃了，不一会领导来找我让对接合作厂商的架构师，好家伙吗我都能碰到架构师了，上来就是一顿给我指挥查这个查那个的，最后直接一个重启服务器就好了，Cannot allocate memory 错误表明系统内存资源不足，无法为进程分配所需的内存。这个问题说实话没啥好招，系统不做监控爆雷了这就纯纯运维的问题，还好我不负责他们系统，这个错误输入什么命令都会提示，反正业务也炸了重启也没啥事，一般就是java线程占用的内存资源太多杀死两个按照下面思路排一排就行了。

步骤 1: 检查系统内存使用情况

首先，检查系统的内存使用情况，以确定内存是否不足。

命令

运行以下命令检查内存状态：

free -h

输出会显示系统总内存、已用内存、可用内存等。如果可用内存较少，则可能会导致内存分配失败。

示例输出

              total        used        free      shared  buff/cache   available
Mem:            16G         12G        1.2G        500M         2.8G        3G

重点查看 available 列，判断当前系统剩余可用内存。

步骤 2: 查找内存占用高的进程

如果系统内存不足，需要查找并处理占用内存过高的进程。

命令

使用 top 或 htop 查看实时的内存使用情况：

top

查看 RES 和 %MEM 列，识别哪些进程占用的内存较多。如果某个进程占用了过多内存，可以考虑重启进程或优化其内存使用。

杀死占用内存过高的进程

如果发现某个进程占用内存过高，可以使用以下命令杀死该进程：

sudo kill -9 <PID>

<PID> 是进程 ID，可以从 top 命令中获取。

步骤 3: 清理缓存

系统缓存可能占用了大量内存，可以通过清理缓存释放内存。

命令

执行以下命令清理缓存：

sudo sync; sudo sysctl -w vm.drop_caches=3

此操作会清理文件系统的页面缓存、目录缓存和 inode 缓存，不会影响正在使用的内存。

步骤 4: 优化应用程序的内存使用

如果内存不足的情况频繁出现，建议优化内存占用较高的应用程序。检查应用程序的内存使用模式，并进行以下操作：

1. 配置应用程序的内存限制：某些应用（如 Java、MySQL 等）允许配置内存使用限制。调整配置文件，使其在有限的内存中运行。
2. 更新或优化应用程序：通过优化代码或升级到更高效的版本，减少内存占用。

步骤 5: 监控内存使用

为了防止未来出现类似问题，建议启用内存监控，提前预警内存消耗异常。

命令

可以使用以下命令持续监控系统内存：

watch -n 5 free -h

或者使用 Prometheus、阿里云监控等工具进行长期内存监控，设定告警规则，防止内存耗尽。