记一次jvm内存不足分析

这两天突然告知说某个新上的服务日志提示内存不足。本来服务器已经有多个服务了，决定新建服务器解决，不过按业务量和服务的逻辑来讲不应该内存不足。遂分析如下。

一、准备工具

本人不是专业的，上网查资料，搜集可用工具和命令。因为服务器远程连接麻烦，所以最后锁定命令。
1、内存占用高的进程命令
top + shift p -->cpu
top + shift m -->memory
top -H -p pid

2、jvm内存情况
jmap -heap pid
jmap -histo:live pid |head -n 10

3、线程情况
jstack pid > vm.log

二、过程

1、查看服务器内存情况
free -m
发现可用不足，cache过高，正常，有频繁的文件读写。centos没有搜到自动清理。只能手工清理。此为原因1：需要定期释放cache。

2、查看进程的内存情况。
top + shift m
发现其中一个服务的res占用高。搜索说就是内存使用高。这个需要进一步查。

jmap -heap pid
发现某个服务的堆内存配置较小。此处为问题原因2：测试环境的启动参数未修改直接上生产。

3、继续查看内存使用高的进程被那个线程使用。
查看内存高的线程
top -H -p pid
shift m

输出线程信息
jstack pid >vm.log
vi vm.log
搜索 线程pid的16进制，搜索pakage的orgid，没有结果。
后面研究看看res到底去哪了。

三、解决

1、修改jvm启动参数
-xms -xmx

2、增加定时任务清除cache