我们有一批服务器部署的同样3个springboot项目,但有一台内存就是比其他的高很多。
心想这3个java项目用不到这个高的内存啊,是不是被挖矿了?
于是把服务器在负载均衡的权重降为0,把3个进程都杀死了,看看内存变化。
果然除了java进程,还有别的东西在占用大量内存。
使用 ps aux --sort=+%mem查看进程的内存排序,看不到占用内存特别多的进程,但是服务器内存就是很高。
再继续进一步排查,发现机器开了hugepage ,如果开了hugepage 这部分内存会直接被计入used ,而不会在进程使用的内存里显示。
命令:cat /proc/meminfo
hugepage 共1145 个,每个hugepage size 2MB,也就是2G左右内存直接就used了
命令:free -h
于是修改hugepage配置
在 /etc/sysctl.conf 中增加vm.nr_hugepages = 0 然后sysctl -p。内存顺利降低。
关于hugepage。
Hugepages是一种由操作系统内核提供的内存页大小,比标准页大小要大得多,一般为2MB或更大。这些大页可以有效地减少内存页表的数量。
用以提高系统性能和内存管理的效率,特别是在大内存应用场景中减轻CPU负担,并提高内存访问效率。
只有使用到hugepage的程序才能利用这部分内存,例如在使用oracle的机器上可能会有这样的设置,但是我们服务器的java进程并没有用到,所以关闭了hugepage也没有关系。