一台suse 12 sp3服务器上起多个java进程,突然遇到“ java.lang.OutOfMemoryError: unable to create new native thread“的报错,而服务器本身仍然有大量free的内存,baidu之,几乎所有的文章都会提到下面几个jvm和操作系统参数:
1、Java虚拟机本身:-Xms,-Xmx,-Xss;
2、 系统限制:/proc/sys/kernel/pid_max,/proc/sys/kernel/thread-max,max_user_process(ulimit -u),/proc/sys/vm/max_map_count
详细内容请参考:JVM中可生成的最大Thread数量
很不幸,在服务器上进行了上述参数配置,还是会遇到OOM报错,启动java进程,运行top -H 查看系统的线程总数,最高在12250左右,然后,日志报错:”unable to create new native thread“。同时,查看系统message的日志(/var/log/message)发现如下信息:
kernel: cgroup: fork rejected by pids controller in /user.slice/user-1000.slice
经过研究,发现cgroup通过/sys/fs/cgroup/pids/user.slice/user-