java 应用中通常需要创建线程池来执行并发,有时会碰到在执行时抛出OutOfMemory的异常。导致这种异常的具体原因很多,由于线程池参数配置不当也是常见的原因之一,找个机会总结一下,与大家研究共勉。
一、发现问题:
首先通过下面的测试程序来重现这个场景:
运行环境 :32位 Windows7,Sun JDK 1.6.0_24, eclipse 3.7
Java代码:
public class TestOutOfMemoryError { public static void main(String[] args) { for (int i = 0;; i++) { System.out.println("i = " + i); new Thread(new TestThread()).start(); } } } import java.util.concurrent.CountDownLatch; public class TestThread extends Thread { CountDownLatch cdl = new CountDownLatch(1); public HoldThread() { this.setDaemon(true); } public void run() { try { cdl.await(); } catch (InterruptedException e) { } } } 不调整任何JVM参数,eclipse中直接运行,输出:
i = 5602
Exception in thread "main" java.lang.OutOfMemoryError: unable to create new native thread
at java.lang.Thread.start0(Native Method)
at java.lang.Thread.start(Thread.java:597)
at TestOutOfMemoryError.main(TestOutOfMemoryError.java:20)
二、分析问题:
导致该问题的原因是在程序中创建了太多的线程,耗尽资源从而引起内存不足。在JVM中应用能创建的线程数是有限制的,能创建的线程数的具体计算公式如下:
number of threads =(MaxProcessMemory - JVMMemory - ReservedOsMemory) / (ThreadStackSize)
各参数说明:
1.MaxProcessMemory 指的是一个进程的最大内存,在32位的 windows下一般限制在1.5GB到2GB
2.JVMMemory JVM内存,eclipse默认启动的JVM内存是64MB
3.ReservedOsMemory 保留的操作系统内存,通常为130MB左右
4.ThreadStackSize 线程栈的大小,32位 JDK1.6默认的stacksize大小在325KB左右
创建一个线程的时候,JAVA会在JVM内存创建一个Thread对象,同时创建一个操作系统线程,而这个系统线程的内存用的不是JVMMemory,而是系统中的剩余内存(MaxProcessMemory - JVMMemory - ReservedOsMemory)。
通过公式计算结果如下:(2*1024*1024-64*1024-128*1024)/325 = 5848
公式计算结果5848,和实际结果5602基本一致,出现误差是因为ReservedOsMemory不能很精确。
由公式得出结论:分配给JVM内存越大,那么能创建的操作系统线程数量越少,越容易发生
java.lang.OutOfMemoryError: unable to create new native thread。
通常设置JVM内存参数时,容易认为越大越好,从而走入误区。
接下来验证一下,依旧使用上面的测试程序,加上下面的JVM参数的结果:
ThreadStackSize JVMMemory 能创建的线程数
默认的325K -Xms1024m -Xmx1024m i = 2655
默认的325K -Xms1224m -Xmx1224m i = 2072
默认的325K -Xms1324m -Xmx1324m i = 1753
默认的325K -Xms1424m -Xmx1424m i = 1435
-Xss1024k -Xms1424m -Xmx1424m i = 452
三、解决问题:
1、 如果因为程序bug导致创建大量不必要的线程,或者线程没有及时回收,那么必须解决bug,修改参数是不能解决问题的。
2、 如果程序确实需要大量的线程,可以通过调整MaxProcessMemory,JVMMemory,ThreadStackSize这三个参数来增加能创建的线程容量:
MaxProcessMemory:使用64位操作系统
JVMMemory:减少JVM内存大小(调整Xmx参数)
ThreadStackSize:减小线程的栈大小(调整Xss参数)