解决 - java.lang.OutOfMemoryError: unable to create new native thread

转载 2013年12月05日 12:01:22
工作中碰到过这个问题好几次了,觉得有必要总结一下,所以有了这篇文章,这篇文章分为三个部分:认识问题、分析问题、解决问题。

 

一、认识问题:

首先我们通过下面这个测试程序来认识这个问题:
运行的环境(有必要说明一下,不同环境会有不同的结果):32位 Windows XP,Sun JDK 1.6.0_18, eclipse 3.4,
测试程序:

Java代码  收藏代码
  1. import java.util.concurrent.CountDownLatch;  
  2.   
  3. public class TestNativeOutOfMemoryError {  
  4.   
  5.     public static void main(String[] args) {  
  6.   
  7.         for (int i = 0;; i++) {  
  8.             System.out.println("i = " + i);  
  9.             new Thread(new HoldThread()).start();  
  10.         }  
  11.     }  
  12.   
  13. }  
  14.   
  15. class HoldThread extends Thread {  
  16.     CountDownLatch cdl = new CountDownLatch(1);  
  17.   
  18.     public HoldThread() {  
  19.         this.setDaemon(true);  
  20.     }  
  21.   
  22.     public void run() {  
  23.         try {  
  24.             cdl.await();  
  25.         } catch (InterruptedException e) {  
  26.         }  
  27.     }  
  28. }  
 

 

不指定任何JVM参数,eclipse中直接运行输出,看到了这位朋友了吧:
i = 5602

Exception in thread "main" java.lang.OutOfMemoryError: unable to create new native thread
    at java.lang.Thread.start0(Native Method)
    at java.lang.Thread.start(Thread.java:597)
    at TestNativeOutOfMemoryError.main(TestNativeOutOfMemoryError.java:20)

 

二、分析问题:

这个异常问题本质原因是我们创建了太多的线程,而能创建的线程数是有限制的,导致了异常的发生。能创建的线程数的具体计算公式如下:
(MaxProcessMemory - JVMMemory - ReservedOsMemory) / (ThreadStackSize) = Number of threads
MaxProcessMemory 指的是一个进程的最大内存
JVMMemory         JVM内存
ReservedOsMemory  保留的操作系统内存
ThreadStackSize      线程栈的大小

在java语言里, 当你创建一个线程的时候,虚拟机会在JVM内存创建一个Thread对象同时创建一个操作系统线程,而这个系统线程的内存用的不是JVMMemory,而是系统中剩下的内存(MaxProcessMemory - JVMMemory - ReservedOsMemory)。


结合上面例子我们来对公式说明一下:
MaxProcessMemory 在32位的 windows下是 2G
JVMMemory   eclipse默认启动的程序内存是64M
ReservedOsMemory  一般是130M左右
ThreadStackSize 32位 JDK 1.6默认的stacksize 325K左右
公式如下:
(2*1024*1024-64*1024-130*1024)/325 = 5841
公式计算所得5841,和实践5602基本一致(有偏差是因为ReservedOsMemory不能很精确)


由公式得出结论:你给JVM内存越多,那么你能创建的线程越少,越容易发生java.lang.OutOfMemoryError: unable to create new native thread。

咦,有点背我们的常理,恩,让我们来验证一下,依旧使用上面的测试程序,加上下面的JVM参数,测试结果如下:
ThreadStackSize      JVMMemory                    能创建的线程数
默认的325K             -Xms1024m -Xmx1024m    i = 2655
默认的325K               -Xms1224m -Xmx1224m    i = 2072
默认的325K             -Xms1324m -Xmx1324m    i = 1753
默认的325K             -Xms1424m -Xmx1424m    i = 1435
-Xss1024k             -Xms1424m -Xmx1424m    i = 452

完全和公式一致。

三、解决问题:
1, 如果程序中有bug,导致创建大量不需要的线程或者线程没有及时回收,那么必须解决这个bug,修改参数是不能解决问题的。
2, 如果程序确实需要大量的线程,现有的设置不能达到要求,那么可以通过修改MaxProcessMemory,JVMMemory,ThreadStackSize这三个因素,来增加能创建的线程数:
a, MaxProcessMemory 使用64位操作系统
b, JVMMemory   减少JVMMemory的分配
c, ThreadStackSize  减小单个线程的栈大小

Java内存组成&GC算法

Java内存组成&GC算法@(JAVA)[java]Java内存组成GC算法 一内存组成 一Java程序的内存组成 1Java堆 2方法区含常量池永久代 3栈 1Java虚拟机栈 2本地方法栈 4程序...
  • jediael_lu
  • jediael_lu
  • 2017年08月02日 14:36
  • 293

Java常见内存溢出异常分析

Java虚拟机规范规定JVM的内存分为了好几块,比如堆,栈,程序计数器,方法区等,而Hotspot jvm的实现中,将堆内存分为了三部分,新生代,老年代,持久带,其中持久带实现了规范中规定的方法区,而...
  • tianwei7518
  • tianwei7518
  • 2015年01月21日 09:15
  • 1362

在hadoop启动的时候,会出现各种各样的问题

在hadoop启动的时候,会出现各种各样的问题,NameNode,JobTracker等各个模块都会有莫名奇妙的问题出现,在这里对hdfs的问题进行一下简单的记录 1:HDFS initialize...
  • caoshichaocaoshichao
  • caoshichaocaoshichao
  • 2013年10月20日 01:10
  • 10177

Hadoop命令执行时提示JVM OOM问题的处理

1、问题:执行Hadoop命令时提示java.lang.OutOfMemoryError: unable to create new native thread          就是OOM问题。 ...
  • fjssharpsword
  • fjssharpsword
  • 2017年04月25日 16:17
  • 2718

【Hadoop】Hadoop/Yarn中hdfs与mapreduce相关问题汇总

在hadoop启动的时候,会出现各种各样的问题,NameNode,JobTracker等各个模块都会有莫名奇妙的问题出现,在这里对hdfs的问题进行一下简单的记录 1:HDFS initialized...
  • s120922718
  • s120922718
  • 2013年06月24日 18:39
  • 4502

静默安装oracle 11g 【实验笔记】

停止防火墙,selinux chkconfig iptables off service iptables stop vim /etc/selinux/config 修改SELINUX=dis...
  • junshi66
  • junshi66
  • 2014年07月24日 15:17
  • 2877

关于服务进程申请线程数量的限制unable to create new native thread

在跑某个web服务的时候出现了以下异常 unable to create new native thread 运行此服务的用户能申请的最大的线程数量是1024 修改配...
  • liu82327114
  • liu82327114
  • 2017年11月28日 14:59
  • 44

NativeActivity工程编译及运行

// android-ndk-r8e/samples/native-activity 用eclipse创建一个已经存在的工程,把这个native-activity创建行eclipse即可。具体步骤:...
  • lh15871815717
  • lh15871815717
  • 2013年04月05日 09:53
  • 10415

基于Netty的HTTP通信研究分析

1.HTTP服务器的创建   服务器创建时的代码同TCP完全相同。 /**HTTP方式(同TCP)*/    static ChannelFactory HTTPCHANNEL_FACT...
  • a351945755
  • a351945755
  • 2014年02月20日 14:21
  • 2144

Apache Hadoop2.0之HDFS均衡操作分析

1 HDFS均衡操作原理 HDFS默认的块的副本存放策略是在发起请求的客户端存放一个副本,如果这个客户端在集群以外,那就选择一个不是太忙,存储不是太满的节点来存放,第二个副本放在与第一个副本相同的机...
  • can007
  • can007
  • 2013年01月04日 22:56
  • 4927
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:解决 - java.lang.OutOfMemoryError: unable to create new native thread
举报原因:
原因补充:

(最多只允许输入30个字)