java错误处理：java.lang.OutOfMemoryError: Java heap space (2)

最新推荐文章于 2022-06-14 17:45:01 发布

josonchen

最新推荐文章于 2022-06-14 17:45:01 发布

阅读量841

点赞数

分类专栏： JAVA

本文链接：https://blog.csdn.net/josonchen/article/details/45699933

版权

JAVA 专栏收录该内容

18 篇文章 0 订阅

订阅专栏

java错误处理：java.lang.OutOfMemoryError: Java heap space 参考资料的第二部分

java错误处理：java.lang.OutOfMemoryError: Java heap space (2)

以下内容均从网上搜集整理而来，用于解决java.lang.OutOfMemoryError: Java heap space的参考
-------------------------------
java.lang.OutOfMemoryError: Java heap space 解决方法
本文转自 51CTO.COM技术博客：http://arliu.blog.51cto.com/211591/85419

这个问题的根源是jvm虚拟机的默认Heap大小是64M,可以通过设置其最大和最小值来实现.设置的方法主要是几个.
1.可以在windows 更改系统环境变量
加上JAVA_OPTS=-Xms64m -Xmx512m
2,如果用的tomcat,在windows下,可以在
C: omcat5.5.9incatalina.bat 中加上:
set JAVA_OPTS=-Xms64m -Xmx256m
位置在: rem Guess CATALINA_HOME if not defined 这行的下面加合适.
3.如果是linux系统
Linux 在{tomcat_home}/bin/catalina.sh的前面，加
set JAVA_OPTS='-Xms64 -Xmx512'
----------------------------------------------------------
JBoss deploy 出现 OutOfMemoryError : PermGen space
http://www.blogjava.net/steady/archive/2007/06/17/124830.html

        最近在把在 tomcat 5.5 上开发的项目 deploy 到 JBoss 4.2 上时，在操作一段时间就会出现 java.lang.OutOfMemoryError: PermGen space，开始以为是代码中存在死循环的地方造成这样的问题，但是后来发现，出问题的地方都是随机的，并不是某一处造成这样的问题出现，怀疑是内存泄露，通过增大 heap 内存的方法来尝试，依然不行，但是同样的问题却并没有在 tomcat 中出现过，难道是 JBoss 的问题？
        在网上做了一番搜索得到一些相关的内容。
        PermGen space的全称是Permanent Generation space,是指内存的永久保存区域OutOfMemoryError: PermGen space从表面上看就是内存益出，解决方法也一定是加大内存。说说为什么会内存益出：这一部分用于存放Class和Meta的信息,Class在被 Load的时候被放入PermGen space区域，它和和存放Instance的Heap区域不同,GC(Garbage Collection)不会在主程序运行期对PermGen space进行清理，所以如果你的APP会LOAD很多CLASS的话,就很可能出现PermGen space错误。这种错误常见在web服务器对JSP进行pre compile的时候。
        改正方法，在 run.bat 中加入：-Xms256m -Xmx512m -XX:MaxNewSize=256m -XX:MaxPermSize=256m
        因为项目中引用了很多的 jar 包，而这些 jar 包中的 class 信息会被 JBoss 的 class loader 加载到 PermGen space 区域，在 JVM 默认的情况下，该部分空间的大小只有 4M，在 jar 包非常多的情况下，显然是不够用的，所以通过 -XX:MaxPermSize=256m 指定最大值后即可解决问题。
        另外，如果 heap 内存不足出现 java.lang.OutOfMemoryError: Java heap space 时，可以通过 -Xmx512m 指定最大 heap 内存来解决这样的问题。
---------------------------------------
java.lang.OutOfMemoryError: PermGen space及其解决方法
http://www.wujianrong.com/archives/2006/12/javalangoutofmemoryerror_permg.html

1、PermGen space的全称是Permanent Generation space,是指内存的永久保存区域OutOfMemoryError: PermGen space从表面上看就是内存益出，解决方法也一定是加大内存。说说为什么会内存益出：这一部分用于存放Class和Meta的信息,Class在被 Load的时候被放入PermGen space区域，它和和存放Instance的Heap区域不同,GC(Garbage Collection)不会在主程序运行期对PermGen space进行清理，所以如果你的APP会LOAD很多CLASS的话,就很可能出现PermGen space错误。这种错误常见在web服务器对JSP进行pre compile的时候。
改正方法：-Xms256m -Xmx256m -XX:MaxNewSize=256m -XX:MaxPermSize=256m
2、在tomcat中redeploy时出现outofmemory的错误.可以有以下几个方面的原因:
１),使用了proxool,因为proxool内部包含了一个老版本的cglib.
2), log4j,最好不用,只用common-logging
3), 老版本的cglib,快点更新到最新版。
４)，更新到最新的hibernate3.2
3、这里以tomcat环境为例，其它WEB服务器如jboss,weblogic等是同一个道理。
1)、java.lang.OutOfMemoryError: PermGen space
        PermGen space的全称是Permanent Generation space,是指内存的永久保存区域,这块内存主要是被JVM存放Class和Meta信息的,Class在被Loader时就会被放到PermGen space中,它和存放类实例(Instance)的Heap区域不同,GC(Garbage Collection)不会在主程序运行期对PermGen space进行清理，所以如果你的应用中有很多CLASS的话,就很可能出现PermGen space错误,这种错误常见在web服务器对JSP进行pre compile的时候。如果你的WEB APP下都用了大量的第三方jar, 其大小超过了jvm默认的大小(4M)那么就会产生此错误信息了。
        解决方法：手动设置MaxPermSize大小
修改TOMCAT_HOME/bin/catalina.sh
在“echo "Using CATALINA_BASE:   $CATALINA_BASE"”上面加入以下行：
JAVA_OPTS="-server -XX:PermSize=64M -XX:MaxPermSize=128m
建议：将相同的第三方jar文件移置到tomcat/shared/lib目录下，这样可以达到减少jar 文档重复占用内存的目的。

2)、java.lang.OutOfMemoryError: Java heap space
Heap size 设置
        JVM堆的设置是指java程序运行过程中JVM可以调配使用的内存空间的设置.JVM在启动的时候会自动设置Heap size的值，其初始空间(即-Xms)是物理内存的1/64，最大空间(-Xmx)是物理内存的1/4。可以利用JVM提供的-Xmn -Xms -Xmx等选项可进行设置。Heap size 的大小是Young Generation 和Tenured Generaion 之和。
        提示：在JVM中如果98％的时间是用于GC且可用的Heap size 不足2％的时候将抛出此异常信息。
        提示：Heap Size 最大不要超过可用物理内存的80％，一般的要将-Xms和-Xmx选项设置为相同，而-Xmn为1/4的-Xmx值。
        解决方法：手动设置Heap size
修改TOMCAT_HOME/bin/catalina.sh
在“echo "Using CATALINA_BASE:   $CATALINA_BASE"”上面加入以下行：
JAVA_OPTS="-server -Xms800m -Xmx800m   -XX:MaxNewSize=256m"

3)、实例，以下给出1G内存环境下java jvm 的参数设置参考：
JAVA_OPTS="-server -Xms800m -Xmx800m -XX:PermSize=64M -XX:MaxNewSize=256m -XX:MaxPermSize=128m -Djava.awt.headless=true "

题外话：经常看到网友抱怨tomcat的性能不如...，不稳定等，其实根据笔者几年的经验，从"互联星空“到现在的房产门户网，我们均使用tomcat作为WEB服务器，每天访问量百万多，tomcat仍然运行良好。建议大家有问题多从自己程序入手，多看看java的DOC文档并详细了解JVM的知识。这样开发的程序才会健壮。

------------------------------------------------------------
java 内存溢出问题总结
http://www.javaeye.com/topic/413647
最近三天两头遇到 java.lang.outofmemoryError 这个问题。所以记录一下
堆(Heap)和非堆(Non-heap)内存
按照官方的说法：“Java 虚拟机具有一个堆，堆是运行时数据区域，所有类实例和数组的内存均从此处分配。堆是在 Java 虚拟机启动时创建的。”“在JVM中堆之外的内存称为非堆内存(Non-heap memory)”。可以看出JVM主要管理两种类型的内存：堆和非堆。简单来说堆就是Java代码可及的内存，是留给开发人员使用的；非堆就是JVM留给自己用的，所以方法区、JVM内部处理或优化所需的内存(如JIT编译后的代码缓存)、每个类结构(如运行时常数池、字段和方法数据)以及方法和构造方法的代码都在非堆内存中。
堆内存分配
JVM初始分配的内存由-Xms指定，默认是物理内存的1/64；JVM最大分配的内存由-Xmx指定，默认是物理内存的1/4。默认空余堆内存小于 40%时，JVM就会增大堆直到-Xmx的最大限制；空余堆内存大于70%时，JVM会减少堆直到-Xms的最小限制。因此服务器一般设置-Xms、 -Xmx相等以避免在每次GC 后调整堆的大小。

非堆内存分配
JVM使用-XX:PermSize设置非堆内存初始值，默认是物理内存的1/64；由XX:MaxPermSize设置最大非堆内存的大小，默认是物理内存的1/4。
JVM内存限制(最大值)
首先JVM内存限制于实际的最大物理内存(废话！呵呵)，假设物理内存无限大的话，JVM内存的最大值跟操作系统有很大的关系。简单的说就32位处理器虽然可控内存空间有4GB,但是具体的操作系统会给一个限制，这个限制一般是2GB-3GB（一般来说Windows系统下为1.5G-2G，Linux系统下为2G-3G），而64bit以上的处理器就不会有限制了
......
----------------------------------------------

内存溢出 ava.lang.OutOfMemoryError: Java heap space
http://hi.baidu.com/%C2%ED%D3%C0/blog/item/90d9e5033663118bd43f7c2a.html
        有三种可能导致OutOfMemoryError。
        首先是，此JVM有真实的内存泄漏，导致此JVM堆在内部实现时产生了一个Bug。这极不可靠。所有JVM都经过充分的测试，并且，如果有人发现这种bug，它将绝对是最高的优先级。因此你可以非常宽心地排除这种可能性。
         第二种可能的OutOfMemoryError原因只不过是，你没有为你的应用程序运行时给予足够多的可用内存。这种情况，有两种可能的方案，或者增加JVM堆可用大小，或者减少你的应用程序所需的内存总量。提高JVM可用堆大小可以简单的使用JVM的 -Xmx 参数。假如你将此参数设置尽可能的大（可用内存极限不要超过系统物理内存，否则你的应用程序将分页并暂停），仍然有以上所提到的内存问题，那么，你需要减少你的应用程序所可能用到内存总量。减少应用程序内存可能是简单的，你可能允许一些集合过大，例如使用了许多大的缓冲区。或者它过于复杂，要求你重新实现一些类，乃至重新设计应用程序。读者 Jams Stauffer 指出有些JVM（例如 sun的 JVMs），还有一个“Perm”参数用来处理JVM结构与类对象。如果你正在使用一个数量非常巨大的类集，它有可能运行在"Perm"空间之外，然后你需要增加此空间的大小，例如，sun的JVM使用 -XX:PermSize 与 -XX:MaxPermSize 选项。
         第三种导致OutOfMemoryError最为常见，无心的对象引用保持。你没有明确无误的释放对象，以致于你的堆增长再增长，直到你没有额外的空间。

   处理OutOfMemoryError:
      是JVM内部的BUG？不太可能。如果是，这是优先级最高的BUG（为什么还没有人发现它，而你碰到了？）。
         没有足够的内存分配给实际运行的应用程序？两种选择：使用-Xmx参数增加堆的最大使用内存（或者使用-XX:MaxPermSize参数增加Perm空间大小）;　或者使用更小的集合/缓冲区/表空间/对象.....，以减少所需要的内存总量，也就是说，可以调整对象大小，重新设计与重新实现你的应用程序。
         无心的对象引用保持？找到保持这些无意引用的源对象，改变它并释放这些对象。在IBM开发者社区的文章纲要式的揭示了这样一个通用的处理过程。这个过程主要是等到应用程序到达恒定状态－－你将期望最多的新创建的对象是临时对象，并且可以被垃圾收集器收集。这常常是在应用程序所有的初始化工作完成之后。

         强迫垃圾收集，获得一个堆的对象快照。做任何工作可能正在导到无意的对象引用保持。强迫另一次垃圾收集并获得第二次堆的对象快照。比较这两个快照，观察从第一个快照到第二个快照哪些对象在数量上有所增加。因为你在快照之前强迫垃圾收集，剩下的将是所有被应用程序引用的对象，比较两个快照将准确的标识那些新创建的、保留在应用程序里的对象。根据你对应用程序的认识，决定两个快照比较中，哪些对象正在无意的保持对象引用。跟踪前导引用，找到哪些对象正在引用这些无意的保持对象，直到你找到导致此问题的源对象

         启动虚拟机的时候，加上一个参数：-Xms800m -Xmx800m就好了
         -Xms :设置JVM初始化堆内存大小
         -Xmx :设置JVM最大的堆内存大小

         如果是应用程序，则：java -Xms800m -Xmx800m 你的类名
          如果是tomcat之类的web服务器，在这个服务器的启动文件后面加上这个参数即可。
         Exception in thread "main" java.lang.OutOfMemoryError: Java heap space
        at org.jaxen.expr.IdentitySet.contains(IdentitySet.java:73)
        at org.jaxen.expr.DefaultStep.evaluate(DefaultStep.java:165)
        at org.jaxen.expr.DefaultLocationPath.evaluate(DefaultLocationPath.java:154)
----------------------------------------------------
Caused by: java.lang.OutOfMemoryError: Java heap space
http://www.cnblogs.com/ztf2008/archive/2009/04/02/1428468.html

Caused by: java.lang.OutOfMemoryError: Java heap space:

org.apache.jasper.JasperException: javax.servlet.ServletException: java.lang.OutOfMemoryError: Java heap space
2009-4-2 14:32:37 org.apache.catalina.core.ApplicationContext log
信息: javax.servlet.ServletException: java.lang.OutOfMemoryError: Java heap space
at org.apache.jasper.servlet.JspServletWrapper.handleJspException(JspServletWrapper.java:505)
at org.apache.jasper.servlet.JspServletWrapper.service(JspServletWrapper.java:417)
at org.apache.jasper.servlet.JspServlet.serviceJspFile(JspServlet.java:320)
at org.apache.jasper.servlet.JspServlet.service(JspServlet.java:266)
at javax.servlet.http.HttpServlet.service(HttpServlet.java:803)

原因：
使用Java程序从数据库中查询大量的数据时出现异常:java.lang.OutOfMemoryError: Java heap space
在JVM中如果98％的时间是用于GC且可用的 Heap size 不足2％的时候将抛出此异常信息。
JVM堆的设置是指java程序运行过程中JVM可以调配使用的内存空间的设置.JVM在启动的时候会自动设置Heap size的值，其初始空间(即-Xms)是物理内存的1/64，最大空间(-Xmx)是物理内存的1/4。可以利用JVM提供的-Xmn -Xms -Xmx等选项可进行设置。

MyEclipse下解决办法：
Window-->Preference-->MyEclipse-->Application Servers-->Tomcat-->Tomcat 6.x-->JDK-->Optional Java VM arguments下填上:
-Xms100m -Xmx200m -XX:PermSize=256m -XX:MaxPermSize=600m

------------------------------
eclipse java.lang.OutOfMemoryError: Java heap space 解决方案
http://okone96.itpub.net/post/9033/328376
        eclipse 有启动参数里设置jvm大小，因为eclipse运行时自己也需要jvm,所以eclipse.ini里设置的jvm大小不是具体某个程序运行时所用jvm的大小，这和具体程序运行的jvm大小无关。
        那么怎么才能设置某个程序的jvm大小呢（当然控制台运行的话不会存在这个问题，如：java -Xms256m -Xmx1024m classname，这样就可以把当前程序的jvm大小给设定）？
         因为eclipse里默认的一个程序的jvm配置为：-Xms8m -Xmx128m，所以我们的处理耗内存比较大时需要手动调整一下，以便不会内存溢出。具体的设置方法为：
        选中被运行的类，点击菜单‘run->run...’，选择(x)=Argument标签页下的vm arguments框里输入 -Xmx512m, 保存运行就ok了
----------------------------------------
java.lang.OutOfMemoryError: Java heap space ... How to solve?
http://forums.pentaho.org/showthread.php?t=68806
----
diddy ：Hi,I've tried to find some info about this on the forum, but wasn't successful with this.
After I finally got my job running properly with the help of Sven and Matt I came accross another problem when running the job on huge tables:
java.lang.OutOfMemoryError: Java heap space
2009/03/30 15:38:00 - Table output.0 - Prepared statement : INSERT INTO rd_product_sales (customer_id, product_id, activation_date_id, activation_hour, activation_minute, cancelation_date_id, cancelation_hour, cancelation_minute, days_active, active, brand_id, country_id, operator_id, acquisition_media_id) VALUES ( ?, ?, ?, ?, ?, ?, ?, ?, ?, ?, ?, ?, ?, ?)
2009/03/30 15:50:17 - Product Cancelations.0 - ERROR (version 3.2.0-M2, build 10376 from 2009-03-16 04.27.19 by tomcat) : UnexpectedError: java.lang.OutOfMemoryError: Java heap space
2009/03/30 15:50:33 - Product Cancelations.0 - ERROR (version 3.2.0-M2, build 10376 from 2009-03-16 04.27.19 by tomcat) : java.lang.OutOfMemoryError: Java heap space
。。。。。。
2009/03/30 15:50:33 - Product Cancelations.0 - ERROR (version 3.2.0-M2, build 10376 from 2009-03-16 04.27.19 by tomcat) : at org.pentaho.di.trans.steps.tableinput.TableInput.r un(TableInput.java:345)
2009/03/30 15:50:58 - Calculator.0 - Finished processing (I=0, O=0, R=84828, W=84828, U=0, E=0)
Can somebody tell me how I solve this?
----
MattCasters ：That's easy to solve: give your transformation or job more memory to work with OR reduce your memory usage!
diddy ：Thanks a lot Matt for your answer!
Can I do this somewhere within Kettle (if yes, how exactly) or would this be something that I have to do on the OS level?
----
campi ：If you are using Windows change the following line into the spoon.bat :
Code:
OPT="-Xmx256m -cp $CLASSPATH -Djava.library.path=$LIBPATH -DKETTLE_HOME=$KETTLE_HOME -DKETTLE_REPOSITORY=$KETTLE_REPOSITORY -DKETTLE_USER=$KETTLE_USER -DKETTLE_PASSWORD=$KETTLE_PASSWORD -DKETTLE_PLUGIN_PACKAGES=$KETTLE_PLUGIN_PACKAGES"If you are using Windows change the following line into the spoon.sh :
Code:
set OPT=-Xmx256m -cp %CLASSPATH% -Djava.library.path=libswtwin32 -DKETTLE_HOME="%KETTLE_HOME%" -DKETTLE_REPOSITORY="%KETTLE_REPOSITORY%" -DKETTLE_USER="%KETTLE_USER%" -DKETTLE_PASSWORD="%KETTLE_PASSWORD%" -DKETTLE_PLUGIN_PACKAGES="%KETTLE_PLUGIN_PACKAGES%"Change the -Xmx256m option to -Xmx1024m for example, then launch kettle with this script.
----
diddy ：
I have tried to change this but still I get the same error message. Is there anything else that I can do?
I am loading a table which has about 400,000 rows in one go (I had to disable streaming). Do I need more than 1024 MB RAM for this?
----
MattCasters ：Obviously, since you still run out of memory.
----
DEinspanjer ：You appear to have about 15 integer or big integer fields. With 400000 rows, that translates to just under one GB of memory just for the raw data itself. You also have to take into account JDBC memory overhead and lots of other things. 1 GB of allocated data is likely way to small for this task.
Normally, streaming result sets is the answer to this problem. It allows your JDBC client (Kettle in this case) to pull batches of rows into memory one at a time. Any particular reason you had to disable it?
----
MattCasters :MySQL only allows you to open a single such streaming query. If you want to open multiple (unique connections) it fails.
----
DEinspanjer ：Oh yeah. I've run into that limitation before.
Any chance you could write this data out to a file instead and then use the bulk load job entry?
----
diddy ：
Quote:
Originally Posted by MattCasters
MySQL only allows you to open a single such streaming query. If you want to open multiple (unique connections) it fails.
... this is a good piece of information!
I will try to first import the data with one job into a text file.
The second job will do the transformations than and export it to the final database. For this step I can use streaming then. Let's see if this helps.
So, now finally all the problems are solved!
I split my original transaction into two seperate transaction ...

the first one reading the data in from MySQL and exporting it to a text file
the second one reading the text file in, doing some transformation and exporting the data to another MySQL server
The main job uses the first transformation to import several tables.

Well, it seems like it is not possible to do this all in one transformation with MySQL.
Now, I also could turn 'streaming' back on.
Thanks a lot all for you help!
Best regards,
Diddy

josonchen

关注

0
点赞
踩
2

收藏

觉得还不错? 一键收藏
0
评论
java错误处理：java.lang.OutOfMemoryError: Java heap space (2)

java错误处理：java.lang.OutOfMemoryError: Java heap space 参考资料的第二部分 java错误处理：java.lang.OutOfMemoryError: Java heap space (2) 以下内容均从网上搜集整理而来，用于解决java.lang.OutOfMemoryError: Java heap space的参考 -----------
复制链接

扫一扫