02 多线程GC overhead limit exceeded

最新推荐文章于 2024-08-09 17:04:25 发布
最新推荐文章于 2024-08-09 17:04:25 发布
阅读量819 收藏
点赞数
分类专栏： JVM
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/running_pork/article/details/103349074
版权
这篇博客探讨了在处理大量数据时遇到的`GC Overhead Limit Exceeded`异常。博主分析了异常产生的原因，指出该异常是由于GC时间过长且回收效果不佳导致的。通过分析代码，发现使用5个线程读取Excel中的数据可能是问题所在。解决方案包括优化代码、调整JVM参数以及增加堆内存。同时，博主对Java默认JVM参数配置提出疑问，并展示了如何查看当前的JVM内存设置。
摘要由CSDN通过智能技术生成

一 问题

近期使用 OPI用户模式去读取excel,excel有10万条数据,运行jar包,异常如下:

Exception in thread "pool-2-thread-3" java.lang.OutOfMemoryError: GC overhead limit exceeded
        at org.apache.xmlbeans.impl.store.Cur$CurLoadContext.attr(Cur.java:3044)

二 异常分析

2.1 异常信息分析

GC overhead limit exceeded,是发生在GC占用大量时间为释放很小空间的时候发生的，是一种保护机制。一般是因为堆太小，导致异常的原因：没有足够的内存。
Sun 官方对此的定义：超过98%的时间用来做GC并且回收了不到2%的堆内存时会抛出此异常。

2.2 代码问题分析

运行java jar包,开启5个线程读取excel5个sheet去处理业务,每个sheet平均2万条信息; 使用 POI用户模式去读取的信息.

解决点: 去了解一下OPI用户模式耗内存的问题.

三 解决办法

解决办法：

  • 1，查看项目中是否有大量的死循环或有使用大内存的代码，优化代码。
  • 2，JVM的一个参数：-XX:-UseGCOverheadLimit 禁用这个检查，其实这个参数解决不了内存问题，只是把错误的信息延后，替换成 <
最低0.47元/天 解锁文章
迷路的三刀流
关注
专栏目录
性能测试Linux服务器cpu过高，内存不足GC overhead limit exceeded
qq_39697269的博客
02-13 2483
问题描述 性能测试时，CPU利用率过高（大于80%），一直居高不下，日志报错：GCoverheadlimitexceeded。 2.问题分析与处理 将问题反馈给开发，获取CPU异常之前逐渐升高这段过程中的堆内存使用情况和堆栈日志，供开发分析，开发给出解决方案，修改startServer.sh文件堆配置，当前服务器内存是8G，经过多次测试后，最终确定可行的配置方案是：-Xms2048m-Xmn1024m-Xmx2048m-XX:PermSize=300M，将其放在j...
GC overhead limit exceeded
雜貨鋪
11-04 1479
android编译过程中报错 GC overhead limit exceeded Try increasing heap size with java option '-Xmx' 使用命令修改java的堆大小 java -Xmx2000M -Xms1000M -XshowSettings:all
2. GC overhead limit exceeded
east4ming的博客
05-03 1793
2.1 GC overhead limit exceeded 概述 Java运行时环境包含一个内建的垃圾收集线程. 在很多其他编程语言中, 开发者需要手动分配和释放内存区域, 以保证释放的内存可以被复用. 但是Java应用只需要分配内存. 只要一个特定的内存空间不再使用, 一个单独的叫做垃圾收集的县城会清理内存. GC如何检测特定内存不再使用的内容超出本文范围, 但是你可以信任GC可以把这个活...
GC overhead limit exceeded问题解决
最新发布
tttalk的博客
08-09 5260
最终结果：16（id）+ 24（create_time）+ 24（modify_time）+ 48（name）+16（age）+88（address）+ 40（height）+ 40（weight）+ 64（phone）= 360字节。一个字符占2个字节。是因为在Java虚拟机中，对象的内存布局是按照一定的规则进行排列的，这种排列方式叫做对象对齐，它的占用内存一般为8个字节的整数倍。但是，请注意，这还没有包括Java对象头的开销，也没有考虑JVM的内存对齐要求（即对象大小可能需要是8的倍数）。
记一次OOM（GC overhead limit exceeded）异常
zyc920716的博客
06-28 1288
java.lang.OutOfMemoryError异常并不一定意味着内存溢出
由多线程内存溢出产生的实战分析
jueshengtianya的专栏
07-28 663
参考：http://blog.csdn.net/u013970991/article/details/52035153
hiveserver2运行异常：GC overhead limit exceeded
ImezZ
02-21 2249
记一次hiveserver2服务运行异常问题。 报错信息： java.lang.OutOfMemoryError: GC overhead limit exceeded 解决方法： 修改hive配置文件hive-env.sh。将原来注释的替换成如下配置 # Hive Client memory usage can be an issue if a large number of clients # are running at the same time. The flags below h
java.lang.OutOfMemoryError: GC overhead limit exceeded
zhenjingcool的博客
09-07 410
1 背景 公司的一个项目，平时运行一直没问题，但是最近，时不时的会报出java.lang.OutOfMemoryError: GC overhead limit exceeded错误，然后，java进程就处于假死状态，几天都不会有后台日志更新。 2 问题原因 可以明确的一点是，jvm出现了问题。所以，查看jvm内存使用情况 可以看出，FGC进行了89次，而YGC是23次。这就有点奇怪了，为...
java程序内存溢出java.lang.OutOfMemoryError: GC overhead limit exceeded问题排查
热门推荐
fubaojiexing的博客
10-24 2万+
问题：java程序内存溢出java.lang.OutOfMemoryError: GC overhead limit exceeded问题 1)截取log4j相关日志： java.net.SocketException: Socket input is already shutdown at java.net.Socket.shutdownInput(Socket.java:1525)...
OutOfMemoryError系列（2）: GC overhead limit exceeded
weixin_33935505的博客
08-25 6094
这是本系列的第二篇文章, 相关文章列表: OutOfMemoryError系列（1）: Java heap space OutOfMemoryError系列（2）: GC overhead limit exceeded OutOfMemoryError系列（3）: Permgen space OutOfMemoryError系列...
kettle java内存溢出_java多线程调用ktr文件内存溢出java.lang.OutOfMemoryError:GC overhead limit exceeded...
weixin_42453050的博客
02-13 859
我用java写的多线程调用kettle的ktr文件，之前是写成bat文件，bat里放ktr文件路径，直接调用bat，是没问题的，后来，我改成在java里直接调用ktr文件，报java内存溢出java.lang.OutOfM...我用java写的多线程调用kettle的ktr文件，之前是写成bat文件，bat里放ktr文件路径，直接调用bat，是没问题的，后来，我改成在java里直接调用ktr文件，...
gc overhead limit exceeded eclipse解决方案
孤云博客
06-21 3420
随时随地阅读更多技术实战干货，获取项目源码、学习资料，请关注源代码社区公众号(ydmsq666)、博主微信（guyun297890152）、QQ技术交流群(183198395)。 大家经常遇到运行java程序内存不足 修改内存不足的方法如下： Eclipse报错：gc overhead limit exceeded eclipse 原因是Eclipse默认配置内存太小需要更改Eclip...
java.lang.OutOfMemoryError: GC overhead limit exceeded原因及解决
qq_32732581的博客
06-10 6478
https://www.cnblogs.com/penghongwei/p/3603326.html https://blog.csdn.net/renfufei/article/details/77585294 https://www.jb51.net/article/149273.htm 虽然加大内存可以暂时解决这个问题，但是还是强烈建议去优化代码，后者更加有效。 ...
GC overhead limit exceeded 分析及解决方案
czc_292的博客
01-29 6588
GC overhead limit exceeded 分析 官方定义的解释：当JVM花费超过98%的时间用来做GC（垃圾回收）并且只回收了不到2%的堆内存时，会抛出此异常。 通俗点说，其实就是我们的程序几乎把所有的内存都用完了，而GC花了很多时间去清理内存垃圾，但是清理的效率很低，导致内存不够用了，所以就会发生此异常。 解决方案 1. 增大堆内存 增大堆内存 2. 优化代码 其实增大堆内存是一种治标不治本的方法，只能说目前解决了问题。 我们应该找出抛出此异常的根本原因，所以我们就需要
GC overhead limit exceeded问题
nings666的博客
07-13 10000
GC overhead limit exceeded问题。
报错：GC overhead limit exceeded问题
weixin_37858031的博客
06-06 4892
在使用web端某项查询功能时，后台查询数据库数据一次性查询的数据量（千万级）太大，导致这个问题。 报错原因：超出了GC开销限制，导致内存溢出。 Sun 官方对此的定义：超过98%的时间用来做GC并且回收了不到2%的堆内存时会抛出此异常。 解决方法： 1、增加堆内存——修改tomcat启动参数（Xms和Xmx：分别表示JVM初始堆内存和JVM最大堆内存） 这中方式只能暂时解决该问题，等数据...
Linux GC overhead limit exceeded
07-28
在Linux系统中，出现"GC overhead limit exceeded"错误通常是由于Java虚拟机（JVM）的垃圾回收（GC）过程导致的。这个错误表示在进行多次GC操作后，仍然无法有效释放内存，导致可用内存越来越少，最终导致内存耗尽。这种情况通常被称为内存泄漏。\[3\] 要解决这个问题，可以尝试以下几个方法： 1. 增加JVM的堆内存大小，可以通过调整JVM的启动参数来实现。例如，使用"-Xmx"参数增加最大堆内存的大小。 2. 优化代码，减少内存占用。检查代码中是否存在内存泄漏的情况，例如未关闭的资源、循环引用等。 3. 检查是否有第三方库或框架导致的内存泄漏问题。有些库或框架可能存在内存泄漏的bug，需要及时更新或修复。 4. 使用内存分析工具来检测和分析内存泄漏问题。这些工具可以帮助定位内存泄漏的具体原因和位置，从而更好地解决问题。 总之，"GC overhead limit exceeded"错误是由于JVM的垃圾回收过程无法有效释放内存而导致的，可以通过增加堆内存大小、优化代码、检查第三方库或框架以及使用内存分析工具等方法来解决这个问题。 #### 引用[.reference_title] - *1* *2* *3* [Linux环境多线程报错Caused by: java.lang.OutOfMemoryError: GC overhead limit exceeded原因解决以及分析](https://blog.csdn.net/wuhuayangs/article/details/122099144)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insert_down28v1,239^v3^insert_chatgpt"}} ] [.reference_item] [ .reference_list ]
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值