做了一个在线爬取网站的项目,线上的项目跑了一天后,突然发现没有新数据进来了。
后台查看日志,发现报错:
java.lang.OutOfMemoryError: GC overhead limit exceeded。
造成这个现象的原因是因为,GC时间消耗的较多。
查看了一下代码,发现在入库的sql语句中大量使用String sql="select * from table";sql = sql+"where 1=1 ";这种类似的语句。
造成大量的堆内存的创建,将Sting修改为StringBuffer解决这个问题。
下面记录解决过程:
暂时解决这个问题,方法是,增加参数,-XX:-UseGCOverheadLimit,关闭这个特性,同时增加heap大小,-Xmx1024m。
接下来查找原因:
jmap -heap 32658
Heap Configuration://配置
MinHeapFreeRatio = 0
MaxHeapFreeRatio = 100
MaxHeapSize = 994050048 (948.0MB)
NewSize = 1310720 (1.25MB)
MaxNewSize = 17592186044415 MB
OldSize = 5439488 (5.1875MB)
NewRatio = 2
SurvivorRatio = 8
PermSize = 21757952 (20.75MB)
MaxPermSize = 85983232 (82.0MB)
G1HeapRegionSize = 0 (0.0MB)
Heap Usage:
PS Young Generation
Eden Space://伊甸园区
capacity = 234356736 (223.5MB)
used = 80175472 (76.46128845214844MB)
free = 154181264 (147.03871154785156MB)
34.21086731639751% used
From Space://年轻代(幸存者乐园1)
capacity = 43515904 (41.5MB)
used = 6920760 (6.600151062011719MB)
free = 36595144 (34.89984893798828MB)
15.90397846267884% used
To Space://年轻代(幸存者乐园2)
capacity = 41943040 (40.0MB)
used = 0 (0.0MB)
free = 41943040 (40.0MB)
0.0% used
PS Old Generation//老年代
capacity = 113246208 (108.0MB)
used = 80847952 (77.10261535644531MB)
free = 32398256 (30.897384643554688MB)
71.39131051522715% used
PS Perm Generation//永久代
capacity = 85983232 (82.0MB)
used = 63842008 (60.884483337402344MB)
free = 22141224 (21.115516662597656MB)
74.24936992366139% used
尴尬,犯了这个低级错误。
以后写代码之前一定要多思考,想清楚了再动手。