Metaspace 空间不足 导致频繁fgc的分析

最新推荐文章于 2024-01-02 15:59:46 发布
最新推荐文章于 2024-01-02 15:59:46 发布
阅读量1.2k 收藏
点赞数
分类专栏： 朦朦小梁 文章标签： java jvm
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/mengmengliang/article/details/105384455
版权
本文分析了一起因Metaspace空间不足引发频繁Full GC的问题。通过日志发现，新旧机器均有Metaspace快速增长现象。使用jmap获取内存dump并分析后，确认问题是由于aviator在编译表达式时动态生成大量Script类。解决方案是确保aviator执行表达式时走缓存，避免频繁生成新的ClassExpression对象。
摘要由CSDN通过智能技术生成

Metaspace 导致频繁fgc的分析

问题发生

最近有机器在发布之后第二天就出现了fgc报警，新申请几台机器，并把报警机器禁流后，fgc仍然会出现。
登陆线上机器查看gc日志，发现fgc是由于Metaspace空间不够造成的。而且每次fgc之后，Metaspace使用空间基本没有减少。
同时发现新申请的机器Metaspace使用空间也增长的很快。

问题排查

使用jmap 命令打印内存dump，并用scp命令将之提取到本地，使用jhat分析后，发现加载了很多Script类
在这里插入图片描述
点击Script类查看详细信息
在这里插入图片描述
发现这是由aviator生成的类型。
aviator在编译表达式时，会用反射来生成 ClassExpression对象
在这里插入图片描述
dump信息中也显示了这个信息
在这里插入图片描述

问题分析

aviator在执行表达式时，

最低0.47元/天 解锁文章
mengmengliang
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
java fgc_java Metaspace频繁FGC问题定位
weixin_42583683的博客
02-19 447
问题描述数据服务是通过SQL对外提供数据查询的服务平台，底层存储支持HBase和MySQL两种。用户首先在管理平台上配置好接口的SQL详情SQL接口配置业务方通过微服务接口根据生成的ID以及接口参数来完成数据的查询，由于HBase不支持SQL引擎的查询，我们基于calcite实现了一套简单的SQL On HBase解析逻辑。查看笔者前面的文章可以看到堆空间内存泄露的文章，可以了解相关的详情。但是不...
dubbo 内存溢出_Metaspace内存不足导致FGC问题排查
weixin_32047035的博客
12-22 1040
事件回顾清楚的记得是2020/7/25 14:34分左右，周六的下午，我还在公司苦逼的加班中，突然钉钉告警群里出现大量应用OP的dubbo超时调用、空指针异常，异常中间还有Metaspace元空间不足等异常:o.a.c.f.l.ListenerContainer98[ERROR]Listener\(org.apache.curator.framework.recipes.cach...
Metaspace内存不足导致FGC问题排查
diy_os的专栏
08-31 1448
事件回顾 清楚的记得是2020/7/25 14:34分左右，周六的下午，我还在公司苦逼的加班中，突然钉钉告警群里出现大量应用OP的dubbo超时调用、空指针异常，异常中间还有Metaspace元空间不足等异常: o.a.c.f.l.ListenerContainer 98 [ERROR] Listener \(org.apache.curator.framework.recipes.cache.PathChildrenCache$3@7edb7fd5) threw an exception java..
OutOfMemoryError MetaSpace不足核查
最新发布
记录 分享 成就
01-02 1509
如果一段时间后占用空间不再增加，那么暂时应对还是可以的，如果一段时间后又不够用了，可能业务增量影响，需要控制。2. 如果一段时间后又发生OOM，那么就得从跟上解决问题哪些类加载后长期没有卸载，如果业务上就是不断加载类，那么就需要从业务上进行优化。当 Metaspace 空间不足的时候，会触发Full GC卸载一些无用的类以便回收内存。大概率是加载到内存中的 class 占用的内存超过了 Metaspace 的限制。1. 系统业务上有加载外部插件jar的场景，并没有做好卸载。1. CPU占用率居高不下。
java Metaspace频繁FGC问题定位（转载）
weixin_42107384的博客
07-21 142
java Metaspace频繁FGC问题定位
java Metaspace频繁FGC问题定位
JacksonKing的专栏
03-19 1194
问题描述 数据服务是通过SQL对外提供数据查询的服务平台，底层存储支持HBase和MySQL两种。用户首先在管理平台上配置好接口的SQL详情 SQL接口配置 业务方通过微服务接口根据生成的ID以及接口参数来完成数据的查询，由于HBase不支持SQL引擎的查询，我们基于calcite实现了一套简单的SQL On HBase解析逻辑。 查看笔者前面的文章可以看到堆空间内存泄露的文章，...
干货，记一次Metaspace导致频繁fgc的问题排查过程
求关注
12-12 1138
最近线上有一条机器在运行了10几天后出现告警，频繁出现fgc，在切断流量之后，从运维那边拿了应用的heapdump文件。在一开始出现fgc时，我就上了容器平台查看了gc日志，gc日志如下： 从日志中可以看出很明显优于metaspace空间不够造成的fgc，而且不断进行fgc，且metaspace空间回收不了。于是查看一下jvm启动参数，参数如下： 这里Metaspace和M...
JVM堆外内存导致的FGC问题排查
java_beautiful的博客
07-04 768
java虚拟机运行时数据区 Java虚拟机定义了程序执行期间使用的各种运行时数据区域。其中一些数据区域是在Java虚拟机启动时创建的，只有在Java虚拟机退出时才会被销毁，这部分线程共有。其他数据区域为每个线程。每线程数据区域在创建线程时创建，在线程退出时销毁，也就是线程私有。...
面试官：如何进行 JVM 调优（附真实案例）
热门推荐
程序员囧辉
03-28 4万+
看完起飞
JVM参数MetaspaceSize的解读
BUG指挥课堂
08-24 3091
从Java8更新191或更高版本，或者Java10、11、12、13等等，我们有一个名为的选项，该选项在默认情况下是激活的，所以JVM可以读取容器内RAM和CPU的限制。通过设置，我可以告诉JVM我想要给HEAP多少%的可用RAM，但是其他JVM资源呢？比如GC、CodeCache、类加载、Metaspace、DirectBuffers等等。。？JVM是否也会调整其大小（分配堆后的剩余空间）以避免超过可用RAM？例如，如果创建一个具有1G RAM的容器，并使用。
元空间的详解
qq_46134095的博客
05-12 4860
Metaspace 内存管理概述 在metaspace中，类和其元数据的生命周期与其对应的类加载器相同，只要类的类加载器是存活的，在Metaspace中的类元数据也是存活的，不能被回收。–所以基本上不存在类回收 每个加载器有单独的存储空间。 省掉了GC扫描及压缩的时间。 当GC发现某个类加载器不再存活了，会把对应的空间整个回收。 Metaspace VM使用一个块分配器(chunking allocator)来管理Metaspace空间的内存分配。块的大小依赖于类加载器的类型。 Metaspace VM
full gc什么时候触发_由「Metaspace容量不足触发CMS GC」从而引发的思考
weixin_35215870的博客
11-30 771
某天早上，毛老师在群里问「cat 上怎么看 gc」。看到有 GC 的问题，立马做出小鸡搓手状，之后毛老师发来一张图。图片展示了老年代内存占用情况：第一个大陡坡是应用发布，老年代内存占比下降，很正常。第二个小陡坡，老年代内存占用突然下降，应该是发生了老年代 GC。但奇怪的是，此时老年代内存占用并不高，发生 GC 并不是正常现象，于是，毛老师查看了 GC log。从 GC log 中可以看出，老年代发...
jvm metaspace导致FGC
zjwstz的专栏
08-22 7443
事情是这样的，jdk使用的1.8版本的， 每次程序刚一启动，大概几十秒，就会发生两次FGC，原因是CMS Final Remark,具体参数如下，其中S0C=S1C=60M，Eden=480M,old=2G-新生代=2G-600M=1.4G， 从上图可以看到，S0，S1,old区使用率都为0，M区使用率大概有17%， 却发生了两次FGC，感觉很诡异，查询原因，发现是CMS Fin
JVM 调优案例分析
只有变秃 才能变强
08-11 783
现象：系统日常运行正常突然发生fullgc甚至内存溢出，重启后恢复正常但是过了几天又会突然发生频繁fullgc触发告警，告警信息如下：首先发生fullgc，我们需要定位fullgc发生在jvm哪个区域？我们可以通过cat也可以通过gc日志查询发生的区域，目前有两种方式可以快速定位到gc区域：1、Cat的Problem中可以直接查询error的详细信息（时间比较久了找不到对应的cat截图了）2、通过gclog查询（大部分系统没有添加gc日志打印），常见配置如下。...
Metaspace GC 问题排查
Dkangel的博客
11-11 3751
背景描述 查看应用JVM监控发现发生了连续两次 Full GC，导致 GC 的原因是什么？ Full GC 监控： metaspace利用率监控： 问题排查 环境信息 生产环境，JDK1.8 关键JVM参数： -Xms4g -Xmx4g -Xmn2g -XX:MetaspaceSize=256m -XX:MaxMetaspaceSize=512m -XX:MaxDirectMemorySize=1g -XX:SurvivorRatio=10 -XX:+UseConcMarkSweepGC -XX:CM
JVM Metaspace内存溢出排查与总结
zxs0564335的博客
04-11 7710
一. 现象 前段时间公司线上环境的一个Java应用因为OOM的异常报警，导致整个服务不可用被拉出集群，本地模拟重现的现象如下: 当时的解决方案是增加metaspace的容量：-XX:MaxMetaspaceSize=500m，从原来默认的256m改为500m，虽然没有再出现oom，但这个只是临时解决方案，通过公司的监控系统观察metaspace的使用情况还是在上升，而且后面随着业务访问量越来越大...
浅谈Metaspace内存溢出原因及JVM参数设置
Real123456的博客
02-28 8984
浅谈Metaspace内存溢出原因及JVM参数设置
一次诡异的FGC，原因让我找了好久
qf2019的博客
09-18 264
正撸着代码，公司内的聊天工具弹出一条信息： “狼哥，我这个机器总是频繁FGC…” 我赶紧打开对话框，机智的回复一个表情 然后继续默默撸码。 随后，小伙伴砸了一段GC日志过来 2019-09-17T20:33:57.889+0800: 4753520.554: [Full GC (Metadata GC Threshold) 4753520.554: [CMS[YG occupancy: 723220 K (1887488 K)]4753520.988: [weak refs process i
metaspace 非类空间和类空间
05-18
它与类空间是有关系的，因为类的元数据信息也存储在类空间中，但是 Metaspace 和类空间又有一些不同之处。 首先，Metaspace 不是类空间，它是一个单独的内存区域，可以动态地分配和释放内存。而类空间是固定大小的...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值