生产环境内存泄露(Redirect)的问题排查分析过程

生产环境内存泄露(Redirect)的问题排查分析过程

问题说明

1. 服务升级框架由原来的Spring-4.0.4.RELEASE+SpringMVC-4.0.4.RELEASE升级为SpringBoot-2.0.2.RELEASE
2. 服务有原来的外置Tomcat+jsp改成内置Tomcat+jsp

问题分析解决思路

1. 生产环境过一两天出现内存溢出,观察发现,老年代的内存一直在飙高,触发的Full Gc并不会让老年代的内存减少太多,慢慢的积累,最终导致服务挂掉,内存溢出;
2. 通过dump生产的堆快照,然后使用MemoryAnalyzer进行堆栈分析,发现问题所在
3. 找到大量Redirect的内存占用,并且没有的得到释放,出现一定量的ConnectionException(zipkin中对mq的连接验证)并还在不断的增加
4. 发现大部分堆内存占用都是被Redirect所导致的,还有一部分是被ConnectionException导致的
5. 修改SpringMvc的Redirect重定向方式,修改zipkin的通信方式(http或者rabbitmq)
6. 我修改代码放弃了return "redirect:http://www.baidu.com?param=1"的书写方式改成response.sendRedirect(response.encodeRedirectURL(redirectUrl)); return null;这种方式；然后先去掉了zipkin的依赖引用;

分析过程