解决NameNode Full GC导致集群退出问题剖析

1 背景

1 journalnode超时时间20s，每6秒计算日志打印时间，
2 journalnode响应三种情况
1）journalnode响应大于等于 minResponse（journalnode个数）
2） 写入成功的大于等于 minSuccess（半数journalnode +1）
3）写入失败的大于等于maxCexcption（半数journalnode +1）

2 问题描述

journalnode 超时响应会抛出 TimeOutException，再往上抛出 IOException，捕获到IOException 程序退出（namenode进程）
journalnode等待响应的时候在一些极端情况发生了几十秒 full gc （停止工作）只会运行垃圾回收的线程，导致journalnode非正常的超时响应会抛出 TimeOutException

解决方案

统计fullgc的时间，计算超时时间的时候减去full gc 时间
两个地方统计 full gc 时间
1 if（rem < 0) {
2 wait（rem）；