关于生产系统卡顿,部分节点TCP增高,流量降低,CPU降低,个别机器4分钟内无日志输出,4分钟后系统自动恢复的问题记录
上午高峰期现象:A服务首先CPU占用升高至80%-90%,瞬间会到达100%,紧接着TCP ESTABLISHED状态连接飙升至6000,正常500左右。jvm内存使用情况不详。16:45分的4分钟内,CPU降低至0%-10%,TCP增高至6000,物理内存平稳,jvm内存不详,观察流量情况16:45的4分钟流量从30mb将至为22kb左右,同时这4分钟内无log日志输出。当天发生中心切换,A服务的下游系统主节点服务关闭,本系统尝试连接下游主节点2次失败自动切换到备节点,且每次每个交易都会重复此步骤。








