现象:
服务器有的子系统出现新的连接无法建立,导致服务异常。
后台查看netstat 状态,连接数达到上万。
使用统计命令:
netstat -n | awk '/^tcp/ {++S[$NF]} END {for(a in S) print a, S[a]}'
TIME_WAIT 15586
CLOSE_WAIT 343
ESTABLISHED 581
发现异常, TIME_WAIT 连接达到上万。
观察发现,连接的 都是我们文件存储服务oss 50000端口。
[root@Storage ~]# netstat -anp |grep TIME_WAIT | head
tcp 0 0 127.0.0.1:37545 127.0.0.1:50000 TIME_WAIT -
tcp 0 0 127.0.0.1:40285 127.0.0.1:50000 TIME_WAIT -
tcp 0 0 127.0.0.1:57127 127.0.0.1:50000 TIME_WAIT -
tcp 0 0 127.0.0.1:34796 127.0.0.1:50000 TIME_WAIT -
tcp 0 0 127.0.0.1:34424 127.0