问题:
less /ver/log/messages #查看系统日志,发现大量以下报错
tcp:time wait bucket table overflow #TCP连接数积累过多,系统压力过大时报该错,导致系统宕机(9月初开始报错)
fs.file-max limit reached #应用进程打开占用的文件句柄过大,超过内核限定值时,会报该错误(10月初开始报错)
原因:
初步排查查看系统文件句柄数很少,那么应该是程序进程文件句柄太多,以及TCP连接过多,服务器负载压力较大,导致服务器宕机。
处理方法:
暂时处理方法:
1、重启服务器,释放资源
2、修改内核参数,
扩大文件句柄数允许范围
扩大TCP连接数
问题根源:需排查应用程序