错误:upstream timed out (110: Connection timed out) while reading upstream...
表现:时行时不行,单独加载某个资源没问题,但是打开网页就卡顿,某些资源加载就是一直加载不到,代理报后端超时错误,后端服务器无报错。前端报ERR_CONTENT_LENGTH_MISMATCH错误。
排查思路:
1.检查代理和后端磁盘空间是不是满了;
2.检查代理和后端磁盘IO是否正常,可能存在坏盘、报警盘或者存在坏道,导致资源加载慢;
3.安全软件:所有安全软件,在其他所有方向排查都没问题的情况下,尝试卸载安全软件。包括但不限于360、火绒、安全狗、奇安信、深信服等等。
本次出现问题的原因:后端服务器安装了火绒,部分代理发到后端的请求没了。。。代理报超时错误,然而,火绒软件里并没有截拦日志或提示,卸载火绒后业务恢复正常。
类似的问题之前也经历过,阿里云迁移工具运行很慢,上传速度慢,巨卡,一个阶段要消耗好长时间,经过分析,发现主机安装了奇安信软件,卸载后迁移就都正常了。