too many open files解决方案

测试环境在运行一段时间后出现了too many open files,导致一个定时上报redis的任务频繁失败。

linux默认为1024,可通过ulimit -n命令进行数量调整。
例:ulimit -n 4096
非root用户最大只能设置到4096,需要更多的话需要root权限。

(具体修改方法链接:Linux TCP连接数限制配置出现open too many open files_Clovemeo的博客-CSDN博客在进行接口测试时,在用户数超过400后,就会出现socket connection reset,明显就是系统无法创建连接,查看此时系统建立的TCP连接,netstat -ant |grepESTABLISHED |wc -l,数量大概1000多。ulimit -n查看系统默认是1024修改限制如下:第一步,修改/etc/security/limits.conf文件,在文件中添加如下行(*指代系统用户名),修改Linux系统对用户的关于打开文件数的软限制和硬限制:so.https://blog.csdn.net/Clovemeo/article/details/124954657?spm=1001.2014.3001.5501

  1. 执行命令ps -ef | grep java,查出进程id:13945。

     

     

  2. 执行lsof -p 13945

    发现有大量的文件句柄没有释放。怀疑是组内小伙伴遍历文件时没有close导致。
    于是从代码中寻找蛛丝马迹。

     

    发现原因是delete方法里使用了DirectoryStream并没有close。
    java8里的Files.newDirectoryStream(p),通常都使用

    try(Files.newDirectoryStream()){
    } catch() {
    }
    

    的方式,来避免显式close释放资源。
    因此判断当时写这段代码的同学看Files.newDirectoryStream()示例时,没看到close()方法误以为不需要释放文件就直接进行使用。导致了too many open files的异常。

    另外需要注意的是,在try()中打开的文件,不要执行删除操作,否则同样会导致句柄无法释放问题。例如:

    try(InputStream inputStream = new FileInputStream(new File(path))) {
        // doSomething();
    } catch(Exception e) {
    }finally{
        Files.deleteIfExists(Paths.get(path));
    }
    

    会导致如下结果:

    文件句柄未释放

    总结:
    遇到too many open files时,

  3. 执行 lsof -p <pid>,查看该进程打开的句柄
    若句柄数不正常,则根据打开的句柄检查不正常的原因,若句柄正常,则进行如下第二步。
  4. 执行 unlimit -a,查看open files(最大允许打开文件数)

     

  • 3
    点赞
  • 11
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值