linux查看node节点是否满了,linux-linnode满了的提示

线上有一台web服务器磁盘检测告警了,提示空间不足,登到服务器查看

6c1555302777729326ca3efa0910d9ec.png 

touch:cannot touch `furm.html': No space left on device

使用df -h命令查看发现

6c1555302777729326ca3efa0910d9ec.png 

/data/web分区只使用了2%,创建文件却提示磁盘空间不足,按道理不会出现这种情况的。怀疑是inode耗尽导致。

分析导致的原因:

使用df –i查看发现inode已经耗尽,则系统上将不能创建文件

6c1555302777729326ca3efa0910d9ec.png

查找原因并解决

/data/web是线上业务数据目录,其中有个程序产生大量的小文件造成的。可通过下面的命令找出占用空间最多的文件或目录:

find / -type d -size +10M

此命令作用是找出大小大于10M的目录(目录大小越大,表示目录下的文件越多)。

大量的小文件分布在大量的目录下

cd /

find */ ! -type l | cut -d / -f 1 | uniq -c

此命令作用是找出目录下文件总数,可能需要执行多次。比如上面的命令找出了/data目录下存在大量的小文件,但/data/目录还有很多目录,这时候我们还需要继续执行:

cd /data

find */ ! -type l | cut -d / -f 1 | uniq -c

直到找出具体的目录。

在/data/web下有超多的文件 ls 半天没反应

用rm -rf * 会自动跳出root,用xargs来解决。

# ls | xargs rm –f

此时用df –i命令查看发现正常了,创建文件也不会出现错误

6c1555302777729326ca3efa0910d9ec.png 

另外:

要注意的是下面这个目录当安装了sendmail服务但是没有开启的话,这个目录也会临时产生大量的小文件,按照上面的解决方法解决即可。

# cd /var/spool/clientmqueue

# ls | xargs rm –f

原因分析:系统中cron执行的程序有输出内容,输出内容会以邮件形式发给cron的用户,而sendmail没有启动所以就产生了这些文件;

解决办法:  将crontab里面的命令后面加上>/dev/null 2>&1

总结

对inode占用进行监控,并且收到inode告警时应及时使用以上方法来定位问题,并反馈给相应人员从根源解决。以后遇到类似的问题要注意,用df -i 检查inode的使用情况。

扩展:

查看block和inode的大小

1

2

3

4

5

6

7

[iyunv@bier ~]# dumpe2fs /dev/sdb1 |grep -i"Block size"

dumpe2fs 1.41.12 (17-May-2010)

Block size:               1024

[iyunv@bier ~]# dumpe2fs /dev/sdb1 |grep -i"Inode size"

dumpe2fs 1.41.12 (17-May-2010)

Inode size:               128

查看block和inode的总的数量(一般是block大于inode数量)

1

2

3

4

5

6

7

[iyunv@bier ~]# dumpe2fs /dev/sdb1 |grep"Block count"

dumpe2fs 1.41.12 (17-May-2010)

Block count:              524272

[iyunv@bier ~]# dumpe2fs /dev/sdb1 |grep"Inode count"

dumpe2fs 1.41.12 (17-May-2010)

Inode count:              131072

来源:oschina

链接:https://my.oschina.net/u/4384347/blog/3988522

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值