LINUX磁盘空间满了问题排查

分析：

导致该问题的可能原因包括：
1、磁盘分区空间使用率达到百分之百。
2、 磁盘分区inode使用率达到百分之百。
3、僵尸文件：已删除文件因句柄被占用未释放导致相应空间未释放。
4、 挂载点覆盖：在原有文件系统的相应目录下已经存在大量文件。挂载了新磁盘后，导致使用 df 命令能统计到相关空间使用，而使用 su 命令统计不到。

解决方法：

一：分区容量满
1、运行 df -h 查看磁盘使用率。
2、重复执行 du -sh /* 命令，找到容量比较大的目录并进入目录，直到找到最精确的文件或目录，再结合业务情况等进行判断，删除相关文件或目录。也可以选择更换大磁盘。

我启动zk的时候，报错了，空间不足，

 df -h 可以看到根目录下的空间已经满了

 

du -sh /* 找到容量比较大的目录并进入目录，直到找到最精确的文件或目录，

看到是/var这个目录，接着走

 

 

 最后发现这个/var/lib/docker目录占满空间了，这边我目前暂时不用这个目录里面的文件了，所以我这边就直接把这个目录给删了，如果你们要删除的话，一定要确认对应的目录是否还需要

rm rf /var/lib/docker

注意注意，敲黑板，这个命令谨慎使用，不然容易出事，我反正已经误操作过好几次，博主血泪的教训

删除了之后，磁盘空间释放了，再去启动zk就正常了

 

二：inode容量满
1、把下面的命令写进脚本，循环执行。
for i in /*;
do
echo $i;
find $i | wc -l;
done
2、逐层进入inode占用最高的目录，继续执行上述指令，逐步定位占用过高空间的文件或目录，最后进行相应清理。

三：修改inode数量
node节点中，记录了文件的类型、大小、权限、所有者、文件连接的数目、创建时间与更新时间等重要的信息，还有一个比较重要的内容就是指向数据块的指针。一般情况不需要特殊配置；如果存放文件很多，需要配置。有时磁盘空间有剩余但是不能存放文件，可能是由于inode耗尽所致。
inode的调整需要重新格式化磁盘，请确保您已经备份了数据再执行以下操作。
1、运行以下命令查询inode使用情况。

            df -i
2、 运行以下命令解除挂载。假设为 /opt/。
umount /opt/

运行以下命令重新建立文件系统，指定inode节点数。
mkfs.ext3 /dev/sdb -N 1778866

运行以下命令查看修改后的inode节点数。
dumpe2fs -h /dev/sdb | grep node
四：僵尸文件分析删除
如果磁盘和inode都没有问题，则需要查看是否存在未被清除句柄的僵死文件。这些文件实际上已经被删除，但是有服务程序在使用这些文件，导致这些文件一直被占用，无法释放磁盘空间。如果这些文件过多，会占用很大的磁盘空间。

1、运行以下命令查看僵尸文件占用情况。
lsof |grep delete | more

清除僵尸文件：
1、重启服务器
2、正常停止或杀掉占用这些文件的服务进程。

kill对应的进程，释放对应进程占用空间

kill -9 19994

五：挂载点覆盖

先取消磁盘挂载，再检查原挂载目录下的空间占用情况。