kafka linux根目录满,Linux磁盘空间满的诡异问题解决方案

问题描述：

今天登上一台服务器，df -h 发面根目录磁盘已经满了

解决过程：

cd /

du -sh *  发现并没有大文件，占用的空间没多大

根据经验，先通过lsof | grep deleted查找有没有没有释放空间的进程，然后 kill -9 pid也没有发现

这下诡异了，

然后仔细分析根目录下各个目录，发现 /data目录，使用的是挂载盘，而且挂载盘的空间利用很小，那么问题来了。

挂载盘的空间，是放ES和KAFKA的地方，使用空间应该比较大。

然后把挂载盘先umout掉，问题根源查到了，

发现/data目录，在umout掉后，占用的空间很大，之前的此文件夹写数据没有写到挂载盘上，而是直接写到根目录下的/data这个原目录下了

接下来的操作就简单顺畅了，

1、mkdir创建新目录，重新挂载盘到新目录，把/data内的数据mv到新目录下。

2、把写数据的服务配置目录，配置成新目录

简单测试了一把，通过dd if=/dev/zero of=mytest1 bs=1M count=10000在新目录写了10G的数据，根目录空间不受影响

至此问题解决。