问题描述:
今天登上一台服务器,df -h 发面根目录磁盘已经满了
解决过程:
cd /
du -sh * 发现并没有大文件,占用的空间没多大
根据经验,先通过lsof | grep deleted查找有没有没有释放空间的进程,然后 kill -9 pid也没有发现
这下诡异了,
然后仔细分析根目录下各个目录,发现 /data目录,使用的是挂载盘,而且挂载盘的空间利用很小,那么问题来了。
挂载盘的空间,是放ES和KAFKA的地方,使用空间应该比较大。
然后把挂载盘先umout掉,问题根源查到了,
发现/data目录,在umout掉后,占用的空间很大,之前的此文件夹写数据没有写到挂载盘上,而是直接写到根目录下的/data这个原目录下了
接下来的操作就简单顺畅了,
1、mkdir创建新目录,重新挂载盘到新目录,把/data内的数据mv到新目录下。
2、把写数据的服务配置目录,配置成新目录
简单测试了一把,通过dd if=/dev/zero of=mytest1 bs=1M count=10000在新目录写了10G的数据,根目录空间不受影响
至此问题解决。