一台测试服务器(4.17)服务器硬盘物理空间300g使用率是百分之百
1)df显示硬盘用完了,查看系统没大大文件删除部分文件还是显示全部用完
# df -h
/dev/sda3 267G 267G 0 100% /
/dev/sda1 99M 12M 82M 13% /boot
tmpfs 5.9G 0 5.9G 0% /dev/shm
2)du -sh查看使用是60G,出现了200g左右未使用空间消失了
# du -sh
60G .
3)使用 lsof |grep deleted 命令(查找那些文件被某些程序占用)查看发现有进程在不断记录日志文件,但是该日志却被删除了,导致磁盘空间被占用
#lsof -n |grep deleted |less
COMMAND PID USER FD TYPE DEVICE SIZE NODE NAME
bash 427 root 1w REG 8,3 211217387520 66814302 /var/...
bash 680 root 1w REG 8,3 211217387520 66814302 (deleted) /var/...
.
.
.
4)解决的办法
将除/dev/pts/0 (deleted)之外的进程全部kill掉(也可以重启系统),然后重启相关进程。
在linux中,当我们使用rm在linux上删除了大文件,但是如果有进程打开了这个大文件,却没有关闭这个文件的句柄,那么linux内核还是不会释放这个文件的磁盘空间,最后造成磁盘空间占用100%,整个系统无法正常运行。这种情况下,通过df和du命令查找的磁盘空间,两者是无法匹配的,可能df显示磁盘100%,而du查找目录的磁盘容量占用却很小。遇到这种情况,基本可以断定是某些大文件被某些程序占用了,并且这些大文件已经被删除了,但是对应的文件句柄没有被某些程序关闭,造成内核无法回收这些文件占用的空间。命令lsof -n | grep deleted打印出所有针对已删除文件的读写操作,这类操作是无效的,也正是磁盘空间莫名消失的根本原因。