在生产环境中,突然服务器上的tomcat,还有一些会产生文件的服务都停掉了。进入服务器,然后打算重新启动服务,发现报以下错误
然后果断使用命令 df -h 查看硬盘的空间是不是被日志给挤满,不过这个一般我都有做定时清理的我觉得不大可能,查询后如下
这个时候很疑惑,这个时候我想起之前看了操作系统概论的书,知道系统是有 i 节点跟物理节点的。文件储存在硬盘上,硬盘的最小存储单位叫做"扇区"(Sector)。每个扇区储存512字节,
操作系统读取硬盘的时候,不会一个个扇区地读取,这样效率太低,而是一次性连续读取多个扇区,即一次性读取一个"块"(block)。这种由多个扇区组成的"块",是文件存取的最小单位。"块"的大小,最常见的是4KB,即连续八个 sector组成一个 block。
文件数据都储存在"块"中,那么很显然,我们还必须找到一个地方储存文件的元信息,比如文件的创建者、文件的创建日期、文件的大小等等。这种储存文件元信息的区域就叫做inode(索引节点 ),每一个文件都有对应的inode,里面包含了与该文件有关的一些信息
这个时候我们使用 df -i 命令查看服务器的inode使用情况
发现iNode节点都用完了,这种 情况下满的分区无法新建文件,也无法输出日志,需要输日志的进程一般都会停止工作。
可能原因:
可以看下日志文件是否太多,如果是日志文件占用大量的inodes可以临时释放清理下过期的日志。
也可以根据较大目录的文件占用情况,临时转移部分文件到占用磁盘较小的目录中。
解决方法:使用find -exec 遍历,然后执行删除便可。
第一种:删除字节为0的文件
find /home -type f -size 0 -exec rm {} \; #/home是服务器的目录,根据你自己想要查找的文件去释放
find / -type d -size +10M #找出大小大于10M的目录(目录大小越大,表示目录下的文件越多)。但是如果一个目录很多文件的话,会容易查很久!!!!
配合find */ ! -type l | cut -d / -f 1 | uniq -c #找出目录下文件总数,可能需要执行多次,直到找出具体的目录。比如上面的命令找出了/home目录下存在大量的小文件,
我这边找出的原因是因为服务器的邮箱文件太多了!!!!!很久没删除过。就是执行定时任务时,不管成功或者失败都会发送一个mail,然后日志文件又放到了服务器上,日积月累下来,导致了很多文件占用了空间。
大家可以重点查看/var/spoo/ 目录下的文件大小与个数。主要是/var/spoo/mqueue这个 邮件队列 目录。
我们可以7天清理一次,写一个定时任务,命令如下
find /var/spool/mqueue/* -type f -mtime +7 -exec rm -rf {} \;
上面这个命令可以用来直接执行。