解决Linux中/var/lib/docker/磁盘空间过大及k8s存储卷磁盘空间使用率过高的问题

前言

在使用k8s存储卷的过程中，磁盘空间使用率突然快速上涨，没几天时间disk使用率直接飙红（大概89%左右），甚至本地的docker镜像也被驱逐了大部分，类似如此事件没有办法给客户解释清楚的话都是给自己埋雷呀。

从我自己的使用角度来说，我感觉k8s中的pv或者pvc都是日志系统挂载的存储卷，还有几个prometheus-db的存储卷，占用磁盘空间的大小应该不会快速增长，出现上述情况属实意外，在百度了一些资料并进行了尝试以后，有一点小收获，记录一下~

目录

前言

1. 查看文件系统硬盘使用情况

2. du命令查看指定目录或文件所占用的磁盘空间

3. 重启主机

---

1. 查看文件系统硬盘使用情况

df -h

我的/var/lib/docker/占了有364G磁盘空间，到底是什么文件这么占磁盘，需要查一下，

ps~幸好我稳住了，没有盲目手快的删掉整个overlay2或者containers文件夹中的内容。

2. du命令查看指定目录或文件所占用的磁盘空间

#查看/var/lib/docker/文件夹的大小

[root@master containers]# du -hs /var/lib/docker/
255G    /var/lib/docker/

#查看/var/lib/docker/下一个层级目录各个文件夹的大小
#参数提示：
#-d：显示目录层级数

[root@master containers]# du -d 1 /var/lib/docker/

#结果
12564   /var/lib/docker/containerd
244215732       /var/lib/docker/containers
0       /var/lib/docker/plugins
21349984        /var/lib/docker/overlay2
38272   /var/lib/docker/image
1092692 /var/lib/docker/volumes
0       /var/lib/docker/trust
1408    /var/lib/docker/network
0       /var/lib/docker/swarm
1216    /var/lib/docker/buildkit
0       /var/lib/docker/tmp
0       /var/lib/docker/runtimes
266711868       /var/lib/docker/

#查看/var/lib/docker/下一个层级目录各个文件夹的大小，以MB显示
#参数提示：
#-k：以KB为单位显示文件大小
#-m：以MB为单位显示文件大小，我用的-m
[root@master containers]# du -d 1 -m /var/lib/docker/

#结果
13      /var/lib/docker/containerd
238492  /var/lib/docker/containers
0       /var/lib/docker/plugins
20850   /var/lib/docker/overlay2
38      /var/lib/docker/image
1068    /var/lib/docker/volumes
0       /var/lib/docker/trust
2       /var/lib/docker/network
0       /var/lib/docker/swarm
2       /var/lib/docker/buildkit
0       /var/lib/docker/tmp
0       /var/lib/docker/runtimes
260461  /var/lib/docker/

#既然/var/lib/docker/containers占用的磁盘空间大，那就看看该文件夹下各个子目录都有多大
[root@master containers]# du -d 1 -m /var/lib/docker/containers

 可以看到cec2b7的容器占了233G的磁盘空间，进入到目录中查看一下具体的文件，发现一个*-json.log的文件有两百多G大小，于是选中它并进行删除。再次查看/var/lib/docker/占用的磁盘空间大小：

[root@master containers]# du -hs /var/lib/docker/
22G     /var/lib/docker/

3. 重启主机

reboot

重新查看文件系统硬盘使用情况：df -h

可以看到磁盘空间的使用率已经降下来了，同时k8s的存储卷的使用率也同步降下来啦，非常开心解决了一个问题，继续努力哦~

另外：关于pv或pvc内存过高的情况，也可以在主机挂载的目录删除一些占用内存的文件或文件夹，也有一些效果的。