清理k8s_docker磁盘空间

介绍


长时间运行的集群,常会面临各种资源耗尽的问题,另外磁盘不足时 Kubelet 还会主动清理镜像增加不确定因素,本文提供了一些命令片段用于清理工作。

1. Kubernetes 基础对象清理


清理 Evicted 状态的 Pod

kubectl get pods --all-namespaces -o wide | grep Evicted | awk '{print $1,$2}' | xargs -L1 kubectl delete pod -n

清理 Error 状态的 Pod

kubectl get pods --all-namespaces -o wide | grep Error | awk '{print $1,$2}' | xargs -L1 kubectl delete pod -n

清理 Completed 状态的 Pod

kubectl get pods --all-namespaces -o wide | grep Completed | awk '{print $1,$2}' | xargs -L1 kubectl delete pod -n

清理没有被使用的 PV

kubectl describe -A pvc | grep -E "^Name:.*$|^Namespace:.*$|^Used By:.*$" | grep -B 2 "<none>" | grep -E "^Name:.*$|^Namespace:.*$" | cut -f2 -d: | paste -d " " - - | xargs -n2 bash -c 'kubectl -n ${1} delete pvc ${0}'

清理没有被绑定的 PVC

kubectl get pvc --all-namespaces | tail -n +2 | grep -v Bound | awk '{print $1,$2}' | xargs -L1 kubectl delete pvc -n

清理没有被绑定的 PV

kubectl get pv | tail -n +2 | grep -v Bound | awk '{print $1}' | xargs -L1 kubectl delete pv

2. Linux 清理


查看磁盘全部空间

df -hl /

Filesystem      Size  Used Avail Use% Mounted on
/dev/sda2       100G   47G   54G  47% /

查看指定目录占用

du -sh .

24G .

删除指定前缀的文件夹

cd /nfsdata
ls | grep archived- |xargs -L1 rm -r

清理僵尸进程

ps -A -ostat,ppid | grep -e '^[Zz]' | awk '{print }' | xargs kill -HUP > /dev/null 2>&1

3. Docker 清理


查看磁盘使用情况

docker system df

TYPE                TOTAL               ACTIVE              SIZE                RECLAIMABLE
Images              361                 23                  178.5GB             173.8GB (97%)
Containers          29                  9                   6.682GB             6.212GB (92%)
Local Volumes       4                   0                   3.139MB             3.139MB (100%)
Build Cache         0                   0                   0B                  0B

清理 none 镜像

docker images | grep none | awk '{print $3}' | xargs docker rmi

清理不再使用的数据卷

docker volume rm $(docker volume ls -q)

或者

docker volume prune

清理缓存

docker builder prune

全面清理
删除关闭的容器、无用的存储卷、无用的网络、dangling 镜像(无 tag 镜像)

docker system prune -f

清理正则匹配上的镜像

这里清理的是 master-8bcf8d7-20211206-111155163 格式的镜像。

docker images |grep -E "([0-9a-z]*[-]){3,}[0-9]{9}" |awk '{print $3}' | xargs docker rmi

4. 设置定时


查看定时任务

crontab -l

设置定时任务

crontab -e 

文本新增定时任务

*/35 */6 * * *  docker images | grep none | awk '{print $3}' | xargs docker rmi
45 1 * * * docker system prune -f

这里第一个任务是每隔六个小时的第 35 分钟执行,第二个任务每天的 1 时 45 分执行。

定时任务的格式
设置定时格式:

* * * * * shell

第一个星号,minute,分钟,值为 0-59 第二个星号,hour,小时,值从 0-23 第三个星号,day,天,值为从 1-31 第四个星号,month,月,值为从 1-12 月,或者简写的英文,比如 Nov、Feb 等 第五个星号,week 周,值为从 0-6 或者简写的英文,Wen、Tur 等,代表周几,其中 0 代表周末

CSDN_码404:清理k8s_docker磁盘空间
https://www.code404.icu/1527.html

  • 1
    点赞
  • 10
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
### 回答1: 可以使用Kubernetes的initContainer来实现对Pod的磁盘剩余空间的检测。具体步骤如下: 1. 创建一个shell脚本来检测磁盘剩余空间。 2. 将该脚本打包成一个Docker镜像。 3. 在Kubernetes的Pod模板中,定义一个initContainer来使用上面创建的镜像,并运行检测脚本。 4. 如果脚本检测到磁盘空间不足,可以在脚本中返回特定的错误码,然后在Pod的生命周期事件中处理该错误码,如重启Pod或将其删除。 例如,以下是一个简单的检测磁盘空间的脚本: ``` #!/bin/bash # 检测/tmp目录的剩余空间 if [[ $(df /tmp | awk '{print $4}' | tail -n 1) -lt 100000000 ]]; then # 返回错误码 exit 1 else exit 0 fi ``` 在Kubernetes中的Pod模板中,可以这样定义initContainer: ``` apiVersion: v1 kind: Pod metadata: name: myapp-pod spec: containers: - name: myapp-container image: myapp-image initContainers: - name: init-disk-space image: init-disk-space-image command: ["./check_disk_space.sh"] ``` ### 回答2: K8S是一种容器编排和管理系统,用于管理和部署应用程序容器。在K8S中,每个应用程序都被封装为一个或多个容器并运行在一个称为“Pod”的逻辑主机中。 在K8S中,可以使用脚本来检测Pod的磁盘剩余空间。下面是一个示例脚本,用于通过kubectl命令获取Pod的磁盘剩余空间,并将结果输出到日志文件中: ```bash #!/bin/bash # 获取所有运行中的Pod名称 pods=$(kubectl get pods | grep Running | awk '{print $1}') # 迭代每个Pod,获取磁盘剩余空间 for pod in $pods; do # 获取Pod的名称和命名空间 pod_name=$(kubectl get pod $pod -o jsonpath='{.metadata.name}') namespace=$(kubectl get pod $pod -o jsonpath='{.metadata.namespace}') # 获取Pod的节点名称 node_name=$(kubectl get pod $pod -o jsonpath='{.spec.nodeName}') # 获取节点上可用的磁盘空间 disk_space=$(kubectl describe node $node_name | grep "Allocated resources" -A 5 | grep -E "Disk" | awk -F'(|)' '{print $2}') # 将结果输出到日志文件 echo "Pod名称: $pod_name, 命名空间: $namespace, 磁盘剩余空间: $disk_space" >> /var/log/disk_space.log done ``` 以上脚本通过kubectl命令获取所有运行中的Pod的名称,并通过迭代每个Pod来获取其所在节点的磁盘剩余空间。然后,将结果打印到一个日志文件中。你可以根据需要修改脚本,并根据你的环境进行适当的调整。 ### 回答3: 以下是一个使用Kubernetes API 检测pod磁盘剩余空间的脚本的示例: ```shell #!/bin/bash # 获取所有的pod名称 pods=$(kubectl get pods -o=jsonpath='{range .items[*]}{.metadata.name}{"\n"}{end}') # 遍历每个pod for pod in $pods do # 获取pod所在的命名空间 namespace=$(kubectl get pod $pod -o=jsonpath='{.metadata.namespace}') # 获取pod的节点名称 node=$(kubectl get pod $pod -o=jsonpath='{.spec.nodeName}') # 获取pod在节点上的路径 path=$(kubectl exec -it $pod -c <container_name> -- df -h | grep /dev | awk '{print $6}') # 获取磁盘剩余空间大小 remaining=$(kubectl exec -it $pod -c <container_name> -- df -h | grep $path | awk '{print $4}') echo "Pod: $pod" echo "Namespace: $namespace" echo "Node: $node" echo "Path: $path" echo "Remaining Space: $remaining" done ``` 请注意,此脚本假定您已经设置了正确的kubectl配置,并且替换`<container_name>`为要检查磁盘空间的容器名称。此脚本将遍历集群中的每个pod,获取其所在的命名空间,节点名称和挂载路径,并从容器中运行`df -h`命令获取磁盘剩余空间。最后,它将打印出这些信息。您可以根据需要对此脚本进行修改和扩展。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值