K8S-OrphanedPod清理脚本

清理节点中孤儿pod

原因
  • 公司一直使用的1.13版本k8s,经常会出现pod删除后,目录未清理的情况产生日志报错
  • 孤儿pod越来越多,浪费的磁盘空间无法释放,且报警日志error数过多
解决方案

编写了以下脚本并添加crontab实现自动解决该问题。

#!/bin/bash
#worker节点孤儿pod处理
>/tmp/orphanedMount.txt && >/tmp/orphanedPod.txt

IFS=$'\n'    #设置默认分隔符

echo `date` >>/data/logs/orphanedPod.log;echo '异常挂载目录:' >>/data/logs/orphanedPod.log
#获取异常挂载目录
for i in `tail -n10 /data/logs/kubernetes/kubelet/kubelet.log`;do
  if [[ $i =~ "transport endpoint is not connected occurred during checking mounted volumes from disk" ]];then
    echo `echo $i | awk -F : '{print $(NF -1)}'|awk '{print $NF}'` >>/tmp/orphanedMount.txt;
  fi;
done

#umount异常挂载目录
for i in `cat /tmp/orphanedMount.txt|uniq`;do
  echo $i "is error mount" >>/data/logs/orphanedPod.log;
  umount $i;
  echo $i "deleted" >>/data/logs/orphanedPod.log;
done

echo '等待60s后查询孤儿pod日志' >>/data/logs/orphanedPod.log
sleep 60

echo '孤儿pod报错:' >>/data/logs/orphanedPod.log
#获取孤儿pod报错
for i in `tail -n10 /data/logs/kubernetes/kubelet/kubelet.log`;do
  if [[ $i =~ "Orphaned pod" ]];then
    echo `echo $i| awk -F '\"' '{print $2}'` >>/tmp/orphanedPod.txt;
  fi;
done

#删除孤儿pod目录
for i in `cat /tmp/orphanedPod.txt|uniq`;do
  echo $i "is orphaned pod" >>/data/logs/orphanedPod.log;
  mv /data/kube/kubelet/pods/$i /tmp;
  echo $i "deleted" >>/data/logs/orphanedPod.log;
done

INF=' '        #设置默认分隔符
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值