开发测试环境 k8s node节点磁盘不足运维

开发测试环境 k8s node节点磁盘不足运维

在开发测试环境容器运行了一段时间之后会出现一些问题
常见的问题就是磁盘资源不足
现在针对开发测试环境资源不足的情况最快的处理方案

排查服务器pod 问题

kubectl -n ns describe po podname
kubectl  get nodes -o wide
kubectl -n ns get pod  -o wide | grep -v Running
kubectl -n ns  describe po podname
kubectl describe node nodename
kubectl get pod --all-namespaces -o wide | grep Pending
kubectl -n ns  get pod  -o wide | grep -v Running

解决服务器节点磁盘问题

#驱逐节点并迁移容器到可用节点
kubectl drain nodename  --ignore-daemonsets
#停止调度
kubectl  cordon nodename  
#允许调度
# kubectl uncordon nodename
#删除节点
kubectl delete node nodename
#创建加入节点token
kubeadm token  create --print-join-command

#切到节点机器

df -Th
docker info
du /var/lib/docker -sh
ll ./devicemapper/devicemapper/data
ls -lh devicemapper/devicemapper/data
find -size "+100M"
fdisk -l
lvs
vgs
pvs
ls /var/lib -l
 kubeadm reset
 systemctl st