kubelet报错:Orphaned pod “$Pod“ found, but volume paths are still present on disk

1.场景:

容器一直处在 ContainerCreating状态

$ kubectl get pod -n liantiao | grep pushserver
pushserver-69cc66c679-tx2pg                 1/1     Running             0          98d
pushserver-76675b6d94-kqh25                 0/1     ContainerCreating   0          56m

2.查看log describe 并没有发现 有效信息

$ kubectl describe pod  pushserver-76675b6d94-kqh25 -n liantiao
Normal  Scheduled  57m   default-scheduler  Successfully assigned liantiao/pushserver-76675b6d94-kqh25 to cn-beijing.10.252.0.120

$ kubectl logs pushserver-76675b6d94-nq4bg -n liantiao
Error from server (BadRequest): container "pushserver" in pod "pushserver-76675b6d94-nq4bg" is waiting to start: ContainerCreating

3.显示无法创建,使用 -o wide去目标主机上查看

发现 登陆特别慢,我大概猜测应该是 节点的问题,无法调度到这个容器上去,

我就删除了 这个pod(重启),希望他能调度到别的节点上;但是 还是调度到这个节点上了(一直ContainerCreating)

4.k8s组件里面,kubelet是负责启动pod的

查看kubelet 的日志

登陆 目标主机

# journalctl -l -u kubelet   #kubelet是被system管理的
Orphaned pod "0009ae9e-d542-11ea-852a-00163e125f5d" found, but volume paths are still present on disk : There were a to
Orphaned pod "0009ae9e-d542-11ea-852a-00163e125f5d" found, but volume paths are still present on disk

有大量报错

参考:https://cloud.tencent.com/developer/article/1385911

一直在刷以下的报错,从错误信息可以推测到,这台计算节点存在一个孤儿Pod,并且该Pod挂载了数据卷(volume),阻碍了Kubelet对孤儿Pod正常的回收清理。

节点有问题 https://cloud.tencent.com/developer/article/1385911,按照这里的方法删掉了 /var/lib/kubelet/pods/ 下的目录,并重启了systemctl进程

systemctl daemon-reexec:不重新启动的情况下重新启动systemd
执行这个命令 是因为 我的kubelet是被 systemd管理的

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

云原生解决方案

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值