pod挂载nas启动失败报错:unable to mount volume xxxx Timeout waiting for mount paths to be created

深夜你熟睡时,用户打来电话。大哥我在上线我的应用怎么突然起不来了。快帮我看看,再过一个小时店铺就开门了。

  1. 核实pod状态
打开电脑登入环境,使用kubectl get pod 查询到用户的pod处于创建中,kubectl get deployment 发现
应用yaml文件中定义的pod实例是四个,成功率为百分之百。目前启动了三个,有个应用疯狂重启。
  1. 查询事件日志
使用kubectl log -f -namespaces pod名 查询事件日志发现,日志一直在报错。挂载某个nas一直处于连接超
时的状态。pod挂载nas启动失败报错:unable to mount volume xxxx Timeout waiting for mount 
paths to be created

3.解决方式

查询到这种情况,我们可以手动在宿主机上挂载nas进行尝试挂载 sudo mount -t nfs 10.0.0.21:/snjkvb
/tmp/gan 发现挂载超时。一般挂载超时两种情况,一种是网络问题,另外一种就是nas目录权限问题。

4.进一步分析

使用kubectl delete 删除pod,将主机禁止调度,应用启动成功。怀疑这台主机可能有问题?使用Prometheus
监控查询各项指标都正常。怀疑挂载的过程一直超时会产生D进程。ps aux|awk '{if($8 == "D") {print}}'
ps -axjf |grep D 查询发现确实有D进程,导致挂载超时。接下来就没有办法了。只能重启或者想办法搞掉D
进程。
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值