记录线上问题:服务器docker进程卡死了,打任何命令都无反应,最终是linux内核bug导致的

	今天遇到了一个线上问题,公司在阿里云上面香港业务的服务器突然从凌晨开始就down了,
	重启服务器和程序也没用,看日志是docker 重启后一直加载中。

查了一下网上的资料,说是xfs文件系统的问题。
进去/var/log/message日志

	Docker进程卡死原因:
	centos7内核跟docker版本之间的一个bug,过于频繁create/destory container、
	pull/push image的时候,当thin pool满时,DeviceMapper后端默认文件系统xfs会不断retry 
	失败的IO,导致进程挂起。重启docker,那些挂起的进程也会不断地跑,所以需要在启动参数上面
	增加dm.xfs_nospace_max_retries=0。
	但我直接把这个参数加到 /etc/docker/daemon.json上面,发现启动失败了。

最终看文档发现,是完整的参数是
在这里插入图片描述

又是一个完美的坑。

  • 2
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 2
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值