设置K8s管理节点异常容忍时间

说明

每个节点上的 kubelet 需要定时向 apiserver 上报当前节点状态，如果两者间网络异常导致心跳终端，kube-controller-manager 中的 NodeController 会将该节点标记为 Unknown 或 Unhealthy，持续一段时间异常状态后 kube-controller-manager 会将该节点上的所有 pod 驱逐（1.24 版本后驱逐通过 taint toleration 实现）。

为了防止发生大面积 pod 驱逐，需要修改 kube-controller-manager 的以下参数：

● --pod-eviction-timeout duration The grace period for deleting pods on failed nodes. (default 5m0s)
● --node-monitor-grace-period duration Amount of time which we allow running Node to be unresponsive before marking it unhealthy. Must be N times more than kubelet’s nodeStatusUpdateFrequency, where N means number of retries allowed for kubelet to post node status. (default 40s)

修改方式

编辑所有管理节点的 /etc/kubernetes/manifests/kube-controller-manager.yaml 文件，在 spec.containers.command 增加如下命令行参数：

- --pod-eviction-timeout=180m
- --node-monitor-grace-period=180m

重启进程，或者移动配置文件，如果没有变化重启kubelet