Controller Manager POD Evicted 自动回收

最新推荐文章于 2024-01-03 10:36:04 发布
最新推荐文章于 2024-01-03 10:36:04 发布
阅读量611 收藏 1
点赞数
分类专栏： kubernetes
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_43798031/article/details/117999232
版权

官方文档：
https://kubernetes.io/docs/reference/command-line-tools-reference/kube-controller-manager/

–terminated-pod-gc-threshold 参数

未设置前
可以看到有大量状态为Evicted的pod

在这里插入图片描述

默认该值为12500

修改Controller Manager yaml文件 注意如果有多个master需要修改每个master节点上的controller manager yaml
vim /etc/kubernetes/manifests/kube-controller-manager.yaml
增加如下配置
- --terminated-pod-gc-threshold=5
在这里插入图片描述
修改后
最多可容忍4个pod的状态为Evicted，如果>= 5 则会触发gc删除操作
在这里插入图片描述

清理磁盘空间或者扩容cpu、内存后，pod大约在五分钟之内重新调度pod 再次running

Cloud孙文波
关注
专栏目录
Rancher入门到精通-2.0 清除状态为Evicted的pod
隔壁老瓦的专栏
11-06 1026
kubectl get pods --all-namespaces |grep Evicted|awk '{print $2}' | xargs kubectl delete pod
【K8S源码之Pod漂移】整体概况分析 controller-manager 中的 nodelifecycle controller（Pod的驱逐）
叮当猫的喵i
08-18 1347
有的话，进行 Pod 的逐个驱逐，检查 Pod 是否有该 Taint 的 toleration，有的话，就根据 toleration 设置 pod 的定时删除；zonePodEvictor 后续用于该 zone 中失联的 Node，用于 Node 级别驱逐（就是驱逐 Node 上所有 Pod，并设置为 evicted 状态，此部分参见）每个 zone 有不同数量的 Node，根据该 zone 中 Node 失联数量的占比，设置不同的驱逐速率。TainManager 的驱逐逻辑，看代码不难理解，大概说明。
【k8s】状态为 Evicted 的 Pod
Aiky哇
10-09 384
在查看k8s的环境的时候，突然发现存在n多个pod状态为Evicted。差不多得有几百个。
如何优雅的排空节点上的pod？云服务商是如何回收机器的？
MyySophia的博客
12-05 667
在 Kubernetes 中，不仅容器和 Pod 可以更换，节点也可以更换。Kubernetes 中的节点是 VM、服务器和其他具有计算能力的实体 （其实对k8s来说就是一个对象），在这些实体中运行 Pod 和容器。节点耗尽是一种允许用户优雅地将所有容器从一个节点移动到其他节点的机制。例如Kubernetes 可以自动检测节点故障并将 pod 重新调度到其他节点。以下是不耗尽的情况：1、节点出现故障——有人按下了服务器上的电源按钮。 2、kube - controller - manager，在 maste
Kubernetes 中 Evicted pod 是如何产生的
云原生实验室
10-06 640
线上被驱逐实例数据最近在线上发现很多实例处于 Evicted 状态，通过 pod yaml 可以看到实例是因为节点资源不足被驱逐，但是这些实例并没有被自动清理，平台的大部分用户在操作时看到...
kubernetes之pod生命周期
山不转的博客
07-17 3476
参考：https://kubernetes.io/docs/concepts/workloads/pods/pod-lifecycle/ Pod phase 系统中表示pod的条目包含一个表示pod状态的字段，称为“status”。“status”字段本身是一个“PodStatus”类型的对象，其中包含一个“phase”字段，用来表示pod当前所处的生命周期状态。以下是“phase”可能的取值...
kubernetes最小调度单元pod原理介绍，应用创建与实战案例
景天科技苑
01-03 1058
Pod是Kubernetes中的最小调度单元，k8s是通过定义一个Pod的资源，然后在Pod里面运行容器，容器需要指定一个镜像，这样就可以用来运行具体的服务。一个Pod封装一个容器（也可以封装多个容器），Pod里的容器共享存储、网络等。也就是说，应该把整个pod看作虚拟机，然后每个容器相当于运行在虚拟机的进程。Pod是需要调度到k8s集群的工作节点来运行的，具体调度到哪个节点，是根据scheduler调度器实现的。白话解释：可以把pod看成是一个“豌豆荚”，里面有很多“豆子”（容器）。
pod状态异常原因分析
mac99776的博客
06-23 6322
pod状态
Pod
yunqi1215的博客
03-06 82
pod
Kubernetes Node Controller源码分析之创建篇
WaltonWang's Blog
07-29 1万+
Node Controller是Kubernetes几十个Controller中最为重要的Controller之一，其重要程度在Top3，然而这可能也是最为复杂的一个Controller，因此对其的源码分析，我将做一个系列文章，希望能帮助自己有一个深入的理解。本博文主要对Node Controller的创建流程进行源码分析。
pod生命周期
任我行的博客
11-17 597
文章目录pod状态pod中容器状态容器重启策略restartPolicy:探针类型有三种:强制终止Pod失效Pod的垃圾回收 pod起始状态为pending, 当至少有一个主要容器正常启动，则进入Running，如果Pod中有容器以失败状态结束，则进入Failed，否则为Successed。 Pod 在其生命周期中只会被调度一次。 一旦 Pod 被调度（分派）到某个节点，Pod 会一直在该节点运行，直到 Pod 停止或者 被终止。 Pod 自身不具有自愈能力。如果 Pod 被调度到某节点 而该节点之后失效
kube-controller-manager最佳配置
热门推荐
WaltonWang's Blog
05-23 1万+
kube-controller-manager最佳配置梳理
k8s evicted pod大量出现解决办法
别来沾边儿
07-06 1279
魔术师顶天立地\怼天怼地\钢铁realman1.背景：运行一年多k8s集群出现大量evicted pod，但有running pod，系统是正常运行的。其实这是kubernetes集群一种驱逐机制，用来提醒节点资源告警。可以通过 2、解决方法：查看告警pod节点存储情况发现是kubernetes每天日志占用巨大存储，需要定时任务每天清理 然后需要手工删除evicted pod 删除后观察十分钟，看看是否还会出现驱逐情况。...
k8s中所有pod都变成evicted状态了！！！！！！！！
kay
12-25 3317
k8s本来跑的好好的，突然发现上面的服务都停了，然后查看发现pod状态变了，网上发现说是资源不足导致的，然后疯狂查找。 1.查看内存情况，命令：free -g ，发现没问题 2.查看内存情况，命令：top ，发现没问题 3.查看硬盘情况，命令：df -lh，发现硬盘没问题，但启动的docker镜像有问题！！！！！ 继续查找发现是由于启动的docker占用的空间大于85%导致挂掉的。 然后查看docker ps -a,发现有很多已经停止的容器，就是这里！！！！！！ 删除掉这些不用的，命令：do
关于kubernetes中监控pod内存的问题
kismile
05-20 1万+
cadvisor关于内存的指标 container_memory_rss RSS内存，即常驻内存集（Resident Set Size），是分配给进程使用实际物理内存，而不是磁盘上缓存的虚拟内存。RSS内存包括所有分配的栈内存和堆内存，以及加载到物理内存中的共享库占用的内存空间，但不包括进入交换分区的内存。 container_memory_usage_bytes 当前使用的内存量，包括所有使用...
服务器Centos缓存(buff/cache)的优化
qq_34246965的博客
10-24 8838
缓存机制 在Linux系统中，为了提高文件系统性能，内核利用一部分物理内存分配出缓冲区，用于缓存系统操作和数据文件，当内核收到读写的请求时，内核先去缓存区找是否有请求的数据，有就直接返回，如果没有则通过驱动程序直接操作磁盘。 缓存机制优点： 减少系统调用次数，降低CPU上下文切换和磁盘访问频率。 CPU上下文切换： CPU给每个进程一定的服务时间，当时间片用完后，内核从正在运行的进程中收回处理器，同时把进程当前运行状态保存下来，然后加载下一个任务，这个过程叫做上下文切换。实质上就是被终止运行进程与待运行进程
Kubernetes中的垃圾回收机制
zhongliang415的博客
08-29 457
Kubernetes中的垃圾回收机制 本文所讨论垃圾回收（GC，GarbageCollection）机制针对Kubernetes1.1.7，docker容器。 一、Tips Kubernetes的垃圾回收由kubelet进行管理，每分钟会查询清理一次容器，每五分钟查询清理一次镜像。在kubelet刚启动时并不会立即进行GC，即第一次进行容器回收为kubelet启动一分钟后，第一次进行镜像回收为kubelet启动五分钟后。 不推荐使用其它管理工具或手工进行容器和镜像的清理，因为kubelet需要通过容
kubectl 批量删除evicted 的pod
最新发布
07-31
kubectl 是 Kubernetes 的命令行工具，用于管理和操作集群资源。如果你想批量删除因为内存不足等原因被 Eviction（也就是被系统自动驱逐出节点）的 Pod，你可以使用以下命令： ```shell kubectl get pods -l evicted=true -o json | jq '.items[].metadata.name' | xargs kubectl delete pod - ``` 这个命令分几步解释： 1. `kubectl get pods -l evicted=true`：通过标签筛选出所有已标记为 evicted 的 Pod。 2. `-o json`：将结果转换为 JSON 格式，便于解析每个 Pod 的名称。 3. `jq '.items[].metadata.name'`：使用 jq 工具从 JSON 输出中提取每个 Pod 的名称。 4. `xargs kubectl delete pod -`：将获取到的 Pod 名称传递给 kubectl 的 delete pod 命令，- 表示从标准输入读取。 执行这个命令会删除所有已标记为 evicted 的 Pod。但请注意，在执行前最好确认你要删除的是不需要的Pod，并备份重要数据以防误删。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Cloud孙文波

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值