k8s已经删除pod，但是node节点的容器还存在的排错记录（集群使用NAS存储）

最新推荐文章于 2024-05-21 17:34:44 发布
最新推荐文章于 2024-05-21 17:34:44 发布
阅读量1k 收藏
点赞数
分类专栏： kubernetes docker 文章标签： docker kubernetes 容器
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/kingrootz/article/details/125916997
版权

现象

使用k8s查询节点的pod情况，显示tdh03没有hdfs-datanode服务
在这里插入图片描述
进入tdh03节点 使用docker ps 查询hdfs-datanode 容器还在running，没有被删除
在这里插入图片描述

排错

查看对应docker进程，nfs卡住了。容器的进程 已经是D状态了。
在这里插入图片描述
查看机器日志：dmesg -T查看NAS挂载有断开过
在这里插入图片描述

问题分析

删除了Pod 没有重建，应该就和残留的container 清理不掉有关，NAS之前有断开的情况，挂载问题是客户的没办法直接解决，需要重启服务器解决问题。

clear_soul
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
K8S容器云平台排错一览图
01-04
K8S容器云平台排错一览图
k8s中删除pod后仍然存在问题
weixin_30916125的博客
03-08 1793
分析： 是因为删除了pod，但是没有删除对应的deployment，删除对应的deployment即可 实例如下： 删除pod [root@test2 ~]# kubectl get pod -n jenkins NAME READY STATUS RESTARTS AGE jenkins2-...
k8s pod删不掉
zenglingmin8的博客
05-28 1572
问题现象：pod一直删除不掉问题 起因：在pod运行过程中，修改了其deployment，导致pod一直删不掉 操作过程： 删除pod，删不掉 强制删除pod，依然删除不了 删除deployment，旧的pod依然删不掉，因为deployment已经发生变更 查看pod的详情，发现如下内容 kubectl get pods -n architect wx-xxx-luna-5b5755b69-zwrhb -oyaml apiVersion: v1 kind: Pod metadata: annota
k8s为什么删除了pod但是还是没删除掉的问题，deployment在影响
吃素的哈士奇de博客
03-20 581
我找的时候，还是有dashboard-metrics-scraper-546d6779cb-4x6xf这个pod。但是我想删掉，却告诉我这个pod不存在。执行：kubectl get pods --all-namespaces，获取dashboard相关的pod。
解决K8S删除pod后又新建pod
weixin_45387943的博客
02-25 5016
删除指定Pod [root@master ~]# kubectl delete pod nginx -n dev pod "nginx" deleted 此时，显示删除Pod成功，但是再查询，发现又新产生了一个 [root@master ~]# kubectl get pods -n dev NAME READY STATUS RESTARTS AGE nginx 1/1 Running 0 21s 这是因为当前Pod是由Pod控制器创建的，控制器会
k8s环境，服务器重启后，所有节点状态为noready，pod状态为running，但是docker容器一个都没起来
simpleness_的博客
06-11 667
k8s环境，服务器重启后，所有节点状态为noready，pod状态为running，但是docker容器一个都没起来
Kubernetes—k8s中Service实例出现污点
qq_50685659的博客
09-24 730
Service可以看做是一组同类的Pod对外的访问接口，借助Service，应用可以方便的实现服务发现和负载均衡。 Service在很多情况下只是一个概念，真正起作用的其实是kube-proxy服务进 程，每个Node节点上都运行了一个kube-proxy的服务进程。当创建Service的时候会通过API Server向etcd写入创建的Service的信息，而kube-proxy会基于监听的机制发现这种Service的变化，然后它会将最新的Service信息转换为对应的访问规则。
从k8s集群中移除节点后重新加入
init_zq的博客
03-05 1196
从k8s集群中移除节点后重新加入 master节点执行： 1.sudo kubectl get no 查看当前所有node节点 2.sudo kubectl drain <node> --delete-local-data –force –ignore-daemonsets 3.sudo kubectl delete node <your-node> work 节点执行： 4.在被删除节点<node>执...
记一次K8s EFK(elasticsearch+fluentd+kibana)搭建排错经历
01-07
部署教程：https://qhh.me/2019/09/05/Kubernetes-基于-EFK-技术栈的日志收集实践/ yaml地址：...部署教程里面的两个注意 Elasticsearch 数据持久化：默认 EmptyDir 的方
kubernetes (k8s) 集群二进制手工安装
06-19
虽说我们可以使用比如Kubeadm工具可以简化k8s集群的部署，但这却对我们k8s的各个组件如何协同工作，及排错造成困扰。本套课程主要是以二进制的方式来一步步的安装k8s的集群，来加深我们对K8s集群进一步的理解。同时...
Kubernetes(k8s)应用管理利器Helm（2020）
06-19
随之更深层次的讲解了chart模板相关的知识，比如控制语句，命名的模板、通过Files函数对文件的访问、及模板的定义相关排错。随后说明了在生产中常用的钩子、测试、及从Helm2到Helm3的不同之处及平滑升级、构建本地的...
RedHat高可用集群原理、构建与排错
07-23
资源名称：Red Hat高可用集群原理、构建与排错内容简介： Red Hat HA工作原理流程：Active/Backup模式;产生并检查统一配置文件：cluster.conf;通过组播或者广播传递Heartbeat或totem;Quorate：Votes>=1/2 total ...
docker overlay扩容
kuun993的博客
05-15 203
overlay 使用率已接近100%，导致docker容器写不了数据。
Docker：基础概念、常用命令
想听风雨的博客
05-17 499
Docker：基础概念、常用命令
Kubernetes 之 Pod 标签、节点选择器和节点亲和性
千度阿三的博客
05-18 330
我们在创建 Pod 资源的时候，Pod 会根据 Scheduler 进行调度，默认会调度到随机的一个工作节点。如果我们想要将 Pod 调度到指定节点或者调度到一些具有相同特点的 Node 节点，可以使用 Pod 中的nodeName或者字段来指定要调度到的 Node 节点。节点亲和性是 Pod 在调度过程中一系列调度约束规则，主要针对节点选择器的匹配，匹配度越高，则该节点执行该 Pod 的概率就越高。节点亲和性分为硬亲和性和软亲和性，硬亲和性代表必须满足，软亲和性在不满足约束规则的条件上，仍可以随机启动。
谷粒商城环境准备 docker版
程序员三木的博客
05-16 853
版权声明：本文为CSDN博主「夕阳下美了剪影」的原创文章，遵循CC 4.0 BY-SA版权协议，转载请附上原文出处链接及本声明。原文链接：https://blog.csdn.net/qq_38401285/article/details/86483278常见问题2：cnpm - 解决 " cnpm : 无法加载文件 C:\Users\93457\AppData\Roaming\npm\cnpm.ps1，因为在此系统上禁止运行脚本。有关详细信息。。。
docker 进入容器报错OCI runtime exec failed
最新发布
Assassinhanc的博客
05-21 97
执行命令 docker exec -it 容器id /bin/sh 可进入。今天进入docker容器的时候一直报错。
docker本地（非公网）搭建gpt-4-all 和 GPTS 多模态对话页面(支持Chat Gpt4o「omni」)
缘友一世的博客
05-16 450
新模型 GPT-4o，其中的「o」代表「omni」（即全面、全能的意思），这个模型同时具备文本、图片、视频和语音方面的能力。
docker学习和常用命令
OutRoading的博客
05-14 190
镜像仓库datahub。
k8s集群正常运行中，电脑突然没电关机重启后etcd和apiserver服务启动不起来，怎么排错
06-03
您可以尝试以下步骤进行排错： 1. 检查 etcd 数据目录是否正常。etcd 的数据目录通常位于 /var/lib/etcd 目录下，您可以检查该目录是否存在以及目录下的数据文件是否完整。 2. 检查 etcd 的日志文件。etcd 的日志...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值