k8s常见故障排查一点通

置顶 已于 2022-08-25 20:48:24 修改
阅读量2.6k 收藏 8
点赞数 1
分类专栏： 玩会k8s实战 文章标签： kubernetes docker linux 运维 容器
于 2021-12-21 21:50:52 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Friendsofthewind/article/details/122059324
版权
本文介绍了k8s中常见的故障类型及其解决方案，包括Pod应用实例异常、节点异常、本地存储问题、语法错误和ipvs安装问题。通过使用kubectl命令进行问题定位，如查看Pod状态、日志和描述，以及检查节点状态和网络插件。同时，提出了针对不同问题的具体解决办法，如调整资源配置、禁用swap、修复语法错误和安装ipvs。
摘要由CSDN通过智能技术生成

问题分类

请添加图片描述
解决方案：常用四大命令

1)定位问题：
查看k8s Master组件的状态：
在这里插入图片描述

查看Pod在节点的详情：kubectl get pod -o wide
在这里插入图片描述

查看Pod的配置是否正确：kubectl get pod pod-name -o yaml
查看Pod内部详情:kubectl describe pod pod-name -n namespace
查看pod里对应容器日志： kubectl logs pod-name -o container-name

2）根据问题分类去解决。

一、pod应用实例异常排查：

异常显示：
pending:API Server已创建pod，但在p

了解本专栏 订阅专栏 解锁全文 超级会员免费看
Friends of the wind
关注
专栏目录
订阅专栏
面经 - OpenStack（Docker、Django、K8S、SDN）知识点
RBK的博客
02-24 4337
概述 云计算是一种采用按量付费的模式，基于虚拟化技术，将相应计算资源（如网络、存储等）池化后，提供便捷的、高可用的、高扩展性的、按需的服务（如计算、存储、应用程序和其他 IT 资源）。 云计算基本特征： 自主服务：可按需的获取云端的相应资源（主要指公有云）； 网路访问：可随时随地使用任何联网终端设备接入云端从而使用相应资源。 资源池化： 快速弹性：可方便、快捷地按需获取和释放计算资源。 按量计费： 常见的部署模式 公有云 私有云 社区云 混合云 三种服务模式 IaaS：云服务商将IT系统的基础设施
Docker+k8s 容器云建设中 10 个常见难点
网站开发专家
04-09 2130
随着云计算、DevOps和微服务应用架构的发展，容器云成为IT的主要基础设施平台之一。以Docker为代表的容器技术，是目前有效的应用交付模式之一;以Kubernetes为代表的容器编排技术，是目前流行的应用部署方案。云平台的基础设施、DevOps的工程体系和微服务应用架构是IT技术转型的底座。而容器云又是这个底座下的一块基石。 下面几个问题是在Docker+K8S容器云建设过程中，最常被问...
Kubernetes集群问题定位与分析
最新发布
Linux运维老纪的博客
09-01 989
在 Docker 容器中运行 Java 程序，如果对内存及 CPU 资源不做任何限制，默认获取到 的是整个宿主机的内存及 CPU 资源。如果容器内 Java 程序出现异常，占用内存过多，可 能会导致应用无法正常访问，严重的会出现 OOM 现象。本章通过在 K8S 内运行不同版本 的 Java 程序，根据配置的不同呈现出不同的结果，使广大读者在实际的工作、学习中能够 避免出现此类问题.
运维工程师面试题 55 道
lushaoso_g的博客
09-12 2182
K8s 是 kubernetes 的简称，其本质是一个开源的容器编排系统，主要用于管理容器化的应用，其目标是让部署容器化的应用简单并且高效（powerful）,Kubernetes 提供了应用部署，规划，更新，维护的一种机制。说简单点：k8s 就是一个编排容器的系统，一个可以管理容器应用全生命周期的工具，从创建应用，应用的部署，应用提供服务，扩容缩容应用，应用更新，都非常的方便，而且还可以做到故障自愈，所以，k8s 是一个非常强大的容器编排系统。
Kubernetes排查流程
我的博客
05-21 528
有一个不错的排查流程，在这里。 https://learnk8s.io/troubleshooting-deployments 还有PDF版本。 https://learnk8s.io/a/troubleshooting-kubernetes.pdf
k8s基本问题排查
吴广智的博客
05-20 688
排查pod故障 #查看pod是否正常 kubectl get pods -n fronted #常见pod排查命令 kubectl logs <pod name> 有助于检索 Pod 中容器的日志 kubectl describe pod <pod name> 对检索与 Pod 相关的事件列表很有用 kubectl get pod <pod name> -o yaml 可提取 Kubernetes 中存储的 Pod 的 YAML 定义； kubectl exec -t
k8s第六节 故障排查
dazer的专栏
01-29 323
k8s故障排查，k8s组件比较多，经常会有一些问题，需要排查。 一、kubeadm安装k8s 组件controller-manager 和scheduler状态 Unhealthy 参见：kubeadm安装k8s 组件controller-manager 和scheduler状态 Unhealthy
避免业务中断，K8s节点故障排查攻略，速来围观！
虫虫的博客
04-01 910
避免业务中断，K8s节点故障排查攻略，速来围观！
K8s常见故障排查及解决方案
bacawa的博客
02-20 3894
K8s常见故障排查及解决方案
k8s排错指南
duansamve的博客
03-12 1181
查看node状态→查看pod状态→查看service流量是否路由到pod→查看ingress配置是否正确→查看kubelet系统日志。
超时与重试浅析
kshzhaohui的专栏
05-24 818
前言 超时可以说是除了空指针我们最熟悉的异常了，从系统的接入层，到服务层，再到数据库层等等都能看到超时的身影；超时很多情况下同时伴随着重试，因为某些情况下比如网络抖动问题等，重试是可以成功的；当然重试往往也会指定重试次数上限，因为如果程序确实存在问题，重试多少次都无济于事，那其实也是对资源的浪费。 为什么要设置超时 对于开发人员来说我们平时最常见的就是设置超时时间，比如数据库超时设置、缓存超时设置、中间件客户端超时设置、HttpClient超时设置、可能还有业务超时；为什么要设置超时时间，因为如果不设置超时
k8s常用故障排查方式
qiaotl的博客
07-11 3255
介绍如何通过命令查看日志或者安装node-problem-detector排查集群错误。
【Kubernetes】当K8s出现问题时，从哪些方面可以排查
m0_75058342的博客
08-06 5419
K8s问题的排查：1. POD启动异常、部分节点无法启动pod、2. 审视集群状态、3. 追踪事件日志、4. 聚焦Pod状态、5. 检查网络连通性、6. 审视存储配置、7. 研究容器日志、8. K8S集群网络通信、9. 问题：Service 是否通过 DNS 工作？的讲解
k8s故障排查一
zuo84526076的博客
08-06 1091
问题一：报错 cannot allocate memory 或者 no space left on device ，修复K8S内存泄露问题 问题描述 一. 当k8s集群运行日久以后，有的node无法再新建pod，并且出现如下错误，当重启服务器之后，才可以恢复正常使用。查看pod状态的时候会出现以下报错。 applying cgroup … caused: mkdir …no space left on device 或者在describe pod的时候出现cannot allocate memory 这时候
K8s常见故障排查思路
bingzhali1507的博客
08-29 1569
step_1: kubectl get node 1. 查看集群节点是否处于 Ready 状态 a. 如果是Ready状态，再使用kubectl describe node <nodeName>, 资源使用率 b. 如果是NotReady，则使用kubectl get node -owide 查看对应的节点，然后登陆到对应节点上, 查看kubele...
K8S故障排除方法
weixin_30642305的博客
04-19 488
1.查看pods哪些是有问题的，Runningg正常，其他异常；/opt/kubernetes/bin/kubectl get pods --all-namespaces -owideNAMESPACE NAME READY STATUS RESTARTS AGE IP NODE NOMINA...
K8S故障排查思路
WeiJiaXiaoBao的专栏
01-28 584
K8S故障排查思路 这张图的原文地址：https://learnk8s.io/troubleshooting-deployments
K8S生产环境故障排查一（POD和节点问题排查）
qq_25037905的博客
05-24 6295
一、POD启动异常、部分节点无法启动pod 容器里管理应用 pod是k8S中最小调度单元,POD里面的容器共享pod的空间、资源、网络、存储等。 pod管理一个容器。 pod管理多个容器 pod出现异常的原因： 1、资源过剩： 大量POD在同一个物理节点，出现资源占用太多导致物理节点宕机。 2、内存和CPU超标：pod中的应用出现内存泄露，导致pod内存迅速增多，pod kill了影响节点正常提供服务。（解决办法：压测占用多少内存和CPU，做资源限制；） 3、网络问题：导致POD无法通信（解.
k8s常用故障排查
中国华的博客
05-08 5169
一、查看k8s Master组件的状态 下面日志：kubet get pods没反应，推断api server可能有问题。于是，查询api server进程，发现是在的，要看下api server日志了，有没有报错信息。 这里会有疑问，api server日志在哪儿呀？ 这里会有疑问，api server日志在哪儿呀？ 第一种：ps -ef | grep kube-apiserver| gre...
k8s常见故障及处理方法
08-11
Kubernetes (k8s)是一个用于容器编排和管理的开源平台，但在实际使用中可能会遇到一些常见的故障。以下是几个常见的k8s故障及其处理方法： 1. Pod无法启动或CrashLoopBackOff：这可能是由于应用程序错误、资源不足或配置问题引起的。您可以通过查看Pod的日志和事件来了解具体原因。修复方法可能包括修复应用程序错误、调整资源配额或修改配置文件。 2. 节点不可用：如果一个或多个节点无法正常工作，您可能会遇到服务中断的问题。您可以通过检查节点的状态、重启节点或替换故障节点来解决这个问题。另外，您可以使用副本控制器来确保Pod在其他可用节点上重新启动。 3. 网络问题：如果Pod无法相互通信或与外部服务通信，可能是由于网络配置错误、防火墙规则或网络故障引起的。您可以检查网络配置、检查防火墙规则并确保网络连接正常。 4. 存储问题：如果您使用了持久卷（Persistent Volume）并且无法访问存储，可能是由于存储配置错误、权限问题或存储故障引起的。您可以检查存储配置、修复权限问题或联系存储管理员来解决这个问题。 5. 资源耗尽：如果您的集群资源不足，可能会导致Pod无法启动或运行缓慢。您可以通过添加更多节点、调整资源配额或优化应用程序来解决这个问题。 这些只是一些常见的k8s故障和处理方法的示例。实际情况可能因您的环境和配置而异。在遇到故障时，建议您查看相关日志、事件和监控信息，以便更好地诊断和解决问题。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Friends of the wind

您的是我坚持原创免费作品的不懈

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值