Calico-node进程导致机器CPU资源占满问题

最新推荐文章于 2024-04-29 06:39:54 发布
最新推荐文章于 2024-04-29 06:39:54 发布
阅读量2.5k 收藏 1
点赞数 1
分类专栏： K8S、calico-node 文章标签： kubernetes 运维
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/hclhcl12/article/details/118977979
版权
本文描述了一个由于Calico-node进程导致的服务器CPU资源完全被占满的问题。在排查过程中，发现kubelet和docker进程也参与其中，存在创建容器失败的情况。通过检查系统日志，发现在9099端口存在冲突。经过一系列尝试，包括停用kubelet、重启docker、删除相关容器，甚至重启主机，最终解决了问题。
摘要由CSDN通过智能技术生成

Calico-node进程导致机器CPU资源占满问题

1、问题现象
在这里插入图片描述

截图上可以看出CPU的资源已经被占满，这个截图CPU的数值还算好看的，基本上是0空闲。
#看了一下进程，想知道到底跑的什么进程吧CPU跑满的。
#看上图可以看出来，导致跑满CPU的原因是跑calico-node的pod导致，但按理说跑一个calico-node不至于吧机器的CPU全部跑满。

2、问题处理
带着疑问，我首先先将占资源高的calico-node进程杀死
在这里插入图片描述

杀死后看了下，仍然没有解决问题
然后分别看了下，kubelet状态、docker状态
在这里插入图片描述

查看后感觉就是kubelet一直在给docker请求，要求docker创建相关容器，但是docker也在做并且一直在做，但是就是无法创建成功。

然后又在master上看了下这个node下calico-node的pod状态，在建立的过程中报存活探针和就绪探针错误。

针对以上问题，我先停掉kubelet，停止创建pod，发现进程中runc和dockerd仍然占用大量的CPU资源，占到50以上，但是机器已

最低0.47元/天 解锁文章
studyhard3538
关注
专栏目录
【k8s故障处理篇】calico-node启动失败“Felix is not live: Get “http://localhost:9099/liveness” 解决办法(V1.30.3版本）
jks212454的博客
08-06 147
【k8s故障处理篇】calico-node启动失败“Felix is not live: Get “http://localhost:9099/liveness” 解决办法(V1.30.3版本）
K8S集群calico报错Calico node ‘binary-k8s-master1‘ is already using the IPv4 address 172.18.0.1
江晓龙的博客
11-26 2048
k8s calico报错Calico node ‘binary-k8s-master1’ is already using the IPv4 address 172.18.0.1 1.问题描述 将pinpoint微服务链路监控以docker方式部署在了k8s集群中的node节点上，刚开始没有问题，过了一天后，发现calico组件全部启动失败，并且集群中的所有微服务无法提供服务 calico报错如下 # kubectl logs -f calico-node-p6hsk -n kube-system 2021
Kubernetes 网络插件 Calico 完全运维指南
君逍遥o
09-04 1342
Calico 是一种开源网络和网络安全解决方案，适用于容器，虚拟机和基于主机的本机工作负载。Calico 支持广泛的平台，包括 Kubernetes，docker，OpenStack 和裸机服务。Calico 后端支持多种网络模式。
Kubernetes的Calico网络插件介绍
最新发布
专注于数据库技术分享，包含但不限于Oracle，MySQL，PostgreSQL，ElasticSearch及国产数据库等
04-29 1056
Calico是一款强大的开源网络和网络策略解决方案，专为云原生环境设计，尤其适用于Kubernetes集群。它以其高度可扩展性、高性能、细粒度的网络策略控制和广泛的平台支持而受到广大用户的青睐。
calico-node-3.10.2（用docker load -i加载）.rar
07-14
calico-node-3.10.2（用docker load -i加载）.rar
calico-node组件分析内存、cpu使用量（开启pprof功能）
weixin_49497353的博客
03-28 374
为了更好地了解calico-node组件的cpu、内存使用情况，可以尝试开启pprof debug来分析。
「NodeJs」nodejs 定时任务
AIGC大前端小王子
02-27 1361
nodejs 定时访问网页。
k8s 使用 calico 作为 CNI ，calico-node 启动失败
月光游侠
10-29 9948
1 问题描述 k8s 集群，使用 calico 作为 CNI，calico 的安装配置参考 https://docs.projectcalico.org/getting-started/kubernetes/hardway/overview。 calico 需要 k8s 运行 calico-node 的 daemonset 在每个node 上运行一个 calico-node，calico-node 里面包括了Felix，BIRD，confd组件。calico-node 是 node 上网络能够正常使用的必要
性能分析-Kubernetes-cpu篇
魔都虫师的博客
02-27 691
CPU时间 正如我在第一篇文章中指出，限制CPU时间要比限制内存限制更加复杂，好消息是限制CPU也是根据我们前面所了解到的cgroups机制控制的，与限制内存的原理是通用的，我们只需要关注一些细节即可。我们从向前文的例子里添加CPU时间限制开始： resources: requests: memory: 50Mi cpu: 50m limits: memory: 100Mi cpu: 100...
quincy版ceph在kubernetes-1.24环境下部署
r65115257的博客
08-18 89
提前准备一块50G祼盘IPCPUMEMDISK8C16G100+50G8C16G100+50G8C16G100+50G8C16G100+50G版本名称版本操作系统K8sv1.24.00cephv17.2.5。
K8S Calico网络插件
「 虚幻私塾」
05-24 1984
🚀 优质资源分享 🚀 学习路线指引（点击解锁） 知识定位 人群定位 🧡 Python实战微信订餐小程序 🧡 进阶级 本课程是python flask+微信小程序的完美结合，从项目搭建到腾讯云部署上线，打造一个全栈订餐系统。 💛Python量化交易实战💛 入门级 手把手带你打造一个易扩展、更安全、效率更高的量化交易系统 目录 0.前言 1.Calico概述 1.1.Calico组件 1.2.Calico网络实现 1.3.了解Calico对CIDR子网的划分（blockSiz
kubernetes运维---calico之ipip模式抓包分析
qq_34391821的博客
05-07 1826
一、calico介绍 Calico是Kubernetes生态系统中另一种流行的网络选择。虽然Flannel被公认为是最简单的选择，但Calico以其性能、灵活性而闻名。Calico的功能更为全面，不仅提供主机和pod之间的网络连接，还涉及网络安全和管理。Calico CNI插件在CNI框架内封装了Calico的功能。 Calico是一个基于BGP的纯三层的网络方案，与OpenStack、Kubernetes、AWS、GCE等云平台都能够良好地集成。Calico在每个计算节点都利用Linux Kernel
【kubernetes/k8s源码分析】calico node源码分析
zhonglinzhang
07-28 5415
calico node 工作内容 镜像命令 start_runit #!/bin/sh # From https://github.com/faisyl/alpine-runit env > /etc/envvars /etc/rc.local retval=$? if [ $retval -ne 0 ]; then echo >&2 "Calico node ...
calico
weixin_34392906的博客
08-27 300
为什么80%的码农都做不了架构师？>>> ...
Readiness probe failed: caliconode is not ready: BIRD is not ready: BGP not established w
weixin_43999753的博客
09-23 2301
Calico 问题 :Readiness probe failed: caliconode is not ready: BIRD is not ready: BGP not established with 10.1.126.32 解决方法： 调整calicao 网络插件的网卡发现机制，修改IP_AUTODETECTION_METHOD对应的value值。官方提供的yaml文件中，ip识别策略（IPDETECTMETHOD）没有配置，即默认为first-found，这会导致一个网络异常的ip作为nod
【水文】calico-node 启动失败 Init:CrashLoopBackOff
大健的日常的博客
12-02 9819
Defaulted container "calico-node" out of: calico-node, upgrade-ipam (init), install-cni (init), mount-bpffs (init) Error from server (BadRequest): container "calico-node" in pod "calico-node-4j7td" is waiting to start: PodInitializing
k8s网络插件之Calico
热门推荐
梵修
12-01 1万+
Calico是一套开源的网络和网络安全解决方案，用于容器、虚拟机、宿主机之前的网络连接，它是一个纯三层的虚拟化网络解决方案，它把每个节点都作为一个虚拟路由器，并把每个节点上的Pod当作是节点路由器后的一个终端设备并为其分配一个IP地址。各节点路由器通过BGP协议生成路由规则，从而实现不通节点上Pod间的通信。如下图：与Flannel相比，Calico的一个显著优势是对网络策略的支持，它允许用户定义访问控制规则以管控进出Pod的数据报文，从而为Pod间的通信施加安全策略。
k8s中calico网络组件部署时一个节点一直处于Pending状态
weixin_45294285的博客
03-12 2598
default-scheduler 0/3 nodes are available: 1 Insufficient cpu, 2 node(s) didn't match Pod's node affinity/selector
calico-node Init:CrashLoopBackOff
07-27
对于 'calico-node Init:CrashLoopBackOff' 错误，这通常表示 Calico 节点的初始化遇到了问题，并进入了 CrashLoopBackOff 状态。 CrashLoopBackOff 状态意味着容器在启动后立即崩溃并重启，然后再次崩溃，周而复始...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值