Kube-Prometheus Operator 报警 KubeControllerManagerDown

最新推荐文章于 2024-08-26 02:55:48 发布

45° 微笑

最新推荐文章于 2024-08-26 02:55:48 发布

阅读量2.1k

点赞数

分类专栏： prometheus k8s

本文链接：https://blog.csdn.net/nange_nice/article/details/108886694

版权

k8s 同时被 2 个专栏收录

8 篇文章 0 订阅

订阅专栏

prometheus

2 篇文章 0 订阅

订阅专栏

博客讲述了在Kubernetes集群中，由于KubeControllerManager在Prometheus目标发现中消失导致的监控故障。解决方案是创建一个Service来暴露KubeControllerManager的metrics端点，并更新配置文件使Prometheus能够发现该服务。通过这个过程，可以确保Prometheus能够正确监控KubeControllerManager的状态。

摘要由CSDN通过智能技术生成

报错信息：
KubeControllerManager has disappeared from Prometheus target discovery.
集群版本：

k8s 1.18
kube-prometheusr elease1.6
docker 19.3

根据ServiceMonitor—> Service—>endpoints(pod) 服务发现机制查看到KubeControllerManager没有对应的svc 所以我们需要创建svc，配置文件如下：

kind: Service
apiVersion: v1
metadata:
  name: kube-controller-manager
  labels:
    k8s-app: kube-controller-manager
  namespace: kube-system
spec:
  clusterIP: None
  ports:
    - protocol: TCP
      port: 10257
      targetPort: 10257
      name: https-metrics
  selector:
    component: kube-controller-manager

重新apply下配置文件，查看prometheusr target即可

prometheusr 如果显示targetDown的话，修改配置文件/etc/kubernetes/manifests/kube-controller-manager.yaml 相关字段，保存自动重启，集群的话主节点都要修改