九、kubernetes部署prometheus监控

luohailin_

已于 2024-09-15 22:53:41 修改

阅读量1k

点赞数 16

文章标签： kubernetes prometheus 容器

于 2024-09-15 22:52:41 首次发布

版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

本文链接：https://blog.csdn.net/luohailin_/article/details/142290043

版权

目录

一 Prometheus简介

1.1 Prometheus架构

二在k8s中部署Prometheus

2.1 下载部署Prometheus所需资源

2.3 登陆grafana

2.4 导入面板

2.5 访问Prometheus 主程序

三监控使用示例

3.1 建立监控项目

3.2 监控调整

一 Prometheus简介

Prometheus是一个开源的服务监控系统和时序数据库

其提供了通用的数据模型和快捷数据采集、存储和查询接口

它的核心组件Prometheus服务器定期从静态配置的监控目标或者基于服务发现自动配置的目标中进行拉取数据

新拉取到啊的数据大于配置的内存缓存区时，数据就会持久化到存储设备当中

1.1 Prometheus架构

1.1.1 组件功能：

监控代理程序：如node_exporter：收集主机的指标数据，如平均负载、CPU、内存、磁盘、网络等等多个维度的指标数据。
kubelet（cAdvisor）：收集容器指标数据，也是K8S的核心指标收集，每个容器的相关指标数据包括：CPU使用率、限额、文件系统读写限额、内存使用率和限额、网络报文发送、接收、丢弃速率等等。
API Server：收集API Server的性能指标数据，包括控制队列的性能、请求速率和延迟时长等等
etcd：收集etcd存储集群的相关指标数据
kube-state-metrics：该组件可以派生出k8s相关的多个指标数据，主要是资源类型相关的计数器和元数据信息，包括制定类型的对象总数、资源限额、容器状态以及Pod资源标签系列等。
每个被监控的主机都可以通过专用的exporter程序提供输出监控数据的接口，并等待Prometheus服务器周期性的进行数据抓取
如果存在告警规则，则抓取到数据之后会根据规则进行计算，满足告警条件则会生成告警，并发送到Alertmanager完成告警的汇总和分发
当被监控的目标有主动推送数据的需求时，可以以Pushgateway组件进行接收并临时存储数据，然后等待Prometheus服务器完成数据的采集
任何被监控的目标都需要事先纳入到监控系统中才能进行时序数据采集、存储、告警和展示
监控目标可以通过配置信息以静态形式指定，也可以让Prometheus通过服务发现的机制进行动态管理

二在k8s中部署Prometheus

注意！！！：部署Prometheus一定要注意，需要部署helm和微服务地址池打开，为LoadBalancer分配vip

2.1 下载部署Prometheus所需资源

[root@k8s-master helm]# tar zxf kube-prometheus-stack-62.6.0.tgz
[root@k8s-master helm]# ls
kube-prometheus-stack  kube-prometheus-stack-62.6.0.tgz
[root@k8s-master helm]# cd kube-prometheus-stack/
[root@k8s-master kube-prometheus-stack]# ls
Chart.lock  charts  Chart.yaml  CONTRIBUTING.md  README.md  templates  values.yaml


#根据所有项目中的values.yaml中指定的image路径下载容器镜像并上传至harbor仓库



#利用helm安装Prometheus
[root@k8s-master kube-prometheus-stack]# kubectl create namespace kube-prometheus-stack

#注意，在安装过程中千万别ctrl+c
[root@k8s-master kube-prometheus-stack]# helm  -n kube-prometheus-stack install kube-prometheus-stack  .
NAME: kube-prometheus-stack
LAST DEPLOYED: Tue Sep 10 20:56:53 2024
NAMESPACE: kube-prometheus-stack
STATUS: deployed
REVISION: 1
NOTES:
kube-prometheus-stack has been installed. Check its status by running:
  kubectl --namespace kube-prometheus-stack get pods -l "release=kube-prometheus-stack"

Visit https://github.com/prometheus-operator/kube-prometheus for instructions on how to create & configure Alertmanager and Prometheus instances using the Operator.

#查看所有pod是否运行
[root@k8s-master kube-prometheus-stack]# kubectl --namespace kube-prometheus-stack get pods
NAME                                                        READY   STATUS    RESTARTS   AGE
alertmanager-kube-prometheus-stack-alertmanager-0           2/2     Running   0          103s
kube-prometheus-stack-grafana-74ff665878-psdvh              3/3     Running   0          107s
kube-prometheus-stack-kube-state-metrics-7974795889-8kj6j   1/1     Running   0          107s
kube-prometheus-stack-operator-7966d67576-fh6ld             1/1     Running   0          107s
kube-prometheus-stack-prometheus-node-exporter-stzn2        1/1     Running   0          106s
kube-prometheus-stack-prometheus-node-exporter-vrw2g        1/1     Running   0          107s
kube-prometheus-stack-prometheus-node-exporter-zxtdw        1/1     Running   0          106s
prometheus-kube-prometheus-stack-prometheus-0               2/2     Running   0          103s

#查看svc
[root@k8s-master kube-prometheus-stack]# kubectl -n kube-prometheus-stack get svc
NAME                                             TYPE        CLUSTER-IP       EXTERNAL-IP   PORT(S)                      AGE
alertmanager-operated                            ClusterIP   None             <none>        9093/TCP,9094/TCP,9094/UDP   38s
kube-prometheus-stack-alertmanager               ClusterIP   10.109.139.4     <none>        9093/TCP,8080/TCP            42s
kube-prometheus-stack-grafana                    ClusterIP   10.106.144.184   <none>        80/TCP                       42s
kube-prometheus-stack-kube-state-metrics         ClusterIP   10.104.168.19    <none>        8080/TCP                     42s
kube-prometheus-stack-operator                   ClusterIP   10.104.99.75     <none>        443/TCP                      42s
kube-prometheus-stack-prometheus                 ClusterIP   10.106.220.91    <none>        9090/TCP,8080/TCP            42s
kube-prometheus-stack-prometheus-node-exporter   ClusterIP   10.100.199.149   <none>        9100/TCP                     42s
prometheus-operated    

#修改暴漏方式
[root@k8s-master kube-prometheus-stack]# kubectl -n kube-prometheus-stack edit svc kube-prometheus-stack-grafana
  type: LoadBalancer

各个svc的作用

alertmanager-operated 告警管理

kube-prometheus-stack-grafana 展示prometheus采集到的指标

kube-prometheus-stack-prometheus-node-exporter 收集节点级别的指标的工具

kube-prometheus-stack-prometheus 主程序

2.3 登陆grafana

#查看grafana密码
[root@k8s-master helm]# kubectl -n kube-prometheus-stack get secrets kube-prometheus-stack-grafana -o yaml
apiVersion: v1
data:
  admin-password: cHJvbS1vcGVyYXRvcg==
  admin-user: YWRtaW4=
  ldap-toml: ""
kind: Secret
metadata:
  annotations:
    meta.helm.sh/release-name: kube-prometheus-stack
    meta.helm.sh/release-namespace: kube-prometheus-stack
  creationTimestamp: "2024-09-10T12:57:03Z"
  labels:
    app.kubernetes.io/instance: kube-prometheus-stack
    app.kubernetes.io/managed-by: Helm
    app.kubernetes.io/name: grafana
    app.kubernetes.io/version: 11.2.0
    helm.sh/chart: grafana-8.5.1
  name: kube-prometheus-stack-grafana
  namespace: kube-prometheus-stack
  resourceVersion: "332682"
  uid: fc50f5e2-ebc7-48b0-b3b6-960b8e077d03
type: Opaque

#查看密码
[root@k8s-master helm]# echo -n "cHJvbS1vcGVyYXRvcg==" | base64 -d
prom-operator						#密码
[root@k8s-master helm]# echo "YWRtaW4=" | base64 -d
admin								#用户

2.4 导入面板

官方监控模板：Grafana dashboards | Grafana Labs

2.5 访问Prometheus 主程序

[root@k8s-master helm]# kubectl -n kube-prometheus-stack edit svc kube-prometheus-stack-prometheus
type: LoadBalancer

[root@k8s-master helm]# kubectl -n kube-prometheus-stack get svc kube-prometheus-stack-prometheus
NAME                               TYPE           CLUSTER-IP      EXTERNAL-IP     PORT(S)                         AGE
kube-prometheus-stack-prometheus   LoadBalancer   10.106.220.91   172.25.254.52   9090:34249/TCP,8080:34990/TCP   65m

三监控使用示例

3.1 建立监控项目

#下载示例所需helm项目
[root@k8s-master test]# helm  pull  bitnami/nginx --version 18.1.11
[root@k8s-master test]# ls
nginx-18.1.11.tgz  nginx-exporter-1.3.0-debian-12-r2.tar

[root@k8s-master test]# tar zxf nginx-18.1.11.tgz
[root@k8s-master test]# cd nginx/

#修改项目开启监控
[root@k8s-master nginx]# vim values.yaml
*** ***
metrics:
  ## @param metrics.enabled Start a Prometheus exporter sidecar container
  ##
  enabled: true
  ## Bitnami NGINX Prometheus Exporter image
  ## ref: https://hub.docker.com/r/bitnami/nginx-exporter/tags/
*** ***
  serviceMonitor:
    ## @param metrics.serviceMonitor.enabled Creates a Prometheus Operator ServiceMonitor (also requires `metrics.enabled` to be `true`)
    ##
    enabled: true
    ## @param metrics.serviceMonitor.namespace Namespace in which Prometheus is running
    ##
namespace: "kube-prometheus-stack"
*** ***
    labels:
      release: kube-prometheus-stack			#指定监控标签



[root@k8s-master ~]# kubectl -n kube-prometheus-stack get servicemonitors.monitoring.coreos.com --show-labels

#安装项目，在安装之前一定要上传镜像到仓库中
[root@k8s-master nginx]# helm install  timinglee .
NAME: timinglee
LAST DEPLOYED: Tue Sep 10 23:18:19 2024
NAMESPACE: default
STATUS: deployed
REVISION: 1
TEST SUITE: None
NOTES:
CHART NAME: nginx
CHART VERSION: 18.1.11
APP VERSION: 1.27.1

[root@k8s-master nginx]# kubectl get pods
NAME                             READY   STATUS    RESTARTS   AGE
timinglee-nginx-68dfdd6c-6gc69   2/2     Running   0          15s

root@k8s-master nginx]# kubectl get svc
NAME              TYPE           CLUSTER-IP      EXTERNAL-IP     PORT(S)                                     AGE
kubernetes        ClusterIP      10.96.0.1       <none>          443/TCP                                     7d5h
timinglee-nginx   LoadBalancer   10.99.134.151   172.25.254.53   80:34867/TCP,443:31734/TCP,9113:34171/TCP   61s

[root@k8s-master nginx]# curl  172.25.254.53
<!DOCTYPE html>
<html>
<head>
<title>Welcome to nginx!</title>
<style>
html { color-scheme: light dark; }
body { width: 35em; margin: 0 auto;
font-family: Tahoma, Verdana, Arial, sans-serif; }
</style>
</head>
<body>
<h1>Welcome to nginx!</h1>
<p>If you see this page, the nginx web server is successfully installed and
working. Further configuration is required.</p>

<p>For online documentation and support please refer to
<a href="http://nginx.org/">nginx.org</a>.<br/>
Commercial support is available at
<a href="http://nginx.com/">nginx.com</a>.</p>

<p><em>Thank you for using nginx.</em></p>
</body>
</html>

#压力测试
[root@k8s-master nginx]# ab -c 5 -n 100 http://172.25.254.53/index.html

3.2 监控调整

关注

16
点赞
踩
18

收藏

觉得还不错? 一键收藏
0
评论
复制链接

分享到 QQ

分享到新浪微博

扫一扫

luohailin_ CSDN认证博客专家 CSDN认证企业博客

码龄2年

74: 原创

1万+: 周排名

2万+: 总排名

5万+: 访问

: 等级

1474: 积分

562: 粉丝

727: 获赞

11: 评论

642: 收藏

私信

关注

热门文章

最新评论

九、kubernetes部署prometheus监控
2301_77032027: 非常好，很有帮助
Docker原理及实例
CSDN-Ada助手: 恭喜你这篇博客进入【CSDN每天值得看】榜单，全部的排名请看 https://bbs.csdn.net/topics/619284656。
HCIA网络基础
CSDN-Ada助手: 恭喜您写了第8篇博客，题为“HCIA网络基础”。不仅标题很吸引人，内容也十分有深度和实用性。您的持续创作令人钦佩，让读者们受益匪浅。鉴于您对网络基础的深入探索，下一步，我建议您可以继续拓展主题，例如探讨网络安全或者网络架构等方面的内容。再次感谢您的分享，期待您未来更多的精彩文章！
ENSP的使用及telent
CSDN-Ada助手: 恭喜您写了第9篇博客，标题为“ENSP的使用及telnet”。您对ENSP的使用进行了详细介绍，同时还探讨了telnet的相关内容，展现了您的深入研究和分享精神。非常感谢您持续创作，为读者们提供了有价值的信息。在下一步的创作中，或许您可以考虑进一步拓展ENSP的使用场景，并分享更多有关telnet的技巧或者其他网络管理工具的使用经验。这样可以让读者们更全面地了解相关技术，同时也能够进一步提升您的博客内容的价值。期待您的新作品！
静态路由实验
CSDN-Ada助手: 恭喜您撰写了第10篇博客，题为“静态路由实验”。阅读您的博客，我对您对静态路由的深入实验感到印象深刻。您的博客内容通俗易懂，让我对静态路由有了更深入的了解。在接下来的创作中，我建议您可以探索一下动态路由的实验，以便更全面地了解和比较不同类型的路由。期待您的下一篇博客，再次感谢您的分享和付出！

最新文章

2024

目录

评论

被折叠的条评论为什么被折叠?

到【灌水乐园】发言

查看更多评论

添加红包

成就一亿技术人!

hope_wisdom

发出的红包

实付元

使用余额支付

点击重新获取

扫码支付

钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。