Prometheus监控k8s集群使用邮箱和微信告警！_prometheus配置邮箱、微信告警(1)

最新推荐文章于 2024-05-23 13:09:58 发布

2401_84790808

最新推荐文章于 2024-05-23 13:09:58 发布

阅读量483

点赞数 5

文章标签：单元测试功能测试学习

本文链接：https://blog.csdn.net/2401_84790808/article/details/138942104

版权

既有适合小白学习的零基础资料，也有适合3年以上经验的小伙伴深入学习提升的进阶课程，涵盖了95%以上软件测试知识点，真正体系化！

由于文件比较多，这里只是将部分目录截图出来，全套包含大厂面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频，并且后续会持续更新

需要这份系统化的资料的朋友，可以戳这里获取

04、安装

前提需要有helm环境：

安装成功，查看pod状态会发现有两个处于pending状态，是因为需要请求pv

这里使用hostPath来创建pv

查看pod状态会发现有个pod会报错，并查看日志是报错是容器名不同

真正的原因是因为使用的hoatPath，pvc请求的权限不够，到worker节点给对应的hostpath加777的权限即可，这是我通过rancher查看到的报错

05、访问web界面

这里还需要修改Prometheus-server的Port类型为NodePort。

06、安装grafana

由于grafana没有使用持久存储，根据需求修改为hostpath持久存储，需要注意的是，宿主机目录也需要777的权限

还需要需改grafana的svc类型为NodePort

访问web界面，用户admin，密码：admin123

07、导入Prometheus

填入Prometheus的地址

则表示验证通过

导入grafana的模板

这里选择Prometheus

即可看到灰常华丽的仪表盘了

这里提供几个模板的编号：

08、配置alertmanager告警

1、关联alertmanager和prometheus

添加alertmanager的服务名称

添加告警规则

rules.yml:|

    groups:
    - name: Host
      rules:
      - alert: HostMemory Usage
        expr: sum(kube_pod_container_resource_requests_memory_bytes) / sum(kube_node_status_allocatable_memory_bytes) * 100 >  80
        for: 1m
        labels:
          name: Memory
          team: wechat
          severity: Warning
        annotations:
          summary: " {{ $labels.appname }} "
          description: "宿主机内存使用率超过80%."
          value: "{{ $value }}"
      - alert: HostCPU Usage
        expr: sum(kube_pod_container_resource_requests_cpu_cores) / sum(kube_node_status_allocatable_cpu_cores) * 100 > 60
        for: 1m
        labels:
          name: CPU
          team: wechat
          severity: Warning
        annotations:
          summary: " {{ $labels.appname }} "
          description: "宿主机CPU使用率超过60%."
          value: "{{ $value }}"
      - alert: HostFilesystem Usage
        expr: (sum(node_filesystem_size_bytes{device!="rootfs"}) - sum(node_filesystem_free_bytes{device!="rootfs"})) / sum(node_filesystem_size_bytes{device!="rootfs"}) >  0.8
        for: 1m
        labels:
          name: Disk
          team: wechat
          severity: Warning
        annotations:
          summary: " {{ $labels.appname }} "
          description: " 宿主机 [ {{ $labels.mountpoint }} ]分区使用超过80%."
          value: "{{ $value }}%"

保存后重新启动Prometheus服务。

2、配置企业微信告警

编写告警模板