18.云原生可观测性之kubesphere监控报警系统使用实战

已于 2024-01-19 18:01:21 修改
阅读量1.4w 收藏 15
点赞数 18
分类专栏： 私有云+云原生实战 文章标签： 云原生
于 2024-01-19 17:55:12 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_45690643/article/details/135704060
版权

云原生专栏大纲

文章目录

kubesphere监控报警系统介绍

告警是可观测性的重要组成部分，与监控和日志密切相关。KubeSphere 中的告警系统与其主动式故障通知 (Proactive Failure Notification) 系统相结合，使用户可以基于告警策略了解感兴趣的活动。当达到某个指标的预定义阈值时，会向预先配置的收件人发出告警。因此，您需要预先配置通知方式，包括邮件、Slack、钉钉、企业微信和 Webhook。有了功能强大的告警和通知系统，您就可以迅速发现并提前解决潜在问题，避免您的业务受影响。

监控功能与使用

监控系统介绍

• 基于Prometheus生态
• 多租户隔离
• 多维度监控
• 全面丰富的指标
• 灵活多样的展现方式

集群状态监控

集群状态监控
image.png

物理资源监控

集群资源

image.png

节点资源

image.png

Kubernetes核心组件监控

API Server监控

image.png

Scheduler监控

image.png

应用资源监控

应用资源监控

  • 管理员视角
    • 集群层级
      • 项目与应用资源统计
      • 用量排行
  • 普通用户视角
    • 企业空间层级
    • 项目层级
    • 工作负载层级
      • 容器组层级
      • 容器层级

集群层级

项目与应用资源统计

image.png

用量排行

image.png

企业空间层级

image.png

项目层级

image.png

工作负载层级

image.png

该工作负载包括3个容器组

image.png

容器组层级

image.png

容器层级

image.png
image.png

基于租户的告警与通知

告警功能介绍

  • 兼容Prometheus规则（KubeSphere3.1开始)
  • 多租户支持
  • 内置平台告警策略
  • 规则配置方式

集群告警

内置告警策咯

告警策略入口
image.png

物理资源（cpu/内存/存储）
  1. cpu告警策略

image.png

  1. 内存告警策略

image.png

  1. 节点文件系统告警策略

image.png

  1. volume pv持久卷告警策略

image.png

核心组件（k8s/etcd等）

image.png

自定义规则配置策咯

  1. 自定义规则配置入口

image.png

规则模板创建自定义规则

节点（cpu/内存/磁盘/网络/容器组利用率）

  1. 自定义节点cpu过高报警策略

image.png

  1. 设置报警阈值

image.png

  1. 报警消息设置

image.png

  1. 查看自定义告警策略详情

image.png
等待1分钟触发报警：
image.png
image.png

  1. 添加钉钉群机器人

image.png

  1. 重新编辑策略，等待1分钟查看钉钉群是否会接收到报警通知

image.png

自定义规则

通过已有指标配合PromQL自定义报警策略，Querying basics | Prometheus

# 不可用副本 / 期望副本 > 0.3
kube_deployment_status_replicas_unavailable / kube_deployment_spec_replicas > 0.3

image.png

应用告警

  • 规则模板配置策略 (cpu/内存/网络/副本不可用）
    • 部薯
    • 有状态副本集
    • 守护进程集
  • 自定义规则配置策略
  1. 进入企业空间项目下创建应用报警策略

image.png

  1. 填写策略基本信息

image.png

  1. 选择资源类型和报警规则

image.png

  1. 填写报警信息

image.png

  1. 查看钉钉群报警信息

image.png

KubeSphere 自定义监控面板

  • kubesphere 自定义监控
  • kubesphere 导入grafana监控模板
  • 使用自定义监控面板监控gpu

自定义监控

数据模型

https://github.com/kubesphere/monitoring-dashboard/tree/master/config/crd/bases

kubectl api-resources | grep dashboard

image.png

自定义监控面板

  1. 创建自定义监控面板

image.png

  1. 不适用模板可直接下一步

image.png

  1. 进入指定监控面板进行自定义
    image.png

导入Grafana监控模板

转化过程如下：
https://github.com/kubesphere/monitoring-dashboard#converter-tool
image.png

  1. 使用Grafana创建监控面板

image.png

  1. 上传Grafana监控面板模板

image.png

使用自定义监控面板监控GPU

  1. 使用GPU创建监控面板

image.png

  1. 创建后看见GPU监控

image.png

野心与梦
关注
  • 18
    点赞
  • 踩
  • 15
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
KubeSphere入门使用手册
12-24
适合对k8s想要了解的新手，基于kubesphere编写的一套入门级别的手册
可观测性安全-云原生时代数据驱动安全的进化2022企业信
11-20
随着云技术的快速发展，云原生环境成为企业首选的基础设施，而“可观测性安全”这一概念也随之崭露头角，成为保障云环境中数据安全的新趋势。2022年企业信息安全峰会上，这一主题被深入探讨，揭示了数据驱动安全在云...
kubeSphere-Console源码分析06—监控告警模块
qq_42944740的博客
03-06 970
<Table/>
Linux系统本地搭建KubeSphere开源容器平台并实现远程监控集群
最新发布
小程的博客
05-27 1174
本文主要介绍如何在Linux CentOS搭建Kubernetes并结合Cpolar内网穿透工具
KubeSphere的使用
fen_dou_shao_nian的博客
08-18 5319
默认的 dashboard 没啥用，我们用 kubesphere 可以打通全部的 devops 链路。 Kubesphere 集成了很多套件，集群要求较高 https://kubesphere.io/ Kuboard 也很不错，集群要求不高 官方文档：https://kuboard.cn/support/，但是我们也不用它。 一 、简介 KubeSphere 是一款面向云原生设计的开源项目，在目前主流容器调度平台 Kubernetes 之 上构建的分布式多租户容器管理平台，提供简单易用的操作界面以及向导式操
KubeSphere的使用---多租户系统
m0_57776598的博客
04-08 914
前言： 在上面几篇文章，分别介绍了，基于Kubernetes平台安装KubeSphere，Linux单节点部署KubeSphere，Linux多节点部署KubeSphere。 下面来介绍如何使用KubeSphere 多租户系统概念 官方文档： https://v3-1.docs.kubesphere.io/zh/docs/quick-start/create-workspace-and-project/ 其实多租户系统，参考官方文档就够了，因此要多研究官方文档。 1、首先进入到KubeSphere，点击左.
KubeSphere的使用 和 DevOps 流水线创建
code_agent的博客
02-09 1541
前提：k8s-集群搭建-安装Docker、kubelet、kubeadm、kubectl 负载均衡:Ingressd底层是一个nginx 部署Ingress： 配置： 使用域名访问：
KubeSphere-1:安装使用
Datura_qing的博客
11-14 641
KubeSphere 安装使用
kubesphere的安装与使用
????爱好者的博客
01-26 1595
写这些，仅记录自己学习使用k8s的过程。如果有什么错误的地方，还请大家批评指正。最后，希望小伙伴们都能有所收获。
云原生监控体系建设共31页.pdf.zip
11-08
综上所述，这份"云原生监控体系建设共31页.pdf.zip"的文档很可能深入探讨了云原生环境下监控体系的构建、功能、工具选择和实际操作案例，为企业构建高效、全面的监控系统提供了宝贵的指导。通过学习这些内容，企业...
云原生应用Kubernetes监控与弹性实践
02-24
云原生应用的设计理念已经...云服务集成阿里云容器服务Kubernetes目前已经和四款监控云服务进行了打通，分别是SLS（日志服务）、ARMS（应用性能监控）、AHAS（架构感知监控服务）、CloudMonitor（云监控）。SLS主要负责
GitOps驱动云原生安全左移和可观测性
02-09
5. 云原生安全的可观测性：云原生安全需要实时监控和分析系统和应用程序的运行状态和性能，以便快速identify 和响应安全事件。GitOps 可以帮助企业实现云原生安全的可观测性。 6. 云原生安全的监控和分析：云原生...
2023 可观测性技术论坛（公开）PPT汇总（7份）.zip
01-19
2023 可观测性技术论坛（公开）PPT汇总，共7份。 1、DeepFlow的零侵扰可...4、银行云原生业务的eBPF可观测性建设实践 5、真全栈观测实践 6、以网络为中心的零侵扰可观测性 7、以网络为中心的应用感知技术和工程实践
Nightingale 是一个企业级云原生监控系统，可作为 Prometheus 的直接替代品进行警报和管理
05-18
Nightingale是一款专为企业设计的云原生监控系统，它旨在提供高效、可靠的警报和管理系统，以替代Prometheus在复杂企业环境中的应用。作为Prometheus的替代品，Nightingale具备了更多针对企业需求的功能和优化，为...
218-云原生架构与GitOps实战完结.zip
09-21
这个"218-云原生架构与GitOps实战完结"的资料可能涵盖了如何设计和实施云原生架构，如何使用Kubernetes进行服务编排，以及如何采用GitOps理念优化DevOps流程等内容。学习这些内容可以帮助你理解云原生架构的优势，...
云原生稳定性工程能力实践之路.pdf
04-19
在2021年的云原生大会上，"云原生稳定性工程能力实践之路"的主题演讲由华泰证券的资深稳定性工程专家王帅分享。他基于自己在证券行业超过10年的系统运维经验，深入探讨了如何确保业务稳定性和构建云原生环境下的稳定...
使用 KubeSphere 实现微服务的灰度发布
KubeSphere
10-14 2805
前言 今天来说一说，在 KubeSphere 中两个 " 小姐姐 " 如何来回切换，这是什么意思哩？其实就是互联网产品中常用的灰度发布方式。 互联网产品需要快速迭代上线，既要保证新功能运行正常，又要保证质量，一旦出现问题可以很快控制局面，就需要设计一套灰度发布系统。用大白话讲就是某个 APP 的新版本已经开发完成了，而老版本用户正在正常使用着，这个时候要是直接上线新版本，那么所有的用户都会用新版本，但是这种情况下，一旦出现问题，将导致所有的用户都不可用，所以会有策略的挑选一部分用户先用新
Kubesphere安装和使用
u014225032的博客
02-09 1585
Kubesphere是界面话操作k8s的平台化工具。
Kubernetes监控&告警
qq_28119019的博客
12-15 180
Kubernetes监控&告警
【云原生之docker实战】使用docker部署halo博客系统
05-01
Docker是目前比较流行的容器化技术，其优点在于方便管理和部署应用程序。而Halo博客系统是一款基于Java开发的博客系统，其部署过程比较复杂，需要安装JDK、MySQL等依赖。本文将介绍如何使用Docker部署Halo博客系统。 1. 安装Docker 首先需要在服务器上安装Docker，可以参考官方文档进行安装。 2. 创建Docker镜像 将Halo博客系统打包成Docker镜像，可以通过Dockerfile或者docker-compose.yml文件进行创建。在这里我们以Dockerfile为例。 先创建一个空目录，将Halo博客系统的jar包和配置文件拷贝到该目录下： ``` mkdir -p /opt/halo cp -r halo.jar /opt/halo/ cp -r application.properties /opt/halo/ ``` 然后创建Dockerfile： ``` FROM openjdk:8-jre-alpine MAINTAINER yourname <youremail@domain.com> ADD halo.jar /opt/halo/halo.jar ADD application.properties /opt/halo/application.properties WORKDIR /opt/halo CMD ["java", "-jar", "halo.jar", "--spring.config.location=application.properties"] EXPOSE 8888 ``` 其中FROM指定了基础镜像，ADD将jar包和配置文件拷贝到镜像中，WORKDIR指定工作目录，CMD指定应用启动命令，EXPOSE指定容器监听的端口。 使用docker build命令创建镜像： ``` docker build -t halo . ``` 其中halo为镜像名称，可以根据需要自行修改。 3. 启动容器 使用docker run命令启动容器： ``` docker run -d -p 8080:8888 --name halo-demo halo ``` 其中-d表示启动守护进程，-p将容器的8888端口映射到主机的8080端口，--name指定容器名称，halo为镜像名称。 启动成功后，在浏览器中输入http://localhost:8080访问Halo博客系统即可。 以上就是使用Docker部署Halo博客系统的步骤，相信通过这个实战，大家可以更好地了解云原生中Docker的使用和部署。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值