Grafana安装和实现可视化和告警

1、Grafana安装和实现可视化和告警

Prometheus UI 提供了快速验证 PromQL 以及临时可视化支持的能力,但其可视化能力却比较弱。一般情况下,

我们都用 Grafana 来实现对 Prometheus 的可视化实现。

1.1 什么是 Grafana

Grafana 是一个用来展示各种各样数据的开源软件,在其官网上用这么一段话来说明其作用。

Used by thousands of companies to monitor everything from infrastructure, applications, and power plants

to beehives。数以万计的公司用 Grafana 来监控基础设施、应用。

从官网上可以看到目前有 Paypal、ebay 等公司已经在使用 Prometheus 了。

1.2 快速入门

我们只需要在 Grafana 上配置一个 Prometheus 的数据源。接着我们就可以配置各种图表,Grafana 就会自动去

Prometheus 拉取数据进行展示。

1.3 Grafana安装

首先我们从 https://grafana.com/grafana/download 下载对应系统的安装包:

在这里插入图片描述

下载grafana-enterprise-8.4.3.linux-amd64.tar.gz 安装包:

在这里插入图片描述

使用 tar xvf grafana-enterprise-8.4.3.linux-amd64.tar.gz进行解压:

在这里插入图片描述

解压后用下面的命令启动:

# 前台启动
$ ./bin/grafana-server web
# 后台启动
$ nohup ./bin/grafana-server web >> nohup.out 2>&1 &

正常启动会输出如下信息:

在这里插入图片描述
在这里插入图片描述

Grafana 默认使用 3000 端口启动,开放3000端口:

# 查看开放的端口号 
firewall-cmd --list-all 
# 设置开放的端口号 
firewall-cmd --add-port=3000/tcp --permanent 
# 重启防火墙 
firewall-cmd --reload

我们访问:http://192.168.2.186:3000 查看对应页面:

在这里插入图片描述

默认的账号密码是 admin/admin,登陆进去后是这样的:

在这里插入图片描述

1.4 配置数据源

之后我们去设置菜单添加 Prometheus 数据源:

在这里插入图片描述

打开如下图所示:

在这里插入图片描述

会有许多数据源的选择:

在这里插入图片描述

选择第一个Prometheus:

在这里插入图片描述

之后输入对应的名字和 URL 地址即可。

这里我们添加了一个名为「Prometheus」的数据源,数据获取地址为:http://192.168.2.186:9090

然后点击Save & test

在这里插入图片描述

1.5 配置面板

在 Grafana 中有「Dashboard」和「Panel」的概念,Dashboard 可以理解成「看板」,而 Panel 可以理解成

「图表」,一个看板中包含了无数个图表,里面一个个小的图表,就是一个个小的图表(Panel)。

点击「+ 号」-> 「Dashboard」就可以添加一个大面板。

在这里插入图片描述

添加后的面板是空白的,下面我们创建一个图标来显示 CPU 的使用率变化情况。点击右上角的创建图表按钮:

在这里插入图片描述

点击创建图表会进入如下界面:

在这里插入图片描述

我们设置好数据源、Metrics 数据(rate(process_cpu_seconds_total[1m]))、图表名称,之后点击右上角的

Apply 按钮即可。

在这里插入图片描述

保存之后我们就可以在面板中看到机器的 CPU 使用率情况了:

在这里插入图片描述

1.6 邮件通道配置

如果我们要使用 Prometheus 进行监控告警,那么 Grafana 也能够实现。

Grafana 的告警渠道有很多,这里我们以邮件告警为例。

首先需要在 Grafana 的配置文件,默认是 conf/default.ini 文件。

在这里插入图片描述

default.ini 文件中增加如下配置:

[smtp]
enabled = true
host = smtp.qq.com:465
user = 2420309401@qq.com
# If the password contains # or ; 
# you have to wrap it with triple quotes. Ex """#password;"""
password = nfsroqnmreipecib
cert_file =
key_file =
skip_verify = false
# from_address 必须与上面的 user 属性一致
from_address = 2420309401@qq.com  
from_name = Grafana
ehlo_identity =

在这里插入图片描述

host 这里是你邮箱所在运营商的 SMTP 服务器,user 属性是发件人的邮箱地址,password 是发件人邮箱的登

陆密码,from_address 与 user 属性一样,都是发件人的邮箱地址,from_name 是发件人的显示名称。

修改完成之后,保存配置文件,之后重启 Grafana,接着通过 Alerting 菜单添加告警渠道。

在这里插入图片描述
在这里插入图片描述

之后填写「提醒通道」名称、类型,之后点击「Send Test」按钮测试一下。

在这里插入图片描述
在这里插入图片描述

后台会有日志信息打印:

在这里插入图片描述

正常的话,会收到一封测试邮件,这表明邮件配置已经完成。

在这里插入图片描述

在这里插入图片描述
在这里插入图片描述

此外我们还可以配置 AlertManager、钉钉等其他告警方式,配置的流程都大同小异,这里不再赘述。

1.7 指标告警配置

配置好邮件发送通道信息后,Grafana 就具备了发送邮件的能力。但是什么时候发送邮件呢?这就需要我们进行指

标告警配置了。

我们需要在图表面板设置中设置CPU使用率报警指标:

(1- avg(irate(node_cpu_seconds_total{mode="idle"}[5m])))*100

在这里插入图片描述

在这里插入图片描述

创建告警规则:

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

配置完成点击 Apply,回到 DashBoard:

在这里插入图片描述

查看 Alert 页面:

在这里插入图片描述

我们进行下面 的操作使CPU的使用率增高:

for i in `seq 1 $(cat /proc/cpuinfo |grep "physical id" |wc -l)`; do dd if=/dev/zero of=/dev/null & done

查看 Alert 和 DashBoard 页面变化:

在这里插入图片描述
在这里插入图片描述

当 Pending 一直持续5分钟之后会出发告警:

在这里插入图片描述
在这里插入图片描述

并且会收到告警邮件:

在这里插入图片描述

当我们杀死使CPU升高的进程,查看页面的变化:

在这里插入图片描述
在这里插入图片描述

并且会收到恢复告警的邮件:

在这里插入图片描述

我们一般不使用 grafana 的告警,而是使用 Altermanager进行告警。

1.8 Grafana 模板中心

对于线上监控来讲,如果我们每个面板都需要自己从零开始,那么就太累了。事实上,我们用到的许多监控信息都

是类似的。因此 Grafana 官网 - Dashboards 模块 提供了下载 Dashboard 模板的功能。

https://grafana.com/grafana/dashboards/

在这里插入图片描述

在这里插入图片描述
Dashboards 里有许多各种类型的 Dashboard 面板,例如 JVM 监控、MySQL 数据库监控等。你只需找到合适自

己的监控面板,之后根据 ID 添加即可。

现在准备监控MySQL:
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

在这里插入图片描述

你只需要复制它的 ID 并使用 Grafana 的 import 功能导入即可,并且需要执行相关的SQL,如下图所示:

在这里插入图片描述
在这里插入图片描述

在这里插入图片描述

在这里插入图片描述
在这里插入图片描述

最终的效果如图所示:

在这里插入图片描述

1.9 将 Grafana 设置为服务

创建service并设置自动启动:

$ vim /usr/lib/systemd/system/grafana.service

配置如下内容:

[Unit]
Description=grafana
Documentation=https://grafana.com
After=network.target
[Service]
Type=simple
User=root
Group=root
ExecStart=/home/zhangshixing/prometheus/grafana-8.4.3/bin/grafana-server -homepath /home/zhangshixing/prometheus/grafana-8.4.3
Restart=on-failure
[Install]
WantedBy=multi-user.target

设置自动启动:

$ systemctl enable grafana

启动服务并查看启动状态:

# 重新加载某个服务的配置文件
$ systemctl daemon-reload
# 启动grafana
$ systemctl start grafana
# 查看grafana状态
$ systemctl status grafana
[root@zsx ~]# systemctl status grafana
● grafana.service - grafana
   Loaded: loaded (/usr/lib/systemd/system/grafana.service; enabled; vendor preset: disabled)
   Active: active (running) since Sat 2023-06-17 17:12:23 CST; 1min 0s ago
     Docs: https://grafana.com
 Main PID: 53549 (grafana-server)
    Tasks: 8
   Memory: 72.6M
   CGroup: /system.slice/grafana.service
           └─53549 /home/zhangshixing/prometheus/grafana-8.4.3/bin/grafana-server -homepath /home/zhangshixing/prometheus/grafa...

Jun 17 17:12:23 zsx.com grafana-server[53549]: logger=plugin.manager t=2023-06-17T17:12:23.52+0800 lvl=info msg="Plugin r...=input
Jun 17 17:12:23 zsx.com grafana-server[53549]: logger=query_data t=2023-06-17T17:12:23.52+0800 lvl=info msg="Query Servic...ation"
Jun 17 17:12:23 zsx.com grafana-server[53549]: logger=live.push_http t=2023-06-17T17:12:23.55+0800 lvl=info msg="Live Pus...ation"
Jun 17 17:12:23 zsx.com grafana-server[53549]: logger=report t=2023-06-17T17:12:23.67+0800 lvl=warn msg="Scheduling and sending...
Jun 17 17:12:23 zsx.com grafana-server[53549]: logger=http.server t=2023-06-17T17:12:23.69+0800 lvl=info msg="HTTP Server...ocket=
Jun 17 17:12:35 zsx.com grafana-server[53549]: logger=context t=2023-06-17T17:12:35.44+0800 lvl=info msg="Request Complet...ferer=
Jun 17 17:12:35 zsx.com grafana-server[53549]: logger=context t=2023-06-17T17:12:35.79+0800 lvl=info msg="Request Complet...ferer=
Jun 17 17:12:35 zsx.com grafana-server[53549]: logger=live t=2023-06-17T17:12:35.81+0800 lvl=info msg="Initialized channe...Ms4uVk
Jun 17 17:12:38 zsx.com grafana-server[53549]: logger=context t=2023-06-17T17:12:38.11+0800 lvl=info msg="Request Complet...ferer=
Jun 17 17:12:40 zsx.com grafana-server[53549]: logger=context t=2023-06-17T17:12:40.75+0800 lvl=info msg="Request Complet...ferer=
Hint: Some lines were ellipsized, use -l to show in full.

如果启动失败,可以查看日志:

[root@zsx ~]# journalctl -u grafana.service

其它的服务都类似,只需要修改相应 service 文件的一些参数。

1.10 总结

这里简单介绍了 grafana 的使用,更多关于图表的设置,将在后续文章专门讲述,这里不深入讲解。

  • 9
    点赞
  • 41
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
一、prometheus简介 Prometheus是一个开源的系统监控和告警系统,现在已经加入到CNCF基金会,成为继k8s之后第二个在CNCF维护管理的项目,在kubernetes容器管理系统中,通常会搭配prometheus进行监控,prometheus支持多种exporter采集数据,还支持通过pushgateway进行数据上报,Prometheus再性能上可支撑上万台规模的集群。 二、prometheus架构图 三、prometheus组件介绍 1.Prometheus Server: 用于收集和存储时间序列数据。 2.Client Library: 客户端库,检测应用程序代码,当Prometheus抓取实例的HTTP端点时,客户端库会将所有跟踪的metrics指标的当前状态发送到prometheus server端。 3.Exporters: prometheus支持多种exporter,通过exporter可以采集metrics数据,然后发送到prometheus server端 4.Alertmanager: 从 Prometheus server 端接收到 alerts 后,会进行去重,分组,并路由到相应的接收方,发出报警,常见的接收方式有:电子邮件,微信,钉钉, slack等。 5.Grafana:监控仪表盘 6.pushgateway: 各个目标主机可上报数据到pushgatewy,然后prometheus server统一从pushgateway拉取数据。 四、课程亮点 五、效果图展示 六、讲师简介 先超(lucky):高级运维工程师、资深DevOps工程师,在互联网上市公司拥有多年一线运维经验,主导过亿级pv项目的架构设计和运维工作 主要研究方向: 1.云计算方向:容器 (kubernetes、docker),虚拟化(kvm、Vmware vSphere),微服务(istio),PaaS(openshift),IaaS(openstack)等2.系统/运维方向:linux系统下的常用组件(nginx,tomcat,elasticsearch,zookeeper,kafka等),DevOps(Jenkins+gitlab+sonarqube+nexus+k8s),CI/CD,监控(zabbix、prometheus、falcon)等 七、课程大纲

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值