Prometheus + Grafana 监控系统-告警规则配置
方案一: 直接在 Prometheus 中配置,还需部署Prometheus Alertmanager
-
安装和部署 Alertmanager :按照官方文档或相关教程进行安装和部署。
-
配置Prometheus:在Prometheus的配置文件中(通常是prometheus.yml),指定Alertmanager的地址和端口。
-
编写告警规则:使用PromQL编写告警规则,并定义在何时触发告警。规则通常配置在Prometheus的配置文件中,或者使用单独的YAML文件进行配置。
-
配置 Alertmanager:在Alertmanager的配置文件中(通常是alertmanager.yml),定义告警的接收者、通知方式、分组、抑制、静默等规则。
-
启动并验证:启动Prometheus和Alertmanager,并验证告警规则是否生效。你可以通过模拟告警或观察实际监控数据来验证告警规则的正确性。
方案二: 直接在Grafana中配置
-
在版本4.0+ grafana 中增加了Alerting 告警模块,丰富了grafana功能,以前告警需要借助AlertManager,但有grafana告警模块之后就可以不使用AlertManager告警了,但是grafana也支持对接AlertManager。
-
配置步骤
-
建议: grafana 目前只的通知渠道较少, 如果需要通知国内主流的消息通知渠道,建议配合 PrometheusAlert 项目来实现
- 增强 Grafana 的告警通知能力: PrometheusAlert
- Grafana 目前对国内主流的消息通知渠道兼容性一般,因此可以考虑结合使用国产的 PrometheusAlert
- PrometheusAlert是开源的运维告警中心消息转发系统,支持主流的监控系统Prometheus、Zabbix,日志系统Graylog2,Graylog3、数据可视化系统Grafana、SonarQube。阿里云-云监控,以及所有支持WebHook接口的系统发出的预警消息,支持将收到的这些消息发送到钉钉,微信,email,飞书,腾讯短信,腾讯电话,阿里云短信,阿里云电话,华为短信,百度云短信,容联云电话,七陌短信,七陌语音,TeleGram,百度Hi(如流)等。
- https://github.com/feiyu563/PrometheusAlert
- 增强 Grafana 的告警通知能力: PrometheusAlert