基于grafana+prometheus构建Flink监控 --转载

本文详细介绍了如何利用grafana和prometheus构建Flink的监控方案,包括组件的安装、配置,以及Flink作业指标的监控展示。通过docker部署prometheus、pushgateway、node_exporter和grafana,配置Flink报告,最终在grafana中成功展示Flink作业的metrics。
摘要由CSDN通过智能技术生成

基于grafana+prometheus构建Flink监控

原创: Flink菜鸟 Flink菜鸟 前天

先上一个架构图

Flink App :通过report 将数据发出去

Pushgateway :  Prometheus 生态中一个重要工具

Prometheus :  一套开源的系统监控报警框架 (Prometheus 入门与实践)

Grafana: 一个跨平台的开源的度量分析和可视化工具,可以通过将采集的数据查询然后可视化的展示,并及时通知(可视化工具Grafana:简介及安装)

Node_exporter : 跟Pushgateway一样是Prometheus 的组件,采集到主机的运行指标如CPU, 内存,磁盘等信息

以下安装,大部分参考博客:https://www.cnblogs.com/xiao987334176/p/9930517.html#autoid-0-0-0

1、docker  pull 镜像

  •  
  •  
  •  
  •  
docker pull prom/node-exporterdocker pull prom/pushgatewaydocker pull prom/prometheusdocker pull grafana/grafana

查看下载的镜像

  •  
  •  
  •  
  •  
  •  
  •  
$ docker imagesREPOSITORY           TAG                 IMAGE ID            CREATED             SIZEprom/prometheus      latest              d5b9d7ed160a        2 weeks ago         138MBgrafana/grafana      latest              a6e14b4109af        2 weeks ago         253MBprom/pushgateway     latest              20e6dcae675f        4 weeks ago         19.2MBprom/node-exporter   latest              e5a616e4b9cf        2 months ago        22.9MB

2、编辑prometheus.yml 、创建 Grafana 数据存储目录

  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
$ mkdir /opt/grafana-storage  # grafana 数据存储目录
$ cat /opt/prometheus/prometheus.yml # prometheus 配置g
评论 5
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值