Prometheus监控平台配置kafka_exporter

转载：(48条消息) Prometheus监控平台配置kafka_exporter_Word哥的博客-CSDN博客_kafka_exporter

Kafka现有开源的集群监控方案：kafka-manager、kafka-monitor、kafka-eagle、KafkaOffsetMonitor，但有所限制监控指标被固化，不易扩展、预警功能弱。Kafka集群的监控方案倾向于使用Grafana + Prometheus，监控数据采集器使用Kafka_exporter。

注：1个kafka集群只需要1个exporter，在集群上的任意1台服务器部署。

2. 安装配置kafka_exporter

2.1 下载

安装包下载，也可以wget在线下载，这里我下载到了home目录下

# wget https://github.com/danielqsj/kafka_exporter/releases/download/v1.2.0/kafka_exporter-1.2.0.linux-amd64.tar.gz

# tar -zxvf kafka_exporter-1.2.0.linux-amd64.tar.gz  -C /usr/local/

# cd /usr/local/

# mv kafka_exporter-1.2.0.linux-amd64/ kafka_exporter

2.3 启动

前台启动，默认监听端口9308

# ./kafka_exporter --kafka.server=172.20.32.218:9092

后台启动

# nohup ./kafka_exporter --kafka.server=172.20.32.218:9092 &&   

2.4 加入开机自启

cat > /etc/systemd/system/kafka_exporter.service 
[Unit]
Description=kafka_exporter
After=local-fs.target network-online.target network.target
Wants=local-fs.target network-online.target network.target
 
[Service]
ExecStart=/usr/local/kafka_exporter/kafka_exporter --kafka.server=172.20.32.218:9092
Restart=on-failure
[Install]
WantedBy=multi-user.target

 

# systemctl daemon-reload

# systemctl enable kafka_exporter

# systemctl start kafka_exporter

# systemctl status kafka_exporter 

2.5 浏览器访问

 http://172.20.32.218:9308

3. Prometheus配置

3.1 进入prometheus安装目录，编辑prometheus.yml

# vim prometheus.yml      //加入prometheus监控中，targets可配置多个监控目标

3. Prometheus配置
3.1 进入prometheus安装目录，编辑prometheus.yml

# vim prometheus.yml      //加入prometheus监控中，targets可配置多个监控目标

 

3.2 重启Prometheus

# systemctl restart prometheus

浏览器查看监控信息：http://172.20.32.218:9090/targets

注：State=UP，说明成功 

4. Grafana配置

浏览器访问：http://172.20.32.218:3000

导入官方模板 ，可在官方模板查看模板编号7589（推荐）或者9018、9947、10973-JMX-阿里云，如果内网环境建议可下载后导入。

修改模板信息Prometheus

配置完之后，查看仪表盘，就能自动读取prometheus存储的数据