flume监控

本文介绍了Flume作为日志收集工具的重要性和监控的必要性。Flume的监控包括Http和Ganglia两种方式,提供了对SOURCE、CHANNEL、SINK组件的详细监控信息,如数据接收、传输和发送的状态,帮助解决数据搜集瓶颈和数据丢失问题。
摘要由CSDN通过智能技术生成

Flume作为一个强大的日志收集工具,在数据收集方面非常强大。它的SOURCE、SINK、CHANNEL3大组件这类模式,完成数据的接收、传输、发送这个进程。不过flume的监控也随之产生。

1、Flume监控的必要性
Flume尽管功能非常强大,但是需要看到FLume收集的数据信息的时候却没有一个界面能够展现出来,所以需要一个能展现flume实时收集数据动态信息的界面,包括flume成功收集的日志数量、成功发送的体质数量、flume启动时间、停止时间等等。监控能做到这些,有了这些数据,在遇到数据搜集瓶颈和数据丢失的情况下,可以通过分析监控数据来解决问题。

2、Flume的监控方式

(1) Http监控
使用这类监控方式,只需要在启动flume的时候在启动参数上面加上监控配置:

flume-ng agent --conf conf --conf-file conf/server.properties --name collect -Dflume.monitoring.type=http -Dflume.monitoring.port=1111

其中-Dflume.monitoring.type=http表示使用http方式来监控,后面的-Dflume.monitoring.port=

  • 1
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值