186.Flume(三):自定义拦截器Interceptor,自定义source,自定义sink,数据流监控工具Ganglia

本文详细介绍了如何自定义Flume的Interceptor、Source和Sink,包括需求分析、具体实现及测试。同时,讨论了Flume数据流监控工具Ganglia的基本概念、安装部署步骤,以及其在监控Flume数据流中的应用。
摘要由CSDN通过智能技术生成

目录​​​​​​​

一、自定义拦截器Interceptor

1.需求

2.需求分析

3.具体实现

二、自定义source

1.基础介绍

2.适用场景

3.需求

4.具体实现

三 、自定义sink

1.基础介绍

2.适用场景

3.需求

4.具体实现 

四、Flume数据流监控——Ganglia

1.Ganglia 的基本概念

2.Ganglia 的安装与部署


一、自定义拦截器Interceptor

1.需求

使用 Flume 采集服务器本地日志,需要按照日志类型的不同,将不同种类的日志发往不同的分析系统。

2.需求分析

拦截器配合Multiplexing Channel Selector,实现不同的类型日志走向不同的系统,实现多路复用

3.具体实现

(1)编写代码

idea先新建一个项目,然后添加依赖:

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

鹏哥哥啊Aaaa

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值