超级会员免费看
Flume的拦截器用于在数据进入channel前进行处理，如添加时间戳、主机信息或静态键值。常见拦截器包括时间戳拦截器（添加当前时间戳）、主机名拦截器（添加主机名或IP）和静态拦截器（自定义静态键值）。通过组合使用，可实现多种功能。文中展示了时间戳+主机名+静态拦截器的配置及使用案例，并通过正则拦截器验证其拦截效果。
在Flume中会使用一些拦截器对source中的数据在进入channel之前进行拦截做一些处理，比如过滤掉一些数据，或者加上一些key/value等。可以同时使用多个拦截器，实现不同的功能。
常用的拦截器有时间戳拦截器、主机名拦截器、静态拦截器等。
时间戳拦截器：会在event的Header中添加一个key为timestamp，value为当前时间戳的值。
主机名拦截器：会在event的Header中添加一个key（默认是host，也可通过hostHeader这个属性来自定义key），value是flume agent的主机名或IP（通过useIP这个属性值来定义，如果useIP设置为true（默认值是true），那么value就是用IP值，如果useIP设置为false，那么value就是用主机名）。
静态拦截器：在event的Header中添加自指定的静态的key/value。
案例-时间戳拦截器+主机名拦截器+静态拦截器：
- 创建自定义conf文件
[root@hadoop01 test_conf]# pwd
/usr/local/wyh/apache-flume-1.8.0-bin/test_conf
[root
订阅专栏 解锁全文
扫一扫
1358
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
