FLume基础【自定义拦截器、自定义Source，自定义sink】

最新推荐文章于 2023-05-26 19:51:55 发布

OneTenTwo76

最新推荐文章于 2023-05-26 19:51:55 发布

阅读量2.1k

点赞数

分类专栏： Flume 大数据开发文章标签： flume

本文链接：https://blog.csdn.net/weixin_43923463/article/details/124254388

版权

一自定义Interceptor

1 需求分析

在这里插入图片描述

2 实现步骤

2.1 创建Maven项目，添加依赖

    <dependencies>
        <dependency>
            <groupId>org.apache.flume</groupId>
            <artifactId>flume-ng-core</artifactId>
            <version>1.9.0</version>
        </dependency>
    </dependencies>

2.2 定义CustomInterceptor类并实现Interceptor接口

/**
	自定义拦截器：根据body中的内容在headers中添加指定的key-value
	如果内容为字母，添加state=letter
	如果内容为数字，添加state=number
*/
public class CustomInterceptor implements Interceptor {
   

    @Override
    public void initialize() {
   

    }

    //为每个event中的header中添加key-value
    //channelProcessor调用拦截器时会调用该方法，并将event传过来
    @Override
    public Event intercept(Event event) {
   
		//获取body中的内容
        byte[] body = event.getBody();
        if (body[0] <= 'z' && body[0] >= 'a') {
   
            //向headers中添加type=letter
            event.getHeaders().put("type", "letter");
        } else if (body[0] >= '0' && body[0] <= '9') {
   
            event.getHeaders().put("type"