Flume与Kafka的配合使用(数据分离-按需求消费)
文章目录六、Flume 对接 Kafka2、数据分离
六、Flume 对接 Kafka
2、数据分离
0)需求:
将flume采集的数据按照不同的类型输入到不同的topic中
将日志数据中带有flume的,输入到Kafka的flume主题中,
将日志数据中带有hello的,输入到Kafka的hello主题中,
其他的数据输入到Kafka的other主题中
1) 编写Flume的Interceptor
/**
* 需求: 将flume采集的数据按
原创
2021-01-21 18:57:28 ·
625 阅读 ·
0 评论