kafka整合flume
flume中监控本地的一个文件,当文件中内容有追加时 ,就把文件中的数据读取出来,flume把数据流向的一个topic中,kafka可以启动一个消费者,消费该topic中的数据。
1、在flume中新建一个文件夹Job,然后把新建一个.conf文件,内容如下,这里新建的是一个f2k.conf
#agent是这个job的名称
#源
agent.sources = s1
#管道
agent.channels = c1
#
agent.sinks = k1
#从本地文件读取
agent.sources.s1.type