这篇博客详细介绍了Flume的架构，包括单节点Flume的配置以及Flume 1.4.0与Kafka 0.7.2、HDFS的整合设置。文章还列举了Flume内置的channel、source和sink的汇总，并提供了相关资源链接以供深入学习。
flume架构图
单节点flume配置
flume-1.4.0 启动flume
bin/flume-ng agent --conf ./conf -f conf/flume-conf.properties -Dflume.root.logger=DEBUG,console -n agent
-n表示配置文件中agent的名字
agent.sources = r1
agent.sinks = s1
agent.channels = c1
agent.sources.r1.channels = c1
agent.sinks.s1.channel = c1
#Describe/configure the sources
agent.sources.r1.type = exec
agent.sources.r1.command = tail -F /home/flume/loginfo
#Use a channel which buffers events in mem
最低0.47元/天 解锁文章
9872
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
