本文档详细介绍了Flume agent的配置，包括agent1和agent2的source、sink、channel设置。agent1使用spooldir类型source，监听/spvar/log/hutxlog目录，通过静态interceptor设置clienthostname为gecstat1，以及host interceptor获取客户端IP。数据经由file channel存储到/checkpoint和/data目录，并通过Avro sink发送到10.1.72.97:12343。
agent2配置
agent2.sources=s1
agent2.channels=c1agent2.sinks=k1
agent2.sources.s1.type = spooldir
agent2.sources.s1.spoolDir =/var/log/hutxlog
agent2.sources.s1.fileHeader =true
agent2.sources.s1.fileHeaderKey=filename
agent2.sources.s1.basenameHeader=true
agent2.sources.s1.basenameHeaderKey=gcstat2
agent2.sources.s1.channels = c1
agent2.channels.c1.type=memory
agent2.sinks.k1.type=logger
agent2.sinks.k1.channel=c1
agent1配置
agent1.sources=s1
agent1.channels=c1
agent1.sinks=k1
agent1.sources.s1.type = spooldir
agent1.sources.s1.spoolDir = /var/log/hutxlog
agent1.sources.s1.fileHeader =ture
agent1.sources.s1.fileHeaderKey=filenamesource
agent1.sources.s1.channels = c1
agent1.sources.s1.ignorePattern=^.*tmp$<
最低0.47元/天 解锁文章
2万+
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
