agent配置

最新推荐文章于 2024-08-13 14:33:10 发布

lskyne

最新推荐文章于 2024-08-13 14:33:10 发布

阅读量1.3w

点赞数

分类专栏： Flume

本文链接：https://blog.csdn.net/lskyne/article/details/37879045

版权

本文档详细介绍了Flume agent的配置，包括agent1和agent2的source、sink、channel设置。agent1使用spooldir类型source，监听/spvar/log/hutxlog目录，通过静态interceptor设置clienthostname为gecstat1，以及host interceptor获取客户端IP。数据经由file channel存储到/checkpoint和/data目录，并通过Avro sink发送到10.1.72.97:12343。

摘要由CSDN通过智能技术生成

agent2配置

agent2.sources=s1

agent2.channels=c1
agent2.sinks=k1
agent2.sources.s1.type = spooldir
agent2.sources.s1.spoolDir =/var/log/hutxlog
agent2.sources.s1.fileHeader =true
agent2.sources.s1.fileHeaderKey=filename
agent2.sources.s1.basenameHeader=true
agent2.sources.s1.basenameHeaderKey=gcstat2
agent2.sources.s1.channels = c1
agent2.channels.c1.type=memory
agent2.sinks.k1.type=logger

agent2.sinks.k1.channel=c1

agent1配置

agent1.sources=s1
agent1.channels=c1
agent1.sinks=k1

agent1.sources.s1.type = spooldir
agent1.sources.s1.spoolDir = /var/log/hutxlog
agent1.sources.s1.fileHeader =ture
agent1.sources.s1.fileHeaderKey=filenamesource
agent1.sources.s1.channels = c1

agent1.sources.s1.ignorePattern=^.*tmp$<