Ubuntu下配置Flume,并结合Kafka、Hadoop进行日志监测

本文介绍了如何在Ubuntu环境中配置Apache Flume,并将其与Kafka和Hadoop相结合,实现日志监测。首先,详细讲述了Flume的下载、解压、配置及启动过程。接着,对于Hadoop部分,说明了如何创建.log文件并验证配置成功。最后,讲解了在Kafka中启动生产者和消费者,通过发送消息到特定主题来完成日志的传递和消费。
摘要由CSDN通过智能技术生成

配置Flume

1.下载Flume
apache-flume-1.9.0-bin.tar.gz
提取码:u2la
2.解压

a@DataServer:~/softhome$ tar -zxf apache-flume-1.9.0-bin.tar.gz 

3.修改文件名为flume19
4.修改配置文件

a@DataServer:~/softhome$ sudo gedit /etc/profile

添加,路径根据自己修改

export FLUME_HOME=/home/a/softhome/flume19
export PATH=$FLUME_HOME/bin:$PATH

5.执行配置文件

a@DataServer:~/softhome$ source /etc/profile

6.进入flume19/conf目录下

a@DataServer:~/softhome$ cd flume19/
a@DataServer:~/softhome/flume19$ cd conf/
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值