Flume安装和使用

Flume安装和使用

Flume安装部署

安装地址

（1） Flume官网地址：http://flume.apache.org/

（2）文档查看地址：http://flume.apache.org/FlumeUserGuide.html

（3）下载地址：http://archive.apache.org/dist/flume/

安装部署

（1）将apache-flume-1.9.0-bin.tar.gz上传到linux的/opt/software目录下

（2）解压apache-flume-1.9.0-bin.tar.gz到/opt/module/目录下

[atguigu@hadoop102 software]$ tar -zxf /opt/software/apache-flume-1.9.0-bin.tar.gz -C /opt/module/

（3）修改apache-flume-1.9.0-bin的名称为flume

[atguigu@hadoop102 module]$ mv /opt/module/apache-flume-1.9.0-bin /opt/module/flume

（4）将lib文件夹下的guava-11.0.2.jar删除以兼容Hadoop 3.1.3

[atguigu@hadoop102 module]$ rm /opt/module/flume/lib/guava-11.0.2.jar

注意：删除guava-11.0.2.jar的服务器节点，一定要配置hadoop环境变量。否则会报如下异常。

Caused by: java.lang.ClassNotFoundException: com.google.common.collect.Lists

​ at java.net.URLClassLoader.findClass(URLClassLoader.java:382)

​ at java.lang.ClassLoader.loadClass(ClassLoader.java:424)

​ at sun.misc.Launcher$AppClassLoader.loadClass(Launcher.java:349)

​ at java.lang.ClassLoader.loadClass(ClassLoader.java:357)

​ … 1 more

（5）修改conf目录下的log4j.properties配置文件，配置日志文件路径

[atguigu@hadoop102 conf]$ vim log4j.properties

flume.log.dir=/opt/module/flume/logs