Hadoop日志文件收集系统flume
注意:做次实验的前提,Hadoop完全分布式系统或伪分布式系统必须要能运行,虚拟机本身必须安装了Java_jdk。
系统环境:VMware+centos7+Hadoop-2.7.3+flume-1.9.0
flume tar包下载
http://www.apache.org/dyn/closer.lua/flume/1.9.0/apache-flume-1.9.0-bin.tar.gz(我选的是第一个网址)
解压并修改其解压文件夹名称(修改为flume)
解压:tar -zxvf apache-flume-1.9.0-bin.tar.gz
修改文件夹名称:mv 修改前的名称 flume
配置/etc/profile,并source生效
打开配置文件: vi /etc/profile
添加一下配置(每个人的安装路径不一样,具体路径请参考自己的安装位置):
#flume
export FLUME_HOME=/opt/module/flume
export FLUME_CONF_DIR=$FLUME_HOME/conf
export PATH=$FLUME_HOME/bin:$PATH
使配置问价生效:source /etc/profile
配置flume-env.sh的JAVA_HOME
进入安装配置文件所在位置:cd conf
将flume-env.sh.template文件更名为flume-env.sh:mv flume-env.sh.template flume-env