Linux基础环境搭建(CentOS7)- 安装Flume
大家注意以下的环境搭建版本号,如果版本不匹配有可能出现问题!
Linux基础环境搭建(CentOS7)- 虚拟机准备
Linux基础环境搭建(CentOS7)- 安装JDK
Linux基础环境搭建(CentOS7)- 安装Hadoop
Linux基础环境搭建(CentOS7)- 安装Zookeeper
Linux基础环境搭建(CentOS7)- 安装Kafka
Linux基础环境搭建(CentOS7)- 安装HBase
Linux基础环境搭建(CentOS7)- 安装Scala和Spark
Linux基础环境搭建(CentOS7)- 安装Mysql和Hive
Linux基础环境搭建(CentOS7)- 安装Sqoop
Linux基础环境搭建(CentOS7)- 安装Flume
一、Flume 的下载及安装
Flume是Cloudera提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统,Flume支持在日志系统中定制各类数据发送方,用于收集数据;同时,Flume提供对数据进行简单处理,并写到各种数据接受方(可定制)的能力。
当前Flume有两个版本Flume 0.9X版本的统称Flume-og,Flume1.X版本的统称Flume-ng。由于Flume-ng经过重大重构,与Flume-og有很大不同,使用时请注意区分。
flume 的下载
flume下载链接:https://pan.baidu.com/s/1809K55m6tpFaLd-dQgrj_Q
提取码:17kp
将下载的安装包通过Xftp传输到Linux虚拟机中
flume 安装
创建工作路径/usr/flume,下载flume安装包到/opt/software中,然后解压至工作路径。
mkdir /usr/flume
cd /opt/software/
tar -zxvf apache-flume-1.7.0-bin.tar.gz -C /usr/flume/
二、配置 flume-env.sh
cd /usr/flume/apache-flume-1.7.0-bin/conf
mv flume-env.sh.template flume-env.sh
vim flume-env.sh
修改内容如下:
export JAVA_HOME=/usr/java/jdk1.8.0_171/
三、配置环境变量
vim /etc/profile
添加以下内容:
#set flume
export FLUME_HOME=/usr/flume/apache-flume-1.7.0-bin
export FLUME_CONF_DIR=/usr/flume/apache-flume-1.7.0-bin/conf
export PATH=$PATH:$FLUME_HOME/bin
四、查看 flume 版本
flume-ng version
若出现版本号代表 flume 部署成功!
注意!!!
查看版本可能会报错误: 找不到或无法加载主类 org.apache.flume.tools.GetJavaProperty Flume 1.7.0
大家可以看下面的博客解决问题!
Flume版本查看错误:https://blog.csdn.net/weixin_47580081/article/details/116052323