CentOS安装flume

1. 下载

下载网址：https://www.apache.org/dyn/closer.lua/flume/1.11.0/apache-flume-1.11.0-bin.tar.gz

2.解压

上传下载的文件到CentOS系统中。
解压缩文件：

tar -zxvf apache-flume-1.11.0-bin.tar.gz -C /usr/local/flume

3. 创建主要配置文件

在 flume/conf 中创建配置文件 flume.conf，内容如下

# 配置agent
a1.sources = r1
a1.sinks = k1
a1.channels = c1

# Describe/configure the  source
a1.sources.r1.type =  syslogudp
a1.sources.r1.port =  514
a1.sources.r1.host =  localhost
a1.sources.r1.channels  = c1

# Describe the sink
a1.sinks.k1.type = logger

# Use a channel which  buffers events in memory
a1.channels.c1.type =  memory
a1.channels.c1.capacity =  1000
a1.channels.c1.transactionCapacity  = 100

# Bind the source and sink  to the channel
a1.sources.r1.channels = c1
a1.sinks.k1.channel = c1

4. 修改其他配置文件

4.1 修改jdk环境

拷贝 conf 下的配置文件 flume-env.sh.template

cp ./conf/flume-env.sh.template ./conf/flume-env.sh

修改 flume-env.sh 中的内容jdk环境，其中 JAVA_HOME 后边的路径替换为自己的jdk目录

4.2 修改日志文件位置

修改 conf 下的 log4j2.xml 文件，将其中的配置改为日志存储位置

5. 创建flume环境变量

在环境变量 /etc/profile.d/my_env.sh 中添加flume配置信息（这个是我自己的环境变量文件，可以配置在公共环境变量文件 /etc/profile 中）

export FLUME_HOME=/usr/local/flume/apache-flume-1.11.0
export PATH=$PATH:$FLUME_HOME/bin

然后运行命令重新加载环境变量

source /etc/profile.d/my_env.sh

检查环境变量配置是否成功，如果输出一样则成功

[root@bogon conf]# flume-ng version
Flume 1.11.0
Source code repository: https://git.apache.org/repos/asf/flume.git
Revision: 1a15927e594fd0d05a59d804b90a9c31ec93f5e1
Compiled by rgoers on Sun Oct 16 14:44:15 MST 2022
From source with checksum bbbca682177262aac3a89defde369a37

6. 创建flume服务

在服务配置文件下创建flume服务 /usr/lib/systemd/system/

vim /usr/lib/systemd/system/flume.service

然后配置内容如下

[Unit]
Description=Apache Flume Service
After=network.target

[Service]
Type=simple
User=root
Group=root
ExecStart=/usr/local/flume/apache-flume-1.11.0/bin/flume-ng agent --conf /usr/local/flume/apache-flume-1.11.0/conf --name a1 --conf-file /usr/local/flume/apache-flume-1.11.0/conf/security_flume.conf -property -Dflume.root.logger=INFO,console &
Restart=on-failure

[Install]
WantedBy=multi-user.target

然后输入命令重新加载服务列表

systemctl daemon-reload

7. 启动flume

启动flume服务

systemctl start flume

没有报错则启动成功，也可以通过查看日志文件输出判断是否正常启动