centos7中Flume的安装

1. 解压，重命名：

链接: https://pan.baidu.com/s/1l0w3-Vs_EqLRWgrjl2YukA?pwd=6666

• 安装在该目录下：/opt/installs

修改环境变量：

vim /etc/profile

export FLUME_HOME=/opt/installs/flume
export PATH=$PATH:$FLUME_HOME/bin:

source /etc/profile

2. 修改一下flume的配置文件：

cp flume-env.sh.template flume-env.sh

3. 关于flume的使用：

• flume 的使用是编写 conf文件的，运行的时候指定该文件

# 定义组件的名字
<Agent>.sources = <Source>
<Agent>.channels = <Channel1> <Channel2>
<Agent>.sinks = <Sink>

# 设置source 和 channel 之间的关系
<Agent>.sources.<Source>.channels = <Channel1> <Channel2> ...

# 设置sink 和 channel 之间的关系
<Agent>.sinks.<Sink>.channel = <Channel1>

先定义agent的名字，再定义agent中三大组件的名字
接着定义各个组件之间的关联关系

4. 启动命令：

先启动flume-ng

flume-ng agent -c ../job -f ./avro_memory_logger.conf -n a1 -Dflume.root.logger=INFO,console

接着向端口中发送数据：

flume-ng avro-client -c /opt/installs/flume1.9.0/conf/ -H hadoop10 -p 4141 -F ./c.txt