win10下启动flume监听本地端口信息
一、环境:
win10+flume-1.8.0+jdk1.8+telnet服务
二、环境配置过程
1.下载安装flume
flume的下载进入官网https://archive.apache.org/dist/flume/1.8.0/,解压下载文件至Flume的安装目录即可 。
2.配置flume
首先,配置环境变量FLUME_HOME=你安装的flume的路径 ;
然后,追加path: 在path变量中添加 %FLUME_HOME%\conf;%FLUME_HOME%\bin;
最后,配置flume文件:
(1)在apache-flume-1.8.0-bin\conf路径下,复制.template结尾的3个文件,这3个复制文件去掉.template结尾;
(2)编辑 apache-flume-1.8.0-bin\conf 下的flume-env.sh,在最后行输入:export JAVA_HOME = 安装的jdk路径 ,
(3)编辑 apache-flume-1.8.0-bin\conf 下的flume-env.ps1,在最后行补充:$FLUME_CLASSPATH=“你的flume路径\lib”,在flume-env.sh下同样操作;
(4)最后检验flume是否安装成功:打开cmd,输入powershell,打开powershell;再输入flume-ng version。
example.conf
#定义这个 agent 中各个组件的名字
a1.sources = r1
a1.sinks = k1
a1.channels = c1
#描述和配置 source 组件:r1
a1.sources.r1.type = netcat
a1.sources.r1.bind = localhost
a1.sources.r1.port = 44444
#描述和配置 sink 组件:k1
a1.sinks.k1.type = logger
#描述和配置 channel 组件,此处使用是内存缓存的方式
a1.channels.c1.type = memory
a1.channels.c1.capacity = 1000
a1.channels.c1.transactionCapacity = 100
#描述和配置 source channel sink 之间的连接关系
a1.sources.r1.channels = c1
a1.sinks.k1.channel = c1
三、监听采集操作
1.开启agent服务
首先打开cmd进入conf文件夹,并启动powershell;
然后,输入命令:flume-ng agent -c …/conf -f …/conf/example.conf - a1 -property “flume.root.logger=INFO,console”
其中,
-c conf 指定 flume 自身的配置文件所在目录;
-f …/conf/example.conf 指定我们所描述的采集方案;
-n a1 指定我们这个 agent 的名字;
2.启动telnet
首先,win+r 打开cmd命令行,并启动powershell
然后,使用telnet localhost 44444命令,(之后,如果无法输入指令,先ctrl+];然后会车enter)
最后,输入helloword等监听信息