![](https://img-blog.csdnimg.cn/20201014180756926.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Flume
Java朱老师
以其昭昭,使人昭昭
展开
-
Flume教程(一)Flume监听目录,将目录中的文件上传HDFS
在hp3上新建目录/test_flume,让flume监听该文件夹,实际工作中,该目录可以设置为应用系统服务端的日志文件夹。在flume的job文件夹下,新建: touch flume-dir-hdfs.conf在里面填写内容:a1.sources = r1a1.sinks = k1a1.channels = c1# Describe/configure the sourcea1.sources.r1.type = spooldir#监听的目录位置a1.sources.r1.spoo原创 2022-05-20 23:30:00 · 1673 阅读 · 0 评论 -
Flume教程(一)Flume环境搭建与测试、使用
安装一、将apache-flume-1.9.0-bin.tar.gz上传到hp3的/apps文件夹下二、解压:tar -xvf /apps/apache-flume-1.9.0-bin.tar.gz -C /usr/local三、对解压后的文件建立一个软连接,命名为flume四、配置环境变量,在profile.d下新建flume.sh编辑内容为:export FLUME_HOME=/usr/local/flumeexport PATH=$PATH:$FLUME_HOME/bin并让其生效原创 2022-05-19 11:53:48 · 1317 阅读 · 0 评论