![](https://img-blog.csdnimg.cn/20201014180756930.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
flume
白修修
这个作者很懒,什么都没留下…
展开
-
自定义flume拦截器,如何使用
用java编写自定义拦截器import org.apache.flume.Context;import org.apache.flume.Event;import org.apache.flume.interceptor.Interceptor;import java.util.ArrayList;import java.util.List;import java.util.Map;public class InterceptorDemo implements Interceptor {/原创 2020-08-20 17:02:40 · 176 阅读 · 0 评论 -
flume连接到kafka配置文件编写
flume像要连接到kafka主要需要编写sinks的配置,其他的正常用spooldir的配置就行话不多说,直接上代码user_friends.sources = userFriendSourceuser_friends.channels = userFriendChanneluser_friends.sinks = userFriendSinkuser_friends.sources.userFriendSource.type = spooldiruser_friends.sources.u原创 2020-08-19 14:46:58 · 854 阅读 · 0 评论 -
使用flume将文件导入hdfs,如何写配置文件?
写配置文件现有一个.csv文件,需要导入hdfsuser_friends.sources = userFriendsSourceuser_friends.channels = userFriendsChanneluser_friends.sinks = userFriendsSinkuser_friends.sources.userFriendsSource.type = spooldir# 需要导入hdfs的文件目录位置user_friends.sources.userFriendsSou原创 2020-08-17 15:22:10 · 478 阅读 · 0 评论 -
安装flume,并简单使用
1、安装flume首先解压flume安装包到CentOS7虚拟机的指定目录(基本操作)tar -zxf flume-ng-1.6.0-cdh5.14.0.tar.gz -C /opt进入到/opt文件夹(刚刚安装flume的文件夹),改名mv apache-flume-1.6.0-cdh5.14.0-bin/ flume160514进入/flume160514/conf复制flume-env.sh.templatecp flume-env.sh.template flume-env.sh修改原创 2020-08-16 15:22:37 · 322 阅读 · 0 评论