flume
一天两晒网
这个作者很懒,什么都没留下…
展开
-
flume监听端口整合kafka以及相关错误
之前的http.conf:#savecontenttofileagent2.sources=httpSrcagent2.channels=channelagent2.sinks=sinkagent2.sources.httpSrc.type=httpagent2.sources.httpSrc.bind=172.16.90.61agent2.sources.ht原创 2017-07-24 18:14:07 · 1944 阅读 · 0 评论 -
flume自定义拦截器处理event
收集的数据为json格式,需要解析成以|分隔的字符串参考:http://blog.csdn.net/zfszhangyuan/article/details/52449060pom: org.apache.flume flume-ng-core 1.7.0 代码:pa原创 2018-01-05 16:02:58 · 5663 阅读 · 0 评论 -
flume自定义 file sink 以本地时间,event数据为目录
参考:https://www.cnblogs.com/sunyaxue/p/6645753.html数据收集为file时,不能以本地时间和数据内容分类接入文件,参考别人的文章实现代码:package flume;import org.apache.avro.util.Utf8;import org.apache.flume.*;import org.apache.flume.c原创 2018-01-05 16:19:00 · 2315 阅读 · 0 评论