flume
文章平均质量分 58
day_one_step
这个作者很懒,什么都没留下…
展开
-
flume-NG整合hdfs和kafka
flume版本:apache-flume-1.7.0-bin.tar hadoop版本:hadoop-2.7.3 kafka版本:kafka_2.11-0.10.2.1 zookeeper版本:zookeeper-3.4.6 最近在安装搭建flume和kafka这两款软件,网上有很多这方面的简介,在这里,我把flume—NG和kafka、hdfs整合在一起。flume作为消息采集和传原创 2017-06-08 15:35:22 · 1749 阅读 · 0 评论 -
flume-NG采用syslogtcp方式监听端口
一、采集说明 本采集方式使用socket通信的方式,向flume发送数据进行采集,采集后的数据存储到hdfs和kafka。 二、配置文件 1、source采集层 port.properties# set agent nameagent.sources = r1agent.channels = c_kafka c_hdfs agent.sinks = s_kafka_k1 s_原创 2017-07-19 18:35:47 · 3872 阅读 · 1 评论