flume
文章平均质量分 80
AuroraPetard
这个作者很懒,什么都没留下…
展开
-
flume agent链接采集到hdfs
一般是采集web服务器上的日志信息,一般source为exec 即shell命令结果,多为tail -F log多个agent链接webserver(source) exec tail -F channel sink 下沉到另外一个agent的source所以前一个agent sink为 avro sink (一个发送的server )绑定指定要发送到哪一个一个主机则下一个agent原创 2018-04-30 18:01:55 · 193 阅读 · 0 评论 -
flume安装使用
Flume is a distributed, reliable, and available service forefficiently collecting, aggregating, and moving large amounts of logdata. It has a simple and flexible architecture based on streamingdata fl原创 2018-04-29 11:48:14 · 114 阅读 · 0 评论 -
flume 启动命令 及其常用配置介绍
/bigdata/flume-1.6.0/bin/flume-ng agent -n a1 -c /bigdata/flume-1.6.0/conf -f /bigdata//flume-1.6.0/conf/bdvisual.conf -Dflume.root.logger=INFO,console要写成绝对路径 并且还需要加上-Dflume.root.logger=INFO,con...原创 2019-04-27 18:46:55 · 1056 阅读 · 0 评论