flume
wending-Y
这个作者很懒,什么都没留下…
展开
-
flume安装
下载flume,解压文件 新建demo配置文件 确保telnet命令可以使用 开启agent wget http://mirrors.hust.edu.cn/apache/flume/1.8.0/apache-flume-1.8.0-bin.tar.gz tar -zxvf 文件 touch flume-example.conf 粘贴内容 # example.conf: A single-node原创 2018-01-02 13:34:14 · 408 阅读 · 0 评论 -
分布式flume日志收集系统
1.架构图,摘自flume官网 2.这里我们用两个agent收集,然后输入到一个agent去,落到HDSF上 3.参考配置文件source 采用exec方式代替,在两台机器上部署 a1.sources=s1 a1.channels=c1 a1.sinks=s1#source a1.sources.s1.type=exec a1.sources.s1.command=tail -f /home原创 2018-01-02 17:27:00 · 291 阅读 · 0 评论 -
Flume 多Channel/多Sink
文章目录单管道设计多管道、多输出 单管道设计 示例代码 # example.conf: A single-node Flume configuration # Name the components on this agent a1.sources = r1 a1.sinks = k1 a1.channels = c1 # Describe/configure the source a1.s...原创 2019-08-30 21:15:43 · 623 阅读 · 0 评论