![](https://img-blog.csdnimg.cn/20201014180756922.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Flume
Clozzz
在撸码的道路上越走越远
展开
-
大数据基础之Flume——Flume基础及Flume agent配置以及自定义拦截器
Flume简介 Flume用于将多种来源的日志以流的方式传输至Hadoop或者其他目的地 - 一种可靠、可用的高效分布式数据收集服务 Flume拥有基于数据流上的简单灵活架构,支持容错、故障转移与恢复 由Cloudera 2009年捐赠给Apache,现为Apache顶级项目 Flume架构 Client:客户端,数据产生的地方,如Web服务器 Event:事件,指通过Agent传输的单个数据包,如日志数据通常对应一行数据 Agent:代理,一个独立的JVM进程 - Flume以一个或多个Ag原创 2020-08-10 19:52:36 · 613 阅读 · 0 评论 -
大数据基础之Flume——Flume安装
软件资源 https://pan.baidu.com/s/1OLp711YieFsEz5Hnw0zaBA 提取码:46zv 将软件上传到Linux上并解压 tar -zxf /opt/flume-ng-1.6.0-cdh5.14.2.tar.gz //个人习惯将安装的软件放在soft文件夹里,如果没有请自建 mv apache-flume-ng-1.6.0-cdh5.14.2 /opt/soft/flume160 修改配置文件 //进入flume的conf文件夹 cd /opt/soft/flume160原创 2020-08-10 11:12:02 · 162 阅读 · 0 评论