Flume NG使用

什么是flume

flume是数据采集工具，长用于日志收集。

flume特点：

flume版本：

分为：flume OG和flume NG一般用NG，OG太复杂。（此文介绍NG）

flume架构：

Agent是flume的基本单元。
event是flume基本数据类型单元。也可以称之为数据格式。因为flume可以从不同的系统或数据源采集数据，而采集到数据结构也会不一致。flume对不同的数据源都统一封装为它自己的数据格式即event。
Agent三要素：source， channel， sink。

Event：

Agent：

Source：

Channel：

Sink：

其他组件：

例子：