目录
一、Flume简介
二、应用场景
三、Flume架构
1、单体架构
2、串联架构
3、级联架构
一、Flume简介
Flume是由Cloudera提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的工具,在大数据领域主要看中了 flume海量的日志实时采集功能。
它可以采集文件,Socket数据包等各种形式源数据,又可以将采集到的数据输出到HDFS、hbase、hive、kafka等众多外部存储系统中。
![](https://i-blog.csdnimg.cn/blog_migrate/3db359b19314cfbbfd7f595d275e279a.png)
二、应用场景
场景一 实时日志采集
场景二 数据量很大,实时的小部分小部分的采集,节省时间
场景三 断点续传