Flume大数据框架中 用于分布式收集数据的系统
由Cloudera公司开源；
分布式、 可靠、 高可用的海量日志采集系统；
数据源可定制， 可扩展;
数据存储系统可定制， 可扩展。
中间件： 屏蔽了数据源和数据存储系统的异构性
采集非结构化数据
EventClient
Agent
1、 Source 2、 Channel 3、
Flume是一款由Cloudera公司开源的大数据日志采集系统，具备分布式、可靠和高可用特性。它能定制数据源和数据存储，作为中间件屏蔽了异构性，主要处理非结构化数据。Event是其基本传输单元，包含header和byte array数据。Flume Agent由source、channel和sink组成，source负责接收和存放数据到channel，sink则将数据发送到目的地，如HDFS或Kafka。
Client
Agent
1、 Source 2、 Channel 3、
最低0.47元/天 解锁文章
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
