flume快速入门及常用案例整理
flume快速入门及常用案例整理flume概述1.1flume定义flume是Cloudera提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统,flume基于流式架构,灵活简单Flume最主要的作用就是,实时读取服务器本次磁盘的数据,讲数据写入到HDFS。1.2flume基础架构Agent Agent是一个JVM进程,它是以事件的形式讲数据从源头送至目的。 Agent主要有三个组成部分:Source,Channel,SinkSourceSource是负责接受数
原创
2021-07-06 17:09:39 ·
1217 阅读 ·
0 评论