infi

Flume 作为 cloudera 开发的实时日志收集系统，受到了业界的认可与广泛应用。Flume 初始的发行版本目前被统称为 Flume OG（original generation），属于 cloudera。但随着 FLume 功能的扩展，Flume OG 代码工程臃肿、核心组件设计不合理、核心配置不标准等缺点暴露出来，尤其是在 Flume OG 的最后一个发行版本 0.94.0 中，日志传输

在具体介绍本文内容之前，先给大家看一下Hadoop业务的整体开发流程：    从Hadoop的业务开发流程图中可以看出，在大数据的业务处理过程中，对于数据的采集是十分重要的一步，也是不可避免的一步，从而引出我们本文的主角—Flume。本文将围绕Flume的架构、Flume的应用(日志采集)进行详细的介绍。  （一）Flume架构介绍  1、Flume的概念    flume是分布式的日

http://blog.csdn.net/bright60/article/details/50728306   我用了第一种方法。   1. 日志文件每天roate一个新文件  a)  方案一   There is no way the tail command itself can automatically switch to the new fil