Flume OG & Flume NG

原创 2012年03月24日 17:21:47

前话

Flume OG 也就是 Flume original generation 由 Cloudera公司开发,最新版本是0.9.4。而Flume NG 就是 Flume next generation, 大概在2011年6月份由 Cloudera贡献给开源社区,目前属于Apache的一个incubator project。


为什么要命名为Flume NG ?

Flume NG的Jira上的第一个Trace:FLUME-728

Apache 之所以要将 Flume 更命名 Flume NG,是因为Flume NG 对 Flume 进行了大规模的重构。重构的原因如下:

1. 代码过于复杂:Flume 在 Cloudera已经开发了多年,工程显得有些臃肿;

2. Flume NG要将其一些核心组件要进行标准化;

3. sink / source 配置不完善;

4. 改进heartbeat和master架构;

5. 最后一点也很重要:rename packages to org.apache.flume;


待续...



参考:

https://cwiki.apache.org/FLUME/flume-ng.html

http://www.cloudera.com/blog/2011/12/apache-flume-architecture-of-flume-ng-2/

https://github.com/apache/flume

http://incubator.apache.org/projects/flume.html

flume og 安装及配置

Flume安装   介绍 Flume本身的安装比较简单(flume的介绍请参考http://blog.csdn.net/rzhzhz/article/details/7448633),安装前先说明几个...

Flume OG 介绍和配置

一、Flume介绍 Flume是一个分布式、可靠、和高可用的海量日志聚合的系统,支持在系统中定制各类数据发送方,用于收集数据;同时,Flume提供对数据进行简单处理,并写到各种数据接受方(可定制)的...

Flume-ng资料合集

  • 2015年10月26日 23:28
  • 6.94MB
  • 下载

flume-ng整合hbase

  • 2017年11月16日 12:53
  • 191KB
  • 下载

Flume NG 学习笔记(九)Flune Client 开发

文章内容还是来自官网http://flume.apache.org/FlumeDeveloperGuide.html 由于在实际工作中,数据的生产方式极具多样性,Flume 虽然包含了一些内置的机制...

flume-ng-sql-source-1.4.4.jar

  • 2017年11月26日 22:33
  • 8.74MB
  • 下载

mvn flume ng sdk

  • 2017年09月28日 21:43
  • 6.4MB
  • 下载

Flume-ng 多节点集群搭建

Flume NG是一个分布式、可靠、可用的系统,它能够将不同数据源的海量日志数据进行高效收集、聚合,最后存储到一个中心化数据存储系统中,方便进行数据分析。事实上flume也可以收集其他信息,不仅限于日...

Flume ng share

  • 2015年07月01日 13:12
  • 1.99MB
  • 下载

flume-ng安装

  • 2015年01月05日 15:53
  • 142KB
  • 下载
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:Flume OG & Flume NG
举报原因:
原因补充:

(最多只允许输入30个字)