Flume OG & Flume NG

原创 2012年03月24日 17:21:47

前话

Flume OG 也就是 Flume original generation 由 Cloudera公司开发,最新版本是0.9.4。而Flume NG 就是 Flume next generation, 大概在2011年6月份由 Cloudera贡献给开源社区,目前属于Apache的一个incubator project。


为什么要命名为Flume NG ?

Flume NG的Jira上的第一个Trace:FLUME-728

Apache 之所以要将 Flume 更命名 Flume NG,是因为Flume NG 对 Flume 进行了大规模的重构。重构的原因如下:

1. 代码过于复杂:Flume 在 Cloudera已经开发了多年,工程显得有些臃肿;

2. Flume NG要将其一些核心组件要进行标准化;

3. sink / source 配置不完善;

4. 改进heartbeat和master架构;

5. 最后一点也很重要:rename packages to org.apache.flume;


待续...



参考:

https://cwiki.apache.org/FLUME/flume-ng.html

http://www.cloudera.com/blog/2011/12/apache-flume-architecture-of-flume-ng-2/

https://github.com/apache/flume

http://incubator.apache.org/projects/flume.html

flume ng 和flume og的区别

摘自: http://blog.csdn.net/rzhzhz/article/details/8778266 Flume OG:Flume original generation 即F...
  • nxcjh321
  • nxcjh321
  • 2014年03月13日 05:04
  • 1112

flume-ng与flume-og对比

转载地址:http://www.ibm.com/developerworks/cn/data/library/bd-1404flumerevolution/index.html 背景 Cl...
  • aaa1117a8w5s6d
  • aaa1117a8w5s6d
  • 2014年09月15日 17:06
  • 2709

Flume-og和Flume-ng的变化

Flume是一个分布式、可靠、高可用的海量日志聚合的系统,支持在系统中定制各类数据发送方,用于收集数据;同时,Flume提供对数据进行简单处理,并写到各种数据接受方。...
  • u012689336
  • u012689336
  • 2016年09月26日 18:28
  • 730

flume OG VS flume NG

以下链接是本人以前写的一篇文章,从flume发展历史、基本组件、用户体验阐述这两个版本发生的革命性变化。里面给出了一个简单实例,使用tail source和hdfs sink。 Flume NG: ...
  • ffchenff
  • ffchenff
  • 2015年02月13日 15:21
  • 47

Flume NG:Flume OG 区别对比

Flume 作为 cloudera 开发的实时日志收集系统,已经受到越来越多的关注。比如 IBM BigInsights 已经将 Flume 作为产品的一部分。Flume 初始的发行版本目前被统称为 ...
  • joeyon
  • joeyon
  • 2015年01月21日 11:13
  • 676

Flume NG 学习笔记(一)简介

一、简介 Flume是一个分布式、可靠、高可用的海量日志聚合系统,支持在系统中定制各类数据发送方,用于收集数据;同时,Flume提供对数据的简单处理,并写到各种数据接收方的能力。 Flume在0....
  • looklook5
  • looklook5
  • 2014年10月21日 15:57
  • 2185

flume-ng安装,应用,几个简单测试例子!

flume-ng安装,应用,几个简单测试例子!
  • liangrui1988
  • liangrui1988
  • 2017年05月13日 02:13
  • 382

flume-ng负载均衡load-balance、failover集群搭建

转自:http://blog.csdn.net/morning_pig/article/details/9093149 集群采用3台机器: [html] view plai...
  • lskyne
  • lskyne
  • 2014年07月10日 19:25
  • 8975

Flume-ng 例子

本文用到的 apache-flume-1.5.0-bin.tar.gz 关于Flume 的安装可以参考:http://blog.csdn.net/u012689336/article/detail...
  • u012689336
  • u012689336
  • 2016年10月12日 09:03
  • 491

Flume OG和Flume NG的区别

应用场景 Flume作为Hadoop中的日志采集工具,非常的好用,但是在安装Flume的时候,查阅很多资料,发现形形色色,有的说安装Flume很简单,有的说安装Flume很复杂,需要依赖zooke...
  • bingoxubin
  • bingoxubin
  • 2017年11月23日 13:52
  • 308261
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:Flume OG & Flume NG
举报原因:
原因补充:

(最多只允许输入30个字)