Apache Hadoop 2.4.0版

Apache社区已投票决定发布Apache Hadoop 2.4.0,因此新版本现已可用,并进行了重要改进。 这些改进不仅与HDFS有关,而且与MapReduce有关

HDFS的重要改进是关于NameNodes。 现在使用了多个相互独立的独立Namenodes和Namespaces。 数据节点被所有名称节点用作块的公共存储,并且每个数据节点向集群中的所有名称节点注册。 心跳和阻止报告从数据节点发送到名称节点,名称节点发送回由数据节点处理的命令。

MapReduce的更改主要与ResourceManager有关。 从Hadoop的0.23版本开始,JobTracker的两个主要功能,资源管理和作业生命周期管理被分离为单独的组件。 在此版本中,新的ResourceManager管理应用程序的全局资源分配,而每个应用程序的ApplicationMaster管理应用程序的调度和协调。 每个应用程序ApplicationMaster是特定于框架的库,其任务是与ResourceManager协商资源,并与NodeManager一起执行和监视任务。

有兴趣开始使用Hadoop吗? 请查看我们的免费白皮书“ Hadoop照亮”

翻译自: https://www.javacodegeeks.com/2014/04/apache-hadoop-2-4-0.html

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值