Hadoop源码分析系列
文章平均质量分 83
pengchengcrazy
这个作者很懒,什么都没留下…
展开
-
Hadoop任务提交过程
Hadoop任务提交分析分析工具和环境下载一份hadoop的源码,这里以hadoop-1.1.2为例。本地IDE环境为eclipse,导入整个目录,然后可以在IDE里面看到目录结构了,要分析任务提交过程,需要找到入口代码,很明显,对于熟悉Hadoop应用程序开发的同学来说很容易的知道任务的提交是从job的配置开始的,所以需要这样一份提交Job的代码,在src/examples里原创 2014-07-21 20:03:13 · 2762 阅读 · 0 评论 -
Hadoop之JobTracker源码分析
JobTracker源码分析前言JobTracker是Hadoop中的一个重要角色,负责任务的调度和分配,和client端的任务提交也有关系,这次主要分析JobTracker中JobTracker和TaskTracker心跳机制在JobTracker这端的详细实现过程以及client提交的任务是如何被处理然后分配给TaskTracker的。JobTracker启动在ha原创 2014-07-29 18:01:23 · 1756 阅读 · 0 评论