Hadoop
文章平均质量分 89
LeeQing2011
这个作者很懒,什么都没留下…
展开
-
Hadoop-0.20.203.0rcl公平调度器(FairScheduler)源代码解析
在Hadoop中,调度器是一个可插拔的模块,用户可以根据自己的实际应用要求设计调度器。在Hadoop中常见的调度器有三种:默认的FIFO调度器(FIFO Scheduler),计算能力调度器(Capacity Scheduler),公平调度器(Fair Schedule)。相关信息可以参考文章《Hadoop调度器总结》。 本文我们主要分析hadoop-0.20.203.0rcl中的公平调度器原创 2012-06-12 15:05:15 · 2577 阅读 · 0 评论 -
hadoop-0.20.205.0 MapReduce流程分析
Hadoop JobTracker的启动 org.apache.hadoop.mapred.JobTracker类实现了Hadoop MapReduce模型的中JobTracker的功能,主要负责任务的接受,初始化,调度以及对TaskTracker的监控。 在Hadoop中JobTracker单独作为一个JVM运行,其main函数就是启动JobTracker的入口函数。 publ原创 2012-07-05 12:57:22 · 1265 阅读 · 0 评论