- 博客(2)
- 收藏
- 关注
原创 hadoop-0.20.205.0 MapReduce流程分析
Hadoop JobTracker的启动org.apache.hadoop.mapred.JobTracker类实现了Hadoop MapReduce模型的中JobTracker的功能,主要负责任务的接受,初始化,调度以及对TaskTracker的监控。在Hadoop中JobTracker单独作为一个JVM运行,其main函数就是启动JobTracker的入口函数。 publ
2012-07-05 12:57:22 1249
原创 Hadoop-0.20.203.0rcl公平调度器(FairScheduler)源代码解析
在Hadoop中,调度器是一个可插拔的模块,用户可以根据自己的实际应用要求设计调度器。在Hadoop中常见的调度器有三种:默认的FIFO调度器(FIFO Scheduler),计算能力调度器(Capacity Scheduler),公平调度器(Fair Schedule)。相关信息可以参考文章《Hadoop调度器总结》。本文我们主要分析hadoop-0.20.203.0rcl中的公平调度器
2012-06-12 15:05:15 2557
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人