- 博客(2)
- 收藏
- 关注
RSS订阅转载 hadoop调度器总结
随着MapReduce的流行，其开源实现Hadoop也变得越来越受推崇。在Hadoop系统中，有一个组件非常重要，那就是调度器，它的作用是将系统中空闲的资源按一定策略分配给作业。在Hadoop中，调度器是一个可插拔的模块，用户可以根据自己的实际应用要求设计调度器。Hadoop中常见的调度器有三种，分别为： （1）默认的调度器FIFO Hadoop中默认的调度器，它先按照作业的优先级高低
2013-12-03 16:55:32
625
转载 hadoop任务分配
一、详谈JobInProgress中Map/Reduce任务分配 众所周知，JobTracker节点使用配置的任务调度器TaskScheduler来为某一个具体的TaskTracker节点分配任务，同时这个任务调度器只能决定给该TaskTracker节点分配哪一个Job或者那些Job的任务以及分配多少个任务，但是它却不能决定给当前的TaskTracker节点分配一个Job的具体的哪一个
2013-12-01 22:37:38
2304
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人