- 博客(1)
- 收藏
- 关注
RSS订阅原创 MapReduce总结 (1)
【1】Hadoop Map/Reduce框架为每一个InputSplit产生一个map任务，而每个InputSplit是由该作业的InputFormat产生的。 【2】Mapper的输出被排序后，就被划分给每个Reducer。分块的总数目和一个作业的reduce任务的数目是一样的。用户可以通过实现自定义的 Partitioner来控制哪个key被分配给哪个 Reducer。 【
2016-04-07 21:53:06
743
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人