MapReduce 原理分析
#MapReduce 分析
User 请求 MapReduce 处理,MapReduce 接收到 User 的文件,将文件划分用户事先定义的 M 份,每一份16MB到64MB, 然后使用fork将用户进程拷贝到集群内其它机器上。
user program的副本中有一个 Master , 其余为 Worker。 Master 负责调度, 为空闲的 Worker 分配作业。司令指挥小兵捡地上的子弹...
原创
2019-12-15 20:37:41 ·
121 阅读 ·
0 评论