Hadoop的MapReduce程序提交之全过程打通

1）作业提交过程之 YARN
作业提交全过程详解

（1）作业提交

第 0 步：client 调用 job.waitForCompletion 方法，向整个集群提交 MapReduce 作业。第 1 步：client 向 RM 申请一个作业 id。
第 2 步：RM 给 client 返回该 job 资源的提交路径和作业 id。
第 3 步：client 提交 jar 包、切片信息和配置文件到指定的资源提交路径。第 4 步：client 提交完资源后，向 RM 申请运行 MrAppMaster。
（2）作业初始化

第 5 步：当 RM 收到 client 的请求后，将该 job 添加到容量调度器中。第 6 步：某一个空闲的 NM 领取到该 job。
第 7 步：该NM 创建 Container，并产生 MRAppmaster。第 8 步：下载 client 提交的资源到本地。
（3）任务分配

第 9 步：MrAppMaster 向 RM 申请运行多个 maptask 任务资源。
第 10 步：RM 将运行 maptask 任务分配给另外两个NodeManager，另两个 NodeManager
分别领取任务并创建容器。

（4）任务运行

第 11 步： MR 向两个接收到任务的 NodeManager 发送程序启动脚本， 这两个NodeManager 分别启动 maptask，