Hadoop学习之YARN（YARN工作机制）心得

YARN 工作机制（步骤）：

        1. Mr 程序提交到客户端所在的节点

        （集群模式创建了 YarnRunner，本地模式是LocalRunner）

        2. 向 RM 申请一个Application

        3. RM 把要提交的job放到Application资源提交的路径上

        4. 提交 job 运行所需要的资源（Job.split，Job.xml，wc.jar）

        5. 资源提交完毕，申请运行 mrAppMaster

        6. 将用户的请求初始化成一个Task，并将其放入调度队列中

        7. NM 领取到Task任务

        8. 创建容器 Container

        9. 下载 job 资源到本地

        10. 申请运行 MapTask 容器（根据切片信息申请开启的 MapTask 数量）

        11. 领取到任务，创建容器

        12. 发送程序启动脚本（启动 MapTask，运行代码）

        13. 向 RM 申请2个容器，运行 ReduceTask 程序

        14. Reduce 向 Map 获取相应分区的数据

        15. 由 MRAppmaster 向 RM 申请释放资源（包括自己）