本文介绍了YARN上的应用程序管理，包括MapReduce和Storm应用程序的运行。内容涵盖YARN的基本构成，如客户端和ApplicationMaster的角色，以及MapReduce应用程序的具体运作过程。文章还对比了MapReduce On YARN与传统MapReduce程序的区别，并概述了YARN应用程序的开发流程。
1、运行在YARN上的MapReduce应用程序
2、运行在YARN上的Storm应用程序
3、YARN应用程序基本构成
①客户端 ：
主要作用是提供一系列访问接口供用户与YARN交互，包括提交Application、查询Application运行状态，修改Application属性（比如优先级）等。
②ApplicationMaster：
向ResourceManager申请资源（以Container形式表示）；
与NodeManager通信以启动各个Container(Task)；
监控各个任务运行状态，并在失败时为其重新申请资源。
4、以MapReduce应用程序为例
MapReduce客户端：
将MapReduce作业提交到YARN上；
查询MapReduce作业运行状态；
管理MapReduce作业，比如杀死MapReduce作业&#
最低0.47元/天 解锁文章
扫一扫
810
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
