ApplicationMaster,ResourceManager和NodeManager通信过程

本文详细介绍了在Hadoop的YARN框架中,ApplicationMaster如何与ResourceManager、NodeManager进行通信的过程,揭示了任务调度和资源管理的内部机制。
摘要由CSDN通过智能技术生成
ApplicationMaster与ResourceManager和NodeManager的交互:
      rpc交互: 1.与ResourceManager交互,ApplicationMaster可获得计算所需的资源
               2.与NodeManager交互,ApplicationMaster可启动计算任务并监控它的生命周期

1.ApplicationMaster与ResourceManager之间通信主要有以下三个步骤
      1).ApplicationMaster通过rpc向ResourceManager注册。ApplicationMaster启动时,首先向ResourceManager注册,注册消息封装到
         ProtocolBuffers消息RegisterApplicationMasterRequest中,主要包含以下字段:
             **host: ApplicationMaster启动所在的节点的host
             **rpc_port: ApplicationMaster本次启动对外rpc的端口号
             **tracking_url: ApplicationMaster对外提供的追踪的web url,用户可以通过该url查看应用程序执行状态
        ApplicationMaster注册成功后,ResourceManager将返回一个RegisterApplicationMasterResponse类型的对象。该返回
        对象主要包含以下几个字段:
             **maximumCapability: 最大可申请的单个Container的占用的资源量
             **application_ACLs: 应用程序访问控制列表
     2).注册成功
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值