4 weekend110的YARN的通用性意义 + yarn的job提交流程

 

 

 

Mr程序写完之后,提交给yarn,yarn会产生一个MRAppMaster,想说的是,yarn变得很

通用,yarn集群上,不光可以跑mr程序,还可以跑各种运算模型。

   海量批处理,mapreduce

   海量实时处理,spark

   海量流式处理,storm

 

Mapreduce实现,MRAppMaster

Spark实现,spark AppMaster

Storm实现,storm AppMaster

 

说明,有了hdfs和yarn,什么框架都畅通无阻,运行。

 

以上是weekend110的YARN的通用性意义

 

 

 

按F5或者open declaration,

 

 

 

下面,来玩玩YarnClientProtocolProvider

 

 

 

 

 

 

 

 

 

 

 

 

 

 

因为,上面的断点,只执行到这里,所以这边的也显示到这步。

 

 

好的,以上是weekend110的yarn的job提交流程的源码跟踪分析。

Soga,可谓,真的,写源码的人牛逼,我这跟踪源码学习过程,学会到程序的循序渐进,,,

 

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值