YARN HA解析

RM:

a.启动时会向 ZK的 hadoop-ha目录写一个lock文件,写成功标识active,否则standby rm会一直监控lock文件是否存在,如果不存在就尝试去创建,争取为active rm.
b.会接收client的任务的请求,接收和监控nm的资源汇报,负责资源的分配调度,启动和监控applicationmaster .

NM:

节点上资源的管理,启动容器container,运行task 计算,上报资源,container情况汇报给applicationmaster

建议: mr on yarn提交流程 

RMStateStore:

a.rm的作业信息存储在zk的/rmstore下,active rm会向这个目录写app信息。
b.当active rm挂了,另外一个standby rm成功转换为active rm后,会从这个zk的/rmstore目录读取对应的作业的信息,
重新构建作业的内存信息,启动内部服务,开始接收NM的心跳,构建集群资源信息,且开始接收客户端提交的作业请求。

ZKFC:

自动故障转移  是rm的线程  非独立的守护进程

 

--------------------------

      用人品去感动别人,用行动去带动别人,用阳光去照耀别人,用坚持去赢得别人,要求自己每天都去做与目标有关的事情,哪怕每天只进步一点点,坚持下来你就是最优秀卓越的!欢迎大家加入大数据qq交流群:725967421     一起交流,一起进步!!
--------------------------
 

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值