Yarn的体系结构和运行原理

Yarn的体系结构和运行原理:运行MapReduce的容器

hadoop jar hadoop-mapreduce-examples-2.7.3.jar wordcount /input/data.txt /output/wc1206

1.主节点:ResourceManager

       职责:   (*) 接受任务请求  

                 (*) 资源的分配

                 (*) 任务分配

2.从节点:NodeManager

       职责:  (*)从ResourceManager获取任务和资源

                   (*)执行

3.调度MR任务的过程




4. 资源分配方式有3种

    (1)FIFO Scheduler:先来先得

    (2)Capacity Scheduler:容器管理

     (3)Fair Scheduler:公平调度管理, 前提:假设任务具有相同优先级,平均分配资源

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值