hadoop yarn的原理和工作流程

之前写过 mapreduce的原理和工作流程，包括了一小部分yarn的内容，因为yarn本来就是从mrv1中提出来的，所以二者有千丝万缕的联系，另外，作为一个新手也在梳理的阶段，所以记录的内容或多或少会有混乱或者不精准，还请大家包涵。

结构如下：先简要介绍一下mrv1中的资源管理，然后概述yarn。

一，mrv1

    这个阶段资源管理和计算都是由mapreduce独自完成。

    执行阶段包括：map  sort/shuffle/merge  以及reduce等几个阶段实现

    mapreduce框架负责管理集群资源，调度数以千计的作业以及其他的一些事情。

    包括几个组件：Job tracker   teskTracker管理相应节点的任务。tt与jt通信，并被jt控制。jt负责工作服务器节点的资源管理，跟踪资源使用率/可用率，生命周期，调度作业的各个任务，跟踪进度，以及为任务提供容灾服务。tt根据JT的命令启动清除任务，并且向JT提供任务的状态信息。、

    但是：不能支持非MR应用的需求，可扩展性不高，资源使用率不高（map  reduce节点不能互换）兼容等问题导致了YARN的出现

二 YARN

   YARN的主要想法：将JT的两大主要职能，资源管理ÿ