YARN详解（YARN架构设计、常用命令、三种调度器）

    YARN架构设计也是主从架构，分为Resource Mananger（RM）和Node Manager（NM），其中RM主要负责应用管理和资源调度，NM主要负责容器和作业。

一、YARN架构介绍

YARN架构图如上图所示，详细介绍如下：

• ResourceManager（RM）：负责对各NM上的资源进行统一管理和调度，将AM分配空闲的Container运行并监控其运行状态。对AM申请的资源请求分配相应的空闲Container。主要由两个组件构成：调度器（Scheduler）和应用程序管理器（Applications Manager）。
• 调度器（Scheduler）：调度器根据容量、队列等限制条件（如每个队列分配一定的资源，最多执行一定数量的作业等），将系统中的资源分配给各个正在运行的应用程序。调度器仅根据各个应用程序的资源需求进行资源分配，而资源分配单位是
  Container，从而限定每个任务使用的资源量。Scheduler不负责监控或者跟踪应用程序的状态，也不负责任务因为各种原因而需要的重启