yarn中的资源调度器_笔记

yarn中资源调度器共分为三种

1.FIFO调度器
 优点是简单易懂而且不需要配置， 但是它不适合共享集群：
   在FIFO调度器中只有一个队列，而且同一时刻只能有一个作业执行，就会出现有一个大作业A一直在运行，而小文件B要阻塞到作业A执行完毕才能运行的情况
2.容量调度器
 1.它是yarn默认使用的调度器，如果不指定队列，那么应用都会被放在default的默认队列中（就和FIFO没区别了），
 2.如果在配置文件capacity-scheduler.xml中设置了队列（同时可以指定每个队列的最大容量比例），那么每一个队列都相当于一个FIFO，但是多个队列可以同时执行作业
 3.弹性队列：如果队列A中有多个作业，并且队列A容量不够用了，这时会把空闲的资源分配给队列A，但是不会超过设置的对大容量。
 设置最大容量是为了防止队列A抢占过多的资源，导致别的队列只能阻塞到队列A执行作业完毕或者等待别的队列释放空间
3.公平调度器
 1.要使用公平调度器，首先要配置yarn