1.简介
本文主要在cdh集群中,添加一个yarn的资源队列,并将任务提交到新添加的资源队列中。
2.修改配置文件
首先选择Capacity Scheduler调度器,默认为FIFO Scheduler。
在yarn的配置界面搜索:容量调度程序配置高级配置代码段(安全阀)
默认的资源队列为default,新增一个资源队列的名称为:hive,并设置相关该资源队列的参数如下:
<configuration>
<property>
<name>yarn.scheduler.capacity.root.queues</name>
<value>default,hive</value>
</property>
<property>
<name>yarn.scheduler.capacity.root.capacity</name>
<value>100</value>
</property>
<property>
<name>yarn.scheduler.capacity.root.default.capacity<