Hadoop集群修改yarn队列

1.修改默认的default队列参数

注意:

yarn.scheduler.capacity.root.队列名.capacity总和不能超过100

  <property>
    <name>yarn.scheduler.capacity.root.queues</name>
    <value>default,hive,spark,flink</value>
    <description>
      The queues at the this level (root is the root queue).
    </description>
  </property>

  <property>
    <name>yarn.scheduler.capacity.root.default.capacity</name>
    <value>25</value>
    <description>Default queue target capacity.</description>
  </property>

2.hive队列

<property>
    <name>yarn.scheduler.capacity.root.hive.capacity</name>
	<value>50</value>
    <description>hive队列的容量为50%</description>
</property>

<property>
    <name>yarn.scheduler.capacity.root.hive.user-limit-factor</name>
	<value>1</value>
    <description>一个用户最多能够获取该队列资源容量的比例</description>
</property>

<property>
    <name>yarn.scheduler.capacity.root.hive.maximum-capacity</name>
	<value>80</value>
    <description>hive队列的最大容量</description>
</property>

<property>
    <name>yarn.scheduler.capacity.root.hive.state</name>
    <value>RUNNING</value>
</property>

<property>
    <name>yarn.scheduler.capacity.root.hive.acl_submit_applications</name>
	<value>*</value>
    <description>访问控制,控制谁可以将任务提交到该队列</description>
</property>

<property>
    <name>yarn.scheduler.capacity.root.hive.acl_administer_queue</name>
	<value>*</value>
    <description>访问控制,控制谁可以管理(包括提交和取消)该队列的任务</description>
</property>

<property>
    <name>yarn.scheduler.capacity.root.hive.acl_application_max_priority</name>
	<value>*</value>
<description>访问控制,控制用户可以提交到该队列的任务的最大优先级</description>
</property>

<property>
    <name>yarn.scheduler.capacity.root.hive.maximum-application-lifetime</name>
	<value>-1</value>
    <description>hive队列中任务的最大生命时长,-1表示时间无限长</description>
</property>

<property>
    <name>yarn.scheduler.capacity.root.hive.default-application-lifetime</name>
	<value>-1</value>
    <description>default队列中任务的最大生命时长</description>
</property>

 3.spark队列

<property>
    <name>yarn.scheduler.capacity.root.spark.capacity</name>
	<value>25</value>
    <description>spark队列的容量为25%</description>
</property>

<property>
    <name>yarn.scheduler.capacity.root.spark.user-limit-factor</name>
	<value>1</value>
    <description>一个用户最多能够获取该队列资源容量的比例</description>
</property>

<property>
    <name>yarn.scheduler.capacity.root.spark.maximum-capacity</name>
	<value>80</value>
    <description>spark队列的最大容量</description>
</property>

<property>
    <name>yarn.scheduler.capacity.root.spark.state</name>
    <value>RUNNING</value>
</property>

<property>
    <name>yarn.scheduler.capacity.root.spark.acl_submit_applications</name>
	<value>*</value>
    <description>访问控制,控制谁可以将任务提交到该队列</description>
</property>

<property>
    <name>yarn.scheduler.capacity.root.spark.acl_administer_queue</name>
	<value>*</value>
    <description>访问控制,控制谁可以管理(包括提交和取消)该队列的任务</description>
</property>

<property>
    <name>yarn.scheduler.capacity.root.spark.acl_application_max_priority</name>
	<value>*</value>
<description>访问控制,控制用户可以提交到该队列的任务的最大优先级</description>
</property>

<property>
    <name>yarn.scheduler.capacity.root.spark.maximum-application-lifetime</name>
	<value>-1</value>
    <description>spark队列中任务的最大生命时长,-1表示时间无限长</description>
</property>

<property>
    <name>yarn.scheduler.capacity.root.spark.default-application-lifetime</name>
	<value>-1</value>
    <description>default队列中任务的最大生命时长</description>
</property>

4.flink队列

<property>
    <name>yarn.scheduler.capacity.root.flink.capacity</name>
	<value>25</value>
    <description>flink队列的容量为25%</description>
</property>
<property>
    <name>yarn.scheduler.capacity.root.flink.user-limit-factor</name>
	<value>1</value>
    <description>一个用户最多能够获取该队列资源容量的比例</description>
</property>

<property>
    <name>yarn.scheduler.capacity.root.flink.maximum-capacity</name>
	<value>80</value>
    <description>flink队列的最大容量</description>
</property>

<property>
    <name>yarn.scheduler.capacity.root.flink.state</name>
    <value>RUNNING</value>
</property>

<property>
    <name>yarn.scheduler.capacity.root.flink.acl_submit_applications</name>
	<value>*</value>
    <description>访问控制,控制谁可以将任务提交到该队列</description>
</property>

<property>
    <name>yarn.scheduler.capacity.root.flink.acl_administer_queue</name>
	<value>*</value>
    <description>访问控制,控制谁可以管理(包括提交和取消)该队列的任务</description>
</property>

<property>
    <name>yarn.scheduler.capacity.root.flink.acl_application_max_priority</name>
	<value>*</value>
<description>访问控制,控制用户可以提交到该队列的任务的最大优先级</description>
</property>

<property>
    <name>yarn.scheduler.capacity.root.flink.maximum-application-lifetime</name>
	<value>-1</value>
    <description>flink队列中任务的最大生命时长,-1表示时间无限长</description>
</property>

<property>
    <name>yarn.scheduler.capacity.root.flink.default-application-lifetime</name>
	<value>-1</value>
    <description>default队列中任务的最大生命时长</description>
</property>
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值