【Hadoop】如何给hadoop集群增加一个队列

在 Apache Hadoop 中,队列的概念通常与资源管理器(ResourceManager)和队列管理器(Queue Manager)相关联。ResourceManager 是 Hadoop 的一个关键组件,用于管理集群资源,并将这些资源分配给不同的应用程序。队列管理器则用于配置和管理不同应用程序使用的队列。

下面是在 Hadoop 中创建队列的一般步骤:

配置队列: 您需要编辑 Hadoop 的配置文件来定义队列。这通常包括编辑 capacity-scheduler.xml 文件。在这个文件中,您可以定义多个队列,并为每个队列分配资源配额、优先级等属性。以下是一个简单的配置示例:

  <property>
    <name>yarn.scheduler.capacity.root.queues</name>
    <value>default,wa</value>
    <description>
      The queues at the this level (root is the root queue).
    </description>
  </property>

  <property>
    <name>yarn.scheduler.capacity.root.wa.capacity</name>
    <value>90</value>
  </property>
  <property>
    <name>yarn.scheduler.capacity.root.default.capacity</name>
    <value>10</value>
    <description>Default queue target capacity.</description>
  </property>

在defult队列基础之上增加一个wa队列,修改完配置文件之后,需要重载配置文件。

yarn rmadmin -refreshQueues
  • 20
    点赞
  • 9
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值