Yarn的HA配置

前提

集群上有分布式的Zookeeper。

修改配置文件

etc/hadoop/yarn-site.xml

修改内容如下：（其中的主机名根据自己的情况修改）

<property>
    <name>yarn.nodemanager.aux-services</name>
    <value>mapreduce_shuffle</value>
  </property>
	

  <!--配置yarn HA-->
  <!--开启resourcemanager HA功能-->
  <property>
    <name>yarn.resourcemanager.ha.enabled</name>
    <value>true</value>
  </property>

  <!--标识resourcemanager-->
<property>
  <name>yarn.resourcemanager.cluster-id</name>
  <value>cluster1</value>
</property>

<!--集群中resourcemanager的ID列表，后面的配置将引用该ID-->
<property>
  <name>yarn.resourcemanager.ha.rm-ids</name>
  <value>rm1,rm2</value>
</property>

<!--resourcemanager1所在的节点主机名-->
<property>
  <name>yarn.resourcemanager.hostname.rm1</name>
  <value>dataone</value>
</property>

<!--resourcemanager2所在的节点主机名-->
<property>
  <name>yarn.resourcemanager.hostname.rm2</name>
  <value>datatwo</value>
</property>

<!--resourcemanager1的web页面访问地址-->
<property>
  <name>yarn.resourcemanager.webapp.address.rm1</name>
  <value>dataone:8088</value>
</property>

<!--resourcemanager2的web页面访问地址-->
<property>
  <name>yarn.resourcemanager.webapp.address.rm2</name>
  <value>datatwo:8088</value>
</property>
<property>
  <name>hadoop.zk.address</name>
  <value>master:2181,dataone:2181,datatwo:2181</value>
</property>

同步文件

scp 命令

重启Yarn，重启集群也行

检验

输入：hostname:8088会出现页面，且配置多个，输入多个hostname只会跳转到一个。