hadoop 踩坑记

1、访问 yarn 8088 会被重定向到 0.0.0.0:8088 地址。

问题排查：查看了 yarn-site.xml 配置文件，yarn 的 ResourceManager 使用了高可用，配置了 rm1 和 rm2 节点。当 rm1 故障时会自动切换到 rm2。所以当 rm1 出现故障，我们访问 rm1:8088，就会出现异常。这时，应该访问 rm2:8088，就正常了。

<property>
        <name>yarn.resourcemanager.ha.rm-ids</name>
        <value>rm1,rm2</value>
</property>

<property>
        <name>yarn.resourcemanager.ha.automatic-failover.enabled</name>
        <value>true</value>
</property>

<property>
        <name>yarn.resourcemanager.hostname.rm1</name>
        <value>10.0.2.11</value>
</property>

<property>
        <name>yarn.resourcemanager.hostname.rm2</name>
        <value>10.0.2.12</value>
</property>

<property>
        <name>yarn.resourcemanager.ha.id</name>
        <value>rm1</value>
 </property>

<property>
        <name>yarn.resourcemanager.recovery.enabled</name>
        <value>true</value>
</property>

<!-- RM1 configs -->
<property>
        <name>yarn.resourcemanager.address.rm1</name>
        <value>10.0.2.11:8032</value>
</property>

<property>
        <name>yarn.resourcemanager.scheduler.address.rm1</name>
        <value>10.0.2.11:8030</value>
</property>

<property>
        <name>yarn.resourcemanager.webapp.address.rm1</name>
        <value>0.0.0.0:8088</value>
 </property>

<property>
        <name>yarn.resourcemanager.resource-tracker.address.rm1</name>
        <value>10.0.2.11:8031</value>
 </property>

<property>
        <name>yarn.resourcemanager.admin.address.rm1</name>
        <value>10.0.2.11:8033</value>
 </property>

<property>
        <name>yarn.resourcemanager.ha.admin.address.rm1</name>
        <value>10.0.2.11:23142</value>
 </property>

<!-- RM2 configs -->
<property>
        <name>yarn.resourcemanager.address.rm2</name>
        <value>10.0.2.12:8032</value>
</property>

<property>
        <name>yarn.resourcemanager.scheduler.address.rm2</name>
        <value>10.0.2.12:8030</value>
</property>

<property>
        <name>yarn.resourcemanager.webapp.address.rm2</name>
        <value>0.0.0.0:8088</value>
</property>

<property>
        <name>yarn.resourcemanager.resource-tracker.address.rm2</name>
        <value>10.0.2.12:8031</value>
</property>

<property>
        <name>yarn.resourcemanager.admin.address.rm2</name>
        <value>10.0.2.12:8033</value>
</property>

<property>
        <name>yarn.resourcemanager.ha.admin.address.rm2</name>
        <value>10.0.2.12:23142</value>
</property>

解决办法：访问 rm2:8088 即可。或者 重启 rm2 的 RM，让 yarn 的 RM 切到 rm1 即可。