yarn-HA(高可用)配置

在我上一篇文章中已经配置好了HDFS的高可用,接下来我们来配置yarn的高可用,其实很简单,只需要改一个yarn-site.xml配置文件即可(本文需要已经配好Hadoop集群 zookeeper集群,未配好请跳转我上一篇文章HDFS HAhttps://blog.csdn.net/qq_57193542/article/details/120535500icon-default.png?t=L892https://blog.csdn.net/qq_57193542/article/details/120535500

yarn-site.xml配置如下

<configuration>
 <!-- 指定 MR 走 shuffle -->
 <property>
 <name>yarn.nodemanager.aux-services</name>
 <value>mapreduce_shuffle</value>
 </property>
<!--YARN HA配置-->
	<property>
	  <name>yarn.resourcemanager.ha.enabled</name>
	  <value>true</value>
	</property>
	<property>
	  <name>yarn.resourcemanager.cluster-id</name>
	  <value>cluster1</value>
	</property>
	<property>
	  <name>yarn.resourcemanager.ha.rm-ids</name>
	  <value>rm1,rm2</value>
	</property>
	<property>
	  <name>yarn.resourcemanager.hostname.rm1</name>
	  <value>master</value>
	</property>
	<property>
	  <name>yarn.resourcemanager.hostname.rm2</name>
	  <value>slave1</value>
	</property>
	<property>
	  <name>yarn.resourcemanager.webapp.address.rm1</name>
	  <value>master:8088</value>
	</property>
	<property>
	  <name>yarn.resourcemanager.webapp.address.rm2</name>
	  <value>slave1:8088</value>
	</property>
	<property>
	  <name>yarn.resourcemanager.zk-address</name>
	  <value>master:2181,slave1:2181,slave2:2181</value>
	</property>     
	<property><!--启用RM重启的功能,默认为false-->
	  <name>yarn.resourcemanager.recovery.enabled</name>
	  <value>true</value>
	</property> 
	<property>
	  <name>yarn.resourcemanager.store.class</name>	  <value>org.apache.hadoop.yarn.server.resourcemanager.recovery.ZKRMStateStore</value>
	</property>
</configuration>

将yarn先停止

[root@slave1 .ssh]# stop-yarn.sh 

将配置分发给各个主机

[root@master bin]# xsync /opt/module/hadoop-3.1.3/etc/hadoop/yarn-site.xml 

重启yarn(在其中一台配置了 ResourceManager的主机启动即可)

 [root@master bin]# start-yarn.sh 

启动效果如下

 

这样我们的YARN-HA 就配置好了.

  • 0
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值