Yarn集群配置

最新推荐文章于 2024-08-08 19:38:19 发布

程序猿的笔记本

最新推荐文章于 2024-08-08 19:38:19 发布

阅读量2.3k

点赞数

分类专栏：大数据学习文章标签： yarn hadoop

本文链接：https://blog.csdn.net/u012045426/article/details/78861243

版权

本文介绍了Yarn集群的配置步骤，包括配置yarn-site.xml文件，通过Xshell同时修改四台机器的配置，以及配置mapred-site.xml。接着在master节点启动yarn集群，并通过jps检查启动状态。最后，可以通过浏览器访问Yarn集群的状态页面。

摘要由CSDN通过智能技术生成

Yarn集群配置

hadoop是由hdfs、yarn和mapreduce组成，yarn负责调配内存和cpu,在此需要对yarn进行相关配置。

1、配置yarn-site.xml文件，用Xshell连接四台机器（master、slave1、slave2、slave3），Xshell有命令发送到所有窗口的功能（工具–>发送输入到所有会话），所以我们可以同时修改四台机器上的yarn-site.xml文件。
输入命令 vim /usr/local/hadoop/etc/hadoop/yarn-site.xml

进入yarn-site.xml,写入

<property>
    <name>yarn.resourcemanager.hostname</name>
    <value>master<value>
 </property>
 <property>
    <name>yarn.nodemanager.aux-services</name>
    <value>mapreduce_shuffle<value>
 </property>