Yarn资源调度流程
集群规划
角色 | node01 | node02 | node03 | node04 | client |
---|---|---|---|---|---|
ResourceManager | √(主) | √(备) | |||
NodeManager | √ | √ | √ | ||
Client | √ |
Yarn搭建步骤
由于在Hadoop2.x版本中自带Yarn组件, 因此Yarn的搭建是在Hadoop的安装包中进行.
- 首先进入Hadoop的配置文件目录
cd /opt/software/hadoop/hadoop-2.6.5/etc/hadoop/
- 修改mapred-site.xml.template
先将文件改名, 去掉后缀
mv mapred-site.xml.template mapred-site.xml
在 configuration 标签对中加入下述内容:
<property>
<name>mapreduce.framework.name</name>
<value>yarn</value>
</property>
- 修改yarn-site.xml
在 configuration 标签对中加入下述内容:
<property>
<