在yarn-site.xml添加如下配置:
<!-- yarn容器允许分配的最小内存 -->
<property>
<name>yarn.scheduler.minimum-allocation-mb</name>
<value>2048</value>
</property>
<!-- yarn容器允许管理的物理内存大小 -->
<property>
<name>yarn.nodemanager.resource.memory-mb</name>
<value>20480</value>
</property>
<property>
<name>yarn.nodemanager.vmem-pmem-ratio</name>
<value>2.1</value>
</property>
在mapred-site.xml下将
<!-- 指定MapReduce程序运行在Yarn上
<property>
<name>mapreduce.framework.name</name>
<value>yarn</value>
</property>
-->
改成
<property>
<name>mapreduce.job.tracker</name>
<value>hdfs://master:8001</value>
<final>true</final>
</property>