运行 spark-shell --master yarn-client,报错如下:
解决办法:
先停止YARN服务,然后修改yarn-site.xml,增加以下内容:
<property>
<name>yarn.nodemanager.vmem-check-enabled</name>
<value>false</value>
</property>
<property>
<name>yarn.nodemanager.vmem-pmem-ratio</name>
<value>8</value>
</property>