Spark的Yarn模式及其案例，2024年最新文末有惊喜

---

1. 解压缩文件

将spark-3.0.0-bin-hadoop3.2.tgz 文件上传到linux 并解压缩，放置在指定位置。

(1)解压文件

[root@hadoop102 software]# tar -zxvf spark-3.0.0-bin-hadoop3.2.tgz -C /opt/module

（2）修改文件名

[root@hadoop102 software]# cd /opt/module

[root@hadoop102 module]# mv spark-3.0.0-bin-hadoop3.2 spark-yarn

2.修改配置文件

（1）修改 hadoop 配置文件/opt/module/hadoop-2.7.2/etc/hadoop/yarn-site.xml,

[root@hadoop102 module]# cd /opt/module/hadoop-2.7.2/etc/hadoop

[root@hadoop102 hadoop]# vim yarn-site.xml

添加内容

yarn.nodemanager.pm