本文档详细介绍了如何在YARN上配置和安装Spark。首先，提供了Spark的下载链接，接着说明了如何将下载的压缩包解压到指定路径，并创建及编辑`spark-env.sh`配置文件。此外，还讲解了在`/etc/profile`中设置环境变量的步骤。最后，通过执行测试命令验证Spark安装是否成功。
下载
解压与安装
将下载好的压缩包传入虚拟机的安装路径，本文章为/soft目录
解压与重命名文件夹
cd /soft
#解压压缩包
tar -zxvf spark-2.4.5-bin-hadoop2.7.tgz
#重命名
mv spark-2.4.5-bin-hadoop2.7 spark进入spark/conf配置目录新建spark-env.sh文件(vim spark-env.sh)并加入以下内容
# 设置JAVA和SCALA安装目录
JAVA_HOME=/soft/jdk1.8.0
SCALA_HOME&#
最低0.47元/天 解锁文章
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
