注意:安装前需要先安装jdk1.8和hadoop2.7.3
把spark压缩包放入 ~/soft 中,再进行解压、创建软连接
解压:
tar -xzvf spark-3.2.1-bin-hadoop2.7.tgz
解压成功:
软连接:
ln -s spark-3.2.1-bin-hadoop2.7 spark
创建成功:
添加配置文件:
vi ~/.bashrc
export SPARK_HOME=~/soft/spark
export PATH=$SPARK_HOME/bin:$PATH
使配置文件生效:
source ~/.bashrc
启动spark:
spark-shell -version