11.1安装Spark
11.1.1本地模式
安装包链接:Index of /dist/spark/spark-3.1.1 (apache.org)
下载文件名:spark-3.1.1-bin-without-hadoop.tgz
11.1.1本地模式安装
(1)安装
打开放置压缩包的文件夹(可以使用wincsp传输)
执行代码:
tar -zxvf spark-3.1.1-bin-hadoop3.2.tgz -C /app/
<!--(功能:解压压缩包到app目录下。注意:需要有在根目录下的app文件夹。没有的话,可以自己创建)-->
sudo vim /etc/profile
<!--(功能:打开编辑器)-->
export SPARK_HOME=/app/spark-3.1.1-bin-hadoop3.2
<!--(注意路径)-->
export PATH=$PATH:$SPARK_HOME/bin
<!--(上面两行代码放在文件编辑器后面,然后保存)-->
source /etc/profile
<!--(立即运行编辑保存的代码)-->
(2)查看
打开hadoop
运行代码: