linux spark 安装

下载地址：
https://archive.apache.org/dist/spark/spark-2.2.1/

tar -zxvf spark-2.2.1-bin-hadoop2.7.gz

解压后形成文件夹：
spark-2.2.1-bin-hadoop2.7

修改用户组：
sudo chown -R hadoop:hadoop spark-2.2.1-bin-hadoop2.7

进入文件夹：
cd spark-2.2.1-bin-hadoop2.7

cd conf
cp spark-env.sh.template spark-env.sh
cp slaves.template slaves

vi spark-env.sh
export JAVA_HOME=/usr/java/jdk1.8.0_201-amd64
export SCALA_HOME=/data1/soft/scala-2.10.4
export HADOOP_HOME=/data1/soft/hadoop/hadoop
export HADOOP_CONF_DIR=/data1/soft/hadoop/hadoop/etc/hadoop
export SPARK_MASTER_WEBUI_PORT=8088
export SPARK_MASTER_HOST=node1.paa.data
export SPARK_MASTER_PORT=7077
export SPARK_M