下载
首先下载spark编译后的包,spark官网下载地址:http://spark.apache.org/downloads.html
在linux系统中也可以通过命令直接下载:
wget http://www-us.apache.org/dist/spark/spark-2.1.0/spark-2.1.0-bin-hadoop2.7.tgz
解压
下载完成之后,解压:
tar -zxvf spark-2.1.0-bin-hadoop2.7.tgz
也可以自己下载源码, 自己编译。
在/etc/profile中配置SPARK_HOME
export SPARK_HOME=/usr/local/spark-2.1.0
重新加载/etc/profile文件:
source /etc/profile
启动
使用命令启动spark:
cd ${SPARK_HOME}
./sbin/start-all.sh
启动完成之后,通过8080端口可以访问sparkUI: