Spark安装

下载的是spark-1.6.1-bin-hadoop2.6

1. 解压

tar -zxvf spark-1.6.1-bin-hadoop2.6.tgz -C apps/

2. 修改配置文件

 

增加

export JAVA_HOME=/home/omc/apps/jdk1.7.0_45
export SPARK_MASTER_IP=192.168.0.131
export SPARK_MASTER_PORT=7077

3.分发 apps/spark-1.6.1-bin-hadoop2.6到集群中

scp -r apps/spark-1.6.1-bin-hadoop2.6 192.168.0.x:/home/omc/app/

4.测试是否安装成功

[omc@hadoop1 apps]$ cd  spark-1.6.1-bin-hadoop2.6/sbin/
[omc@hadoop1 sbin]$ start-all.sh