Spark 安装

1. 软件列表

 hadoop 2.6.0、 zookeeper 3.4.6和habase 1.2.0已安装好，参见《HBase 安装配置》。在此基础上安装scala-2.10.6和spark-1.6.0-bin-hadoop2.6。

2. 安装

在d-hdp-01上执行操作

解压缩 scala-2.10.6.tgz

tar -xvf scala-2.10.6.tgz
mv scala-2.10.6 ~/cloud/scala

解压缩 spark-1.6.0-bin-hadoop2.6.tgz

tar -xvf spark-1.6.0-bin-hadoop2.6.tgz
mv spark-1.6.0-bin-hadoop2.6 ~/cloud/spark

配置~/.bashrc 增加

export SCALA_HOME=/home/hadoop/cloud/scala
export PATH=$PATH:$SCALA_HOME/bin

export SPARK_HOME=/home/hadoop/cloud/spark
export PATH=$PATH:$SPARK_HOME/bin:$SPARK_HOME/sbin