下面讲一下linux上安装spark,以?Standalone Mode 安装
?
1)首先安装JDK
?
下载JDK:jdk-7u79-linux-x64.tar.gz ?,版本是1.7以上都行,解压 tar -zxvf?jdk-7u79-linux-x64.tar.gz ?
?
然后配置 ~/.bashrc?
增加
export JAVA_HOME=/cdh/jdk1.7.0_79
export JRE_HOME=${JAVA_HOME}/jre
export CLASSPATH=.:${JAVA_HOME}/lib:${JRE_HOME}/lib
?
export PATH=${JAVA_HOME}/bin:${SCALA_HOME}/bin:${SPARK_HOME}/bin:$PATH
?
source .bashrc
?
验证: java -version能正常运行则说明安装成功
?
2)安装scala
?
?
3) 安装spark
?
(2)将spark-1.4.0-bin-cdh4.tgz移到根目录,并解压
tar?-zxvf?spark-1.4.0-bin-cdh4.tgz
(3)配置环境变量
SPARK_HOME=/spark-1.4.0-bin-cdh4
path=$path:$SPARK_HOME/bin
(4)修改配置文件
1)cd? /spark-1.4.0-bin-cdh4/conf?
2)mv?spark-