spark环境搭建java_Spark环境搭建

一、Java安装

1、安装目录准备

在安装这些包之前在家目录下创建一个app的目录，app目录中创建一个tmp目录：

[root@hadoop-master ~]#mkdir -p app/tmp

2、解压JDK

上传JDK1.8版本 jdk-8u74-linux-x64.tar.gz到linux上，并且将其解压到app目录下：

[root@hadoop-master ~]#tar -xzvf jdk-8u74-linux-x64.tar.gz -C ~/app

3、配置全局变量

将解压后的Java路径配置到全局变量中：

vim /etc/profile

export JAVA_HOME=/root/app/jdk1.8.0_74

export PATH=$PATH:$JAVA_HOME/bin

通过source /etc/profile使文件立即生效。

4、测试

[root@hadoop-master ~]#java -version

java version "1.8.0_74"Java(TM) SE Runtime Environment (build1.8.0_74-b02)

Java HotSpot(TM)64-Bit Server VM (build 25.74-b02, mixed mode)

二、scala安装

这与上面的是一样的进行解压到app目录中、然后进行全局配置：

#解压

[root@hadoop-master software]#tar -xzvf scala-2.11.8.tgz -C ~/app

#配置全局环境变量

export SC