0070 IntelliJ IDEA+Scala+Hadoop +Spark的开发环境搭建

一、准备

必备环境：Windows7+JDK8.0，并已经安装了IntelliJ IDEA。

1、下载scala 2.10.6

http://www.scala-lang.org/download/all.html

2、下载spark-1.5.1-bin-hadoop2.3

http://spark.apache.org/downloads.html

选择对应版本。

3、下载hadoop-2.7.x

http://hadoop.apache.org/releases.html

选择binary下载。

二、环境配置

1、Scala环境配置

       解压安装包，假设放置于：D:\OpenSourceLab\TestProject\scala

系统变量添加：

变量名：SCALA_HOME

变量值：D:\OpenSourceLab\TestProject\scala

点击Path变量，在最末端添加D:\OpenSourceLab\TestProject\scala\bin;

注意以英文的分号结尾。

在cmd中输入：scala –version

若打印出类似以下的信息则环境配置完成。

2、hadoop环境配置

解压安装包，假设放在：D:\appForWork\hadoop-2.8.1

和步骤1类似的操作。

       设置hadoop变量名为HADOOP_HOME，变量值为：