Spark与Scala的安装配置（环境变量）以及运行wordcount

一、Spark与Scala版本兼容问题：

Spark运行在Java 8 +，Python 2.7 + / 3.4 +和R 3.1+上。对于Scala API，Spark 2.4.2使用Scala 2.12。您需要使用兼容的Scala版本（2.12.x）。
请注意，自Spark 2.2.0起，对2.6.5之前的Java 7，Python 2.6和旧Hadoop版本的支持已被删除。自2.3.0起，对Scala 2.10的支持被删除。自Spark 2.4.1起，对Scala 2.11的支持已被弃用，将在Spark 3.0中删除。
https://spark.apache.org/docs/latest/index.html
这里我们下载下面这两个包：

二、scala的安装配置

①官网下载安装Scala：scala-2.12.8.tgz
https://www.scala-lang.org/download/

②将下载好的包上传之后解压到相应目录：
tar -zxvf ~/scala-2.12.8.tgz -C /opt/module

③将解压后的包名改为scala
cd /opt/module
mv scala-2.12.8 scala

④在/etc/profile文件中配置环境变量
vim /etc/profile

export SCALA_HOME=/opt/module/scala
export PATH=$PATH:$SCALA_HOME/bin

⑤测试：scala -version

启动：scala

三、spark的安装配置

①官网下载安装Spark：spark-2.4.2-bin-hadoop2.7.tgz