环境centos 64位
Spark 2.1.0
Scala IDE: http://scala-ide.org (可以认为是装了scala插件的eclipse)
jdk1.8.0_111(之前玩hadoop的时候装了,scala基于jvm,理论上应该要装的)
1. 下载好Spark后直接解压,然后运行bin/spark-shell看是否能进入spark shell。Spark自带scala,进入scala模式,如下:
第一次启动时,提示sc初始化失败,报一堆port问题,解决方法是(local模式):