Windows单机jdk + scala + spark + hadoop + pycharm开发环境的搭建

安装步骤

折腾好久，主要是网上教程太散了有的地方还没说全

版本

jdk 1.8
scala 2.10.7
spark 1.6.0（依赖hadoop 2.6）
hadoop 2.6.5

spark 1.6还是比较稳定好用的，下载链接自己找
放一下hadoop相关的链接吧链接: https://pan.baidu.com/s/1IU0GDJtvo70rwm7srRmr9A 提取码: 9c68 这是不知道转发哪位网友的。这里面的hadoop是完全配制好的

Jdk

这个就安装完配置环境变量
系统变量
新建JAVA_HOME C:\PROGRA~1\Java\jdk1.8.0_181
新建CLASSPATH .;%JAVA_HOME%\lib\dt.jar;%JAVA_HOME%\lib\tools.jar
编辑Path 末尾加入 ;%JAVA_HOME%\bin;%JAVA_HOME%\jre\bin

完了之后在cmd 里用 java -version javac -version试试

Scala

这个就安装完配置环境变量
系统变量，看你自己装在哪了
新建SCALA_HOME C:\Program Files (x86)\scala
编辑Path 末尾加入 ;%SCALA_HOME%\bin;%SCALA_HOME%\jre\bin

完了之后在cmd 里用 scala试试

Hadoop

上面的网盘里的下载解压就可以了，