一,环境
Windows_x64 系统
Java1.8
Scala2.10.6
spark1.6.0
hadoop2.7.5
IDEA IntelliJ 2017.2
nmap工具(用到其中的ncat命令,对应Linux中的nc命令)
二,本地应用搭建
2.1 环境变量
设置方法:系统参数--》添加变量--》形式为:XXX_HOME,然后把对应安装包的根目录复制作为变量值;在PATH变量中添加: %XXX_HOME%\bin;
1,Hadoop需要设置环境变量;
2,Scala最好自己下载安装相应版本,设置环境变量;
3,spark直接解压即可;
参考:环境搭建参考
2.2 搭建测试
利用SBT工具非常方便的可以完成搭建,利用sbt创建Scala项目。项目结构生成为: