- 博客(1)
- 收藏
- 关注
原创 Windows平台搭建Spark开发环境(Intellij idea 2020.1社区版+Maven 3.6.3+Scala 2.11.8)
在开始之前,需要说明的是 要跑通基本的wordcount程序,是不需要在windows上安装 hadoop 和spark的,因为idea在跑程序的时候,会按照 pom.xml配置文件,从指定的 repository源,按照properties指定的版本,下载dependency中指定的依赖包 。如果需要在本地通过 spark-shell,或者 运行开发完的包,那么就需要完整的hadoop 和spark环境,就需要把这两个都安装好。一、需要安装的软件版本 及 下载地址jdk 1.8 :ht.
2021-07-23 13:50:42 4673 4
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人