目录
目录
1.下载spark的源码包,地址https://github.com/apache/spark,有以下两种方式
2.启动idea,使用open打开刚才下载完成的spark源码包
3.将spark的源码包导入idea中,配置好maven、jdk、scala,然后等待
7.以上只是将spark2.3.0的源码包,导入到idea中,还有很多没有做呢。
前言
scala安装:https://blog.csdn.net/u010772882/article/details/86378868(可自己百度)
jdk1.8安装:https://baijiahao.baidu.com/s?id=1630229511923551996&wfr=spider&for=pc(可自己百度)
idea2019安装:https://www.jianshu.com/p/636fdc45164a(可自己百度)
maven安装:https://www.cnblogs.com/lihan829/p/11503497.html(可自己百度)
参考源码阅读部署:https://blog.csdn.net/qq_27667379/article/details/80251068
1.下载spark的源码包,地址https://github.com/apache/spark,有以下两种方式
第一种:使用该命令把源码包放到你想要放的目录,git clone https://github.com/apache/spark.git
第二种:直接下载zip压缩包
2.启动idea,使用open打开刚才下载完成的spark源码包
3.将spark的源码包导入idea中,配置好maven、jdk、scala,然后等待
4.配置编码格式
5.install 安装scala 插件
上面Plugins进入之后
我的这个已经安装scala 插件。
安装完scala插件之后,代码变颜色了,如果没有scala插件的话,全部是黑白颜色。
6.然后重启idea即可
等待indexing完事之后,还要配置scala的SDK,配置成你本地安装的路径就可以了。
7.以上只是将spark2.3.0的源码包,导入到idea中,还有很多没有做呢。
网上已经有很多不错的文章,只要参照文章就可完成阅读源码的环境搭建,有了轮子就不再照轮子了,我提供下参照地址,不过大家可以关注我,一起搞活spark源码。
分析Spark源码第一步----搭建源码阅读环境的地址 https://blog.csdn.net/qq_27667379/article/details/80251068