构建spark源码阅读环境

第一步:访问网站https://github.com/apache/spark下载spark.master,解压文件.

第二步:进入spark.master 文件夹,搜索spark*.jar,如下图:


第三步: 将搜到文件copy到新建文件夹spark_jars下,待用。

第四步:下载安装ideal ,打开后,如下图操作,创建新工程


第五步:点击Scala,右边选择sbt.(注,Scala可以在idea官方插件中心下载,防止ideal的plugins文件夹下,选择安装

            重新启动ideal 即可安装Scala插件,sbt不用提前安装),点击next.


第六步:设置项目名称和路径。然后点击finish。可能会需要一会儿时间。


第七步:等待至下面的import 完成


第八步:新建demo 检查配置是否正确。


第九步: 打开projects Structures, 安装1,2,3de 顺序执行下面操作。


最后:双击shift ,输入RDD,即可查看源码。 ctrl+鼠标单击,即可实现源码跳转,显示类的具体方法,使用alt+7即可查看所有方法。


  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值