![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Spark源码
FelixClinton
这个作者很懒,什么都没留下…
展开
-
Spark源码编译
源码编译前的准备工作 安装jdk:(安装前需要卸载Linux自带的OpenJdk) 下载jdk并解压到相应安装目录(如:/usr/install/jdk1.8) 修改/etc/profile文件,用vim编辑器打开/etc/profile文件,并在文件末尾追加以下内容: export JAVA_HOME=/usr/install/jdk1.8 expor...原创 2019-04-08 16:55:43 · 219 阅读 · 0 评论 -
Spark源码调试
在学习Spark源码或者开发过程中,往往需要远程调试Spark。下面将介绍如何在IDEA下对Spark源码进行远程调试。 调试前准备工作 下载需要调试的Spark对应的版本源码,并用make-distribution.sh编译方式对Spark源码进行编译(由于可能涉及到源码的修改问题,为便于修改后源码的编译和调试,选择该种方式进行编译,并利用编译生成的.tgz包安装Standalone模式...原创 2019-04-09 19:39:55 · 882 阅读 · 0 评论