spark-submit类源码分析(scala)

主要以 spark-submit能否在一条命令执行多个主函数 （即一条命令执行多个主函数） 分析 spark-submit类源码  

找到主方法 

1.首先是 parseArguments 方法, 返回 SparkSubmitArguments实例，

该类主要是解析和封装参数 而mainClass 则对应的则是 spark-submit提交的 --class 对应的反射出的类名 到这实际已经可以看出mainClass为字符串 只能在提交时指定一个主函数

而为什么知道-class对应的是mainClass 接着往下分析

2.点进主函数中doSubmit()方法

对应模式点进sumbit()中 

根据代码分析无论如何都会执行runMain()方法 而入参正式之前实例化的参数 ，这也正是spark-submit核心的方法

 

 在这个方法中根据运行的环境解析对应的参数

一共是220行 到819行 找到提交到yarn上的配置 分为client 和 cluster模式

 故得出上述结论

3. 最后回到runMain方法

 

完成主类的构造并启动application 

如有错误，， 务必指正～～ 谢谢