瓶子的博客

原创 后台运行spark-submit命令的方法

在使用spark-submit运行工程jar包时常常会出现一下两个问题： 1.在程序中手打的log（如System.out.println（“***testRdd.count=”+testRdd.count()））常常会因被下一个Job的执行日志覆盖掉而无法查看日志； 2.一旦命令窗口被关闭或者电脑因断电等原因异常关闭，程序便终止运行。 其中，第一个问题可以通过将运行日志重定位