提交spark yarn-cluster与yarn-client模式的致命区别
一、组件版本二、提交方式三、运行原理四、分析过程五、致命区别六、总结一、组件版本调度系统:DolphinScheduler1.2.1spark版本:2.3.2二、提交方式spark在submit脚本里提交job的时候,经常会有这样的警告 Warning: Master yarn-cluster is deprecated since 2.0. Please use master "yarn" with specified deploy mode instead.这是因为你用了yarn-cl.
原创
2020-05-15 19:28:15 ·
3655 阅读 ·
0 评论