idea编写的spark应用程序打成jar包到集群运行
本胖使用sbt进行spark的包管理,打成jar包到spark环境运行
1.打开idea项目结构配置页面,可以使用快捷键ctrl+shift+alt+s
2.添加应用程序的jar包设置
然后弹出这个窗口,直接点击ok到下一步就行
3.去除其他包的依赖,只保留你要打包的应用程序,这里还不是很明白原理,但是按照步骤这样点击,最后打包出来的就只有一个jar包,所有依赖都会包含在内
...
原创
2019-01-09 16:03:54 ·
1116 阅读 ·
0 评论