Spark+Intellij 舒服的源码开发环境配置
废话记录一下关于 spark 开发的相关环境配置, 以及与 intellij 的集成.本文针对的是需要了解 spark 源码 的情况下的开发环境配置. 如果只是需要写 spark job, 而并不想 trace 到源码里面去看运行上下文, 那么有很多资料讲这个的了: 无非是下载 spark 的 jar, 新建一个 scala/python/R 项目, 花式把这个 jar 设
转载
2016-10-18 21:37:59 ·
453 阅读 ·
0 评论