spark 与 scala 版本对应关系

最新推荐文章于 2025-03-29 18:18:29 发布

Michealkz

最新推荐文章于 2025-03-29 18:18:29 发布

阅读量1.6w

点赞数 4

分类专栏： Spark系列 Scala 系列

本文链接：https://blog.csdn.net/qq_43081842/article/details/100118388

版权

Spark系列同时被 2 个专栏收录

31 篇文章

订阅专栏

Scala 系列

9 篇文章

订阅专栏

本文详细介绍了Spark与Scala版本的兼容性问题，强调了从Spark2.2.0开始，不再支持Java7及以下版本，从2.3.0起，对Scala2.10的支持被移除，以及Spark2.4.1对Scala2.11的支持被弃用，这些变化对开发者选择开发语言版本有重要影响。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

在开发spark程序的时候，用scala语言进行开发需要考虑sparkspark 版本与scala版本的对应问题

版本对应关系如下：

Spark运行在Java 8 +，Python 2.7 + / 3.4 +和R 3.1+上。
对于Scala API，Spark 2.4.3使用Scala 2.12。您需要使用兼容的Scala版本（2.12.x）。

请注意
自Spark 2.2.0起，对2.6.5之前的Java 7，Python 2.6和旧Hadoop版本的支持已被删除。
自2.3.0起，对Scala 2.10的支持被删除。
自Spark 2.4.1起，对Scala 2.11的支持已被弃用，将在Spark 3.0中删除。

在spark的官网中有关于spark 和 scala 的版本对应的关系介绍