scala创建maven项目常用pom文件

最新推荐文章于 2024-08-22 10:08:39 发布

风是外衣衣衣

最新推荐文章于 2024-08-22 10:08:39 发布

阅读量4.1k

点赞数 4

分类专栏：小知识点 scala maven 文章标签： pom maven

本文链接：https://blog.csdn.net/weixin_41804049/article/details/85781521

版权

本文介绍了创建Scala Maven项目时，如何正确配置POM文件以确保Scala版本（2.11.8）与Hadoop（2.7.2）和Spark（2.1.1）版本兼容，避免出现错误。

摘要由CSDN通过智能技术生成

注意自己scala的版本与集群版本是否匹配不匹配会报错

我的是scala 2.11.8 hadoop2.7.2 spark-2.1.1

<?xml version="1.0" encoding="UTF-8"?>
<project xmlns="http://maven.apache.org/POM/4.0.0"
         xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
         xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">
    <modelVersion>4.0.0</modelVersion>

    <groupId>emg</groupId>
    <artifactId>emg.spark</artifactId>
    <version>1.0-SNAPSHOT</version>


    <dependencies>
        <dependency>
            <groupId>org.apache.spark</groupId>
            <artifactId>spark-core_2.11</artifactId>
            <version>2.1.1</version>
            <!--<scope>provided</scope>-->
        </dependency>
        <dependency>
            <groupId>org.apache.spark</groupId>
            <artifactId>spark-sql_2.11</artifactId>
            <version>2.1.1</version>
            <!--<scope>provided</scope>-->
        </dependency>
        <dependency>
            <groupId>org.apache.spark</groupId>
            <artifactId>spark-hive_2.11</artifactId>
            <version>2.1.1</version>