1 背景
需要开发spark 项目,开发语言为java
2 步骤
2.1 创建工程
创建maven工程,这个不在这篇文档论述
2.2 引入pom
<properties>
<maven.compiler.source>1.8</maven.compiler.source>
<maven.compiler.target>1.8</maven.compiler.target>
<spark.version>2.3.3</spark.version>
<commons-codec.version>1.15</commons-codec.version>
</properties>
<dependencies>
<!-- spark -->
<dependency>
<groupId>org.apache.spark</groupId>
<artifactId>spark-core_2.11</artifactId>
<version>${spark.version}</version>
<exclusions>
<exclusion>
<groupId>commons-codec</groupId>
<artifactId>commons-cod