IDEA创建基于Scala语言的Spark Maven项目及WordCount

IDEA创建基于Scala语言的Spark Maven项目及WordCount

前提概要须知：使用的 Spark 版本为 3.0.0，默认采用的 Scala 编译版本为 2.12。

一、创建Maven项目

1.1、下载有 Scala 开发插件

注：下载完，记得要重启，否则后面有需要的东西，加载不出来。

1.2、新建maven project

这里直接可直接next，接下来填写基本信息。

1.3、设置Maven配置指向

apache-maven-***可自行下载。

1.3、添加Spark的maven的依赖

<?xml version="1.0" encoding="UTF-8"?>
<project xmlns="http://maven.apache.org/POM/4.0.0"
         xmlns:xsi="http://