spark idea环境配置（maven+scala)

最新推荐文章于 2023-06-14 15:49:49 发布

Crypoor

最新推荐文章于 2023-06-14 15:49:49 发布

阅读量1.5k

点赞数 1

文章标签： spark scala maven idea

本文链接：https://blog.csdn.net/Crypoor/article/details/103307131

版权

本文介绍了如何在IntelliJ IDEA中配置Spark开发环境，包括安装Scala插件、创建Maven项目、配置pom.xml文件以引入Spark相关依赖，并提供了maven资源库的链接和本地Maven设置的详细步骤，确保项目的顺利构建。

摘要由CSDN通过智能技术生成

文件有些没法上传，直接贴了笔记的链接，maven本地资源包在链接里
链接：http://note.youdao.com/noteshare?id=a903e06ec06fdffabb903617d1c5f83d&sub=5A8AABF124DD4FF99F4954CAEA1CA709
1.新建项目，配置好对应的环境
（1）配置scala环境
在这里插入图片描述

settings=>Plugins=>搜索scala
在这里插入图片描述
可以看到idea中的scala版本，可以直接下载
下方三个按钮，第二个可以直接在idea下载（但是会比较慢）
第三个按钮，可以在网上下载上方对应的版本，下载在本地，然后在本地中选择下载好的scala
创建maven项目
在这里插入图片描述
配置pom文件

自动导入

<?xml version="1.0" encoding="UTF-8"?>
<project xmlns="http://maven.apache.org/POM/4.0.0"
         xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
         xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">
    <modelVersion>4.0.0</modelVersion>

    <groupId>spark</groupId>
    <artifactId>spark</artifactId>
    <version>1.0</version>

    <!-- 声明公有的属性 -->
    <properties>
        <maven.co