mac+idea进行spark开发

本文主要分享在mac环境下使用Idea进行Spark开发时的环境配置过程及遇到的坑,包括自动依赖配置失败后的手动添加jar包方法。
摘要由CSDN通过智能技术生成

最近开始学习spark,想要使用idea和scala进行开发,因此首先需要配置idea上的相关环境。目前网上有很多关于这方面环境配置的教程,所以本文住重点不在于如何搭建环境,而在于搭建环境中的碰到的一些坑。

(一)环境配置

步骤一:下载idea,并安装scala插件(值得注意的是这个插件中貌似自带有sbt,所以不需要在安装sbt的插件)

步骤二:下载安装scala,并配置相应环境

(二)踩的坑

第一个坑:sbt中依赖包的问题

在idea中安装好scala插件后,可以直接创建scala工程项目,由于scala项目通常由sbt进行管理,所以创建scala项目时经常选择sbt的方式,详细步骤如下:

1、打开idea,选择create new project
在这里插入图片描述
2、选择scala项目,以sbt方式进行创建
在这里插入图片描述
3、新建项目名、选择jdk、sdk版本等

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值