Mac 搭建spark开发环境

1.安装jdk
jdk下载地址这里写图片描述
然后一步一步安装jdk就可以了。
检测jdk是否安装成功:
java -version
这里写图片描述

2.安装scala
Scala下载地址
解压Scala包
配置.bash_profile 文件,没有就重建一个
这里写图片描述
export SCALA_HOME=你自己的scala的安装目录/scala-2.12.2/
export PATH= PATH: SCALA_HOME/bin

3.安装spark
spark下载目录
这里写图片描述
a.解压spark包

b.配置.bash_profile 文件
export SPARK_HOME=spark 安装目录/spark-2.1.1-bin-hadoop2.7/:
export PATH= PATH: SPARK_HOME/bin

c.打开系统设置中–>共享—> 远程登陆

d.查看用户目录是否有.ssh/,没有就重新生成
这里写图片描述

e.进入到spark安装目录的sbin/目录下,执行 ./start-all 启动spark
执行jps 命令
这里写图片描述

f.进入到spark安装目录的bin/目录下,执行 ./spark-shell,看spark 是否安装成功

这里写图片描述
如果出现这个,说明spark安装成功

  • 0
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值