apache spark在windows7 下安装

1、下载spark  解压到 D盘,现在的版本是0.9.1

2、下载scala   安装到d:\Program Files (x86)\scala\

    安装好scala后需要配置环境变量

   修改path这个变量,把Scala的bin目录也放进去D:\Program Files (x86)\scala\bin(现在版本的scala会自动修改系统的环境变量,提示的时候选择不阻止

   测试是否配置成功,在命令行中输入scala -version


3、按照Spark官方的安装指南,在解压的目录下,运行

sbt/sbt package或者sbt assembly
可能会出现错误,这是由于sbt版本的问题,下载 windows环境下的sbt,安装好后将sbt的文件复制到spark目录下。

再次cmd在spark目录下运行sbt package



4、遇到git不是内部命令错误的解决方法是:安装windows版本的git工具,安装好后配置环境变量。

找到git安装路径中bin的位置,如:D:\Program Files(x86)\Git\bin

找到git安装路径中git-core的位置,如:D:\Program Files(x86)\Git\libexec\git-core;

加入到环境变量中;


5、安装好后再运行sbt package


6、编译成功后在spark下运行spark-shell

出现D:\program file (x86)不是内部活外部命令的错误,这是由于空格问题产生的,只需要在cmd进入spark目录下的过程中将D:\Program File (x86)则改为progra~2(

D:\Program File则改为progra~1)即可。



再次输入spark-shell,现在可以开始spark windows之旅了!!





  • 0
    点赞
  • 7
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

大数据食铁兽

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值