(四)win10安装Scala和Spark

相关内容参考

专栏:大数据入门

【软件安装】(一)win10安装hadoop 2.8.5(详细步骤)

(二)win10 Eclipse上配置Hadoop(详细步骤)

(三)Hadoop简单应用 单词统计

目录

1 scala

1.1 下载    1.2 .msi安装(无需配置)     1.3 .zip安装+配置            1.4 测试

2 spark

2.1 下载解压               2.2 配置测试

3 踩坑记录

【已解决】报错:WARN ProcfsMetricsGetter


 

1 scala

1.1 下载

官方下载网址 或 github下载zip

1.2 .msi安装(无需配置)

安装完后,path中自动添加路径,方便

1.3 .zip安装+配置

解压后还要配置环境变量

1.4 测试

2 spark

2.1 下载解压

官方下载网址

跳转页面后继续点击

2.2 配置测试

3 踩坑记录

【已解决】报错:WARN ProcfsMetricsGetter:

Exception when trying to compute pagesize, as a result reporting of ProcessTree metrics is stopped

思路:看了很多博客,比如java安装路径带空格、python路径等,都没有用。

后来翻开了朋友的安装路径,发现是spark版本问题。

最开始选的spark版本为v3.0.0,但是不太合适,改成v2.4.6,就ok了。

 

 

  • 1
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值