Ubuntu中的spark启动的报错解决

项目场景:

因为在虚拟机的Ubuntu学习中要用使用spark,但我在spark安装和使用中出现了启动失败 的问题,以下是解决方法。


问题描述

启动spark,由于之前已经配置了环境变量,所以这里直接使用以下代码启动:

spark−shell

然后在ubuntu中启动spark时出现以下错误:
在这里插入图片描述


原因分析:

这里是 spark 的本地 IP 地址未绑定导致的警告,其中 using 192.168.73.85 instead (on interface wlo1) 其中的 192.168.73.85 就是 spark 默认选择的本地 IP 地址,这里需要我们记住自己的这个 IP 地址

(你的电脑上输出的ip地址,不是我的!)


解决方案:

修改配置文件,配置 SPARK_LOCAL_IP 变量即可:

cd /usr/local/spark #你自己的spark目录
sudo vim conf/spark-env.sh

添加内容如下:

export SPARK_LOCAL_IP=192.168.73.85 #注意一定要是你们自己输出对应的IP

在这里插入图片描述
键入 ESC 键,:wq,保存并退出。重新启动 spark-shell:

/usr/local/spark/bin/spark-shell

然后发现报错不见了,代表问题已解决:
在这里插入图片描述

简单使用:

接下来可以在spark shell中简单执行一下命令试试能否运行:
在这里插入图片描述
这样spark就代表可以正常使用了。

  • 1
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值