java.io.IOException: Could not locate executable null\bin\winutils.exe in the Hadoop binaries.

在写完spark程序后,进行本地调试报了下面这个异常

Using Spark's default log4j profile: org/apache/spark/log4j-defaults.properties
21/09/18 12:51:53 INFO SparkContext: Running Spark version 3.0.0
21/09/18 12:51:53 ERROR Shell: Failed to locate the winutils binary in the hadoop binary path
java.io.IOException: Could not locate executable null\bin\winutils.exe in the Hadoop binaries.

经查询发现是在windows下运行hadoop相关程序的环境变量问题,找到问题就容易解决了将HADOOP_HOME的配置到windows的环境变量中就可以了,不过这里使用的是编译过后的hadoop,即windows可用版的,环境变量配置步骤这里就不细说了,这个应该都没问题的.
windows版hadoop下载,提取码:0vxs

HADOOP_HOME如下
在这里插入图片描述
PATH中配置如下
在这里插入图片描述
配好环境变量后,如果在cmd中输入hadoop version出现如下结果

![在这里插入代码片](https://img-blog.csdnimg.cn/63cfb80faf4e4f66a8415bbe2a9d0c06.png?x-oss-process=image/watermark,
type_ZHJvaWRzYW5zZmFsbGJhY2s,shadow_50,text_Q1NETiBA6aOe5aSp5bCP6ICB5aS0,size_20,color_FFFFFF,t_70,g_se,x_16)

证明是没问题的,这个时候记住要重启IDEA,让IDEA重新加载电脑的环境变量,不然还是会报错的,这样就可以正常运行程序了.

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值