【大数据技术干货】帮你解决凡是window操作hadoop都会遇到的问题异常：Failed to locate the winutils binary in the hadoop binarypath

最新推荐文章于 2021-01-03 21:35:10 发布
最新推荐文章于 2021-01-03 21:35:10 发布
阅读量168 收藏
点赞数 1
分类专栏： 物联网&大数据知识的思考，总结和拓展 文章标签： spark hadoop 异常 hdfs 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/liuchunhang/article/details/103457450
版权
本文主要介绍了在Windows操作系统中，使用Spark、HBase、HDFS等工具时遇到`java.io.IOException: Could not locate executable nullinwinutils.exe`异常的详细分析及解决步骤，包括检查Hadoop环境变量、下载安装Hadoop、配置环境变量、添加winutils.exe和hadoop.dll，并最终通过重启电脑消除异常。
摘要由CSDN通过智能技术生成

一异常：java.io.IOException: Could not locate executable null\bin\winutils.exe in the Hadoop binaries.

1
我每次在idea中操作spark，hbase，hdfs，mapreduce等与服务器集群中的搭建的hadoop集群有关联的时候，都会报出这个错误，例如当我准备把spark：rdd中的数据上传到mysql，再次出现了这个问题。

1代码如下：

mport java.sql.DriverManager

import org.
了解本专栏 订阅专栏 解锁全文
牵牛刘先生
关注
专栏目录
订阅专栏
hadoop疑难问题解决_Failed to locate the winutils binary in the hadoop binary path java.io.IOException
上好佳的博客
06-06 247
根据错误提示信息我们可以得知：在hadoop的binary包中没有定位到winutils binary，所以在加载winutils文件过程中出现IO异常。这是因为在集成spark的时候winutilf以及hdfs.dll两个包不兼容导致的，所以我们只需要更换这两个包，保证其兼容性即可；
WIN7下运行hadoop程序报：Failed to locate the winutils binary in the hadoop binary path
weixin_30429201的博客
10-14 112
项目中用到了Hbase,貌似用了Hadoop。 项目启动的时候，报了错，但是不影响正常使用。 但是，控制台有红色错误，看着不太爽，就想办法把这个问题解决了。 错误提示“Failed to locate the winutils binary in the hadoop binary path java.io.IOException: Could not locate executa...
本地运行hadoop-Failed to locate the winutils binary in the hadoop binary path-转载
专注于后端开发，时常接触大数据 、人工智能等
03-20 227
转自：http://www.cnblogs.com/zq-inlook/p/4386216.html 之前在mac上调试hadoop程序（mac之前配置过hadoop环境）一直都是正常的。因为工作需要，需要在windows上先调试该程序，然后再转到linux下。程序运行的过程中，报Failed to locate the winutils binary in the hadoop binary ...
Windows本地运行调试Spark或Hadoop程序失败ERROR util.Shell: Failed to locate the winutils binary in the hadoop...
猫不夜行的博客
11-19 358
报错内容 ERROR util.Shell: Failed to locate the winutils binary in the hadoop binary path java.io.IOException: Could not locate executable null\bin\winutils.exe in the Hadoop binaries. 解决方法 1. 下载wind...
我安装了HDR light studio 5 之后 keyshot 5, 老是显示错误需要重新安装
python学习笔记
10-25 3779
1 右击 我的电脑 ——属性——高级系统设置 2高级——环境变量 3新建一个环境变量，变量名：HDRLS_HOME_V4，变量值：HDR Light Studio 5的安装路径（路径不要出现中文） ...
ERROR Shell: Failed to locate the winutils binary in the hadoop binary path
我歌月徘徊，我舞影零乱
03-24 1013
转载自【https://www.cnblogs.com/shenzhenhuaya/p/sdfsdgdfdfdx.html】 侵权必删 ERROR Shell: Failed to locate the winutils binary in the hadoop binary path 15/06/11 15:35:50 ERROR Shell: Failed to locate the ...
PySpark报错ERROR Shell: Failed to locate the winutils binary in the hadoop binary path
给我一点温度
08-21 8282
在终端输入PySpark后，出现以下报错： ERROR Shell: Failed to locate the winutils binary in the hadoop binary path java.io.IOException: Could not locate executable C:\hadoop-3.1.2\bin\winutils.exe in the Hadoop bina...
Spark在windows运行报错-ERROR Shell Failed to locate the winutils binary in the hadoop binary path java.io-附件资源
03-02
Spark在windows运行报错-ERROR Shell Failed to locate the winutils binary in the hadoop binary path java.io-附件资源
windows下运行spark程序报错：Failed to locate the winutils binary in the hadoop binary path
我的博客
04-10 6800
之前在mac上调试hadoop程序（mac之前配置过hadoop环境）一直都是正常的。因为工作需要，需要在windows上先调试该程序，然后再转到linux下。程序运行的过程中，报Failed to locate the winutils binary in the hadoop binary path java.io.IOException: Could not locate executab...
Failed to locate the winutils binary in the hadoop binary path 解决办法
qq_43445111的博客
01-03 2375
在idea下的spark编程 Failed to locate the winutils binary in the hadoop binary path 报错解决办法这里需要注意的是！！！！我之前其实也配置过hadoop的环境，但是在cmd下直接打开hadoop以前能打开，配置完spark后就打不开了，可能是配置了spark后和以前的配置有冲突，所以如果cmd下打不开hadoop verison，并且你之前配置过了hadoop路径，那么请重新配置一次，就是把环境变量删了，重新输入一次！！！！ 在解决这个报
IDEA运行spark程序错误解决：Failed to locate the winutils binary in the hadoop binary path
ly4183041的博客
07-23 499
未能在hadoop二进制文件路径中找到winutils二进制文件 第一步：下载winutils的windows版本。打开GitHub地址：https://github.com/srccodes/hadoop-common-2.2.0-bin, 直接下载此项目的zip包，下载后是文件名是hadoop-common-2.2.0-bin-master.zip,随便解压到一个目录。例如解压目录为：e:\env\ 第二步：配置环境变量 。增加系统变量名HADOOP_HOME，变量值为刚刚解压的目录，例如E:\env\
Failed to locate the winutils binary in the hadoop binary path 报错解决
lepton126的专栏
01-07 1209
WINDOWS10环境下单机下调试pyspark代码，在没有配置HADOOP_HOME的环境变量，会产生 ERROR Shell:397 - Failed to locate the winutils binary in the hadoop binary path java.io.IOException: Could not locate executable null\bin\winutil...
Failed to locate the winutils binary in the hadoop binary path java.io.IOException解决方法
上好佳的博客
12-14 3431
问题描述： ERROR Shell: Failed to locate the winutils binary in the hadoop binary path java.io.IOException: Could not locate executable null\bin\winutils.exe in the Hadoop binaries.   at org.apache.hadoop...
Java ERROR util.Shell: Failed to locate the winutils binary in the hadoop
一只菜鸡
07-30 783
在使用idea操作HBase数据库时报了如下错误 主要原因是因为Hadoop在windows下兼容性问题，找不到Hadoop\bin\winutils.exe这个文件 解决办法：配置环境变量 配置后重启，再次运行，问题解决 ...
Failed to locate the winutils binary in the hadoop binary path java.io.IOException: Could not locate
qq_21153619的博客
08-17 2063
当我们做大数据开发的时候，无论是MapReduce、hbase还是hdfs在本地调试都需要hadoop环境，没有这个环境就会报错： Failed to locate the winutils binary in the hadoop binary path java.io.IOException: Could not locate executable null\bin\winutils.exe...
Shell: Failed to locate the winutils binary in the hadoop binary path
最新发布
05-01
这个错误通常是由于缺少winutils二进制文件所导致的，该文件是Hadoop在Windows上运行所必需的。您需要将winutils二进制文件添加到hadoop的bin目录中。 以下是解决方法： 1. 下载对应版本的winutils二进制文件，...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

牵牛刘先生

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值