windows下缺少windutils.exe和hadoop.dll的解决方法

最新推荐文章于 2024-09-10 11:24:41 发布
最新推荐文章于 2024-09-10 11:24:41 发布
阅读量4.5k 收藏 11
点赞数 3
分类专栏： 大数据（Hadoop） 文章标签： hadoop 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_43800761/article/details/106854476
版权

windows本地运行mr程序时(不提交到yarn,运行在jvm靠线程执行)，hadoop.dll防止报nativeio异常、winutils.exe没有的话报空指针异常。

1、到githup找到相应版本的文件，如本文使用的是3.1.2（只要大版本相同就没问题）
  下载winutils和hadoop.dll：https://github.com/ordinaryload/Hadoop-tools

2、解压下载的文件，放到$HADOOP_HOME\bin下面
在这里插入图片描述
3、拷贝hadoop.dll文件到C:\Windows\System32 下面
4、到官网下载hadoop-3.1.2.tar.gz，解压安装hadoop，并设置windows的环境变量

添加环境变量HADOOP_HOME，指向hadoop目录:
在这里插入图片描述
将%HADOOP_HOME%\bin加入到path里面：
在这里插入图片描述

许你常欢
关注
专栏目录
hadoop环境缺少的hadoop.dll ，winutils.exe包
05-10
hadoop环境缺少的hadoop.dll ，winutils.exe, 欢迎使用。
hadoop2.7.1 windows缺少的文件winutils.exe,hadoop.dll
03-05
下载winutils.exe,hadoop.dll放到hadoop环境的bin目录，建议尽量使用版本匹配的，必然hadoop-2.6就使用2.6版本的。2.7版本就使用2.7.。理论上2.7版本可以使用在2.6版本上
hadoop各版本hadoop.dll和winutils.exe缺少这两个文件
qq_35139965的博客
06-16 6381
windows下运行hadoop的mr任务，控制台报一下错误： 缺少winutils.exe ERROR Shell: Failed to locate the winutils binary in the hadoop binary pathjava.io.IOException: Could not locate executable null\bin\winutils.exe in the Hadoop binaries. at org.apache.hadoop.util.Shell.getQ.
解决Windows环境下的Hadoop开发常见错误：winutils.exe配置指南
最新发布
weixin_31749299的博客
09-10 1423
本文还有配套的精品资源，点击获取 简介：在Windows平台上进行Hadoop开发时，可能会遇到找不到winutils.exe的错误。winutils.exe是Hadoop在Windows上的实用工具，其功能在Linux环境下本由操作系统提供，但在Windows上必须通过该工具模拟。本文介绍了winutils.exe及其相关文件在Hadoop开发中的作用，并提供了解决常见错...
Hadoop运行时缺少hadoop dll winutils exe
hdsghtj的博客
11-14 6900
Hadoop运行时缺少hadoop dll winutils exe
Hadoop或Spark运行缺少winutils.exe文件
web18484626332的博客
03-25 2260
报错如下： ERROR Shell: Failed to locate the winutils binary in the hadoop binary path java.io.IOException: Could not locate executable D:SoftWarehadoop-2.7.7inwinutils.exe in the Hadoop binaries. 这个问题是大部分初学者都会犯的错误，解决办法就是将官网下的源码在Windows上编译一下，但是这个相当麻烦。 简单方法就是直
【hadoop系列】-windows运行hadoop报没有找到winutils.exe
qq_22744093的博客
06-10 2583
通过查询https://cwiki.apache.org/confluence/display/HADOOP2/WindowsProblems 意思是： Hadoop需要Windows上的本地库才能正常工作——包括访问file:// filesystem，其中Hadoop使用一些Windows api来实现类似posix的文件访问权限。 这是在HADOOP.DLL和WINUTILS.EXE中实现的。 特别地，%HADOOP_HOME%\BIN\WINUTILS.EXE必须是可定位的。 否则，Hadoop或
hadoop2.7.2以下_winutils_exe和hadoop_dll
11-21
hadoop2.7.2以下_winutils_exe和hadoop_dll，内含github地址
hadoop的winutils.exe及hadoop.dll文件
08-13
我的报错：Could not locate Hadoop executable: E:\big_data\hadoop-3.3.0\bin\winutils.ex hadoop的winutils.exe及hadoop.dll文件,可以用于hadoop3.3. 下载好直接将两个文件复制到我们hadoop的bin目录下就行了
windows版本的winutils.exe和hadoop.dll作用
阿伟的博客
10-16 677
windows本地运行mr程序时(不提交到yarn,运行在jvm靠线程执行)，hadoop.dll防止报nativeio异常、winutils.exe没有的话报空指针异常。
WinUtils.exe hadoop.dll
07-18
此资源是由win7 64下编译成功的用语解决Could not locate executable null\bin\winutils.exe in the Hadoop binaries.的问题的winutils.exe 资源
winutils.exe hadoop.dll
10-18
Hadoop在windows环境下开发所需要的winutils.exe hadoop.dll，所在位置为$HADOOP_HOME/bin
hadoop.dll与winutils.exe 64位windows下使用hadoop2.8必要插件
06-12
hadoop.dll与winutils.exe 64位windows下使用hadoop2.8必要插件，解压后放在windows/system32下
hadoop2.7.3 在windows下需要的hadoop.dll winutils.exe等文件(bin目录)
11-20
hadoop2.7.3 在windows下需要的hadoop.dll winutils.exe等文件 拷贝到bin目录下覆盖。
winutils.exe(hadoop必备文件)
12-31
压缩文件包括以下版本的winutils.exe及hadoop.dll： hadoop-2.6.3;hadoop-2.6.4;hadoop-2.7.1;hadoop-2.8.1;hadoop-2.8.3;hadoop-3.0.0
hadoop.dll 和 winutils.exe
07-10
总之，Hadoop.dll和winutils.exe是Hadoop在Windows环境下运行不可或缺的组件，它们使得开发者和管理员能够在非Unix/Linux系统上充分利用Hadoop的大数据处理能力。Hadoop 3.0.0版本带来了许多改进和新特性，进一步...
Windows + Hadoop2.7 + winutils.exe + hadoop.dll
02-08
Windows 搭建 hadoop2.7 环境，必备 winutils.exe + hadoop.dll，否则不能正常使用 hadoop.dll防止报nativeio异常、winutils.exe没有的话报空指针异常
hadoop.dll & winutils.exe For hadoop-2.6.0
01-30
总之，`hadoop.dll`和`winutils.exe`是Hadoop在Windows环境下运行的关键组件，它们使Hadoop能够在非Unix-like系统上正常工作。正确配置和使用这些文件，对于在Windows上搭建和管理Hadoop集群至关重要。
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值