windows下缺少windutils.exe和hadoop.dll的解决方法

最新推荐文章于 2024-07-30 16:29:57 发布
最新推荐文章于 2024-07-30 16:29:57 发布
阅读量4.3k 收藏 11
点赞数 3
分类专栏： 大数据（Hadoop） 文章标签： hadoop 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_43800761/article/details/106854476
版权

windows本地运行mr程序时(不提交到yarn,运行在jvm靠线程执行)，hadoop.dll防止报nativeio异常、winutils.exe没有的话报空指针异常。

1、到githup找到相应版本的文件，如本文使用的是3.1.2（只要大版本相同就没问题）
  下载winutils和hadoop.dll：https://github.com/ordinaryload/Hadoop-tools

2、解压下载的文件，放到$HADOOP_HOME\bin下面
在这里插入图片描述
3、拷贝hadoop.dll文件到C:\Windows\System32 下面
4、到官网下载hadoop-3.1.2.tar.gz，解压安装hadoop，并设置windows的环境变量

添加环境变量HADOOP_HOME，指向hadoop目录:
在这里插入图片描述
将%HADOOP_HOME%\bin加入到path里面：
在这里插入图片描述

许你常欢
关注
专栏目录
hadoop2.7.1 windows缺少的文件winutils.exe,hadoop.dll
03-05
下载winutils.exe,hadoop.dll放到hadoop环境的bin目录，建议尽量使用版本匹配的，必然hadoop-2.6就使用2.6版本的。2.7版本就使用2.7.。理论上2.7版本可以使用在2.6版本上
hadoop环境缺少的hadoop.dll ，winutils.exe包
05-10
hadoop环境缺少的hadoop.dll ，winutils.exe, 欢迎使用。
【hadoop系列】-windows运行hadoop报没有找到winutils.exe
qq_22744093的博客
06-10 2545
通过查询https://cwiki.apache.org/confluence/display/HADOOP2/WindowsProblems 意思是： Hadoop需要Windows上的本地库才能正常工作——包括访问file:// filesystem，其中Hadoop使用一些Windows api来实现类似posix的文件访问权限。 这是在HADOOP.DLL和WINUTILS.EXE中实现的。 特别地，%HADOOP_HOME%\BIN\WINUTILS.EXE必须是可定位的。 否则，Hadoop或
Windows环境下安装Hadoop3.2.1+HBase2.2.5+本地开发
最新发布
69岁法外狂徒的博客
07-30 445
Windows环境下安装Hadoop3.2.1+HBase2.2.5+本地开发
Hadoop或Spark运行缺少winutils.exe文件
web18484626332的博客
03-25 2240
报错如下： ERROR Shell: Failed to locate the winutils binary in the hadoop binary path java.io.IOException: Could not locate executable D:SoftWarehadoop-2.7.7inwinutils.exe in the Hadoop binaries. 这个问题是大部分初学者都会犯的错误，解决办法就是将官网下的源码在Windows上编译一下，但是这个相当麻烦。 简单方法就是直
hadoop各版本hadoop.dll和winutils.exe缺少这两个文件
qq_35139965的博客
06-16 6248
windows下运行hadoop的mr任务，控制台报一下错误： 缺少winutils.exe ERROR Shell: Failed to locate the winutils binary in the hadoop binary pathjava.io.IOException: Could not locate executable null\bin\winutils.exe in the Hadoop binaries. at org.apache.hadoop.util.Shell.getQ.
Hadoop运行时缺少hadoop dll winutils exe
hdsghtj的博客
11-14 6844
Hadoop运行时缺少hadoop dll winutils exe
在 windows 构建 hadoop，生成 winutils.exe 和 hadoop.dll
写些小文章
07-25 3155
windows 环境构建 hadoop，生成 winutils.exe 和 hadoop.dll
hadoop的winutils.exe及hadoop.dll文件
08-13
我的报错：Could not locate Hadoop executable: E:\big_data\hadoop-3.3.0\bin\winutils.ex hadoop的winutils.exe及hadoop.dll文件,可以用于hadoop3.3. 下载好直接将两个文件复制到我们hadoop的bin目录下就行了
hadoop.dll & winutils.exe For hadoop-2.6.0
01-30
总之，`hadoop.dll`和`winutils.exe`是Hadoop在Windows环境下运行的关键组件，它们使Hadoop能够在非Unix-like系统上正常工作。正确配置和使用这些文件，对于在Windows上搭建和管理Hadoop集群至关重要。
WinUtils.exe hadoop.dll
07-18
此资源是由win7 64下编译成功的用语解决Could not locate executable null\bin\winutils.exe in the Hadoop binaries.的问题的winutils.exe 资源
hadoop.dll和winutils.exe
05-25
hadoop本身不支持windows平台,本文件用于在idea中用java代码连接远程hadoop时读取本地文件,以下是用法 1. 将hadoop文件从linux下载到windows硬盘中 2. 添加hadoop文件夹到环境变量:HADOOP_HOME ~\hadoop-2.7.6\sbin;~\hadoop-2.7.6\bin 3. 将本文件解压放到~\hadoop-2.7.6\bin 4. 将hadoop.dll放到C:\Windows\System32 5. 重启idea
winutils.exe hadoop.dll
10-18
Hadoop在windows环境下开发所需要的winutils.exe hadoop.dll，所在位置为$HADOOP_HOME/bin
hadoop2.7.3 在windows下需要的hadoop.dll winutils.exe等文件(bin目录)
11-20
hadoop2.7.3 在windows下需要的hadoop.dll winutils.exe等文件 拷贝到bin目录下覆盖。
winutils.exe(hadoop必备文件)
12-31
压缩文件包括以下版本的winutils.exe及hadoop.dll： hadoop-2.6.3;hadoop-2.6.4;hadoop-2.7.1;hadoop-2.8.1;hadoop-2.8.3;hadoop-3.0.0
hadoop2.7.3 Winutils.exe hadoop.dll
07-09
在这个版本中，Winutils.exe和hadoop.dll是两个关键组件，它们对于在Windows环境下运行Hadoop至关重要。 Winutils.exe是Hadoop在Windows系统上的一个实用工具，它提供了与Linux系统中bin/hadoop脚本类似的功能。这...
【hadoop-3.0.0版本】winutils.exe和hadoop.dll
01-22
hadoop3.0.0 windows平台需要的文件 .
hadoop.dll 和 winutils.exe
07-10
总之，Hadoop.dll和winutils.exe是Hadoop在Windows环境下运行不可或缺的组件，它们使得开发者和管理员能够在非Unix/Linux系统上充分利用Hadoop的大数据处理能力。Hadoop 3.0.0版本带来了许多改进和新特性，进一步...
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值