【hadoop系列】-windows运行hadoop报没有找到winutils.exe

java.io.FileNotFoundException: Could not locate Hadoop executable: D:\tools\hadoop-3.3.3\bin\winutils.exe

通过查询https://cwiki.apache.org/confluence/display/HADOOP2/WindowsProblems
在这里插入图片描述
意思是:
Hadoop需要Windows上的本地库才能正常工作——包括访问file:// filesystem,其中Hadoop使用一些Windows api来实现类似posix的文件访问权限。
这是在HADOOP.DLL和WINUTILS.EXE中实现的。
特别地,%HADOOP_HOME%\BIN\WINUTILS.EXE必须是可定位的。
否则,Hadoop或基于Hadoop构建的应用程序将会失败。

解决方案有两个:
1、下载windows版本的hadoop;
2、下载winutils.exe,下载地址,将winutils.exe放到bin文件夹中。

  • 1
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 4
    评论
windows上eclipse运行hadoop程序NullPointerException错 log4j:WARN No appenders could be found for logger (org.apache.hadoop.metrics2.lib.MutableMetricsFactory). log4j:WARN Please initialize the log4j system properly. log4j:WARN See http://logging.apache.org/log4j/1.2/faq.html#noconfig for more info. Exception in thread "main" java.lang.NullPointerException     at java.lang.ProcessBuilder.start(ProcessBuilder.java:1010)     at org.apache.hadoop.util.Shell.runCommand(Shell.java:482)     at org.apache.hadoop.util.Shell.run(Shell.java:455)     at org.apache.hadoop.util.Shell$ShellCommandExecutor.execute(Shell.java:715)     at org.apache.hadoop.util.Shell.execCommand(Shell.java:808)     at org.apache.hadoop.util.Shell.execCommand(Shell.java:791)     at org.apache.hadoop.fs.RawLocalFileSystem.setPermission(RawLocalFileSystem.java:656)     at org.apache.hadoop.fs.RawLocalFileSystem.mkdirs(RawLocalFileSystem.java:444)     at org.apache.hadoop.fs.FilterFileSystem.mkdirs(FilterFileSystem.java:293)     at org.apache.hadoop.mapreduce.JobSubmissionFiles.getStagingDir(JobSubmissionFiles.java:133)     at org.apache.hadoop.mapreduce.JobSubmitter.submitJobInternal(JobSubmitter.java:437)     at org.apache.hadoop.mapreduce.Job$10.run(Job.java:1296)     at org.apache.hadoop.mapreduce.Job$10.run(Job.java:1293)     at java.security.AccessController.doPrivileged(Native Method)     at javax.security.auth.Subject.doAs(Subject.java:415)     at org.apache.hadoop.security.UserGroupInformation.doAs(UserGroupInformation.java:1628)     at org.apache.hadoop.mapreduce.Job.submit(Job.java:1293)     at org.apache.hadoop.mapreduce.Job.waitForCompletion(Job.java:1314)     at com.lxz.mr.WCApp.main(WCApp.java:27) 原因是hadoop.dll文件和winutils.exe文件缺失了。解决步骤为: 1,下载这两个文件,下载地址:https://download.csdn.net/download/luxiangzhou/10635946 2,解压之后,把hadoop.dll拷贝到C:\Windows\System32下面 3,创建环境变量HADOOP_HOME,然后把winutils.exe文件拷贝到${HADOOP_HOME}/bin目录下
评论 4
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

科学熊

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值