问题描述:
在Window端运行Hadoop程序可能会遇到如下问题,
Exception in thread "main" java.lang.UnsatisfiedLinkError: org.apache.hadoop.io.nativeio.NativeIO$Windows.access0(Ljava/lang/String;I)Z
at org.apache.hadoop.io.nativeio.NativeIO$Windows.access0(Native Method)
at org.apache.hadoop.io.nativeio.NativeIO$Windows.access(NativeIO.java:557)
at org.apache.hadoop.fs.FileUtil.canRead(FileUtil.java:977)
at org.apache.hadoop.util.DiskChecker.checkAccessByFileMethods(DiskChecker.java:187)
at org.apache.hadoop.util.DiskChecker.checkDirAccess(DiskChecker.java:174)
at org.apache.hadoop.util.DiskChecker.checkDir(DiskChecker.java:108)
解决方案:
方案一、
点击上图标记位置进入NativeIO.java,复制全部代码,然后在本项目下建立包org.apache.hadoop.io.nativeio并在其中建立NativeIO.java,将刚刚复制的代码粘贴到其中,最后按下图修改代码即可。
方案二、
可能是JDK版本与所用Hadoop版本不匹配所致,我遇到的情况就是这样。用JDK1.8就会出现上述问题,换成JDK1.7就避免了该问题出现。
备注:
在Windows端运行Hadoop程序需要在Windows端安装Hadoop并配置系统环境变量。然后在C:\Windows\System32中添加winutils.exe和hadoop.dll。如果没有该文件,点击链接根据自己的版本对应下载。