java.lang.UnsatisfiedLinkError: org.apache.hadoop.io.nativeio.NativeIO$Windows.createDirectoryWithMo

问题1:java.lang.UnsatisfiedLinkError: org.apache.hadoop.io.nativeio.NativeIO$Windows.createDirectoryWithMo

背景:在Linux服务器上配置好hadoop,对HDFS进行命令行操作正确,运行wordcount  Demo正常,但在window上使用Java api进行HDFS测试的时候报错。

0、需要在window机器上也下载一份hadoop,并且大版本要和Linux机器上运行的Hadoop版本一致

1、在https://github.com/steveloughran/winutils上下载对应版本的bin文件夹(主要是有winutils.exe这个文件),并且替换原有bin文件夹

2、在系统变量上设置HADOOP_HOME

3、在Path中添加%HADOOP_HOME%\bin和%HADOOP_HOME%\lib

4、问题解决

问题2:org.apache.hadoop.security.AccessControlException: Permission denied: user=ymdhi, access=WRITE, inode="/":root:supergroup:drwxr-xr-x

原因:在window机器上使用Java api往HDFS中上传文件的时候,由于用户名默认使用的是window中的用户名,比如admin等等,在HDFS中就会被认为是other,如果other没有w权限的话,就会出这个问题

解决办法:

0、在Edit Configurations中设置VM options,加上-DHADOOP_USER_NAME=hadoop(这个hadoop是HDFS中的用户名)

1、运行,问题解决

 

 

### 回答1: 这是一个Java错误,表示在调用org.apache.hadoop.io.nativeio.nativeio$windows.access(ljava/lang/string;i)z时出现了问题。这个错误通常是由于缺少本地库或本地库无法加载而引起的。要解决这个问题,您需要确保本地库已正确安装并且可以被Java虚拟机加载。您还可以尝试重新安装Hadoop并确保所有依赖项都已正确安装。 ### 回答2: Java.lang.unsatisfiedlinkerrorJava程序中的一个常见异常,它通常发生在Java代码中的native方法调用时,表示此方法的本地代码实现在运行时找不到。在这个问题中,具体的错误信息是:org.apache.hadoop.io.nativeio.nativeio$windows.access0(ljava/lang/string;i)z。 这个错误信息告诉我们,出错的地方是org.apache.hadoop.io.nativeio包中的windows.access0方法,这个方法的参数包括一个字符串和一个整数,返回值类型是布尔值。接下来展示的是Windows平台下访问本地IO的一些操作。 首先,我们需要确定这个问题的根本原因。最常见的触发这个异常的原因是本地库或动态链接库文件缺失或损坏。这意味着,程序需要调用本地库文件,但找不到或无法使用这个文件,因此出现了错误。 要解决这个问题,我们可以考虑使用以下方法: 1.确定Java代码中调用的方法是否需要本地库文件作为依赖,并检查依赖文件是否与程序一起打包并正确部署。 2.检查本地库文件是否存在于Java.library.path所指定的目录中,并确保路径是正确的。例如,如果使用了hadoop-winutils库,请确保此库存在于可执行文件的路径中。 3.如果程序需要动态链接库文件,请检查文件是否已经正确安装,并检查环境变量是否正确配置。例如,在Windows环境中,PATH变量通常需要包含动态链接库文件路径,以便应用程序可以找到库文件。 4.尝试使用JVM参数-Djava.library.path来指定本地库文件路径。可以将此参数添加到应用程序的启动脚本中,或通过使用Java命令行界面来传递该参数。 总之,当Java程序中出现“java.lang.unsatisfiedlinkerror: org.apache.hadoop.io.nativeio.nativeio$windows.access0(ljava/lang/string;i)z”这个错误时,我们需要确认本地库文件是否被正确引用并部署,检查环境变量是否设置正确,并且尝试使用JVM参数指定本地库文件路径。这些步骤将有助于解决这个问题。 ### 回答3: 这是一个十分常见的错误,通常出现在使用Hadoop或者Spark等大数据框架时。其中,java.lang.unsatisfiedlinkerror表示在Java应用程序中找不到本地库文件,原因是调用的方法无法从Java虚拟机找到本地实现。 具体地,这个错误是因为在Windows系统上运行Hadoop程序时无法加载hadoop.dll文件造成的。hadoop.dll是在使用Hadoop的本地文件系统时需要的动态链接库文件。解决这个问题,一般有以下几种方法: 1. 将hadoop.dll文件复制到%WINDOWS%/System32文件夹下。这可以让系统知道要在该文件夹下搜索hadoop.dll文件。 2. 将hadoop.dll文件复制到Hadoop库文件夹下即可。可以从Hadoop官网下载对应的hadoop.dll文件,然后将其复制到Hadoop的库文件夹中即可。 3. 检查系统环境变量。有时候,系统环境变量并没有正确配置,这就会导致无法找到hadoop.dll文件。可以检查Path环境变量是否已包括hadoop.dll文件所在路径。 总之,java.lang.unsatisfiedlinkerror实际上是由于Java应用程序无法找到本地库文件而引起的。在Hadoop程序中,这个错误通常是由于无法加载hadoop.dll文件造成的。我们可以尝试使用上述的方法解决这个问题。
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值