class org.apache.hadoop.hdfs.web.HftpFileSystem cannot access its superinterface org.apache.hadoop.h

最新推荐文章于 2022-04-02 16:24:31 发布
最新推荐文章于 2022-04-02 16:24:31 发布
阅读量2k 收藏 2
点赞数
分类专栏： # 大数据问题 文章标签： hadoop hdfs apache
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m0_55868614/article/details/121083999
版权

报错：

yarn运行自定义的mapreducer任务时报错

原因：

可能是打包的jar中携带的第三方hadoop的jar包与运行mapreducer的集群中的hadoop环境的jar包发生版本冲突

解决办法：

在IDEA导出jar包之前，将依赖包中所有hadoop-hdfs-***.jar包删除

 

程序员阿伟
关注
专栏目录
【Kylin】【Hive】【hive-testbench】tpch 数据集生成失败，提示报错class org.apache.hadoop.hdfs.web.HftpFileSystem ...
mukvintt的博客
08-29 821
hive-testbench 需要适配支持 hadoop 3.x 及以上版本
java.lang.UnsatisfiedLinkError: org.apache.hadoop.io.nativeio.NativeIO错误的处理方法，适用于hadoop3.1.3
weixin_51273963的博客
07-03 5096
hadoop3.1.3、java.lang.UnsatisfiedLinkError: org.apache.hadoop.io.nativeio.Nativ、idea
class org.apache.hadoop.hdfs.web.HftpFileSystem cannot access its superinterface
u011250186的博客
11-28 3063
异常信息： Exception in thread "main" java.lang.IllegalAccessError: class org.apache.hadoop.hdfs.web.HftpFileSystem cannot access its superinterface org.apache.hadoop.hdfs.web.TokenAspect$TokenManagementDelegator 完整错误信息如下： 解决：在IDEA导出jar包之前，将依赖包中所有had..
[Hadoop] 异常class org.apache.hadoop.hdfs.web.HftpFileSystem cannot access its superinterface...
小罗的博客
05-04 6983
异常如下： Exception in thread "main" java.lang.IllegalAccessError: class org.apache.hadoop.hdfs.web.HftpFileSystem cannot access its superinterface org.apache.hadoop.hdfs.web.TokenAspect$TokenManagementDe...
java.lang.IllegalAccessError: class org.apache.hadoop.hdfs.web.HftpFileSystem cannot access its supe
yu_lang_的博客
12-16 3203
java.lang.IllegalAccessError: class org.apache.hadoop.hdfs.web.HftpFileSystem cannot access its superinterface org.apache.hadoop.hdfs.web.TokenAspect$TokenManagementDelegator 提交spark-submit报错 解决办法是，在IDEA中导出jar包之前，File->Project Structure->Artifacts-&g
spark 2.2 读取 Hadoop3.0 数据异常 org.apache.hadoop.hdfs.web.HftpFileSystem cannot access its superinterfa
热门推荐
jast
04-13 1万+
spark 2.2 读取 Hadoop3.0 数据异常 Exception in thread "main" java.lang.IllegalAccessError: class org.apache.hadoop.hdfs.web.HftpFileSystem cannot access its superinterface org.apache.hadoop.hdfs.web.Token...
idea中Exception in thread “main“ java.lang.UnsatisfiedLinkError: org.apache.hadoop.io.nativeio.Native
qq_56572867的博客
04-02 780
这个困扰了我三天的问题，之前已经不想解决了，直到再一次遇到，决定彻底干它，之前也在网上搜了一些解决它的办法，什么改变环境还有加入NativeIO，都没有用，不过最后还是使用了NativeIO的方法解决了，之前一直没有用的原因是，没有把文件放对位置 正确的位置应该是放在java包下，和项目包并行，而且必须是这个包名org.apache.hadoop.io.nativeio和NativeIO这个类名，不然不能覆盖原来的这个类 下面附上NativeIO的源码，有的包可能要自己引一下，细节上应该不用说了
MapReduce报错Exception in thread “main“ java.lang.UnsatisfiedLinkError: org.apache.hadoop.io.nativeio
fengjinghong的博客
11-02 1272
参考文章：https://blog.csdn.net/weixin_42229056/article/details/82686172 报错信息如下： Exception in thread "main" java.lang.UnsatisfiedLinkError: org.apache.hadoop.io.nativeio.NativeIO$Windows.access0(Ljava/lang/String;I)Z at org.apache.hadoop.io.nativeio.Nativ
MapReduce报错Exception in thread "main" java.lang.UnsatisfiedLinkError: org.apache.hadoop.io.nativeio
weixin_42229056的博客
09-13 1万+
在使用MapReduce的小测试的时候，Driver类启动，或报下面的错误 log4j:WARN No appenders could be found for logger (org.apache.hadoop.metrics2.lib.MutableMetricsFactory). log4j:WARN Please initialize the log4j system properl...
Apache Hadoop2.x 安装入门详解 PDF
07-04
Apache Hadoop2.x 安装入门详解 PDF
Class org.apache.hadoop.hdfs.DistributedFileSystem not found
qq_43473753的博客
03-20 5054
用最新版本的Hadoop遇到的坑！ 原因是：Class org.apache.hadoop.hdfs.DistributedFileSystem由原本的hadoop-hdfs.2.7.1.jar中迁移到了hadoop-hdfs-client-3.1.1.jar 或更高版本 解决方法一：加载hadoop-hdfs-client-3.1.1.jar 参考：此博客 如果方法一不成功： 解决方法二： ...
大数据 排错日记0005——Provider org.apache.hadoop.hdfs.web.WebHdfsFileSystem could not be instantiated
我是jjking`
03-30 4034
报错信息（主要部分） java.util.ServiceConfigurationError: org.apache.hadoop.fs.FileSystem: Provider org.apache.hadoop.hdfs.web.WebHdfsFileSystem could not be instantiated at java.util.ServiceLoader.fail(Servic...
解决“Class org.apache.hadoop.hdfs.DistributedFileSystem not found“问题
welcome_yu的博客
11-12 6483
部署完分布式系统后，写了个测试类，运行出现"Class org.apache.hadoop.hdfs.DistributedFileSystem not found " ，搜索查询一番后， 在这个博客上 ”灵感链接“ 找到一丝灵感，于是试了下，果然有效，问题解决了。 原来是因为jar包导入不全，于是在 hadoop-hdfs-client-2.8.1中找到了这个类，添加依赖jar包，运行成功！！！ 碎碎念： 好多时候就在你快要放弃的时候，哪怕再坚持一点点，就成功了。所以遇到问题不要怕，耐心去查询解决就可以了
HBase 通过MapReducer 统计数据写入MySQL中报异常:Exception in thread “main“ java.lang.IllegalAccessError
qq_45831607的博客
05-09 1396
Exception in thread "main" java.lang.IllegalAccessError: class org.apache.hadoop.hdfs.web.HftpFileSystem cannot access its superinterface org.apache.hadoop.hdfs.web.TokenAspect$TokenManagementDelegator 异常如下: Exception in thread "main" java.lang.IllegalA
按照当前日期的前一小时读取hdfs采坑记 Calendar.HOUR_OF_DAY
我的博客
12-25 560
只读到23点的数据  读不到00点 看代码发现是这里写错了 //获取前一个小时 24小时制Calendar.HOUR_OF_DAY def getFrontHour(): String = { var dateFormat: SimpleDateFormat = new SimpleDateFormat("HH") var cal: Calendar = Cal...
.
chumodiao5198的博客
11-18 131
package org.jsoft.zuoye; public interface MediaPlayer { public void play(); public void stop(); public void open(); } ...
找不到依赖项 'org.apache.hadoop:hadoop-hdfs:2.4.1'怎么解决
最新发布
06-12
如果您的项目中出现找不到依赖项 'org.apache.hadoop:hadoop-hdfs:2.4.1' 的问题，可能是由以下原因导致的： 1. 您的Maven或Gradle配置文件中没有正确指定Hadoop库的仓库或版本。 2. 您的项目没有正确配置Hadoop的环境变量。 解决此问题的方法： 1. 检查您的Maven或Gradle配置文件，并确保已正确指定了Hadoop依赖项的仓库和版本。例如，在Maven项目中，您可以在pom.xml文件中添加以下依赖项： ``` <dependency> <groupId>org.apache.hadoop</groupId> <artifactId>hadoop-hdfs</artifactId> <version>3.2.0</version> </dependency> ``` 请注意，版本号可能会因您使用的Hadoop版本而有所不同。 2. 检查您的项目是否正确配置了Hadoop的环境变量。例如，您可以在Linux系统中将Hadoop的路径添加到PATH环境变量中。您可以使用以下命令检查Hadoop的路径是否正确： ``` echo $HADOOP_HOME ``` 如果没有输出任何内容，请检查您是否正确设置了Hadoop的环境变量。 希望这可以帮助您解决问题！
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值