解决“Class org.apache.hadoop.hdfs.DistributedFileSystem not found“问题

最新推荐文章于 2023-11-15 17:58:38 发布
最新推荐文章于 2023-11-15 17:58:38 发布
阅读量7k 收藏 10
点赞数 5
分类专栏： 数据分析与数据挖掘 文章标签： java 大数据 分布式文件系统 hadoop
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/welcome_yu/article/details/109648693
版权

部署完分布式系统后，写了个测试类，运行出现"Class org.apache.hadoop.hdfs.DistributedFileSystem not found " ，搜索查询一番后， 在这个博客上
”灵感链接“
找到一丝灵感，于是试了下，果然有效，问题解决了。
原来是因为jar包导入不全，于是在
hadoop-hdfs-client-2.8.1中找到了这个类，添加依赖jar包，运行成功！！！
就添加这个类
在这里插入图片描述

碎碎念：
好多时候就在你快要放弃的时候，哪怕再坚持一点点，就成功了。所以遇到问题不要怕，耐心去查询解决就可以了。
参考帮助链接：
帮助链接

Hadoop版本 3.1.2 解决Class org.apache.hadoop.hdfs.DistributedFileSystem not found 的问题
qq_42191492的博客
10-22 4869
进行HDFS编程实践的简单案例 public class HDFSFileIfExist { public static void main(String[] args) { // TODO Auto-generated method stub try{ String fileName = "test"; Configuration conf = new Confi...
Hadoop源码分析之DistributedFileSystem
东方吹雪的专栏
12-15 6800
在上一篇博文Hadoop源码分析之FileSystem中分析了org.apache.hadoop.fs.FileSystem这个类，作为FileSystem的子类，org.apache.hadoop.hdfs.DistributedFileSystem是Hadoop抽象文件系统的一个具体文件系统，当以hdfs模式通过FileSystem.get()获取具体文件系统时，返回一个Distributed
解决"Class org.apache.hadoop.hdfs.DistributedFileSystem not found"问题
热门推荐
Xurui_Luo的博客
11-26 1万+
使用的IDLE：Intellij IDEA Hadoop版本：3.1.1 看了网上各种解决方案，国内的国外的。很多都是说缺少相对应的jar包，要去网上下载更全更新的版本。也的确很多人这么做了，可还是没有效果，甚至还不得不把重复的旧jar包清除。 我意外发现了一个神奇的解决方案。因为根据提示，是DistributedFileSystem没有找到，我就在想会不会是之前添加的jar包不全，因为只加了 加...
Class org.apache.hadoop.hdfs.DistributedFileSystem not found
qq_43473753的博客
03-20 5270
用最新版本的Hadoop遇到的坑！ 原因是：Class org.apache.hadoop.hdfs.DistributedFileSystem由原本的hadoop-hdfs.2.7.1.jar中迁移到了hadoop-hdfs-client-3.1.1.jar 或更高版本 解决方法一：加载hadoop-hdfs-client-3.1.1.jar 参考：此博客 如果方法一不成功： 解决方法二： ...
No FileSystem for scheme:hdfs and Class org.apache.hadoop.DistributedFileSystem not found
Du939的博客
04-21 3207
在获取 Hadoop 文件系统对象时，如下所示 FileSystem fs = FileSystem.get(hdfsUrl,configuration); 错误一 如果收到以下错误： "No FileSystem for scheme:hdfs" 可以通过在配置中设置以下 2 个属性来解决它 configuration.set("fs.hdfs.impl","org.apache.hadoop.hdfs.DistributedFileSystem"); configuration.s
java.lang.ClassNotFoundException: Class org.apache.hadoop.hdfs.DistributedFileSystem
qq_51682771的博客
11-15 1336
【代码】java.lang.ClassNotFoundException: Class org.apache.hadoop.hdfs.DistributedFileSystem。
idea运行hadoopMaven项目中，java.lang.ClassNotFoundException: Class org.apache.hadoop.hdfs.DistributedFileSystem not found
12-01
当你在IntelliJ IDEA中尝试运行一个Hadoop Maven项目时，如果遇到了`java.lang.ClassNotFoundException: Class org.apache.hadoop.hdfs.DistributedFileSystem not found`这个错误，通常这意味着IDEA找不到Apache ...
class org.apache.hadoop.hdfs.distributedfilesystem not found
03-16
这个错误提示是因为找不到org.apache.hadoop.hdfs.distributedfilesystem类。可能是因为缺少相关的依赖包或者类路径配置不正确。需要检查相关的配置和依赖，并确保正确加载相关的类。
Class org.apache.hadoop.hdfs.DistributedFiSystem not found at org.apache.hadoop.conf.Configuration.getClass(Configuration.java:2638)
最新发布
03-21
在Hadoop环境中遇到`org.apache.hadoop.hdfs.DistributedFileSystem class not found error`通常是因为缺少必要的依赖项或者配置文件中的路径设置不正确。以下是可能的原因以及解决方案： #### 错误原因分析 此错误...
Hive ClassNotFoundException: Class org.apache.hadoop.hive.contrib.serde2.RegexSerDe not found
菜如张学清的博客
08-31 3786
在Hive的测试中，发现使用正则表达式的字段分隔方式时，总是进行不下去，创建表的语句如下：create table if not exists my_hive.bf_log_src( remote_addr string, remote_user string, time_local string, request string, status string, body_bytes_sent str
Error: Could not find or load main class org.apache.hadoop.mapreduce.v2.app.MRAppMaster
muzhimuzhe的博客
08-21 8674
情景：mapreduce任务出现如下错误 错误： Error: Could not find or load main class org.apache.hadoop.mapreduce.v2.app.MRAppMaster 全过程： [hadoop@hadoop102 ~]$ hadoop jar wc.jar com.muzhi.mapreduce.wordcount1.WordCountDriver /input /output 2021-08-21 10:53:30,543 INFO client.
解决eclipse "Class org.apache.hadoop.hdfs.DistributedFileSystem not found"问题
Enchanting GematDawn的博客
03-08 1054
Hadoop版本：3.1.1 因为根据提示，是hdfs.DistributedFileSystem没有找到，所以可能是之前添加的jar包不全，因为之前只加了 （1）”share/hadoop/common”目录下的hadoop-common-3.1.3.jar和haoop-nfs-3.1.3.jar； （2）“share/hadoop/common/lib”目录下的所有JAR包； （3）“shar...
报错缺少class(org.apache.hadoop.hdfs.DistributedFileSystem)
X_yufei的博客
11-15 662
实则是缺少jar包 hadoop-hdfs-client-3.1.1.3.1.0.0-78.jar。找到对应的jar放到程序的lib中即可。
解决 Dependency ‘org.apache.hadoop:hadoop-aws:2.10.1‘ not found
weixin_45960266的博客
01-05 1232
对照着hadoop-azure来下载jar等即可（文件夹需要自己创建，_remote.repositories是字节大小都是210，所以我直接复制过来用了）当时以为是没有找到对应的hadoop 版本，于是打算从已经安装版本中找一个看看，但是后来发现是有的。在maven中央仓库是有的，但是在我所配置的ali的镜像仓库中没有。本文用于解决阿里仓库没有需要去maven中央仓库下载的依赖。所以可以在maven中央仓库下载。
java.lang.NoClassDefFoundError: org/apache/hadoop/hdfs/DistributedFileSystem
faceqq的博客
02-09 3029
问题就在于provided我们将其注释掉 <dependency> <groupId>org.apache.hadoop</groupId> <artifactId>hadoop-hdfs-client</artifactId> <version>3.3.0</version> <!-- <scope>provided</scope>--..
class org.apache.hadoop.hdfs.web.HftpFileSystem cannot access its superinterface org.apache.hadoop.h
阿伟的博客
11-01 2185
报错： yarn运行自定义的mapreducer任务时报错 原因： 可能是打包的jar中携带的第三方hadoop的jar包与运行mapreducer的集群中的hadoop环境的jar包发生版本冲突 解决办法： 在IDEA导出jar包之前，将依赖包中所有hadoop-hdfs-***.jar包删除 ...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值