Hadoop2.2异常No FileSystem for scheme: hdfs

最新推荐文章于 2023-09-01 17:22:11 发布
最新推荐文章于 2023-09-01 17:22:11 发布
阅读量679 收藏 1
点赞数
分类专栏： 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_44117767/article/details/100781884
版权
本文解决在Eclipse中迁移Hadoop项目工作空间后出现的'NoFileSystemforScheme:hdfs'异常，通常原因是缺少hadoop-hdfs.jar包。通过正确导入该包并重新编译，可恢复正常运行。
摘要由CSDN通过智能技术生成

把eclipse中的hadoop项目，换了一个工作空间，再次启动任务时，发现报如下异常：
java">java.io.IOException: No FileSystem for scheme: hdfs
at org.apache.hadoop.fs.FileSystem.getFileSystemClass(FileSystem.java:2421)
at org.apache.hadoop.fs.FileSystem.createFileSystem(FileSystem.java:2428)
at org.apache.hadoop.fs.FileSystem.access 200 ( F i l e S y s t e m . j a v a : 88 ) a t o r g . a p a c h e . h a d o o p . f s . F i l e S y s t e m 200(FileSystem.java:88) at org.apache.hadoop.fs.FileSystem 200(FileSystem.java:88)atorg.apache.hadoop.fs.FileSystemCache.getInternal(FileSystem.java:2467)
at org.apache.hadoop.fs.FileSystem$Cache.get(FileSystem.java:2449)
at org.apache.hadoop.fs.FileSystem.get(FileSystem.java:367)
at FileCopyToHdfs.readFromHdfs(FileCopyToHdfs.java:65)
at FileCopyToHdfs.main(FileCopyToHdfs.java:26)</pre>

原因一般是，少导入hadoop-hdfs.jar这个jar包，

在这里插入图片描述

导入该包后，重新ant编译，提交任务，运行正常！

烟火星辰madi
关注
专栏目录
【java】java.io.IOException: No FileSystem for scheme: hdfs
九师兄
08-06 426
最近在做一个大数据项目，用到hadoop（3.2.1），在做一个数据分片的时候，单独将程序打包提交集群上执行报错................................................................................................................................................代码如下引入如下...
【hadoop】java.io.IOException: No FileSystem for scheme: hdfs
九师兄
10-22 2951
异常 java.io.IOException: No FileSystem for scheme: hdfs 我是想用hive的sql解析方法解析sql，测试类是可以运行的，但是使用java -cp jar包运行就报这个错。 hadoop解决： conf.set("fs.hdfs.impl", "org.apache.hadoop.hdfs.DistributedFileSystem") ...
MapReduce 踩坑 - hadoop No FileSystem for scheme: file/hdfs
weixin_30784141的博客
06-22 726
一、场景 hadoop-3.0.2 + hbase-2.0.0 一个mapreduce任务，在IDEA下本地提交到hadoop集群可以正常运行。 现在需要将IDEA本地项目通过maven打成jar包，从而能够在windows/Linux命令行下，通过Java -jar方式运行。 二、状况 报错可能1：Exception in thread "main" java.io.IOExce...
java.io.IOException: No FileSystem for scheme: hdfs
伏虎游侠的博客
07-05 9096
java.io.IOException: No FileSystem for scheme: hdfs 在这篇文章中，介绍了如何将Maven依赖的包一起打包进jar包。使用maven-assembly打成jar后，将这个jar提供给其他工程引用的时候，报出如下错误： log4j:WARN No appenders could be found for logger (org.a
eclipse连接hadoop报错Error：No FileSystem for scheme：hdfs
QYmufeng的博客
03-17 4186
问题：eclipse连接hadoop报错Error：No FileSystem for scheme：hdfs环境：hadoop2.8.3，jdk1.8.0-121，eclipse oxygen，hadoop-eclipse-plugin-2.8.3问题分析：如果配置有问题可参考另一篇文章： ubuntu安装配置eclipse+hadoop开发环境（十分详细）如果配置文件没有出错，就是插件有问题，...
【甘道夫】HBase开发环境搭建过程中可能遇到的异常：No FileSystem for scheme: hdfs
甘道夫的大数据进化论
07-03 7475
HBase开发环境搭建过程中可能遇到的异常：No FileSystem for scheme: hdfs
Hadoop No FileSystem for scheme “hdfs“ 客户端环境变量配置
不忘初心，方得始终
02-04 796
我当前的/etc/profile文件配置的环境变量 export JAVA_HOME=/opt/java/jdk1.8.0_131export SPARK_HOME=/opt/spark-2.4.4-bin-hadoop2.7export HIVE_HOME=/usr/hdp/current/hive-clientexport LIVY_HOME=/opt/livy/livy-0.5.0-incu...
用eclipse进行MapReduce编程出现java.io.IOException: No FileSystem for scheme: hdfs解决方法
m0_58945994的博客
12-13 1245
拷贝本地文件至HDFS异常：No FileSystem for scheme: file
gmijie的专栏
11-13 932
具体异常信息： =======copy file======= Exception in thread “main” java.io.IOException: No FileSystem for scheme: file at org.apache.hadoop.fs.FileSystem.getFileSystemClass(FileSystem.java:2644) at
解决：No FileSystem for scheme: hdfs问题
TestGiao的博客
07-27 916
解决：No FileSystem for scheme: hdfs问题
DFS Locations:Error:No FileSystem for Scheme:hdfs
qq_26092705的博客
10-18 1348
这个问题困扰了我大半天，我一开始认为是哇文件配置没有搞好，把core-site.xml，mapred-site.xml中的内容反复修改，其实这里早就已经改对啦。 其实，问题在于给eclipse安装的插件有问题，因为安装的hadoop是最新的2.8.1版本的，我一开始使用的是hadoop-eclipse-plugin-2.8.0.jar（这里要提醒一下，我安装的是最新的eclipse，这个jar文
【转载】解决No FileSystem for scheme: hdfs问题
weixin_30364147的博客
12-04 1300
转载请注明出处：http://www.codelast.com/ 如果你在程序中（不是一个Hadoop job程序）有读写HDFS文件的逻辑，那么程序运行的时候可能会报下面的错： Exception in thread "main" java.io.IOException: No FileSystem for scheme: hdfs at org.apache.hadoop.fs.FileSys...
Hadoop最基本的wordcount(统计词频)
深思千年
07-07 5628
Hadoop最基础的例子
Java查看hadoop文件报错误
Intelligebce的博客
09-05 336
一、错误一：No FileSystem for scheme: hdfs 解决办法：在conf后面添加下方代码 conf.set("fs.hdfs.impl",org.apache.hadoop.hdfs.DistributedFileSystem.class.getName()); 错误二：org.apache.hadoop.hdfs.DistributedFileSystem导不进...
No FileSystem for scheme: hdfs
最新发布
weixin_45131680的博客
09-01 1726
从代码中可以看出最终需要调用getFileSystemClass(String scheme, Configuration conf)方法，在此方法中需要读取core-default.xml文件中定义的“fs.” + scheme + “.impl”（在本例中应读取fs.hdfs.impl）的配置信息，但此配置信息在默认的配置文件中没有配置（hadoop-common-x.jar中的core-default.xml文件中）.
HBase操作出现No FileSystem for scheme: hdfs
mn_kw的博客
04-26 2435
java.io.IOException: No FileSystem for scheme: hdfs在程序中给Configuration做以下设置：conf.set("fs.hdfs.impl", "org.apache.hadoop.hdfs.DistributedFileSystem")这个包是hadoop下的所以需要依赖...
No FileSystem for scheme: hdfs解决方案
热门推荐
wangywan的博客
08-03 1万+
　　在本地环境下能够找到scheme，但是通过maven打包fatjar 后放到其他机器上就出现找不到scheme。 　　看了代码，发现通过FileSystem.get(conf)初始化的时候，要通过静态加载来实现，也就是用Filesystem，get方法获得conf， 在configuration里需要设置配置文件core-site.xml里配置的fs.defaultFS指定对于的value...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值