错误Exception in thread “main“ org.apache.hadoop.mapreduce.lib.input.InvalidInputException: Input path

最新推荐文章于 2022-06-01 14:41:11 发布
最新推荐文章于 2022-06-01 14:41:11 发布
阅读量5.9k 收藏 5
点赞数 2
文章标签： java 开发语言 后端 eclipse
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m0_60318777/article/details/121398932
版权

原因

在使用 Eclipse 运行 MapReduce 程序时，会读取 Hadoop-Eclipse-Plugin 的 Advanced parameters 作为 Hadoop 运行参数，如果我们未进行修改，则默认的参数其实就是单机参数，因此程序运行时是读取本地目录而不是 HDFS 目录，就会提示 Input 路径不存在。


解决办法

在项目的src下加入core-site.xml和hdfs-site.xml两个文件，以及 log4j.properties 复制到 WordCount 项目下的 src 文件夹

东北炸鸡
关注
  • 2
    点赞
  • 踩
  • 5
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
Exception in thread main java.lang.NoClassDefFoundError错误解决方法
09-01
`Exception in thread "main" java.lang.NoClassDefFoundError` 是Java编程中常见的一个运行时异常，通常发生在尝试运行一个Java程序时，如果JVM找不到在类路径（ClassPath）中定义的主要类（主类，即包含`public ...
Hadoop错误2_Hadoop伪分布式下，运行WordCount时，Input path does not exist错误原因
热门推荐
wang_zhenwei的博客
08-12 3万+
在伪分布式下，按照下面两个博客，分别以命令行方式和Eclipse执行WordCount程序时，都会出现同样的错误， （Eclipse：http://blog.csdn.net/wang_zhenwei/article/details/47422775） （命令行方式：http://blog.csdn.net/wang_zhenwei/article/details/47439623）
Exception in thread "main" org.apache.hadoop.mapreduce.lib.input.InvalidInputException
大门的博客
09-01 3892
Exception in thread “main” org.apache.hadoop.mapreduce.lib.input.InvalidInputException: Input path does not exist: hdfs://ruozeclusterg7/ruozedata/wc/input 问题： hadoop fs -mkdir -p /ruozedata/wc/input...
hadoop异常： org.apache.hadoop.mapreduce.lib.input.InvalidInputException: Input path does not exi
wen3011的博客
02-07 2万+
在安装idea的hadoop开发环境的时候，环境安装完后，运行出现以下错误： Exception in thread "main" org.apache.hadoop.mapreduce.lib.input.InvalidInputException: Input path does not exist: 这个提示了找不到文件，所以解决步骤如下： 1）确认下集群上的HDFS系
Exception in thread "main" org.apache.hadoop.mapreduce.lib.input.InvalidInputException: Input path
大JAVA解决方案
03-20 6239
 WARN - Unable to load native-hadoop library for your platform... using builtin-java classes where applicable  INFO - session.id is deprecated. Instead, use dfs.metrics.session-id  INFO - Initializing...
Exception in thread "main" org.apache.hadoop.mapred.InvalidInputException: Input path does not exist
weixin_42472771的博客
04-08 6445
@Exception in thread “main” org.apache.hadoop.mapred.InvalidInputException: Input path does not exist: file:/data1/h.txtOC 程序内容 //val linesRDD: RDD[String] = sparkContext.textFile(“C:\Users\dongj\Id...
Exception in thread “main“ org.apache.hadoop.mapreduce.lib.input.InvalidInputException: Input path d
nofuck的博客
12-01 2481
hadoop jar hadoop2.jar WordCountMapReduce hdfs://master:9000/input/test3.txt hdfs://master:9000/output1 20/12/01 21:38:00 INFO client.RMProxy: Connecting to ResourceManager at /192.168.136.128:8032 20/12/01 21:38:00 WARN mapreduce.JobResourceUploader: Had.
【SpringBoot】Error: Could not find or load main class org.apache.hadoop.mapreduce.v2.app.MRAppMaster
01-07
【SpringBoot】Error: Could not find or load main class org.apache.hadoop.mapreduce.v2.app.MRAppMaster报错明细问题解决后记 报错明细 IDEA SpringBoot集成hadoop运行环境，，本地启动项目，GET请求接口触发...
【Spark】六、org.apache.hadoop.security.AccessControlException
01-09
Exception in thread main org.apache.hadoop.security.AccessControlException: Permission denied: user=L.MOON, access=WRITE, inode=/user/lsy/result1/_temporary/0:lsy:supergroup:drwxr-xr-x Caused by: org....
Java-org.apache.hadoop
06-02
Java-org.apache.hadoop是Apache Hadoop项目的核心组件，它在分布式计算领域扮演着至关重要的角色。Hadoop是由Apache软件基金会开发的一个开源框架，主要用于处理和存储大量数据。它设计的初衷是为了支持数据密集型...
java. lang . UnsatisfiedLinkError: org. apache . hadoop. io. nativeio. NativeIOSWindows . access0
01-09
Exception in thread “main” java. lang . UnsatisfiedLinkError: org. apache . hadoop. io. nativeio. NativeIOSWindows . access0 (Ijava/ lang/String;I)Z  原因：在调用NativeIO中的...
Hadoop 运行Java时发生异常：org.apache.hadoop.mapreduce.lib.input.InvalidInputException: Input path does not
分享我的点点滴滴，在成长路上与你同行！
06-01 1250
Java远程到集群上，统计单词！
【Hadoop】出错：org.apache.hadoop.mapreduce.lib.input.InvalidInputException: Input path does not exist
菜鸟sdut的博客
09-05 8886
简介 在一次运行MR任务的时候，使用hadoop jar 或者 yarn jar都可以正常运行，但是使用java -cp的时候就总是出现Exception in thread "main" org.apache.hadoop.mapreduce.lib.input.InvalidInputException: Input path does not exist: file:/wordcount/w...
Hadoop分布式集群 EclipseException in thread "main" org.apache.hadoop.mapreduce.lib.input.InvalidInputExce
Chengliangyao的博客
09-23 9100
最近使用Hadoop分布式集群，今天在Ubuntu上将Eclipse和Hadoop配置好了，然后运行一个去重的案例，我将输入文件传到了hdfs文件系统，但是过程中出现了Exception in thread "main" org.apache.hadoop.mapreduce.lib.input.InvalidInputException: Input path does not exist: 这
解决错误：org.apache.hadoop.mapreduce.lib.input.InvalidInputException:
zhaoyu410186459的博客
01-11 4961
**错误信息：**Exception in thread “main” org.apache.hadoop.mapreduce.lib.input.InvalidInputException: Input path does not exist: hdfs://192.168.127.11:9000/root/data/a.txt **描述：**找了老半天，网上也有说是9000端口被占用。其实都...
错误：org.apache.hadoop.mapreduce.lib.input.InvalidInputException: Input path does not exist: hdfs://lo
qq_53269459的博客
02-01 1万+
org.apache.hadoop.mapreduce.lib.input.InvalidInputException: Input path does not exist: 异常 Input path does not exist异常分析 描述： 在自定义实现编译运行 WordCount 的时候，本地hadoop中已经存在已包含内容的input文件，执行 jar 操作 bin/hadoop jar workspace/WordCount.jar WordCount input1 output的时候，出现以
hadoop常见错误(转载)
CoderLife9192的专栏
03-07 3093
hadoop常见异常 错误解决： 1.如果在bin/hadoop dfs -put /home/test-in input该过程中出现"can only be replicated to node 0, instead of 1",解决办法是打开http://localhost:50070/dfshealth.jsp查看，确定了livenode数目为你的机器实际数目时，再进行put（
hadoop异常： org.apache.hadoop.mapreduce.lib.input.InvalidInputException: Input path does not exit
蒯厅博客
03-24 4512
出现原因：集群有要操作的目录或者文件但是本地没有吧路径写全造成的。 其次是集群获取分布式文件系统没有做配置，默认是本地（你电脑下的路径） 所以分布式系统找不到路径。 设置如下图： 以WordCount 为例 最终结果如下 ...
Exception in thread "main" org.apache.hadoop.mapreduce.lib.input.InvalidInputException:
最新发布
07-28
Exception in thread "main" org.apache.hadoop.mapreduce.lib.input.InvalidInputException: 回答: 这个错误通常是由于输入路径不存在导致的。根据引用\[2\]的解释，当使用Eclipse运行MapReduce程序时，默认的参数...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

东北炸鸡

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值