解决错误：org.apache.hadoop.mapreduce.lib.input.InvalidInputException:

最新推荐文章于 2022-06-01 14:41:11 发布
最新推荐文章于 2022-06-01 14:41:11 发布
阅读量4.9k 收藏 6
点赞数 4
分类专栏： 大数据 文章标签： hadoop
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/zhaoyu410186459/article/details/86324098
版权

**错误信息：**Exception in thread “main” org.apache.hadoop.mapreduce.lib.input.InvalidInputException: Input path does not exist: hdfs://192.168.127.11:9000/root/data/a.txt
在这里插入图片描述

**描述：**找了老半天，网上也有说是9000端口被占用。其实都不是，原来是犯了个很低级的错误（由于长时间没敲Hadoop提交jar包的语句），HDFS的输入和输出路径写成本地路径了X﹏X

Hadoop提交jar包语句：
hadoop jar 本地jar的包路径 HDFS上的输入路径 HDFS的输出路径

zhaoyu410186459
关注
  • 4
    点赞
  • 踩
  • 6
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
Hadoop错误2_Hadoop伪分布式下，运行WordCount时，Input path does not exist错误原因
wang_zhenwei的博客
08-12 3万+
在伪分布式下，按照下面两个博客，分别以命令行方式和Eclipse执行WordCount程序时，都会出现同样的错误， （Eclipse：http://blog.csdn.net/wang_zhenwei/article/details/47422775） （命令行方式：http://blog.csdn.net/wang_zhenwei/article/details/47439623）
Java-org.apache.hadoop
06-02
Java-org.apache.hadoop是Apache Hadoop项目的核心组件，它在分布式计算领域扮演着至关重要的角色。Hadoop是由Apache软件基金会开发的一个开源框架，主要用于处理和存储大量数据。它设计的初衷是为了支持数据密集型...
Hadoop 运行Java时发生异常：org.apache.hadoop.mapreduce.lib.input.InvalidInputException: Input path does not
分享我的点点滴滴，在成长路上与你同行！
06-01 1251
Java远程到集群上，统计单词！
Exception in thread "main" org.apache.hadoop.mapreduce.lib.input.InvalidInputException: Input path
大JAVA解决方案
03-20 6239
 WARN - Unable to load native-hadoop library for your platform... using builtin-java classes where applicable  INFO - session.id is deprecated. Instead, use dfs.metrics.session-id  INFO - Initializing...
hadoop异常： org.apache.hadoop.mapreduce.lib.input.InvalidInputException: Input path does not exit
蒯厅博客
03-24 4513
出现原因：集群有要操作的目录或者文件但是本地没有吧路径写全造成的。 其次是集群获取分布式文件系统没有做配置，默认是本地（你电脑下的路径） 所以分布式系统找不到路径。 设置如下图： 以WordCount 为例 最终结果如下 ...
错误Exception in thread “main“ org.apache.hadoop.mapreduce.lib.input.InvalidInputException: Input path
m0_60318777的博客
11-18 5952
原因 在使用 Eclipse 运行 MapReduce 程序时，会读取 Hadoop-Eclipse-Plugin 的 Advanced parameters 作为 Hadoop 运行参数，如果我们未进行修改，则默认的参数其实就是单机参数，因此程序运行时是读取本地目录而不是 HDFS 目录，就会提示 Input 路径不存在。 解决办法 在项目的src下加入core-site.xml和hdfs-site.xml两个文件，以及 log4j.properties 复制到 WordCount 项目下的 src
org.apache.hadoop.mapreduce.lib.input.InvalidInputException: Input path does not exist
foradawn的博客
04-29 3989
idea下远程调试hadoop程序一直报路径不存在。。。找了好久，然后一直认为路径是正确的，然而。。。 我们在hdfs系统中直接建立文件后，可能误以为这个路径就是相对路径，事实上并不是 使用hdfs dfs -ls / 查看当前目录可以知道当前的相对路径是什么 这个路径困扰了一下午。。。好想哭。。。无语。。。...
java. lang . UnsatisfiedLinkError: org. apache . hadoop. io. nativeio. NativeIOSWindows . access0
01-09
 hadoop. io. nativeio. NativeIOSWindows . access0 (Ijava/ lang/String;I)Z  原因：在调用NativeIO中的access0()时调不到 解决方法：①第一步：在项目工程中加入NativelO.java，注意包名必须与源码中...
【Spark】六、org.apache.hadoop.security.AccessControlException
01-09
Exception in thread main org.apache.hadoop.security.AccessControlException: Permission denied: user=L.MOON, access=WRITE, inode=/user/lsy/result1/_temporary/0:lsy:supergroup:drwxr-xr-x Caused by: org....
【SpringBoot】Error: Could not find or load main class org.apache.hadoop.mapreduce.v2.app.MRAppMaster
01-07
【SpringBoot】Error: Could not find or load main class org.apache.hadoop.mapreduce.v2.app.MRAppMaster报错明细问题解决后记 报错明细 IDEA SpringBoot集成hadoop运行环境，，本地启动项目，GET请求接口触发...
org.apache.hadoop.mapred.InvalidInputException: Input path does not exist: hdfs://localhost~~
热门推荐
小夏陌的博客
12-06 2万+
报错 在Spark中运行sc.textFile()等命令后报以下错误： org.apache.hadoop.mapred.InvalidInputException: Input path does not exist: hdfs://localhost:9000/Filename.txt 解决方法 这是所加载文件不存在而报的错，因为配置等原因textFile()默让是在HDFS中查找文件，所以只...
wordcount报错：org.apache.hadoop.mapreduce.lib.input.InvalidInputException: Input path does not exist:
yangmingtia的博客
11-12 3999
Exception in thread "main" org.apache.hadoop.mapreduce.lib.input.InvalidInputException: Input path does not exist: hdfs://192.168.25.128:9000/export/yang/log.1     at org.apache.hadoop.mapreduce.lib.i...
hadoop异常之输入路径不存在
alanlonglong的博客
01-23 5365
org.apache.hadoop.mapreduce.lib.input.InvalidInputException: Input path does not exist: hdfs://mycluster/pythontout         at org.apache.hadoop.mapreduce.lib.input.FileInputFormat.singleThreadedList
运行hadoop自己提供的示例时，提示input文件夹不存在的解决方案
spspxl的博客
05-26 4383
当运行hadoop单击版时，提示org.apache.hadoop.mapreduce.lib.input.InvalidInputException: Input path does not exist: file:/usr/local 错误，多数原因是自己所在的用户组对该文件夹没有读写权限，解决办法是利用chgrp、和chown 命令，改变该文件夹所在用户组，和拥有者即可。
eclipse运行出现org.apache.hadoop.mapreduce.lib.input.InvalidInputException: Input path does not exist错误
qq_44796583的博客
10-22 1626
问题出现场景 org.apache.hadoop.mapreduce.lib.input.InvalidInputException: Input path does not exist: hdfs://localhost:54310/user/ooxx/input org.apache.hadoop.mapreduce.lib.input.FileInputFormat.singleThread...
org.apache.hadoop.mapreduce.lib.input.InvalidInputException: Input path does not exist: file:/input
weixin_30785593的博客
07-06 352
原我是这样写的 //输入数据所在的文件目录 FileInputFormat.addInputPath(job, new Path("/input/")); //mapreduce执行后输出数据目录 FileOutputFormat.setOutputPath(job, new Path("/output/")); 这个错误原因是路劲错误，应加上hdfs中core-site.x...
Exception in thread "main" org.apache.hadoop.mapreduce.lib.input.InvalidInputException:
最新发布
07-28
Exception in thread "main" org.apache.hadoop.mapreduce.lib.input.InvalidInputException: 回答: 这个错误通常是由于输入路径不存在导致的。根据引用\[2\]的解释，当使用Eclipse运行MapReduce程序时，默认的参数是单机参数，而不是HDFS目录。因此，如果输入路径在HDFS中不存在，就会出现这个错误。解决这个问题的方法是在项目的src下加入core-site.xml和hdfs-site.xml两个文件，并将它们复制到WordCount项目的src文件夹中。这样，程序就能正确读取HDFS中的输入路径了。 #### 引用[.reference_title] - *1* *3* [Exception in thread "main" org.apache.hadoop.mapred.InvalidJobConfException: Output directory not se](https://blog.csdn.net/mtj66/article/details/52644800)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^control_2,239^v3^insert_chatgpt"}} ] [.reference_item] - *2* [错误Exception in thread “main“ org.apache.hadoop.mapreduce.lib.input.InvalidInputException: Input ...](https://blog.csdn.net/m0_60318777/article/details/121398932)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^control_2,239^v3^insert_chatgpt"}} ] [.reference_item] [ .reference_list ]

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值