问题
WIndows10 下Hadoop3.1.3使用IDEA本地调试wordcount出现如下错误
2021-03-05 11:11:41,311 WARN [org.apache.hadoop.mapred.LocalJobRunner] - job_local1291814541_0001
java.lang.Exception: org.apache.hadoop.mapreduce.task.reduce.Shuffle$ShuffleError: error in shuffle in localfetcher#1
at org.apache.hadoop.mapred.LocalJobRunner$Job.runTasks(

在Windows10下使用Hadoop 3.1.3进行wordcount程序本地调试时,由于管理员用户名含有空格,导致map阶段后文件无法正确存储,进而引发reducer读取错误。解决方法包括更改账户名称,更新cmd中的路径,修改注册表中的ProfileImagePath,并在注销后调整用户文件夹名称以匹配新的用户名。
最低0.47元/天 解锁文章

被折叠的 条评论
为什么被折叠?



