Hadoop词频统计中的各种问题

问题1:

Exception in thread"main"org.apache.hadoop

mapred.FileAlreadyExist


问题原因:输出目录已经存在

解决:删除输出目录再运行

①如果idea中Maven工程出现,删除本地output输出

②如果是Xshell中的hadoop则

hadoop fs -rm -r [文件名]

问题2:

ClassNotFoundException


35437e00e9d54cbb9dc02d7195c40f34.jpg

 原因,类名错误

问题3:

lllegaArgumentException


问题原因:非法参数

解决:重新打包

问题4:

InvalidInputException


原因:hadoop中没建输出文件input

解决:hadoop fs -mkdir -p /wordcount/input

问题5:

打包插件代码内容红


install更新

0fa33f5610f74a039e1bde9239f49a61.jpg

 问题6:

idea运行一切正常package后,显示could.not.transfer.artifact等


0a82ff818e0f4f7d920357178ab3915f.jpg

 点击Override更换本地仓库如:apache-hadoop-3.1.0-winutils

其次idea,中打开file-Invalidate Caches

 

问题7:

f0471c3a907b4b90a31ea8461e686837.jpg

 上传不成功,刷屏


原因:集群没开完

JPS查看集群,开缺少的集群

  • 1
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值