idea远程提交hadoop执行任务,本地运行mapReduce程序
首先你要有hadoop集群,至于怎么集群,这里就不说了,很麻烦
启动你的hadoop
上传你要统计的数据到hdfs --一个或多个文件 记住该路径, 我这个文件作为测试,324M够大了
搭建本地idea的hadoop项目
创建maven项目
pom.xml 依赖
<properties>
<project.build.sourceEncoding>UTF-8</project.build.sourceEncoding>
<mav
原创
2020-09-10 17:44:55 ·
1080 阅读 ·
0 评论