idea远程提交hadoop执行任务,本地运行mapReduce程序
首先你要有hadoop集群,至于怎么集群,这里就不说了,很麻烦启动你的hadoop上传你要统计的数据到hdfs --一个或多个文件 记住该路径, 我这个文件作为测试,324M够大了搭建本地idea的hadoop项目创建maven项目pom.xml 依赖<properties> <project.build.sourceEncoding>UTF-8</project.build.sourceEncoding> <mav
原创
2020-09-10 17:44:55 ·
1092 阅读 ·
0 评论