使用Hadoop运行WorldCount示例
引言:我们搭建好Hadoop集群,通过一个小型Wordcount案例见识Hadoop的魅力
1.首先找到hadoop自带worldcount jar包示例的路径
2.准备工作,需要创建输入输出路径以及上传的文件
(1)创建
vim inputWord #本地txt
(2)创建目录
hdfs -dfs mkidr -p /input/word
hdfs dfs -mkdir -p /output
查看hdfs创建
hdfs dfs - ls /
3.将本地准备的输入文件上传到hdfs中:
hdfs dfs -put /tmp/inputWord /input/word/
4.准备工作做完之后就可以运行实例了,执行命令
hadoop jar hadoop-mapreduce-examples-2.6.0.jar wordcount /input/word /output/out
5.查看执行结果
hdfs dfs -cat /output/out/part-r-00000
最后可能有些同学不熟悉hdfs命令可以看