二. 验证hadoop的map-reduce功能是否正常
Map-reduce主要实现作业的处理。通过执行一个map-reduce程序,分析结果是否正确。本文通过hadoop自带的统计单词的WordCount.java进行测试。
1、执行后,正确页面。
该步若出现如下错误:
则修改salve结点的hosts文件。
执行完毕后,再次查看hdfs系统。此时,生成了output。
查看output中的内容:
out目录中主要有两项内容,其中一个是目录,主要存放一些过程的日志信息,另一个是文件,用于存放map-reduce的执行结果。查看map-reduce的执行结果,如下:
上述统计结果正确,说明map-reduce的功能是正确的。