Hadoop统计单词作业

hadoop期末作业

声明

本次大作业是通过网上的各种资源的学习以及同学的帮忙才能完成的。
途中因为不太了解Ubuntu的运行流程导致出了很多bug，都是通过慢慢从网上寻找bug的解决方法才能完成的。

执行过程

①终端进入目录cd /usr/local/hadoop 输入命令 ./sbin/start-dfs.sh 启动hadoop，当程序执行完后，可输入jps查看Hadoop是否启动成功，若出现下图则成功

②成功启动后，可以通过火狐浏览器访问 Web 界面 http://localhost:50070 查看 NameNode 和 Datanode 信息，还可以在线查看 HDFS 中的文件。
③上传文件：浏览器打开“http:localhost:50070”，依次点击’‘Utilities’’->’‘Browse the file system’’->选择你要上传的txt文档->’‘upload’’

④文件上传后，插件需要进一步的配置，我们在上方找到Window——Preference，找到Hadoop Map/Reduce，在那里填入hadoop的安装地址/usr/local/hadoop

⑤切换Map/Reduce 开发视图，选择Window 菜单下选择 Open Perspective—>Other，在里面找到Map/Reduce