大数据技术与应用实验三

实验三： MapReduce架包、调试WordCount程序

MapReduce架包在HDFS的基础上进行

一、运行如下HDFS的这4个程序

二、对HDFSFilefExist.java程序进行打包，如下操作：

1.拖动

把HDFSFilefExist.java从hdfs.files包中拖出来，它会自动形成另一个包default.package。
2.具体打包过程

① 选中default.package右击，选择导出——JAVA——JAR file——next。

② 选择存放的路径，最后选择Finish，打包完成。

三、传输、解压

1，将包传输到SecureCRT里：
SecureCRT 【File】→【Connect SFTP Session】开启sftp操作

运行命令put C:mp,jar

,2、解压tar -zxvf mp.jar -E/jar/jar

四、运行自带程序wordcount

1、运行cd /jar/jar/hadoop-2.7.3/share/hadoop/mapreduce 转入wordcount所在路径。
2、运行wordcount
hadoop jar mp.jar HDFSFileIfExist
运行成功之后，会出现文件已存在，说明架包成功。