摘要:本文主要讲了hadoop2.7.2自带的WordCount实例运行
操作系统:Ubuntu14.04
hadoop版本:2.7.2
实例测试wordCount
1、启动hadoop
/usr/hadoop/hadoop-2.7.2/sbin
./start-dfs.sh
./start-yarn.sh
输入Jps如下,说明启动成功
2、新建一个目录
cd /usr/hadoop/hadoop-2.7.2
hadoop fs -mkdir /input
当前在hadoop的目录下,有个LICENSE.txt的文件,把它放到hdfs的input目录下面
hadoop fs -put LICENSE.txt /input
3、查看文件是否正确传入到/input目录下
hadoop fs -ls /input
hadoop fs -cat /input/LICENSE.txt
cd /usr/hadoop/hadoop-2.7.2/share/hadoop/mapreduce
hadoop jar hadoop-mapreduce-examples-2.7.2.jar wordcount /input /output2
如果卡在mapreduce.Job: Running job
在etc/hadoop/mapred-site.xml中,将配置改成如下内容,然后重新执行
<configuration>
<property>
<name>mapred.job.tracker</name>
<value>hmaster:9001</value>
</property>
</configuration>
执行结束后输出:
6、查看输出结果的目录
hadoop fs -ls /output
7、查看最终运行结果
hadoop fs -cat /output2//part-00000