Hadoop2.x实战:WordCount实例运行

      摘要:本文主要讲了hadoop2.7.2自带的WordCount实例运行

      操作系统:Ubuntu14.04

      hadoop版本:2.7.2

实例测试wordCount

1、启动hadoop

/usr/hadoop/hadoop-2.7.2/sbin
./start-dfs.sh 
./start-yarn.sh 
输入Jps如下,说明启动成功


2、新建一个目录
cd /usr/hadoop/hadoop-2.7.2
hadoop fs -mkdir /input

当前在hadoop的目录下,有个LICENSE.txt的文件,把它放到hdfs的input目录下面
hadoop fs -put LICENSE.txt /input

3、查看文件是否正确传入到/input目录下
hadoop fs -ls /input
4、查看文件内容
hadoop fs -cat /input/LICENSE.txt
5、执行
cd /usr/hadoop/hadoop-2.7.2/share/hadoop/mapreduce
hadoop jar hadoop-mapreduce-examples-2.7.2.jar wordcount /input /output2

如果卡在mapreduce.Job: Running job
在etc/hadoop/mapred-site.xml中,将配置改成如下内容,然后重新执行
<configuration>
<property>
<name>mapred.job.tracker</name>
<value>hmaster:9001</value>
</property>
</configuration>

执行结束后输出:




6、查看输出结果的目录

hadoop fs -ls /output


表示在input目录下已经有了一个名为output2的文件目录

7、查看最终运行结果

hadoop fs -cat /output2//part-00000


  • 1
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值