用本地的mapreduce测试单词计数

  1. 在自己的家路径下创建一个文件xxx(为名字)
  2. pwd的结果:/root

 

 

   3.从本地上传到HDFS中:格式是hdfs dfs -put   [本地的文件路径]  [上传到HDFS路径]

             例子:如下

 

    4.查看HDFS根目录的结果:

          例子:如下

    5.然后到/liqing目录下查看,是否上传成功

           例子:如下

 

  6.先进入路径:mapreduce路径

 

       7.测试命令格式:hadoop jar hadoop-mapreduce-examples-2.8.4.jar   wordcount  [ 这是hdfs的路径(相当于输入路径)  切记  ]  [这是输入    路径(也可以到hdfs的根目录下,方便在web页面查看和文件下载)]

       例子:如下 (输出路径是不存在的,切记。可以自己写一个
 

8.测试结果:(证明运行成功了,有日志)

 

 

9.可以查看下:在hdfs的根目录下生成了 out1目录(自己刚才写的路径)

 

10.可以查看下:out1目录的内容

 11.最后查看最后的结果:

 

 

12.测试成功(也可以到Web页面,下载Part-r-00000这个文件)

 

 

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

SuperBigData~

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值