运行hadoop自带的案例—wordcount

主要有四个步骤:

一、 在hdfs分布式文件系统 中创建两个文件夹,分别存放输入、输出数据

1、 bin/hadoop fs –mkdir –p/data/wordcount 创建的输入数据目录

2、 bin/hadoop fs –mkdir –p/output/ 创建的输出数据目录

二、 将要测试的文件上传到hdfs文件系统的输入数据目录

1、 从本地上传到HDFS中

bin/hadoop fs –put 本地文件路径 HDFS系统输入数据路径

2、 查看上传到hdfs中的文件情况:

bin/hadoop fs –ls /data/wordcount

3、 查看上传到HDFS中的文件:

bin/hadoop fs –text /data/wordcount/

三、 运行wordcount例子(运行jar包)

Bin/hadoop jar 本地文件jar包的路径 wordcount 输入数据在HDFS文件系统中的路径 输出数据在HDFS文件系统中的路径

四、 查看结果

bin/hadoop fs –text /output/wordcount/part–r-00000

作者:cxx_317
来源:CSDN
原文:https://blog.csdn.net/cxx_317/article/details/47405419
版权声明:本文为博主原创文章,转载请附上博文链接!

  • 1
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值