HDFS实例

hadoop环境搭建好后,运行第wordcount示例

  1. 首先启动hadoop:start-all.sh

2.进入到hadoop的安装目录下(我的是/root/opt/module/hadoop-2.7.3)

3.新建hadoop hdfs文件系统上的input文件夹(输入文件存放):hadoop fs -mkdir /input

4.在当前目录下新建test.txt文件,传入测试文件: hadoop fs -put /root/opt/module/hadoop-2.7.3 test.txt /input (这里我是在hadoop安转目录建了一个test.txt文件)查看刚刚传入的文件:hadoop fs -ls /input
在这里插入图片描述

5.运行wordcount示例:hadoop jar /usr/hadoop/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.7.4.jar wordcount /input /output (下划线具体路径自己调整)。
运行后的首尾截图:

在这里插入图片描述
6.运行成功后,查看目录:hadoop fs -ls / 多了一个output文件夹

继续查看 output 文件夹:hadoop fs -ls /output
有 _SUCCESS 和part-r-00000两个文件夹

7.查看part-r-00000 文件夹中的运行结果:hadoop fs -cat /output/part-r-00000

8.访问50070端口也可查看 ,输入master的ip 访问:http://192.168.184.131:50070

进入input文件夹就可看到上传的test.txt文件

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值