Mapreduce ----完全分布式WorldCount(远程) 示例

1 建立项目

链接:https://pan.baidu.com/s/15yZQLMqnXFDsbJ_61iXAGw 
提取码:44fh 
复制这段内容后打开百度网盘手机App,操作更方便哦

下载见附件:

https://download.csdn.net/upload/success

导出jar:

  HdfsDemo-1.0-SNAPSHOT.jar  

2 建立测试1.txt

hello
hello
world
hahah
how

上传到hadoop上:

hdfs dfs -mkdir -p /user/centos/wc/data

hdfs dfs -put 1.txt wc/data

3 测试脚本

 hadoop jar HdfsDemo-1.0-SNAPSHOT.jar com.it18zhang.hdfs.mr.WCApp hdfs://s200/user/centos/wc/data hdfs://s200/user/centos/wc/data/out

4 查看进度

http://192.168.77.200:8088/cluster/apps/RUNNING

5 查看深成统计文本

hdfs dfs -cat /user/centos/wc/data/out/part-r-00000

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值