Mapreduce分析WordCount实例

1 介绍

我们的txt文件内容是:

atguigu atguigu
ss ss
cls cls
jiao
banzhang
xue
hadoop

期望输出的结果是:
在这里插入图片描述

总体分析图为:
在这里插入图片描述

2 Mapper

首先写第一个Mapper,extends Mapper 查看默认值
在这里插入图片描述

KEYIN: 输入数据的key ,行内偏移量 改成LongWritable(如果写成Object容易报错) 读取txt里面的内容是一行一行读取的
在这里插入图片描述

VALUEIN: 输入数据的value, 改成Test 。 其实Text指的就是String类型

如前面 # 1 分析 :图中 Mapper分析结果后: 接收到的数据是形如:

atguigu 1
ss 1

上图对应下图是:

String int
atguigu 1
ss 1

那么atguigu和ss对应的是KEYOUT,即String类型 == Text类型
1和1 对应的是VALUEOUT ,即int类型==IntWritable类型

KEYOUT: 输出数据类型,改成Text
VALUEOUT: 输出的数据的value类型,改成IntWritable

最终为:
在这里插入图片描述
控制台输入:Map
在这里插入图片描述

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值