- 博客(3)
- 收藏
- 关注
原创 使用MapReduce序列化求每个部门的工资总额
跟之前的直接获取每个部门员工的工资有所不同的是,这个是获取一个对象,并非一个值了,用到了序列化的知识点。案例代码如下:Employee :(序列化,反序列化)package Mapreducer;import org.apache.hadoop.io.Writable;import java.io.DataInput;import java.io.DataOutput;import ...
2018-10-18 23:24:15
1317
原创 SalaryTotal
处理流程:Mapper分词 Reducer求和数据==>Mapper==>Reducer==>HDFSSalaryTotalMapper :import org.apache.hadoop.io.IntWritable;import org.apache.hadoop.io.LongWritable;import org.apache.hadoop.io....
2018-10-16 23:06:26
167
原创 WordCount
WordCountWordCountMapper :重写方法,获取数据,将获取的数据进行按一定的规则的拆分,(k1:偏移量;v1:数据;k2:具体的单词;v2:每单词记一次数)代码如下:import org.apache.hadoop.io.IntWritable;import org.apache.hadoop.io.LongWritable;import org.apache.had...
2018-10-16 00:06:38
115
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人