- 博客(3)
- 收藏
- 关注
原创 使用MapReduce序列化求每个部门的工资总额
跟之前的直接获取每个部门员工的工资有所不同的是,这个是获取一个对象,并非一个值了,用到了序列化的知识点。 案例代码如下: Employee :(序列化,反序列化) package Mapreducer; import org.apache.hadoop.io.Writable; import java.io.DataInput; import java.io.DataOutput; import ...
2018-10-18 23:24:15 1341
原创 SalaryTotal
处理流程: Mapper分词 Reducer求和 数据==>Mapper==>Reducer==>HDFS SalaryTotalMapper : import org.apache.hadoop.io.IntWritable; import org.apache.hadoop.io.LongWritable; import org.apache.hadoop.io....
2018-10-16 23:06:26 171
原创 WordCount
WordCount WordCountMapper :重写方法,获取数据,将获取的数据进行按一定的规则的拆分,(k1:偏移量;v1:数据;k2:具体的单词;v2:每单词记一次数) 代码如下: import org.apache.hadoop.io.IntWritable; import org.apache.hadoop.io.LongWritable; import org.apache.had...
2018-10-16 00:06:38 135
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人