Hadoop的计算上下行流量的案例

最新推荐文章于 2022-07-11 16:05:28 发布

wister136

最新推荐文章于 2022-07-11 16:05:28 发布

阅读量817

点赞数 3

分类专栏： hadoop 文章标签：流量计算

本文链接：https://blog.csdn.net/u010599953/article/details/76068214

版权

本文通过Hadoop解决统计每个用户手机号的上行、下行及总流量问题，详细解析计算过程。

摘要由CSDN通过智能技术生成

问题：统计每一用户的（手机号）所消耗的总的上行流量，下行流量，总流量

思路：1.建立mapper，reducer，job

2.与之间的worcount的区别在于，输出的结果不是一个，而是多个，所以需要我们将需要输出的数据封装到一个类中

1.建立mapper，reducer，job（将三者放在一个类中或者分开写）

package cn.lsm.bigdata.sumflow;

import java.io.IOException;

import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.fs.Path;
import org.apache.hadoop.io.LongWritable;
import org.apache.hadoop.io.Text;
import org.apache.hadoop.mapreduce.Job;
import org.apache.hadoop.mapreduce.Mapper;
import org.apache.hadoop.mapreduce.Reducer;
import org.apache.hadoop.mapreduce.lib.input.FileInpu