![](https://img-blog.csdnimg.cn/20201014180756922.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop_MapReduce
文章平均质量分 68
·落魄书生·
最新证件照!!!!
展开
-
海量Web日志分析(MR实现)
海量日志分析(MR实现)海量日志分析(MR实现)代码需求笔者配置数据类型需求具体实现思路代码结构KPI.javaKPIPV.java代码结果截图KPIIP.java代码结果截图KPITime.java代码结果截图(部分)KPIBrowser.java代码结果截图(部分) 海量日志分析(MR实现) 代码需求 实现PV,IP,访问时间,浏览器类型等常用的Web日志分析功能。 笔者配置 Hadoop3.1.3,有空再用spark实现 IDEA本地测试运行,可以打jar包上传集群跑数据 数据类型 222.68.17原创 2022-02-09 23:22:01 · 1439 阅读 · 0 评论 -
MapReduce基本案例
MapReduce基本案例案例1. 单词统计 案例1. 单词统计 对文件里的单词进行计数 输入数据 ss ss cls cls jiao banzhang xue hadoop 输出数据 banzhang 1 cls 2 hadoop 1 jiao 1 ss 2 xue 1 注意:包要导对,有些可能导到java包里 代码: WordCountMapper.java package com.lmr.mapreduce.wordcount; import org.apache.hadoop.io.IntW原创 2021-10-22 17:35:08 · 3954 阅读 · 2 评论