学习笔记（15):第二章：海量数据的处理与挖掘-Map Reduce思想变换数据key-value_01

立即学习:https://edu.csdn.net/course/play/26303/334276?utm_source=blogtoedu

Hadoop有四个模块

超大的文本文件，统计每个文本中的词出现的次数

热门url,搜索词统计，区分垃圾邮件和短信，舆情分析（正负面评论）

Map  发散 逐行扫描，并抽取关键  遍历，递归    key value 键值对

Group by key 排序，洗牌

Reduce 收敛 聚合，总结，过滤或转换；写入结果

Map 和Reduce函数要根据具体问题具体实现