- 博客(1)
- 收藏
- 关注
原创 Hadoop学习笔记-MapReduce工作原理
本文从一个初学者的角度出发,用通俗易懂的语言介绍Hadoop中MapReduce的工作原理。在介绍MapReduce工作原理前,本文先介绍HDFS的工作原理及架构,再介绍MapReduce的工作原理以及Shuffle的过程。HDFSHDFS是Hadoop的分布式文件系统,HDFS中的文件会默认存储3份,存储在不同的机器上,提供容错机制,副本丢失或者宕机的自动恢复。HDFS的架构如下图所示,总体上采用
2016-09-12 10:02:39 1103
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人