MapReduce拆分理解

大多数初学者可能会面临这样一个问题，MapReduce的运行机制是怎样的呢，接下来我是我的理解，希望能够帮到大家

MapReduce大致可以分为六个步骤，分别是input, split, map, shuffle, reduce, output 举个例子来说明：

1.input(输入) — 给定一个文档，其中有这样几行数据

			Hello World
			Hello Java
			Hello C
			Hello BigData
			Hello World

2.split(切片) — 将给定的文档按行切分成key-value键值对

			0 - Hello World
			1 - Hello Java
			2 - Hello C
			3 - Hello BigData
			4 - Hello World

3.map(映射) — 将拆分之后的键值对转换成新的key-value键值对(这里用空格间隔，所以拆分的时候也用空格)，

			(Hello,1)
			(World,1)
			(Hello,1)
			(Java,1)
			(Hello,1)
			(C,1)
			(Hello,1)
			(BigData,1)
			(Hello,1)
			(World,1)

4.shuffle(派发) — 将相同的key放到一起

			(Hello,1)
			(Hello,1)
			(Hello,1)
			(Hello,1)
			(Hello,1)