移动计算就是把计算任务下发到数据所在的节点进行处理。
移动数据就是将数据移动到计算任务的节点,这样将损耗大量网络开销,导致流量激增,处理效率慢。
此外还要申明,在mapreduce程序中,其中map阶段是移动计算的,即本地计算,但是在reduce时,要进行shuffle进过网络传输。
更多详情:http://blog.csdn.net/king_a_123/article/details/53439801
http://blog.csdn.net/magicdreaming/article/details/7629002
本文介绍了移动计算的概念,对比了移动数据方式的区别,并详细解析了MapReduce中的移动计算原理,尤其是在Map阶段的本地计算和Reduce阶段的数据shuffle过程。
6593

被折叠的 条评论
为什么被折叠?



