MapReduce全过程

shuffle过程 shuffle概念 shuffle的本意是洗牌、混洗的意思,把一组有规则的数据尽量打乱成无规则的数据。而在MapReduce中,shuffle更像是洗牌的逆过程,指的是将map端的无规则输出按指定的规则“打乱”成具有一定规则的数据,以便reduce端接收处理。其在MapRedu...

2019-02-25 17:42:11

阅读数 232

评论数 0

提示
确定要删除当前文章?
取消 删除