- 博客(1)
- 资源 (4)
- 收藏
- 关注
转载 学会定制MapReduce里的partition,sort和grouping,Secondary Sort Made Easy
通过初期的几个开发员培训班,我发现有不少学员容易“偏爱”缺省的MapReduce行为,而忽略如何在代码里根据自己应用的需要来定制不同于系统缺省的行为。这篇文章结合Secondary Sort来介绍“Shuffle & Sort”里涉及到的三个重要操作。缺省情况下,MapReduce Framework的Shuffle & Sort过程将所有和某一个键相关联的值“组合”(group)在一起,传送
2014-04-08 08:12:08 4407
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人