云计算读书笔记(二)之google云计算技术MapReduce

本文是《云计算》第二版的读书笔记,主要介绍MapReduce的编程模型和实现机制。Map阶段将输入数据拆分为M块并由Worker处理,Reduce阶段则通过排序和归并处理相同的key,最终形成有序结果。此外,文中还探讨了MapReduce的容错机制和一个字母排序的案例分析。
摘要由CSDN通过智能技术生成

《云计算》(第二版)[刘鹏]读书笔记

分布式数据处理MapReduce

编程模型:

Map的输入参数是in_keyin_value,输出结果是一组<key,value>对,这是经过Map操作后所产生的中间结果。进行Reduce操作之前,对所有Map产生的中间结果进行归并处理,Reduce的输入参数是(key,[value1,...,valuem])Reduce对相同的keyvalue值进行归并处理,最终形成(key, final_value)的结果。

 

实现机制ÿ

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值