![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
分布式系统
文章平均质量分 95
Mind_V
这个作者很懒,什么都没留下…
展开
-
Google File System 学习总结
趁着4月份找实习的契机,学习了MIT 6.824的课程推荐论文Google File System。篇幅很长,感觉不是完全理解了,先转载了一篇觉得整理得比较好的笔记,方便后续的进一步学习。 GFS 的主要需求 在学习 GFS 的原理前,首先我们应当了解 GFS 在设计时所面对的需求场景。简单概括,GFS 的设计主要基于以下几个需求: 节点失效是常态。系统会构建在大量的普通机器上,这使得...转载 2018-05-03 21:03:16 · 4710 阅读 · 0 评论 -
Google MapReduce 总结
Google MapReduce 总结 MapReduce 编程模型 总的来讲,Google MapReduce 所执行的分布式计算会以一组键值对作为输入,输出另一组键值对,用户则通过编写 Map 函数和 Reduce 函数来指定所要进行的计算。 由用户编写的Map 函数将被应用在每一个输入键值对上,并输出若干键值对作为中间结果。之后,MapReduce 框架则会将与同一个键 II 相关...原创 2018-06-10 12:18:15 · 1935 阅读 · 0 评论