![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
bigdata paper
文章平均质量分 80
mylibrary1
这个作者很懒,什么都没留下…
展开
-
gfs论文笔记
GFS论文:Design Assumptions:Failure detection, recovery对大文件multi-gb优化Large streaming read。(支持small random read但不是主要场景)Large, sequential write, appending to theend of the file。一旦写入,很少更改。(支持随机写,但原创 2014-02-27 10:31:12 · 1366 阅读 · 0 评论 -
mapreduce论文笔记
Map/reduce论文 即输入key/value和输出key/value不在同一个domain,而中间输出key/value和结果key/value在同一个domain。 框架将输入数据自动分割成M个split,在多个机器上调用Map。(并行map处理) 。产生中间结果后,使用分区函数将中间key分割为R个pieces(数量R和分区函数由用户提供) 处理原创 2014-02-27 10:33:27 · 852 阅读 · 0 评论 -
bigtable论文笔记
Bigtable不支持完整的关系数据模型;与之相反,Bigtable为客户提供了简单的数据模型,利用这个模型,客户可以动态控制数据的layout和format。数据通过行和列的名字访问,名字可以是任意的字符串。Bigtable将存储的数据都视为字符串,但是Bigtable本身不去解析这些字符串,客户程序通常会在把各种结构化或者半结构化的数据串行化为字符串。通过选择数据的schema,客户可以控制数翻译 2014-02-27 10:36:18 · 1123 阅读 · 0 评论 -
paxos, zab and raft(转载编辑)
PAXOS VS ZAB2014-07-24 10:39 810人阅读 评论(2)收藏 举报我们已经在上面的分析中,我们已经看到observer模型在多机场景下的问题,所以,paxos模型的目标就是解决这个问题,他解决这个问题的方法就是quorum模型。我的目标是让大家能弄明白,掌握这些复杂的概念,所以我也会将以前我在淘宝java中间件团队内分享时候,大家经转载 2015-11-06 14:14:32 · 1646 阅读 · 0 评论 -
spanner论文zt
本文翻译:厦门大学计算机系 林子雨(http://www.cs.xmu.edu.cn/linziyu) 翻译时间:2012年9月17日-21日[请到本网页的底部的“附件”中下载:Google Spanner的英文版原文和中文版的PDF文件]Google Spanner (中文版)摘要:Spanner是谷歌公司研发的、可扩展的、多版本、全球分布式、同步复制数据库。它是第一个把数据分布在转载 2015-11-16 17:56:27 · 999 阅读 · 0 评论