GFS、MapReduce和BigTable:Google的三种大数据处理系统
Google 在搜索引擎上所获得的巨大成功,很大程度上是由于采用了先进的大数据管理和处理技术。Google 的搜索引擎是针对搜索引擎所面临的日益膨胀的海量数据存储问题,以及在此之上的海量数据处理问题而设计的。
众所周知,Google 存储着世界上最庞大的信息量(数千亿个网页、数百亿张图片)。但是,Google 并未拥有任何超级计算机来处理各种数据和搜索,也未使用 EMC 磁盘阵列等高端存储设备来保存大量的数据。
2006 年,Google 大约有 45 万台服务器,到 2010 年增加到了 100 万台,截
原创
2020-11-04 10:49:15 ·
1856 阅读 ·
0 评论