![](https://img-blog.csdnimg.cn/20201014180756930.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
文章平均质量分 74
qianzongming
这个作者很懒,什么都没留下…
展开
-
下代MapReduce预览 节点数翻倍最大达10000
摘要:根据目前的状况来看,Hadoop作为企业级数据仓库体系结构核心技术,在未来的数年中将会保持持续增长的势头。下一代的MapReduce节点数将从目前的4000增加到6000-10000,其次并发的任务数从目前的40000增加到100000。大数据革命正以Apache Hadoop为中心如火如荼的进行着。自从开源分布式数据处理平台在5年前发布时讨论之声就不绝于耳。在过去的一年转载 2012-08-21 19:25:10 · 2220 阅读 · 0 评论 -
Google后Hadoop时代的新“三驾马车”——Caffeine、Pregel、Dremel
摘要:Google在2003年到2004年公布了关于GFS、MapReduce和BigTable三篇技术论文,这也成为后来云计算发展的重要基石,如今Google在后Hadoop时代的新“三驾马车”——Caffeine、Pregel、Dremel再一次影响着全球大数据技术的发展潮流。Mike Olson是Hadoop运动背后的主要推动者,但这还远远不够,目前Google内部使用的转载 2012-08-21 12:12:14 · 1357 阅读 · 0 评论 -
可扩展性数据库的架构设计
摘要:简而言之,一个高度扩展性的分布式数据库架构应具备如下特性: 1.轻量级服务器的进程不应占用过多的CPU时间,而应通过我们的多个处理器并行运行多个实例。 2.客户端应用可连接多台服务器并从中提取数据。 3.通过数据复制技术,客户端应用可以从主数据库或从数据库中检索数据。扩展性与硬件随着系统的膨胀,硬件的可扩展性体现在增加资源,提高性能的能力上,如添加更多的处理器、内转载 2012-08-24 18:30:10 · 1232 阅读 · 0 评论