![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Hama
文章平均质量分 91
zhan8610189
这个作者很懒,什么都没留下…
展开
-
Hama Kmeans Clustering学习
Hama 是BSP(Bulk Synchronous Parallel整体同步并行)计算框架的一种实现,类似Google研发的Pregel系统。跟前一篇<<Mahout KMeans Clustering学习>>的流程一致,分四不走,在这里我不再多说了。 BSP有三种特性:1. 局部计算,2. 节点通信,3. 全局栅栏同步。 这使得BSP能够很好地实现迭代计...原创 2013-05-05 00:16:25 · 99 阅读 · 0 评论 -
Hadoop Yarn上实现Hama BSP计算应用
1. 引言 hadoop 0.23系列后,就对Map/Reduce进行了完全重写,把原有的MR计算框架替代成了新一代Yarn计算框架- Yarn。Yarn有一点类似于Mesos(它们之间的对比请看如下链接How does YARN compare to Mesos?),运行在hdfs之上,用JAVA写的计算资源管理框架。而Map/Reduce被看成是一个成熟的应用框架运行在Yarn计算框架之...原创 2013-06-27 20:28:32 · 196 阅读 · 0 评论