分布式
文章平均质量分 76
Flycutter
Nothing Serious
展开
-
Actor模型
Posted on 2011-10-30 by Jeoygin in 分布式系统, 技术 Leave a comment 最近在看Yahoo的S4: distributed stream computing platform,主要是结合了MapReduce和Actor模型,于是找了些资料学习Actor模型,在这里简单介绍一下,S4等后续文章再介绍。 Actor这个模型由转载 2011-12-06 13:59:30 · 658 阅读 · 0 评论 -
Hadoop job配置文件的生成
这一周都在调试系统集群的bug,在电脑上搞了几台虚拟机模拟集群,真心痛苦啊。最后发现竟然是之前没搞懂Hadoop job配置的一些问题。 第一,Speculative Execution(推测执行): Hadoop默认是开启推测执行的,但之前对这个不了解,所以当看到job在不同的机器上attempt两次的时候就觉得是有问题了,毕竟这样是相当浪费资源的,也就有了之后一周的debug之旅,进而搞懂原创 2011-12-30 10:58:38 · 1694 阅读 · 1 评论