- 博客(3)
- 收藏
- 关注
转载 一致性hash算法(consistenthashing)
张亮consistent hashing算法早在1997年就在论文Consistenthashing and random trees中被提出,目前在cache系统中应用越来越广泛;1基本场景比如你有N个cache服务器(后面简称cache),那么如何将一个对象object映射到N个cache上呢,你很可能会采用类似下面的通用方法计算object的hash值,然后均匀的映射到到N个ca
2012-12-30 23:24:42 514
原创 zookeeper
Zookeeper 的介绍 Zookeeper 是开源的分布式协同服务,其由yahoo开发,后为apache的开源项目。其通过一组原语,为大型分布式系统提供可靠的协同服务。 Zookeeper到底做什么用的? 首先看一下zookeeper的典型的应用场景:1) 配置管理多个服务器共享一个配置文件,当配置文件中的一个选项修改时,就需要立即同步到其他的机器上。这个
2012-12-27 00:04:08 702
原创 spark 并行计算模型
SparkSpark是一个小巧玲珑的项目,由Berkeley大学的Matei为主的小团队所开发。使用的语言是Scala,项目的core部分的代码只有63个Scala文件,充分体现了精简之美。Spark要解决的问题是,在当前的分布式计算框架中不能有效处理的两类问题:iterative(迭代计算)和 interactive(交互式)计算。目前最流行的Hadoop 系统实现了DAG(有向无环
2012-12-19 23:04:32 11400
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人