键值数据库

前段时间玩了Google App Engine之后一直对开源的键-值数据库比较关注，因为其开发使用方便，也有了在研究在自己的服务器上部署的可能性，于是自己Google了一些，同时Flying殿也有推荐了一下，于是发文简单记录一下。

眼下关注的有：

1. MongoDB
2. Hypertable
3. CouchDB
4. Tokyo Cabinet
5. Project Voldemort

 

1. MongoDB

今天测试了一个白天的数据库，使用JSON格式存储数据，并且用Java小测试了一下它的性能，还算不错，1000000条记录里面检索500条记 录，耗时0.078秒（有索引）。不过遗憾的是，没有编译成功它的Python API，PHP API的编译也因为文档不全的问题暂时搁置。不然的话真准备在这个上面做些Project试试看。另外它的控制台客户端的命令是ECMAScript的， 对我来说觉得十分亲切。

官网：http://www.mongodb.org/

2. Hypertable

根据Google的Bigtable的论文开始的一个项目，因此可以说这是一个开源的Google Bigtable的实现，通过Thrift这个框架（Facebook开发然后捐赠给Apache的工具）为其它语言提供API（不过官网上暂时仅看到 Ruby的参考）。有趣的是，官方网站下面的赞助商那里看到了百度的Logo。

官网：http://hypertable.org/

3. CouchDB

Apache旗下的项目，使用Erlang/OTP开发，同样使用JSON存储数据。眼下的版本看了网上的评测性能还很一般。期待后续的发展。

官网：http://couchdb.apache.org/

4. Tokyo Cabinet

Tokyo Cabinet 是日本人平林幹雄开发的一款DBM数据库，该数据库读写非常快，哈希模式写入100万条数据只需0.643秒，读取100万条数据只需0.773秒，是 Berkeley DB 等DBM的几倍。
暂时只有Perl, Ruby, Java, Lua的API，不过可以通过Tokyo Tyrant来支持其它语言（通过Memcached协议）
官网：http://tokyocabinet.sourceforge.net/

5. Project Voldemort

貌似可以使用MySQL（还有其他）作为永久存储介质的分布式数据库。

官网：http://project-voldemort.com/

 

 

还看到一个分布式的LightCloud

Plurk.com 在今年2月28日开源了LightCloud这个分布式的键-值数据库，根据官方网站的信息，有以下特性

•  
  • 基于Tokyo Tyrant （这个项目貌似又是另一个名叫Tokyo Cabinet的数据库系统的网络接口）。Tokyo Tyrant 是最快的键-值数据库之一[性能测试 ]，并且已经开发了好几年并且在n个网站中被应用。
  • 性能非常好（可以和memcached进行对比）
  • 在很少的服务器上面可以存储百万级的数据量
  • 简单的通过添加节点来扩展
  • 节点可以通过master-master复制来进行备份。很容易添加自动错误恢复和负载均衡功能
  • 使用Lua 语言进行扩展
  • 备份和恢复数据时不需要关机
  • LightCloud Manager工具可以很方便的管理节点，备份节点，查看状态
  • 非常小巧（客户端大约500行，Manager大约400行）
  • 纯python开发，但是很容易移植到其他语言