云计算
s929498110
这个作者很懒,什么都没留下…
展开
-
ZooKeeper编程向导——源自官方文档
介绍(源自ZooKeeper官方文档)学习HBase过程中,发现它与ZooKeeper的关系比较密切,于是专门学习了一下ZooKeeper,下面是ZooKeeper官方文档的半翻译版(我(magic-sulin)并非一字一句的照抄,而是写入了自己的理解)。此文档是为了向那些希望使用ZooKeeper协调优势自己分布式应用的人提供编程向导,它包含了理论和实战两部分!前四节将对ZooKeeper进...原创 2012-08-03 09:16:09 · 209 阅读 · 0 评论 -
ZooKeeper安装与操作实例
单机安装 下载zookeeper3.4.3,解压缩至/usr/zookeeper.复制conf/zoo_sample.cfg重命名为conf/zoo.cfg,执行命令 > sudo cp conf/zoo_sample.cfg conf/zoo.cfg 修改zoo.cfg文件,编辑为如下: tickTime=2000 #心跳间隔dataDir=...原创 2012-08-03 09:40:22 · 113 阅读 · 0 评论 -
Hadoop启动异常:UnregisteredDatanodeException
启动Hadoop集群测试HBase时候,发现三台DataNode只启动成功了两台,未启动成功的那一台日志中出现了下列异常: 写道2012-09-07 23:58:51,240 WARN org.apache.hadoop.hdfs.server.datanode.DataNode: DataNode is shutting down: org.apache.hadoop.ipc.Re...2012-09-08 11:59:39 · 180 阅读 · 0 评论 -
MFS(可能比HDFS更好的文件系统)开工了~~~
名称:暂命名为Magic File System(MFS)思路:吸取HDFS的优良设计原理,尽最大可能改良其弱点软肋。此文件系统的设计思路与HDFS有关,但是并非HDFS的衍生品,本人也尚未阅读HDFS源码。可能做到的改良以及兼容有如下几方面:无限制的文件块数量。采用更小更多的文件块,从而加快大文件读取。理论上可存储无限数量的不分大小文件(前提是存储空间足够)摒弃NameN...2012-09-17 09:36:54 · 357 阅读 · 0 评论 -
《有限分布算法》来了! 抛弃一致性哈希吧
声明《有限分布算法》由本文作者原创,知识产权为本文作者所有。该算法可以用于个人研究,以及其他非商业性或非盈利性用途,但同时您应该遵守著作权法以及其他相关法律的规定,不得侵犯本文作者的合法权益。 算法简介该算法使用时首先需要限定集群中节点的最大数量MAX,接下来我用一个简单的例子来描述这个算法的原理。假设集群中最多有10个节点,集群中现在有一个文件test.log,那么test....原创 2013-07-30 11:25:11 · 213 阅读 · 0 评论