莱布尼兹

**refer to zookeeper 3.2.2**zookeeper 利用场合：a.全局配置服务.其实相当于是利用了zk的高可用性和快速访问的特点,可以将某些全局属性置于其中,当然 由于每个znode是1m存储上限,所以不能是大量的数据.事实上,可以把zk看成是高可用的文件系统也是可以的(high available file system) b.锁服务由于zk有EP...

  in zookeeper ,during certain io pressure,the client will try to reconnect to quorum.after that,the quorum peer will return a new session timeout (akka negotiatedSessionTimeout) to former,then clie...

====以下部分内容转自paxos算法,并在其中以不同颜色加以评论====算法的内容[编辑]要满足 P2c 的约束，proposer 提出一个提案前，首先要和足以形成多数派的 acceptors 进行通信，获得他们进行的最近一次接受(accept)的提案（prepare 过程），之后根据回收的信息决定这次提案的 value，形成提案开始投票。当获得多数 acceptors 接受(a...

  here will talk about the skeleton model of zookeeper,so the details of implemention are recommanded to dig into sources. I startup  1.1 client side 1.2 server side    ------ I star...

as iwinit dug in source codes[1],the 'regions assigment' in hbase is complex and trickle.there are many of zk related events across master and rs,and huge of pre-post processes in it.below is a ab...

   yes,i have studied zookeeper(3.4.3) before,but that is only a simple 'usage'  ,not involved any source codes to dig into it's details.now i will try to finish remaining hardly.  so this are s...

2014-05-15 09:08:01,803 [myid:5] - WARN [SyncThread:5:FileTxnLog@321] - fsync-ing the write ahead log in SyncThread:5 took 15154ms which will adversely effect operation latency. See the ZooKeeper t...

今天在统计页面上发现有个节点丢失了，经过仔细分析后，发现同一个节点上的二个应用(同时监控zk)其中一个丢失了一个event，检查zk cluster没有发现异常。。。通过网络搜寻，出现miss event的情况说的都是监听前已经有node，删除后才register，所以这属于正常现象。排除网络问题，因为我相信zk在notified event时如果不通是有异常提示的。 cat ...

todo

todo

here is a handy steps to intall zk 3.2.2 a.modify to zoo.cfg to add machines mapping. note:server.1=master:2888:3888 the first port is used to connect to master(or listen to followers if thi...

这几天尝试进行leader/follower的测试,当然目前还没去看源码实现.但觉得还是相当的.以下是对网上一段代码的修改,因为原来的测不出来什么东西.note:运行时只有两个节点时(leader&follower),当leader down后,the other one 一般很少自动切换到ld;但三个以上是没有问题的,何解?不知道是不是所谓的'ensemble'模式下'大部分...

源自google的chubby论文，yahoo的实现，注就了我们有机会看到如此优秀的协作工具－zk. 当我在看分布式系统的书籍时，同时在学习zk，可以进行比较分析，很好！感觉这东西的原理或多或少已经在早前某些项目上接触到，只是没有那么具体和灵活。比如开发中遇到的索引同步问题,loadbalance切换servers问题,之前我们是用MC之类的工具实现的等等。 我看来，它形如：a...

一。概念zab:zookeeper automic broadcastzab不同于paxos，但我相信（目前没真正去看细节）大体算法是一致的，所以目的是一样的：提供高可用性的协调器功能，当然 这不能缺少以分布式提交方式(可分为two-phase commit,2pc;three-phase commit 3pc) 为基础的事务提交。 二。paxos由于paxos是基础，就先...

search architecture 

env:hbase,94.26zookeeper,3.4.3---------------1.downed node  this morning we found a regionserver(host-34) downed in our monitor.so we dived into the logs of hbase and found that in this ho...