Zookeeper
小萌猿
本人的所有文章仅代表个人想法与经验,有问题的地方望多多指教
展开
-
KeepAlived与Zookeeper
keepalived VS zookeeper 两者都可以做高可用HA,那么有什么区别呢? 1.从主被动的角度考虑 我们知道,nginx server通常和keepalived进行结合,那么keepalived是怎么知道nginx是否存活呢?是nginx主动向keepalived汇报信息?不是的。k...转载 2018-03-22 22:05:35 · 2405 阅读 · 0 评论 -
关于Zookeeper的几个小Tips
1、单节点的leader机制,用来保证消息处理的顺序性(在leader里通过一个队列来实现) 2、有时候,直接关机,没有停掉zookeeper,下次通过zkServer.sh 开启时,会显示开启成功,但是查看状态时却发现没有运行,这时候,可以直接删除掉我们安装Zookeeper时配置的data dir那个目录,再重启Zookeeper就会好了。 但是有一个问题,删掉data dir 的那台机器...原创 2018-03-21 16:44:09 · 2506 阅读 · 0 评论 -
Zookeeper在Hadoop与Storm中应用的区别
Hadoop与Storm都是典型的主从架构,但是在使用 Zookeeper时还是不太一样的。 一、对于Hadoop来说,所有的 slaves都需要向master汇报状态信息,比如:MapReduce里的Tasktracker会向Jobtracker汇报,从而,Jobtracker所在节点内存中会有Tasktracker的状态信息,同时TaskTracker会收到JobTracker的响应信息,告...原创 2018-04-19 10:36:28 · 3071 阅读 · 0 评论 -
Hadoop主从切换失败
主节点node1,从节点node2,集群启动后node1 Active,node2 Standby,通过在node1上执行hadoop-daemon.sh stop namenode来使node2切换为Active。 发现切换失败(之前一直是这样子做的),集群主从切换是依靠zookeeper的选举机制,而zookeeper的选举制度是DFSZKFailoverController进程实现,而且必须...原创 2018-12-17 15:10:22 · 1135 阅读 · 3 评论