![](https://img-blog.csdnimg.cn/20201014180756918.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
一起研究分布式
一起学IT技能
我也不知道为什么,除了我媳妇儿以外,只是单纯的喜欢技术
展开
-
zookeeper笔记
目的:想把爬虫系统的配置转移到zookeeper管理 zookeeper作为一个帮助搭建分布式系统的框架,在统一管理配置和选举master上的非常优秀。 ZooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,是Google的Chubby一个开源的实现,是Hadoop和Hbase的重要组件。它是一个为分布式应用提供一致性服务的软件,提供的功能包括:配置维护、域名服务、分布式同步原创 2016-07-27 10:21:44 · 449 阅读 · 0 评论 -
zookeepeer选举master
zookeepeer选举master 在爬虫系统中,往往需要一个中心系统来控制爬虫任务的调度,分配,根据每个worker上的负载情况的,动态的进行负载均衡,在此之前,是通过固定配置的方式,配置出那一台机器属于是master,但这原创 2016-07-28 15:28:47 · 1247 阅读 · 0 评论 -
Zookeeper节点类型
Zookeeper节点类型 每个节点都有生命周期,生命周期不同,则界点类型也不一样 持久节点 创建以后一致存在,除非显式执行删除操作,否则一直存在 临时节点 临时节点在一个会话之间会一直存在,知道会话失效 持久顺序节点 基本特性同持久节点一致,基于顺序的特性,如果设置此标记,则为子节点创建过程中,可为节点名添加数字后缀。 临时顺序节点 基本特性同临时节点一致,基于顺序的特性原创 2016-07-28 15:41:10 · 535 阅读 · 0 评论