大数据高可用技术之zookeeper3，大数据开发开发指南

cd /usr/local/hadoop

tar zxpf zookeeper-3.4.5.tar.gz -C /usr/local/hadoop

2、创建软连接

ln -s zookeeper-3.4.5 zookeeper

三、zookeeper配置

---

1、配置zoo.cfg

vim /usr/local/hadoop/zookeeper/conf/zoo.cfg

zoo.cfg配置内容如下

The number of milliseconds of each tick

tickTime=2000

The number of ticks that the initial

synchronization phase can take

initLimit=10

The number of ticks that can pass between

sending a request and getting an acknowledgement

syncLimit=5

the directory where the snapshot is stored.

do not use /tmp for storage, /tmp here is just

example sakes.

dataDir=/usr/local/hadoop/zookeeper/data

dataLogDir=/usr/local/hadoop/zookeeper/logs

the port at which the clients will connect

clientPort=2181

Be sure to read the maintenance section of the

administrator guide before turning on autopurge.

http://zookeeper.apache.org/doc/current/zookeeperAdmin.html#sc_maintenance

The number of snapshots to retain in dataDir

#autopurge.snapRetainCount=3

Purge task interval in hours

Set to “0” to disable auto purge feature

#autopurge.purgeInterval=1

server.1=hadoop001:2888:3888

server.2=hadoop002:2888:3888

server.3=hadoop003:2888:3888

配置文件说明

tickTime：心跳时间，默认2000毫秒即2秒

initLimit：初始化时follower和leader之间的最多心跳数

syncLimit：follower和leader之间请求响应的最多心跳数

dataDir：存放myid、版本信息和数据持久化的目录

dataLogDir：zookeeper存放日志的目录

clientPort：zookeeper监听的端口，默认2181

server.N=ip:2888:3888：server节点配置，N表示第N台zk的节点

2、配置myid

zookeeper根据配置文件自动创建dataDir、dataLogDir目录，需要自己手动创建

mkdir /usr/local/hadoop/zookeeper/data

mkdir /usr/local/hadoop/zookeeper/logs

给每台zk节点配置myid，每个节点myid的值和zoo.cfg中的server.N一致

echo “1” > /usr/local/hadoop/zookeeper/data/myid

echo “2” > /usr/local/hadoop/zookeeper/data/myid

echo “3” > /usr/local/hadoop/zookeeper/data/myid

自我介绍一下，小编13年上海交大毕业，曾经在小公司待过，也去过华为、OPPO等大厂，18年进入阿里一直到现在。

深知大多数大数据工程师，想要提升技能，往往是自己摸索成长或者是报班学习，但对于培训机构动则几千的学费，着实压力不小。自己不成体系的自学效果低效又漫长，而且极易碰到天花板技术停滞不前！

因此收集整理了一份《2024年大数据全套学习资料》，初衷也很简单，就是希望能够帮助到想自学提升又不知道该从何学起的朋友。

既有适合小白学习的零基础资料，也有适合3年以上经验的小伙伴深入学习提升的进阶课程，基本涵盖了95%以上大数据开发知识点，真正体系化！

由于文件比较大，这里只是将部分目录大纲截图出来，每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频，并且后续会持续更新

如果你觉得这些内容对你有帮助，可以添加VX：vip204888 （备注大数据获取）

一个人可以走的很快，但一群人才能走的更远。不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎扫码加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！

如果你觉得这些内容对你有帮助，可以添加VX：vip204888 （备注大数据获取）*
[外链图片转存中…(img-PKe6mzZ6-1713024546117)]

一个人可以走的很快，但一群人才能走的更远。不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎扫码加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！