Zookeeper基础学习知识记录

Zookeeper 学习笔记

根据尚硅谷的视频所作的相关知识记录，视频连接如下：

https://www.bilibili.com/video/BV1PW411r7iP

一、Zookeeper 安装

官网：https://zookeeper.apache.org/，这里我使用的版本是3.4.10。

1.1 本地模式部署（测试）

1. 安装

（1）安装 jdk（Hadoop集群已经安装好 ）。
（2）拷贝 zookeeper-3.4.10 到我们的 Hadoop 集群 /opt/software 目录下。

（3）将 zookeeper-3.4.10 解压到 /opt/module 目录下。
sudo tar -zxvf zookeeper-3.4.10.tar.gz -C ../module/

2. 配置修改

（1）将 /opt/module/zookeeper-3.4.10/conf 这个路径下的 zoo_sample.cfg 修改为 zoo.cfg。
cd conf/
mv zoo_sample.cfg zoo.cfg

（2）编辑 zoo.cfg 文件，修改 dataDir 路径。
vim zoo.cfg
修改内容如下：

dataDir=/opt/module/zookeeper-3.4.10/zkData

（3）在 /opt/module/zookeeper-3.4.10/ 目录下创建 zkData 文件夹。
mkdir zkData

3. 启动 Zookeeper

（1）启动。
sbin/zkServer.sh

（2）查看进程。
jps

（3）查看状态。
bin/zkServer.sh status

（4）启动客户端。
bin/zkCli.sh


（5）退出客户端。
quit

（6）退出服务。
bin/zkServer.sh stop

1.2 分布式模式部署

1. 集群规划

在 hadoop001 - hadoop007 七个节点上部署 Zookeeper。

2. 解压安装

将刚才 hadoop001 上的 Zookeeper 分发到其他节点。
xsync zookeeper-3.4.10/

3. 配置服务器编号

例如，hadoop001 节点我们给他编号为 1，hadoop002 节点我们给他编号为 2，后面的以此类推。
（1）在 hadoop001 节点下的 zkData 目录下创建 myid 文件。
cd zkData/
vim myid

文件中添加如下内容：

1

（2）分发文件到其他节点，然后每个节点修改 myid 中的内容，如 hadoop002 修改为 2。
xsync myid

查看是否每个节点都修改成功了。
xcall cat /opt/module/zookeeper-3.4.10/zkData/myid

（3）在 conf/zoo.cfg 文件中增加如下内容：

#cluster
server.1=hadoop001:2888:3888
server.2=hadoop002:2888:3888
server.3=hadoop003:2888:3888
server.4=hadoop004:2888:3888
server.5=hadoop005:2888:3888
server.6=hadoop006:2888:3888
server.7=hadoop007:2888:3888

参数说明：
server.A=B:C:D

参数	说明
A	是一个数字，表示这个是第几号服务器。集群模式下配置一个文件 myid，这个文件在 dataDir 目录下，这个文件里面有一个数据就是 A 的值，Zookeeper 启动时读取此文件，拿到里面的数据与 zoo.cfg 里面的配置信息比较从而判断到底是哪个 server。
B	这个服务器的地址
C	这个服务器 Follower 与集群中的 Leader 服务器交换信息的端口
D	万一集群中的 Leader 服务器挂了，需要一个端口来重新进行选举，选出一个新的Leader，而这个端口就是用来执行选举时服器相互通信的端口

（4）分发 conf/zoo.cfg 文件到其他节点。
xsync conf/zoo.cfg

4. 启动集群

（1）每个节点分别启动 Zookeeper。
bin/zkServer.sh start
（2）查看状态。
我们查看 hadoop004 节点的状态。发现他是 leader 节点。
bin/zkServer.sh status

集群群起脚本：

#!/bin/bash
  
# 获取当前登录用户
user=`whoami`

# 根据自己的集群进行循环
for (( host=1;host<=7;host++ ))
do
    echo "---------------- hadoop00$host --------------------"
    ssh $user@hadoop00$host "source /etc/profile;/opt/module/zookeeper-3.4.10/bin/zkServer.sh start"
    echo "hadoop00$host zookeeper is running"
done