linux环境下zookeeper部署

最新推荐文章于 2024-10-09 15:55:17 发布

weixin_33889665

最新推荐文章于 2024-10-09 15:55:17 发布

阅读量78

点赞数

文章标签：大数据操作系统网络

原文链接：https://my.oschina.net/longload/blog/713133

版权

2019独角兽企业重金招聘Python工程师标准>>>

下载zookeeper
- zookeeper下载地址（http://apache.fayea.com/zookeeper/zookeeper-3.4.8/zookeeper-3.4.8.tar.gz）
- Linux命令行直接下载: wget http://apache.fayea.com/zookeeper/zookeeper-3.4.8/zookeeper-3.4.8.tar.gz
解压文件 tar -zxvf zookeeper-3.4.8.tar.gz

创建相应的文件夹

$ cd /home/longload/zookeeper-3.4.8
$ mkdir data
$ mkdir logs

修改/etc/hosts增加如下配置
```
# zookeeper servers
192.168.27.129 zjpt-provider-01 
```
如果没有权限，可以切换到root用户。或者用sudo chmod 777 命令修改hosts的读写权限
修改zoo.cfg配置
- cd /home/longload/zookeeper-3.4.8/conf/
- cp zoo_sample.cfg zoo.cfg（拷贝 zoo_sample.cfg 文件，命名为为zoo.cfg）
- 修改配置： vi zoo.cfg
```
# The number of milliseconds of each tick
tickTime=2000
# The number of ticks that the initial 
# synchronization phase can take
initLimit=10
# The number of ticks that can pass between 
# sending a request and getting an acknowledgement
syncLimit=5
# the directory where the snapshot is stored.
# do not use /tmp for storage, /tmp here is just 
# example sakes.
dataDir=/home/longload/zookeeper-3.4.8/data
dataLogDir=/home/longload/zookeeper-3.4.8/logs
# the port at which the clients will connect
clientPort=2181
# the maximum number of client connections.
# increase this if you need to handle more clients
#maxClientCnxns=60
#
# Be sure to read the maintenance section of the 
# administrator guide before turning on autopurge.
#
# http://zookeeper.apache.org/doc/current/zookeeperAdmin.html#sc_maintenance
#
# The number of snapshots to retain in dataDir
#autopurge.snapRetainCount=3
# Purge task interval in hours
# Set to "0" to disable auto purge feature
#autopurge.purgeInterval=1

server.1=zjpt-provider-01:2888:3888
```
  - 2888 端口号是 zookeeper 服务之间通信的端口。
    3888 是 zookeeper 与其他应用程序通信的端口。
    zjpt-provider-01 是在 hosts 中已映射了 IP 的主机名。
  - 单机模式
    - tickTime：这个时间是作为 Zookeeper 服务器之间或客户端与服务器之间维持心跳的时间间隔，也就是每个 tickTime 时间就会发送一个心跳。
    - dataDir：顾名思义就是 Zookeeper 保存数据的目录，默认情况下，Zookeeper 将写数据的日志文件也保存在这个目录里。
    - dataLogDir：顾名思义就是 Zookeeper 保存日志文件的目录
    - clientPort：这个端口就是客户端连接 Zookeeper 服务器的端口，Zookeeper 会监听这个端口，接受客户端的访问请求。
  - 集群模式
```
initLimit=5  
syncLimit=2  
server.1=192.168.211.1:2888:3888  #或者hosts中配置的主机映射名
server.2=192.168.211.2:2888:3888
```
    Zookeeper 不仅可以单机提供服务，同时也支持多机组成集群来提供服务。实际上 Zookeeper 还支持另外一种伪集群的方式，也就是可以在一台物理机上运行多个 Zookeeper 实例，修改上面三个配置即可。
    - initLimit：这个配置项是用来配置 Zookeeper 接受客户端（这里所说的客户端不是用户连接 Zookeeper 服务器的客户端，而是 Zookeeper 服务器集群中连接到 Leader 的 Follower 服务器）初始化连接时最长能忍受多少个心跳时间间隔数。当已经超过 10 个心跳的时间（也就是 tickTime）长度后 Zookeeper 服务器还没有收到客户端的返回信息，那么表明这个客户端连接失败。总的时间长度就是 5*2000=10 秒
    - syncLimit：这个配置项标识 Leader 与 Follower 之间发送消息，请求和应答时间长度，最长不能超过多少个 tickTime 的时间长度，总的时间长度就是 2*2000=4 秒。当zookeeper过半的时候，就会算法选择leader
    - server.A=B：C：D：其中 A 是一个数字，表示这个是第几号服务器；B 是这个服务器的 ip 地址；C 表示的是这个服务器与集群中的 Leader 服务器交换信息的端口；D 表示的是万一集群中的 Leader 服务器挂了，需要一个端口来重新进行选举，选出一个新的 Leader，而这个端口就是用来执行选举时服务器相互通信的端口。如果是伪集群的配置方式，由于 B 都是一样，所以不同的 Zookeeper 实例通信端口号不能一样，所以要给它们分配不同的端口号。
    - 除了修改 zoo.cfg 配置文件，集群模式下还要配置一个文件 myid，这个文件在 dataDir 目录下，这个文件里面就有一个数据就是 A 的值，Zookeeper 启动时会读取这个文件，拿到里面的数据与 zoo.cfg 里面的配置信息比较从而判断到底是那个 server。
在数据目录 /home/longload/zookeeper-3.4.8/data 下创建myid文件。编辑 myid 文件，并在对应的 IP 的机器上输入对应的编号。如果只在单点上进行安装配置，只有一个 server.1。 myid
文件内容就是 1。

在用户下修改.bash_profile文件(命令: vi /home/longload/.bash_profile)，增加 zookeeper 配置：

# zookeeper env
export ZOOKEEPER_HOME=/home/longload/zookeeper-3.4.8
export PATH=$ZOOKEEPER_HOME/bin:$PATH

使配置文件生效

source /home/longload/.bash_profile

在防火墙中打开要用到的端口 2181、2888、3888 切换到 root 用户权限，执行以下命令：

关闭防火墙并且禁止开机启动

systemctl stop firewalld.service
systemctl disable firewalld.service

安装iptables防火墙

yum install iptables-services

编辑配置文件

vi /etc/sysconfig/iptables

增加以下 3 行：

-A INPUT -m state --state NEW -m tcp -p tcp --dport 2181 -j ACCEPT
-A INPUT -m state --state NEW -m tcp -p tcp --dport 2888 -j ACCEPT
-A INPUT -m state --state NEW -m tcp -p tcp --dport 3888 -j ACCEPT

重启防火墙：

systemctl restart iptables.service

设置防火墙开机启动

systemctl enable iptables.service

查看防火墙端口状态：

iptables -L -n

切换到longload用户，进入下面目录
```
/home/longload/zookeeper-3.4.8/bin
```
启动zookeeper
```
zkServer.sh start
```
输入 jps 命令查看进程：
```
$ jps
1456 QuorumPeerMain
1475 Jps
```
其中，QuorumPeerMain 是 zookeeper 进程，启动正常
查看状态：
```
zkServer.sh status
```
查看 zookeeper 服务输出信息
- 由于服务信息输出文件在/home/longload/zookeeper-3.4.6/bin/zookeeper.out
- ```
$ tail -500f zookeeper.out
```
配置 zookeeper 开机使用 longload 用户启动
- 编辑/etc/rc.local 文件，加入
```
su - longload -c '/home/longload/zookeeper-3.4.8/bin/zkServer.sh start'
```