集群分布式安装(Zookeeper)

行笔之前、请允许我写一段毕生箴言:

历史总是要前进的,历史从来不等待一切犹豫者、观望者、软弱者;只有与历史同步伐、与时代共命运的人,才能赢得光明的未来!

1、 四台服务器之间免密登录

规划:需要三台服务器node2、node3、node4

首先将node1和node2拍摄快照,并还原到初始化快照上。

由于后续hadoop等需要四台服务器之间互相均可以免密登录,所以本次直接配置四台服务器的彼此之间的免密登录。配置思路如下:

1.1、 首先在四台服务器上都要执行:

ssh-keygen  -t  dsa  -P  ''  -f  ~/.ssh/id_dsa

1.2、在node1上将node1 的公钥拷贝到authorized_keys中:

cat ~/.ssh/id_dsa.pub  >>  ~/.ssh/authorized_keys

1.3、将该文件拷贝给node2:

scp ~/.ssh/authorized_keys  node2:/root/.ssh/

1.4、在node2中将node2的公钥追加到authorized_keys中:

cat ~/.ssh/id_dsa.pub  >>  ~/.ssh/authorized_keys

 1.5、将该文件拷贝给node3:

scp ~/.ssh/authorized_keys  node3:/root/.ssh/

1.6、在node3中将node3的公钥追加到authorized_keys中:

cat ~/.ssh/id_dsa.pub  >>  ~/.ssh/authorized_keys

1.7、将该文件拷贝给node4:

scp ~/.ssh/authorized_keys  node4:/root/.ssh/

1.8、在node4中将node4的公钥追加到authorized_keys中:

cat ~/.ssh/id_dsa.pub  >>  ~/.ssh/authorized_keys

 1.9、将该文件拷贝给node1、node2、node3:

scp ~/.ssh/authorized_keys  node1:/root/.ssh/
scp ~/.ssh/authorized_keys  node2:/root/.ssh/
scp ~/.ssh/authorized_keys  node3:/root/.ssh/

1.10、测试是否实现了免密登录

ssh nodeX
exit # 退出

2、 JDK安装和环境变量配置

2.1、node1-node4上目录的创建目录/opt/apps

mkdir /opt/apps

2.2、将jdk-8u221-linux-x64.rpm上传到node1/opt/apps(假设您已经下载好jdk)

2.3、将/opt/apps下的jdk.rpm scp到node2、node3、node4的对应目录中:

scp jdk-8u221-linux-x64.rpm node2:/opt/apps
scp jdk-8u221-linux-x64.rpm node3:/opt/apps
scp jdk-8u221-linux-x64.rpm node4:/opt/apps

2.4、在node1、node2、node3、node4上安装jdk并配置profile文件:

rpm -ivh jdk-8u221-linux-x64.rpm

 2.5、node1上修改环境变量:

vim /etc/profile


export JAVA_HOME=/usr/java/default
export PATH=$PATH:$JAVA_HOME/bin

2.6、按esc后shift+:wq保存并退出:

source /etc/profile

2.7、将node1的/etc/profile拷贝到node2、node3、node4上并执行 source /etc/profile

scp /etc/profile node[234]:$PWD

3、Zookeeper集群搭建

3.1、下载地址

官网页面https://zookeeper.apache.org

选择apache-zookeeper-3.5.7-bin.tar.gz 下载

最终网址:https://archive.apache.org/dist/zookeeper/zookeeper-3.5.7/apache-zookeeper-3.5.7-bin.tar.gz

特别地:也可以在虚拟机中使用如下进行下载:(先安装wget命令:yum install wget) 

 wget https://archive.apache.org/dist/zookeeper/zookeeper-3.5.7/apache-zookeeper-3.5.7-bin.tar.gz

3.2、搭建步骤

3.2.1、将apache-zookeeper-3.5.7-bin.tar.gz上传到node2

# 安装该包后,可以直接将文件拖到xshell,将文件上传到对应服务器
[root@node2 apps]# yum install lrzsz -y

 3.2.2、解压到/opt,并修改名称

[root@node2 apps]# tar -zxvf  apache-zookeeper-3.5.7-bin.tar.gz -C /opt
[root@node2 apps]# cd ../
[root@node2 opt]# mv apache-zookeeper-3.5.7-bin zookeeper-3.5.7

 3.2.3、配置环境变量:

[root@node2 zookeeper-3.5.7]# vim /etc/profile
export ZOOKEEPER_HOME=/opt/zookeeper-3.5.7
export PATH=$PATH:$JAVA_HOME/bin:$ZOOKEEPER_HOME/bin


#然后让配置生效
[root@node2 zookeeper-3.5.7]# source /etc/profile
#最后将该文件scp到node3和node4上,并分别让配置生效.
scp /etc/profile node3:/etc/
scp /etc/profile node4:/etc/

 3.2.4、到$ZooKeeper_HOME/conf下,复制zoo_sample.cfg为zoo.cfg

[root@node2 conf]# cp zoo_sample.cfg  zoo.cfg

 3.2.5、编辑zoo.cfg(补充参数说明)

initLimit: 这个配置项是用来配置 ZooKeeper 接受客户端(这里所说的客户端不是用户连接ZooKeeper服务器的客户端,而是 ZooKeeper 服务器集群中连接到 Leader的Follower 服务器)初始化连接时最长能忍受多少个心跳时间间隔数。当已经超过 5 个心跳的时间(也就是 tickTime)长度后 ZooKeeper 服务器还没有收到客户端的返回信息,那么表明这个客户端连接失败。总的时间长度就是 5*2000=10秒

syncLimit:这个配置项标识 Leader 与 Follower 之间发送消息,请求和应答时间长度,最长不能超过多少个tickTime 的时间长度,总的时间长度就是 2*2000=4 秒

clientPort:客户端连接 ZooKeeper 服务器的端口,ZooKeeper 会监听这个端口,接受客户端的访问请求。

server.A=B:C:D:其 中 A 是一个数字,表示这个是第几号服务器;B 是这个服务器的ip地址;C 表示的是这个服务器与集群中的Leader服务器交换信息的端口;D表示的是万一集群中的 Leader 服务器挂了,需要一个端口来重新进行选举,选出一个新的Leader,而这个端口就是用来执行选举时服务器相互通信的端口。如果是伪集群的配置方式,由于B都是一样,所以不同的ZooKeeper实例通信端口号不能一样,所以要给它们分配不同的端口号。

tickTime=2000 #发送心跳的间隔时间,单位:毫秒
dataDir=/opt/zookeeper-3.5.7/data #ZooKeeper保存数据的目录
clientPort=2181
initLimit=5
syncLimit=2
server.2=node2:2881:3881
server.3=node3:2881:3881 
server.4=node4:2881:3881 #observer(表示对应节点不参与投票)

3.2.6、创建/opt/zookeeper-3.5.7/data目录,并在该目录下放一个文件:myid ,并在myid中写下当前ZooKeeper的编号

 [root@node2 ~]# mkdir /opt/zookeeper-3.5.7/data
[root@node2 data]# echo 2 > myid

3.2.7、将配置好ZooKeeper拷贝到node3、node4上

[root@node2 opt]# scp -r zookeeper-3.5.7/ node3:/opt/
[root@node2 opt]# scp -r zookeeper-3.5.7/ node4:/opt/ 

 3.2.8、在node3和node4上分别修改:myid

#node3
echo 3 > /opt/zooKeeper-3.5.7/data/myid
3
#node4
echo 4 > /opt/zooKeeper-3.5.7/data/myid

4、启动和关闭

4.1分别启动ZooKeeper

zkServer.sh start 

4.2、关闭ZooKeeper

zkServer.sh stop

4.3、连接ZooKeeper

#node2、node3、node4都可以
zkCli.sh  

4.4、退出zkCli.sh命令

quit

5、结尾

        走笔至此,感谢各位看官观看,如有不妥之处,敬请进言、痛改为盼!

 

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值