二、分布式zookeeper集群搭建
1、前瞻
zookeeper是基于java开发的所以需要java开发环境,具体java看法环境参见上一篇java环境搭建,java环境部署。ZooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,是Google的Chubby一个开源的实现,是Hadoop和Hbase的重要组件。它是一个为分布式应用提供一致性服务的软件,提供的功能包括:配置维护、域名服务、分布式同步、组服务等。
2、环境准备
我们这里以三个节点的zookeeper分布式集群为示例来完成zookeeper就群的创建,准备centos 6.8机器三个节点,工具zookeeper 3.4.8分布式集群 jdk 1.8。
3、部署准备(以第一个节点示例其余二个节点类似)
- 创建zookeeper运维账户
添加用户组:groupadd zookeeper
添加用户组中用户:useradd zookeeper –g zookeeper
修改用户密码:passwd zookeeper 输入新密码
- 创建zookeeper工作目录
mkdir /app
将zookeeper解压至当前文件夹,然后看到zookeeper的主要目录结构如下:
注意三台节点都这样部署准备好!
- 配置环境参数,切换到root用户配置,文件打开数等如下
配置文件打开树和进程控制数
# End of file
zookeeper hard rss -1
zookeeper soft rss -1
zookeeper soft nofile 65535
zookeeper hard nofile 65535
zookeeper soft nproc 65535
zookeeper hard nproc 65535
配置完成并且使其生效使用 su - zookeeper切换到zookeeper用户一定要注意中间的 “”-“”非常重要
4、配置zookeeper
- 生成zoo.cfg配置文件
cd ./conf
cp zoo_sample.cfg zoo.cfg
- 创建zookeeper数据目录
在dataDir目录下配置myid
解释:注意myid为该服务节点在集群中的唯一标识不能重复,如果有三个节点可以一次是1,2,3这与配置文件一定要一样
- 配置配置文件
注意:数据目录和日志目录位置为刚才我们所选择的目录,竖框圈起来的配置一定要与前面myid文件中的配置完全一样否则集群启动的时候回报错。
5、集群验证
./zkCli.sh
创建临时节点
好了到这里分布式zookeeper集群就搭建到这里,后面继续搭建hadoop集群和hbase集群,后面再陆续再改进内容,很多内容没有补充进去谢谢!