ZooKeeper分步式集群安装及java编程命令操作

最新推荐文章于 2024-04-08 12:38:18 发布
最新推荐文章于 2024-04-08 12:38:18 发布
阅读量1.7k 收藏
点赞数
分类专栏： hadoop 文章标签： zookeeper 集群 java 分布式应用
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/paicmis/article/details/53264178
版权
本文详细介绍了ZooKeeper的安装过程，包括单节点安装和分布式集群安装，并探讨了Zookeeper作为分布式协调服务的角色。此外，还涵盖了Zookeeper的命令行操作以及如何使用Java API进行操作。
摘要由CSDN通过智能技术生成

目录
zookeeper介绍
zookeeper单节点安装
zookeeper分布式集群安装
zookeeper命令行操作
Java编程现实命令行操作

  1. zookeeper介绍zookeeper是一个为分布式应用所设计的分布的、开源的协调服务，它主要是用来解决分布式应用中经常遇到的一些数据管理问题，简化分布式应用协调及其管理的难度，提供高性能的分布式服务。zookeeper本身可以以Standalone模式安装运行，不过它的长处在于通过分布式zookeeper集群（一个Leader，多个Follower），基于一定的策略来保证zookeeper集群的稳定性和可用性，从而实现分布式应用的可靠性。
    zookeeper是作为分布式协调服务，是不需要依赖于Hadoop的环境，也可以为其他的分布式环境提供服务
  2. zookeeper单节点安装Standalones模式系统环境：
[xulu@SZB-L0032014 ~]$ uname -a
Linux SZB-L0032014 2.6.32-573.el6.x86_64 #1 SMP Thu Jul 23 15:44:03 UTC 2015 x86_64 x86_64 x86_64 GNU/Linux
[xulu@SZB-L0032014 ~]$ cat /etc/issue
CentOS release 6.7 (Final)
Kernel \r on an \m
[xulu@SZB-L0032014 ~]$ java -version
java version "1.7.0_79"
OpenJDK Runtime Environment (rhel-2.5.5.4.el6-x86_64 u79-b14)
OpenJDK 64-Bit Server VM (build 24.79-b02, mixed mode)
[xulu@SZB-L0032014 ~]$

zookeepr解压目录结构

[xulu@SZB-L0032014 zookeeper-3.4.6]$ ll
total 1505
drwxr-xr-x  2 xulu xulu    1024 Feb 20  2014 bin
-rw-rw-r--  1 xulu xulu  82446 Feb 20  2014 build.xml
-rw-rw-r--  1 xulu xulu  80776 Feb 20  2014 CHANGES.txt
drwxr-xr-x  2 xulu xulu    1024 Feb 20  2014 conf
drwxr-xr-x 10 xulu xulu    1024 Feb 20  2014 contrib
drwxr-xr-x  2 xulu xulu    1024 Feb 20  2014 dist-maven
drwxr-xr-x  6 xulu xulu    3072 Feb 20  2014 docs
-rw-rw-r--  1 xulu xulu    1953 Feb 20  2014 ivysettings.xml
-rw-rw-r--  1 xulu xulu    3375 Feb 20  2014 ivy.xml
drwxr-xr-x  4 xulu xulu    1024 Feb 20  2014 lib
-rw-rw-r--  1 xulu xulu  11358 Feb 20  2014 LICENSE.txt
-rw-rw-r--  1 xulu xulu    170 Feb 20  2014 NOTICE.txt
-rw-rw-r--  1 xulu xulu    1770 Feb 20  2014 README_packaging.txt
-rw-rw-r--  1 xulu xulu    1585 Feb 20  2014 README.txt
drwxr-xr-x  5 xulu xulu    1024 Feb 20  2014 recipes
drwxr-xr-x  8 xulu xulu    1024 Feb 20  2014 src
-rw-rw-r--  1 xulu xulu 1340305 Feb 20  2014 zookeeper-3.4.6.jar
-rw-rw-r--  1 xulu xulu    836 Feb 20  2014 zookeeper-3.4.6.jar.asc
-rw-rw-r--  1 xulu xulu      33 Feb 20  2014 zookeeper-3.4.6.jar.md5
-rw-rw-r--  1 xulu xulu      41 Feb 20  2014 zookeeper-3.4.6.jar.sha1

在conf目录下面创建一个zoo.cfg的文件，并且修改配置参数

[xulu@SZB-L0032014 conf]$ cp zoo_sample.cfg zoo.cfg
[xulu@SZB-L0032014 conf]$ cat zoo.cfg 
# The number of milliseconds of each tick
tickTime=2000
# The number of ticks that the initial 
# synchronization phase can take
initLimit=10
# The number of ticks that can pass between 
# sending a request and getting an acknowledgement
syncLimit=5
# the directory where the snapshot is stored.
# do not use /tmp for storage, /tmp here is just 
# example sakes.
dataDir=/home/xulu/zookeeper
# the port at which the clients will connect
clientPort=3181
# the maximum number of client connections.
# increase this if you need to handle more clients
#maxClientCnxns=60
#
# Be sure to read the maintenance section of the 
# administrator guide before turning on autopurge.
#
# http://zookeeper.apache.org/doc/current/zookeeperAdmin.html#sc_maintenance
#
# The number of snapshots to retain in dataDir
#autopurge.snapRetainCount=3
# Purge task interval in hours
# Set to "0" to disable auto purge feature
#autopurge.purgeInterval=1

启动zookeeper服务

[xulu@SZB-L0032014 zookeeper-3.4.6]$ cd bin/
[xulu@SZB-L0032014 bin]$ ./zkServer.sh
JMX enabled by default
Using config: /home/xulu/zookeeper-3.4.6/bin/../conf/zoo.cfg
Usage: ./zkServer.sh {start|start-foreground|stop|restart|status|upgrade|print-cmd}
[xulu@SZB-L0032014 bin]$ ./zkServer.sh start
JMX enabled by default
Using config: /home/xulu/zookeeper-3.4.6/bin/../conf/zoo.cfg
Starting zookeeper ... STARTED
[xulu@SZB-L0032014 bin]$ jps
22140 Jps
22096 QuorumPeerMain
[xulu@SZB-L0032014 bin]$ ./zkServer.sh status
JMX enabled by default
Using config: /home/xulu/zookeeper-3.4.6/bin/../conf/zoo.cfg
Mode: standalone
[xulu@SZB-L0032014 bin]$

分布式集群的搭建 准备3台机器
10.20.24.231 SZB-L0032014
10.20.25.199 SZB-L0032015
10.20.25.241 SZB-L0032016

在数据文件目录下面增加一个文件myid

[xulu@SZB-L0032014 zookeeper]$ cat myid
1
[xulu@SZB-L0032014 zookeeper]$
[xulu@SZB-L0032015 zookeeper]$ cat myid
2
[xulu@SZB-L0032015 zookeeper]$
[xulu@SZB-L0032016 zookeeper]$ cat myid
3
[xulu@SZB-L0032016 zookeeper]$

分别修改配置文件
修改：dataDir,clientPort
增加：集群的实例，server.X，”X”表示每个目录中的myid的值

[xulu@SZB-L0032014 conf]$ cat zoo.cfg 
# The number of milliseconds of each tick
tickTime=2000
# The number of ticks that the initial 
# synchronization phase can take
initLimit=10
# The number of ticks that can pass between 
# sending a request and getting an acknowledgement
syncLimit=5
# the directory where the snapshot is stored.
# do not use /tmp for storage, /tmp here is just 
# example sakes.
dataDir=/home/xulu/zookeeper
# the port at which the clients will connect
clientPort=3181
# the maximum number of client connections.
# increase this if you need to handle more clients
#maxClientCnxns=60
#
# Be sure to read the maintenance section of the 
# administrator guide before turning on autopurge.
#
# http://zookeeper.apache.org/doc/current/zookeeperAdmin.html#sc_maintenance
#
# The number of snapshots to retain in dataDir
#autopurge.snapRetainCount=3
# Purge task interval in hours
# Set to "0" to disable auto purge feature
#autopurge.purgeInterval=1

server.1=10.20.24.231:4888:5888
server.2=10.20.25.199:4889:5889
server.3=10.20.25.241:4890:5890

[xulu@SZB-L0032015 conf]$ cat zoo.cfg 
# The number of milliseconds of each tick
tickTime=2000
# The number of ticks that the initial 
# synchronization phase can take
initLimit=10
# The number of ticks that can pass between 
# sending a request and getting an acknowledgement
syncLimit=5
# the directory where the snapshot is stored.
# do not use /tmp for storage, /tmp here is just 
# example sakes.
dataDir=/home/xulu/zookeeper
# the port at which the clients will connect
clientPort=3181
# the maximum number of client connections.
# increase this if you need to handle more clients
#maxClientCnxns=60
#
# Be sure to read the maintenance section of the 
# administrator guide before turning on autopurge.
#
# http://zookeeper.apache.org/doc/current/zookeeperAdmin.html#sc_maintenance
#
# The number of snapshots to retain in dataDir
#autopurge.snapRetainCount=3
# Purge task interval in hours
# Set to "0" to disable auto purge feature
#autopurge.purgeInterval=1
server.1=10.20.24.231:4888:5888
server.2=10.20.25.199:4889:5889
server.3=10.20.25.241:4890:5890

[xulu@SZB-L0032016 conf]$ cat zoo.cfg 
# The number of milliseconds of each tick
tickTime=2000
# The number of ticks that the initial 
# synchronization phase can take
initLimit=10
# The number of ticks that can pass between 
# sending a request and getting an acknowledgement
syncLimit=5
# the directory where the snapshot is stored.
# do not use /tmp for storage, /tmp here is just 
# example sakes.
dataDir=/home/xulu/zookeeper
# the port at which the clients will connect
clientPort=3181
# the maximum number of client connections.
# increase this if you need to handle more clients
#maxClientCnxns=60
#
# Be sure to read the maintenance section of the 
# administrator guide before turning on autopurge.
#
# http://zookeeper.apache.org/doc/current/zookeeperAdmin.html#sc_maintenance
#
# The number of snapshots to retain in dataDir
#autopurge.snapRetainCount=3
# Purge task interval in hours
# Set to "0" to disable auto purge feature
#autopurge.purgeInterval=1

server.1=10.20.24.231:4888:5888
server.2=10.20.25.199:4889:5889
server.3=10.20.25.241:4890:5890

查看节点状态

[xulu@SZB-L0032015 bin]$ ./zkServer.sh status
JMX enabled by default
Using config: /home/xulu/zookeeper-3.4.6/bin/../conf/zoo.cfg
Mode: follower
[xulu@SZB-L0032015 bin]$ 

[xulu@SZB-L0032016 bin]$ ./zkServer.sh status
JMX enabled by default
Using config: /home/xulu/zookeeper-3.4.6/bin/../conf/zoo.cfg
Mode: leader
[xulu@SZB-L0032016 bin]$ 

[xulu@SZB-L0032014 bin]$ ./zkServer.sh status
JMX enabled by default
Using config: /home/xulu/zookeeper-3.4.6/bin/../conf/zoo.cfg
Mode: follower

4. zookeeper命令行操作
我们通过客户端连接ZooKeeper的集群，我们可以任意的zookeeper是进行连接。

[xulu@SZB-L0032016 bin]$ ./zkCli.sh -server 10.20.25.199:2181
Connecting to 10.20.25.199:2181
2016-11-21 16:28:18,935 [myid:] - INFO  [main:Environment@100] - Client environment:zookeeper.version=3.4.6-1569965, built on 02/20/2014 09:09 GMT
2016-11-21 16:28:18,938 [myid:] - INFO  [main:Environment@100] - Client environment:host.name=SZB-L0032016
2016-11-21 16:28:18,939 [myid:] - INFO  [main:Environment@100] - Client environment:java.version=1.7.0_79
2016-11-21 16:28:18,941 [myid:] - INFO  [main:Environment@100] - Client environment:java.vendor=Oracle Corporation
2016-11-21 16:28:18,941 [myid:] - INFO  [main:Environment@100] - Client environment:java.home=/opt/jdk1.7.0_79/jre
2016-11-21 16:28:18,941 [myid:] - INFO  [main:Environment@100] - Client environment:java.class.path=/home/xulu/zookeeper-3.4.6/bin/../build/classes:/home/xulu/zookeeper-3.4.6/bin/../build/lib/*.jar:/home/xulu/zookeeper-3.4.6/bin/../lib/slf4j-log4j12-1.6.1.jar:/home/xulu/zookeeper-3.4.6/bin/../lib/slf4j-api-1.6.1.jar:/home/xulu/zookeeper-3.4.6/bin/../lib/netty-3.7.0.Final.jar:/home/xulu/zookeeper-3.4.6/bin/../lib/log4j-1.2.16.jar:/home/xulu/zookeeper-3.4.6/bin/../lib/jline-0.9.94.jar:/home/xulu/zookeeper-3.4.6/bin/../zookeeper-3.4.6.jar:/home/xulu/zookeeper-3.4.6/bin/../src/java/lib/*.jar:/home/xulu/zookeeper-3.4.6/bin/../conf:
2016-11-21 16:28:18,942 [myid:] - INFO  [main:Environment@100] - Client environment:java.library.path=/usr/java/packages/lib/amd64:/usr/lib64:/lib64:/lib:/usr/lib
2016-11-21 16:28:18,942 [myid:] - INFO  [main:Environment@100] - Client environment:java.io.tmpdir=/tmp
2016-11-21 16:28:18,942 [myid:] - INFO  [main:Environment@100] - Client environment:java.compiler=<NA>
2016-11-21 16:28:18,942 [myid:] - INFO  [main:Environment@100] - Client environment:os.name=Linux
2016-11-21 16:28:18,942 [myid:] - INFO  [main:Environment@100] - Client environment:os.arch=amd64
2016-11-21 16:28:18,942 [myid:] - INFO  [main:Environment@100] - Client environment:os.version=2.6.32-573.el6.x86_64
2016-11-21 16:28:18,942 [myid:] - INFO  [main:Environment@100] - Client environment:user.name=xulu
2016-11-21 16:28:18,943 [myid:] - INFO  [main:Environment@100] - Client environment:user.home=/home/xulu
2016-11-21 16:28:18,943 [myid:] - INFO  [main:Environment@100] - Client environment:user.dir=/home/xulu/zookeeper-3.4.6/bin
2016-11-21 16:28:18,944 [myid:] - INFO  [main:ZooKeeper@438] - Initiating client connection, connectString=10.20.25.199:2181 sessionTimeout=30000 watcher=org.apache.zookeeper.ZooKeeperMain$MyWatcher@63f78dde
Welcome to ZooKeeper!
2016-11-21 16:28:18,975 [myid:] - INFO  [main-SendThread(10.20.25.199:2181):ClientCnxn$SendThread@975] - Opening socket connection to server 10.20.25.199/10.20.25.199:2181. Will not attempt to authenticate using SASL (unknown error)
2016-11-21 16:28:18,981 [myid:] - INFO  [main-SendThread(10.20.25.199:2181):ClientCnxn$SendThread@852] - Socket connection established to 10.20.25.199/10.20.25.199:2181, initiating session
JLine support is enabled
2016-11-21 16:28:18,996 [myid:] - INFO  [main-SendThread(10.20.25.199:2181):ClientCnxn$SendThread@1235] - Session establishment complete on server 10.20.25.199/10.20.25.199:2181, sessionid = 0x15823a399d97d7f, negotiated timeout = 30000

WATCHER::

WatchedEvent state:SyncConnected type:None path:null
[zk: 10.20.25.199:2181(CONNECTED) 0]

集群已连接，下面我们要使用一下，ZooKeeper的命令行操作。
命令行操作
通过help打印命令行帮助

[zk: 10.20.25.199:2181(CONNECTED) 0] help
ZooKeeper -server host:port cmd args
        connect host:port
        get path [watch]
        ls path [watch]
        set path data [version]
        rmr path
        delquota [-n|-b] path
        quit 
        printwatches on|off
        create [-s] [-e] path data acl
        stat path [watch]
        close 
        ls2 path [watch]
        history 
        listquota path
        setAcl path acl
        getAcl path
        sync path
        redo cmdno
        addauth scheme auth
        delete path [version]
        setquota -n|-b val path
[zk: 10.20.25.199:2181(CONNECTED) 1]

ZooKeeper的结构，很像是目录结构，我们看到了像ls这样熟悉的命令。

#ls,查看/目录内容
[zk: 10.20.25.199:2181(CONNECTED) 1] ls /
[hive_zookeeper_namespace_hive, drill, hbase, zookeeper]

#create,创建一个node节点
[zk: 10.20.25.199:2181(CONNECTED) 2] create /node xlucas
Created /node
#ls,再查看/目录
[zk: 10.20.25.199:2181(CONNECTED) 3] ls /
[hive_zookeeper_namespace_hive, drill, node, hbase, zookeeper]

#get,查看/node的数据信息
[zk: 10.20.25.199:2181(CONNECTED) 4] get /node
xlucas
cZxid = 0x180009d98e
ctime = Mon Nov 21 16:45:13 CST 2016
mZxid = 0x180009d98e
mtime = Mon Nov 21 16:45:13 CST 2016
pZxid = 0x180009d98e
cversion = 0
dataVersion = 0
aclVersion = 0
ephemeralOwner = 0x0
dataLength = 6
numChildren = 0

#set,修改数据
[zk: 10.20.25.199:2181(CONNECTED) 5] set /node www.xlucas.com
cZxid = 0x180009d98e
ctime = Mon Nov 21 16:45:13 CST 2016
mZxid = 0x180009d9a7
mtime = Mon Nov 21 16:46:22 CST 2016
pZxid = 0x180009d98e
cversion = 0
dataVersion = 1
aclVersion = 0
ephemeralOwner = 0x0
dataLength = 14
numChildren = 0

#get,再查看/node的数据信息，已改为www.xlucas.com
[zk: 10.20.25.199:2181(CONNECTED) 6] get /node               
www.xlucas.com
cZxid = 0x180009d98e
ctime = Mon Nov 21 16:45:13 CST 2016
mZxid = 0x180009d9a7
mtime = Mon Nov 21 16:46:22 CST 2016
pZxid = 0x180009d98e
cversion = 0
dataVersion = 1
aclVersion = 0
ephemeralOwner = 0x0
dataLength = 14
numChildren = 0

#delete,删除/node
[zk: 10.20.25.199:2181(CONNECTED) 7] delete /node
[zk: 10.20.25.199:2181(CONNECTED) 8] ls /
[hive_zookeeper_namespace_hive, drill, hbase, zookeeper]
[zk: 10.20.25.199:2181(CONNECTED) 9] 

#quit,退出客户端连接
[zk: 10.20.25.199:2181(CONNECTED) 9] quit
Quitting...
2016-11-21 16:48:46,512 [myid:] - INFO  [main:ZooKeeper@684] - Session: 0x15823a399d97d7f closed
2016-11-21 16:48:46,512 [myid:] - INFO  [main-EventThread:ClientCnxn$EventThread@512] - EventThread shut down

java操作zookeeper API 

import java.io.IOException;

import org.apache.zookeeper.CreateMode;
import org.apache.zookeeper.KeeperException;
import org.apache.zookeeper.WatchedEvent;
import org.apache.zookeeper.Watcher;
import org.apache.zookeeper.ZooDefs.Ids;
import org.apache.zookeeper.ZooKeeper;

public class ZookeeperDemo {

    public static void main(String[] args) throws IOException, KeeperException, InterruptedException {
        // 创建一个与服务器的连接
        // TODO Auto-generated method stub
        ZooKeeper zk=new ZooKeeper("10.20.25.199:2181", 6000, new Watcher(){
            // 监控所有被触发的事件
            @Override
            public void process(WatchedEvent event) {
                System.out.println("EVENT:" + event.getType());             
            }

        });
          // 查看根节点
        System.out.println("ls / "+zk.getChildren("/", true));

        // 创建一个目录节点
        if(zk.exists("/node", true)==null){
            zk.create("/node", "xlucas".getBytes(), Ids.OPEN_ACL_UNSAFE, CreateMode.PERSISTENT);
            System.out.println("create /node xlucas");
            System.out.println("get /node data"+new String(zk.getData("/node", false, null)));
            System.out.println("ls / "+zk.getChildren("/", true));
        }

        // 创建一个子目录节点
            if (zk.exists("/node/sub1", true) == null) {
                zk.create("/node/sub1", "sub1".getBytes(), Ids.OPEN_ACL_UNSAFE, CreateMode.PERSISTENT);
                System.out.println("create /node/sub1 sub1");

                System.out.println("ls /node => " + zk.getChildren("/node", true));
            }

        // 修改节点数据
            if (zk.exists("/node", true) != null) {
                zk.setData("/node", "changed".getBytes(), -1);

                System.out.println("get /node => " + new String(zk.getData("/node", false, null)));
            }

        // 删除节点
            if (zk.exists("/node/sub1", true) != null) {
                zk.delete("/node/sub1", -1);
                zk.delete("/node", -1);

                System.out.println("ls / => " + zk.getChildren("/", true));
            }

          // 关闭连接
            zk.close();

    }

}

编译

[xulu@SZB-L0032015 ~]$ javac -cp .:./zookeeper-3.4.6/* ZookeeperDemo.java

运行

[xulu@SZB-L0032015 ~]$ java -cp .:./zookeeper-3.4.6/*:./zookeeper-3.4.6/lib/* ZookeeperDemo 
log4j:WARN No appenders could be found for logger (org.apache.zookeeper.ZooKeeper).
log4j:WARN Please initialize the log4j system properly.
log4j:WARN See http://logging.apache.org/log4j/1.2/faq.html#noconfig for more info.
EVENT:None
ls / [hive_zookeeper_namespace_hive, drill, hbase, zookeeper]
EVENT:NodeCreated
EVENT:NodeChildrenChanged
create /node xlucas
get /node dataxlucas
ls / [hive_zookeeper_namespace_hive, drill, node, hbase, zookeeper]
EVENT:NodeCreated
create /node/sub1 sub1
ls /node => [sub1]
EVENT:NodeDataChanged
get /node => changed
EVENT:NodeDeleted
EVENT:NodeChildrenChanged
EVENT:NodeChildrenChanged
ls / => [hive_zookeeper_namespace_hive, drill, hbase, zookeeper]
[xulu@SZB-L0032015 ~]$
Xlucas
关注
专栏目录
Zookeeper报错Will not attempt to authenticate using SASL解决办法
qq642159746的博客
05-19 4万+
1.首先确定本地的zk版本跟服务器的zk版本是否一致，简单的就是看依赖的jar包，去zk的安装包下找对应的jar包直接跟本地的比较，操作hbase出现这种情况就是hbase安装目录的lib下找，确定版本一致。2.在hbase的conf下hbase-site.xml下配置hbase.zookeeper.quorum这个属性，具体原因看网上有个解释不错：在master所在的pc上启动start-all时
【分布式】Zookeeper使用--命令行
weixin_34082789的博客
11-02 334
一、前言 　　在学习了Zookeeper相关的理论知识后，下面接着学习对Zookeeper的相关操作。 二、Zookeeper部署 　　Zookeeper的部署相对来说还是比较简单，读者可以在网上找到相应的教程，点这里，笔者不再累赘。 　　Zookeeper有三种运行形式：集群模式、单机模式、伪集群模式。 　　以下实验都是在单机模式下进行。 三、服务端 　　bin目录下常用的脚本解释...
3. ZooKeeper分布式安装部署和客户端命令行操作
weixin_45267102的博客
07-17 338
文章目录ZooKeeper分布式安装部署和客户端命令行操作1. 分布式安装部署2. 客户端命令行操作☆ ZooKeeper分布式安装部署和客户端命令行操作 1. 分布式安装部署 集群规划：在hadoop、hadoop101和hadoop102三个节点上部署Zookeeper。 #在hadoop上使用xsync同步的其它节点上 xsync zookeeper-3.4.10/ #hadoop节点上已经配置好了zoo.cfg，所以分发之后不需要再配置 配置服务器编号： #在/opt/module/zookee
搭建zookeeper（三个节点）
catyuan的博客
09-18 1198
1.安装jdk 2.上传zookeeper包 3.解压到指定目录，重命名 [root@cat ~]# tar -xf zookeeper-3.4.5.tar [root@cat ~]# cp -r zookeeper-3.4.5 /usr/local/zookeeper1 [root@cat ~]# cp -r zookeeper-3.4.5 /usr/local/zookeeper2 [root...
猿创征文｜ZooKeeper（伪）集群搭建
热门推荐
退役复学在校大学生，目光所至，皆为华夏
09-14 3万+
3、将Zookeeper解压 ，建立/usr/local/zookeeper-cluster目录，将解压后的Zookeeper复制到以下三个目录。我们会发现，2号服务器启动后依然是跟随者（从服务器），3号服务器依然是领导者（主服务器），没有撼动3号服务器的领导地位。由此得出结论，3个节点的集群，2个从服务器都挂掉，主服务器也无法运行。由此我们得出结论，当集群中的主服务器挂了，集群中的其他服务器会自动进行选举状态，然后产生新得leader。由此得出结论，3个节点的集群，有一个从服务器挂掉，集群正常。
Linux下ZooKeeper分布式集群安装教程
09-15
**Linux下ZooKeeper分布式集群安装教程** ZooKeeper是一个高度可靠的分布式协调系统，由Apache开发，最初设计用于管理Hadoop生态系统中的组件，如Hadoop、Hive、Pig等。随着时间的推移，它已经成为了许多分布式应用...
zookeeper分布式集群配置
08-21
本教程将深入讲解在Linux环境中配置Zookeeper的单机模式以及分布式集群模式，帮助初学者快速掌握这一重要技术。 首先，我们要了解Zookeeper的基础知识。Zookeeper基于观察者模式设计，提供了一种树状的数据结构，...
zookeeper伪分布式搭建(1)1
08-08
Zookeeper 是一个分布式的，开放源码的分布式应用程序协调服务，它是集群的管理者，监视着集群中各个节点的状态根据节点提交的反馈进行下一步合理操作。最终将简单易用的接口和性能高效、功能稳定的系统提供给用户。...
dubbo spring zookeeper分布式集群搭建完整例子
10-25
在构建分布式系统时，"dubbo spring zookeeper分布式集群搭建完整例子" 提供了一个实践性的教程，涵盖了多种关键技术和工具。下面将详细解释这个例子中涉及的知识点。 首先，我们来了解一下**SpringMVC**。...
ZooKeeper 完全分布式集群环境搭建.md
最新发布
06-14
### ZooKeeper 完全分布式集群环境搭建知识点详解 #### 一、ZooKeeper简介与应用场景 - **定义**: ZooKeeper 是一个高性能且高度可靠的分布式协调服务框架，它为分布式应用程序提供了一种简单的方法来实现诸如数据...
ZooKeeper 实战(二) 命令行操作篇
AHAO的博客
01-08 1805
ZooKeeper允许用户在指定Znode注册 Watcher（绑定监听事件），当特定事件触发时（节点数据变更、节点删除、子节点状态变更等事件），ZooKeeper服务端会将事件通知到注册过该事件Watcher的客户端，该机制是ZooKeeper实现分布式协调服务的重要特性，通过这个事件机制，可以基于ZooKeeper实现分布式锁、集群管理等功能。id表示 用户名:密码。如下所示，是整个acl表达式的形式，除去验证模式和权限控制剩下的，也就是中间内容表示id。：监听节点数据变化，子节点的数据变化不会触发。
搭建Zookeeper集群：三台服务器，一场分布式之舞
todoitbo的博客
04-08 1万+
本文将带你探索如何在三台服务器上搭建一个强大而稳定的Zookeeper集群，并深入解析其详细配置过程。通过实用的步骤和生动的示例，你将学到搭建分布式系统的关键知识点，使你的Zookeeper集群达到最佳性能和可靠性。
Storm和Zookeeper集群搭建及在java项目中的使用
徐刘根的博客
08-24 9169
上一篇：Kafka 单机和分布式环境搭建与案例使用介绍了分布式Zookeeper集群的搭建和Kafka集群的搭建，接下来学习一下Storm集群的搭建。实验环境 Cent OS 6.9 apache-storm-1.1.0 三台服务器虚拟机：192.168.1.129、192.168.1.214、192.168.1.241 准备工作1、修改服务器hostname和hosts文件使得可以直接通过ho
Zookeeper的日志统一管理
何冠勋的博客
12-30 557
分析问题 （1）zookeeper在预装的时候并没有给我们很好的处理日志的问题，系统会默认在你启动的地方吧日志打印到当前的路径下面，比如我现在当前目录下面启动zk服务器并通过ll密令就发现在当前路径下面多出来了一个 zookeeper.out的文件 设计思想 （2）从上面我们知道zookeeper的日志输出路径没有一个统一的模式，这样子日志文件不好控制，对于我们去维护没有一个精准，所
搭建三个节点的zookeeper
D
04-09 2388
本文所用环境，如果没有请结合自身环境进行搭建4个hadoop节点，hadoop版本为2.7.1，主机名称分别为hadoop01、hadoop02、hadoop03、hadoop04，且ssh已经建立 zookeeper版本为3.4.5，所存放目录为/opt/moudles下 1. 解压zookeeper执行如下命令：cd /opt/moudles/ tar –zxvf zookeeper-3.
DataX opentsdb reader 通过kerberos认证
qq_24269969的博客
04-10 830
背景 datax没有kerberos认证，原因是阿里觉得kerberos太坑了（我觉得也是），奈何公司用的kerberos的现状是在下一人之力无法改变的。 既然无法改变公司，只能去尝试验证通过kerberos 环境 希望大家看此文时候已经将以下环境准备好 datax已经安装好。 datax的opentsdbreader已经安装到datax/plugin/reader下 opentsdb已经部署好...
Zookeeper的集群配置和Java测试程序
小单的博客专栏
03-10 3万+
概述Zookeeper是Apache下的项目之一，倾向于对大型应用的协同维护管理工作。IBM则给出了IBM对ZooKeeper的认知： Zookeeper 分布式服务框架是 Apache Hadoop 的一个子项目，它主要是用来解决分布式应用中经常遇到的一些数据管理问题，如：统一命名服务、状态同步服务、集群管理、分布式应用配置项的管理等。总之，可以用“协调”这个核心的词来形容它的作用。关于它能干吗，
Zookeeper完全分布式安装
数智技术
02-02 407
Apache ZooKeeper是一个为分布式应用所设计开源协调服务，其设计目是为了减轻分布式应用程序所承担的协调任务。可以为用户提供同步、配置管理、分组和命名服务。 1.环境说明 在三台装有centos7.6（64位）服务器上安装ZooKeeper，官网建议至少3个节点，本次实验3台 （主机数：3（要求3+，且必须是奇数，因为ZooKeeper选举算法））。 需要提前安装jdk，本次实验安装的是jdk1.8.0_231。 2.主机名和ip映射关系 ZooKeeper集群所有结点作为一个整体对分布式应用提供
ZooKeeper伪分布式集群安装及使用
fens的博客
08-12 522
让Hadoop跑在云端系列文章，介绍了如何整合虚拟化和Hadoop，让Hadoop集群跑在VPS虚拟主机上，通过云向用户提供存储和计算的服务。 现在硬件越来越便宜，一台非品牌服务器，2颗24核CPU，配48G内存，2T的硬盘，已经降到2万块人民币以下了。这种配置如果简单地放几个web应用，显然是奢侈的浪费。就算是用来实现单节点的hadoop...
一键部署基于ARM64的zookeeper分布式集群指南
资源摘要信息:"本文档主要介绍如何在基于ARM64架构的CPU上，使用docker-compose工具来一键离线部署zookeeper 3.8.4版本的分布式集群。在部署过程中，支持多种部署方式，包括单机部署、单机伪集群部署以及多机分布式...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值