Zookeeper实例原生API--复用sessionId和sessionPasswd

最新推荐文章于 2023-03-16 09:07:44 发布
最新推荐文章于 2023-03-16 09:07:44 发布
阅读量328 收藏
点赞数
文章标签： 大数据 java python
原文链接：https://my.oschina.net/LucasZhu/blog/1605029
版权

2019独角兽企业重金招聘Python工程师标准>>> hot3.png

import org.apache.zookeeper.WatchedEvent;
import org.apache.zookeeper.Watcher;
import org.apache.zookeeper.ZooKeeper;

import java.util.concurrent.CountDownLatch;
import java.util.concurrent.atomic.AtomicInteger;

/**
 * Created with IntelliJ IDEA.
 * @Description: TODO(Java API -> 创建连接 -> 创建一个最基本的ZooKeeper对象实例，复用sessionId和)
 * User: zhubo
 * Date: 2018-01-09
 * Time: 21:17
 */
public class ZooKeeper_Constructor_Usage_With_SID_PASSWD implements Watcher{

    /** 定义原子变量 */
    AtomicInteger seq = new AtomicInteger();

    private static CountDownLatch countDownLatch = new CountDownLatch(1);

    public static void main(String[] args) throws Exception {
        ZooKeeper zookeeper = new ZooKeeper("192.168.20.244:2181",5000,new ZooKeeper_Constructor_Usage_With_SID_PASSWD());
        countDownLatch.await();
        long sessionId = zookeeper.getSessionId();
        byte[] passwd  = zookeeper.getSessionPasswd();
        Thread.sleep(1000L);
        //Use illegal sessionId and sessionPassWd
        zookeeper = new ZooKeeper("192.168.20.244:2181", 5000,new ZooKeeper_Constructor_Usage_With_SID_PASSWD(),1L,"test".getBytes());
        Thread.sleep(1000L);
        //Use correct sessionId and sessionPassWd
        zookeeper = new ZooKeeper("192.168.20.244:2181", 5000, new ZooKeeper_Constructor_Usage_With_SID_PASSWD(),sessionId,passwd);
        Thread.sleep( Integer.MAX_VALUE );


    }

    @Override
    public void process(WatchedEvent event) {
        System.out.println("进入 process 。。。。。event = " + event);
        try {
            Thread.sleep(200);
        } catch (InterruptedException e) {
            e.printStackTrace();
        }
        if (event == null) {
            return;
        }
        // 连接状态
        Event.KeeperState keeperState = event.getState();
        // 事件类型
        Event.EventType eventType = event.getType();
        // 受影响的path
        String path = event.getPath();

        String logPrefix = "【Watcher-" + this.seq.incrementAndGet() + "】";

        System.out.println(logPrefix + "收到Watcher通知");
        System.out.println(logPrefix + "连接状态:\t" + keeperState.toString());
        System.out.println(logPrefix + "事件类型:\t" + eventType.toString());

        if (Event.KeeperState.SyncConnected == keeperState) {
            // 成功连接上ZK服务器
            if (Event.EventType.None == eventType) {
                System.out.println(logPrefix + "成功连接上ZK服务器");
                countDownLatch.countDown();
            }
            //创建节点
            else if (Event.EventType.NodeCreated == eventType) {
                System.out.println(logPrefix + "节点创建");
                try {
                    Thread.sleep(100);
                } catch (InterruptedException e) {
                    e.printStackTrace();
                }
                //this.exists(path, true);
            }
            //更新节点
            else if (Event.EventType.NodeDataChanged == eventType) {
                System.out.println(logPrefix + "节点数据更新");
                System.out.println("我看看走不走这里........");
                try {
                    Thread.sleep(100);
                } catch (InterruptedException e) {
                    e.printStackTrace();
                }
                //System.out.println(logPrefix + "数据内容: " + this.readData(PARENT_PATH, true));
            }
            //更新子节点
            else if (Event.EventType.NodeChildrenChanged == eventType) {
                System.out.println(logPrefix + "子节点变更");
                try {
                    Thread.sleep(3000);
                } catch (InterruptedException e) {
                    e.printStackTrace();
                }
                //System.out.println(logPrefix + "子节点列表：" + this.getChildren(PARENT_PATH, true));
            }
            //删除节点
            else if (Event.EventType.NodeDeleted == eventType) {
                System.out.println(logPrefix + "节点 " + path + " 被删除");
            }
            else{}
        }
        else if (Event.KeeperState.Disconnected == keeperState) {
            System.out.println(logPrefix + "与ZK服务器断开连接");
        }
        else if (Event.KeeperState.AuthFailed == keeperState) {
            System.out.println(logPrefix + "权限检查失败");
        }
        else if (Event.KeeperState.Expired == keeperState) {
            System.out.println(logPrefix + "会话失效");
        }
        else {}
        System.out.println("--------------------------------------------");
    }
}
[2018-01-10 13:10:18.020  INFO org.apache.zookeeper.ZooKeeper:438] [main] Initiating client connection, connectString=192.168.20.244:2181 sessionTimeout=5000 watcher=com.timer.zkclient.ZooKeeper_Constructor_Usage_With_SID_PASSWD@1ae369b7
[2018-01-10 13:10:18.143  INFO org.apache.zookeeper.ClientCnxn:1032] [main-SendThread(192.168.20.244:2181)] Opening socket connection to server 192.168.20.244/192.168.20.244:2181. Will not attempt to authenticate using SASL (unknown error)
[2018-01-10 13:10:18.147  INFO org.apache.zookeeper.ClientCnxn:876] [main-SendThread(192.168.20.244:2181)] Socket connection established to 192.168.20.244/192.168.20.244:2181, initiating session
[2018-01-10 13:10:18.165  INFO org.apache.zookeeper.ClientCnxn:1299] [main-SendThread(192.168.20.244:2181)] Session establishment complete on server 192.168.20.244/192.168.20.244:2181, sessionid = 0x160db22da860022, negotiated timeout = 5000
进入 process 。。。。。event = WatchedEvent state:SyncConnected type:None path:null
【Watcher-1】收到Watcher通知
【Watcher-1】连接状态:	SyncConnected
【Watcher-1】事件类型:	None
【Watcher-1】成功连接上ZK服务器
--------------------------------------------
[2018-01-10 13:10:19.368  INFO org.apache.zookeeper.ZooKeeper:575] [main] Initiating client connection, connectString=192.168.20.244:2181 sessionTimeout=5000 watcher=com.timer.zkclient.ZooKeeper_Constructor_Usage_With_SID_PASSWD@22f71333 sessionId=1 sessionPasswd=<hidden>
[2018-01-10 13:10:19.370  INFO org.apache.zookeeper.ClientCnxn:1032] [main-SendThread(192.168.20.244:2181)] Opening socket connection to server 192.168.20.244/192.168.20.244:2181. Will not attempt to authenticate using SASL (unknown error)
[2018-01-10 13:10:19.371  INFO org.apache.zookeeper.ClientCnxn:876] [main-SendThread(192.168.20.244:2181)] Socket connection established to 192.168.20.244/192.168.20.244:2181, initiating session
[2018-01-10 13:10:19.373  WARN org.apache.zookeeper.ClientCnxn:1285] [main-SendThread(192.168.20.244:2181)] Unable to reconnect to ZooKeeper service, session 0x1 has expired
[2018-01-10 13:10:19.373  INFO org.apache.zookeeper.ClientCnxn:1154] [main-SendThread(192.168.20.244:2181)] Unable to reconnect to ZooKeeper service, session 0x1 has expired, closing socket connection
进入 process 。。。。。event = WatchedEvent state:Expired type:None path:null
【Watcher-1】收到Watcher通知
【Watcher-1】连接状态:	Expired
【Watcher-1】事件类型:	None
【Watcher-1】会话失效
--------------------------------------------
[2018-01-10 13:10:19.574  INFO org.apache.zookeeper.ClientCnxn:519] [main-EventThread] EventThread shut down for session: 0x1
[2018-01-10 13:10:20.371  INFO org.apache.zookeeper.ZooKeeper:575] [main] Initiating client connection, connectString=192.168.20.244:2181 sessionTimeout=5000 watcher=com.timer.zkclient.ZooKeeper_Constructor_Usage_With_SID_PASSWD@13969fbe sessionId=160db22da860022 sessionPasswd=<hidden>
[2018-01-10 13:10:20.373  INFO org.apache.zookeeper.ClientCnxn:1032] [main-SendThread(192.168.20.244:2181)] Opening socket connection to server 192.168.20.244/192.168.20.244:2181. Will not attempt to authenticate using SASL (unknown error)
[2018-01-10 13:10:20.374  INFO org.apache.zookeeper.ClientCnxn:876] [main-SendThread(192.168.20.244:2181)] Socket connection established to 192.168.20.244/192.168.20.244:2181, initiating session
[2018-01-10 13:10:20.377  INFO org.apache.zookeeper.ClientCnxn:1158] [main-SendThread(192.168.20.244:2181)] Unable to read additional data from server sessionid 0x160db22da860022, likely server has closed socket, closing socket connection and attempting reconnect
[2018-01-10 13:10:20.378  INFO org.apache.zookeeper.ClientCnxn:1299] [main-SendThread(192.168.20.244:2181)] Session establishment complete on server 192.168.20.244/192.168.20.244:2181, sessionid = 0x160db22da860022, negotiated timeout = 5000
进入 process 。。。。。event = WatchedEvent state:SyncConnected type:None path:null
进入 process 。。。。。event = WatchedEvent state:Disconnected type:None path:null
【Watcher-1】收到Watcher通知
【Watcher-1】连接状态:	SyncConnected
【Watcher-1】事件类型:	None
【Watcher-1】成功连接上ZK服务器
--------------------------------------------
【Watcher-2】收到Watcher通知
【Watcher-2】连接状态:	Disconnected
【Watcher-2】事件类型:	None
【Watcher-2】与ZK服务器断开连接
--------------------------------------------
[2018-01-10 13:10:21.848  INFO org.apache.zookeeper.ClientCnxn:1032] [main-SendThread(192.168.20.244:2181)] Opening socket connection to server 192.168.20.244/192.168.20.244:2181. Will not attempt to authenticate using SASL (unknown error)
[2018-01-10 13:10:21.849  INFO org.apache.zookeeper.ClientCnxn:876] [main-SendThread(192.168.20.244:2181)] Socket connection established to 192.168.20.244/192.168.20.244:2181, initiating session
[2018-01-10 13:10:21.852  INFO org.apache.zookeeper.ClientCnxn:1158] [main-SendThread(192.168.20.244:2181)] Unable to read additional data from server sessionid 0x160db22da860022, likely server has closed socket, closing socket connection and attempting reconnect
[2018-01-10 13:10:21.852  INFO org.apache.zookeeper.ClientCnxn:1299] [main-SendThread(192.168.20.244:2181)] Session establishment complete on server 192.168.20.244/192.168.20.244:2181, sessionid = 0x160db22da860022, negotiated timeout = 5000
进入 process 。。。。。event = WatchedEvent state:SyncConnected type:None path:null
进入 process 。。。。。event = WatchedEvent state:Disconnected type:None path:null
【Watcher-3】收到Watcher通知
【Watcher-3】连接状态:	SyncConnected
【Watcher-3】事件类型:	None
【Watcher-3】成功连接上ZK服务器
--------------------------------------------
【Watcher-2】收到Watcher通知
【Watcher-2】连接状态:	Disconnected
【Watcher-2】事件类型:	None
【Watcher-2】与ZK服务器断开连接
--------------------------------------------
[2018-01-10 13:10:22.988  INFO org.apache.zookeeper.ClientCnxn:1032] [main-SendThread(192.168.20.244:2181)] Opening socket connection to server 192.168.20.244/192.168.20.244:2181. Will not attempt to authenticate using SASL (unknown error)
[2018-01-10 13:10:22.989  INFO org.apache.zookeeper.ClientCnxn:876] [main-SendThread(192.168.20.244:2181)] Socket connection established to 192.168.20.244/192.168.20.244:2181, initiating session
[2018-01-10 13:10:22.998  INFO org.apache.zookeeper.ClientCnxn:1158] [main-SendThread(192.168.20.244:2181)] Unable to read additional data from server sessionid 0x160db22da860022, likely server has closed socket, closing socket connection and attempting reconnect
[2018-01-10 13:10:22.999  INFO org.apache.zookeeper.ClientCnxn:1299] [main-SendThread(192.168.20.244:2181)] Session establishment complete on server 192.168.20.244/192.168.20.244:2181, sessionid = 0x160db22da860022, negotiated timeout = 5000
进入 process 。。。。。event = WatchedEvent state:SyncConnected type:None path:null
进入 process 。。。。。event = WatchedEvent state:Disconnected type:None path:null
【Watcher-3】收到Watcher通知
【Watcher-3】连接状态:	SyncConnected
【Watcher-3】事件类型:	None
【Watcher-3】成功连接上ZK服务器
--------------------------------------------
【Watcher-4】收到Watcher通知
【Watcher-4】连接状态:	Disconnected
【Watcher-4】事件类型:	None
【Watcher-4】与ZK服务器断开连接
--------------------------------------------
[2018-01-10 13:10:24.818  INFO org.apache.zookeeper.ClientCnxn:1032] [main-SendThread(192.168.20.244:2181)] Opening socket connection to server 192.168.20.244/192.168.20.244:2181. Will not attempt to authenticate using SASL (unknown error)
[2018-01-10 13:10:24.819  INFO org.apache.zookeeper.ClientCnxn:876] [main-SendThread(192.168.20.244:2181)] Socket connection established to 192.168.20.244/192.168.20.244:2181, initiating session
[2018-01-10 13:10:24.822  INFO org.apache.zookeeper.ClientCnxn:1299] [main-SendThread(192.168.20.244:2181)] Session establishment complete on server 192.168.20.244/192.168.20.244:2181, sessionid = 0x160db22da860022, negotiated timeout = 5000
[2018-01-10 13:10:24.822  INFO org.apache.zookeeper.ClientCnxn:1158] [main-SendThread(192.168.20.244:2181)] Unable to read additional data from server sessionid 0x160db22da860022, likely server has closed socket, closing socket connection and attempting reconnect
进入 process 。。。。。event = WatchedEvent state:SyncConnected type:None path:null
进入 process 。。。。。event = WatchedEvent state:Disconnected type:None path:null
【Watcher-5】收到Watcher通知
【Watcher-5】连接状态:	SyncConnected
【Watcher-5】事件类型:	None
【Watcher-5】成功连接上ZK服务器
--------------------------------------------
【Watcher-4】收到Watcher通知
【Watcher-4】连接状态:	Disconnected
【Watcher-4】事件类型:	None
【Watcher-4】与ZK服务器断开连接
--------------------------------------------

注意：

客户端传入sessionId和sessionPasswd的目的是为了复用会话，以维持之前会话的有效性。

第一次使用了错误的sessionId和sessionPasswd来创建Zookeeper客户端实例，结果客户端接收到服务端的Expired事件通知；而第二次使用了正确的sessionId和sessionPasswd来创建客户端实例，结果链接成功。

当复用会话ID的zookeeper实例创建后，之前zookeeper链接被断开，由于zkClient的重连机制，第一个zk与第三个zk交替获取session，交替丢弃session的打印输出。

 

转载于:https://my.oschina.net/LucasZhu/blog/1605029

weixin_33701564
关注
ZooKeeper session管理
宁静致远
11-17 5890
ZooKeeper的每个客户端都维护一组服务端信息，在创建连接时由应用指定，客户端随机选择一个服务端进行连接，连接成功后，服务端为每个连接分配一个唯一标识。客户端在创建连接时可以指定溢出时间，客户端会周期性的向服务端发送PING请求来保持连接，当客户端检测到与服务端断开连接后，客户端将自动选择服务端列表中的另一个服务端进行重连。客户端允许应用修改服务端列表，但修改可能导致客户端与服务端的重连。连接状
Hyperf 发布 Session、极简 DB、Zookeeper 配置中心组件和支持 Twig / Plates 视图引擎支持...
最新发布
weixin_41141217的博客
04-18 265
更新内容 本周更新主要新增 极简 DB 组件，Zookeeper 配置中心，和 Session 组件，以及为 视图组件 增加了 Twig 和 Plates 视图引擎的支持，同时为计划任务组件增加了集群执行的支持。极简 DB 组件 主要为希望以简易和性能为首要诉求的场景提供支持，而无需庞大的 ORM，而配置中心组件也增加了 Zookeeper 作为配置中心的支持，以及大家期望已久的 Ses...
zookeeper之生成sessionId<十四>
weixin_33984032的博客
10-03 403
2019独角兽企业重金招聘Python工程师标准>>> ...
Zookeeper之Session
04stone37
10-17 642
基本属性 sessionId：会话ID，特点是全局唯一，保证sessionId全局唯一的基本思想是机器标识+随机数（时间戳），机器标识区分集群中不同的机器，同一台机器内的session可以用随机数、内存地址、计数器等多种手段来区分，一般会结合业务场景赋予一定的业务语义来使用； timeout：会话超时时间（时间段），当会话超时失效后，与会话绑定的数据、其创建的所有临时节点和watcher都会被...
zookeeper之session管理
Lucifer ZHAO
09-27 366
客户端建立连接 ClientCnxn.SendThread public void run() { startConnect(serverAddress); //开始和服务端建立连接 } private void startConnect(InetSocketAddress addr) throws IOException { clientCnxnSocket.connect(addr); } ClientCnxnSocketNIO void connect(InetSoc..
消息中间件之二：kafka详解
企业实战系列集 ●●● https://ximenjianxue.blog.csdn.net
09-02 649
概述 Kafka是一种分布式的，基于发布/订阅的消息系统。 整理中……
4万字，200道Java面试题含答案！
weixin_70730532的博客
08-24 282
== 对于基本类型来说是值比较，对于引用类型来说是比较的是引用；而 equals 默认情况下是引用比较，只是很多类重新了 equals 方法，比如 String、Integer 等把它变成了值比较，所以一般情况下 equals 比较的是值是否相等。3. 两个对象的 hashCode() 相同，则 equals() 也一定为 true，对吗？不对，两个对象的 hashCode() 相同，equals() 不一定 true。
Java面试题汇总（一）
m0_67322837的博客
03-14 734
本文分为十九个模块，分别是：Java 基础、容器、多线程、反射、对象拷贝、Java Web 、异常、网络、设计模式、Spring/Spring MVC、Spring Boot/Spring Cloud、Hibernate、MyBatis、RabbitMQ、Kafka、Zookeeper、MySQL、Redis、JVM，如下图所示： 共包含 208 道面试题，本文的宗旨是为读者朋友们整理一份详实而又权威的面试清单，下面一起进入主题吧。 Java 基础 1. JDK 和 JRE 有什么区...
这 20 道 Redis 经典面试题你还不会，就别去面试了！
weixin_70730532的博客
07-11 364
本系列会系统的整理 MySQL，Redis，SSM 框架，算法，计网等面试常问技术栈的面试题，本文主要是整理分享了 Redis 相关的面试题，MySQL、Spring、JVM 之前已经更新了，需要的同学也可以去看一下，希望对正在准备秋招的你们有所帮助！Redis，英文全称是 Remote Dictionary Server（远程字典服务），是一个开源的使用 ANSI C 语言编写、支持网络、可基于内存亦可持久化的日志型、Key-Value 数据库，并提供多种语言的 API。与 MySQL 数据库不同的是，R
zookeeper分布session式实现
04-01
zookeeper分布session式实现
ZooKeeper的会话机制Session
MuErHuoXu的博客
01-10 5013
为什么会有会话机制Session 首先我们看下ZooKeeper的架构图，client跟ZooKeeper集群中的某一台server保持连接，发送读/写请求，读请求直接由当前连接的server处理，写请求由于是事务请求，由当前server转发给leader进行处理。同时，client还能接收来自server端的watcher通知。 而所有的这些交互，都是基于client和ZooKeeper的se...
ZooKeeper系列：session会话
jcc4261的博客
03-16 588
如果经过时间t之后服务接收不到这个会话的任何消息，服务就会声明此会话过期。在集群模式下，会话超时就会触发客户端重连，在重新连到新的服务器节点时，有个要求就是这个节点的ZooKeeper状态要和最后连接的服务器的ZooKeeper状态保持最新。会话超时时间，客户端在构造ZooKeeper实例时候，向服务端发送配置的超时时间，server端会根据自己的超时时间限制最终确认会话的超时时间。会话ID，用来唯一标识一个会话，每次客户端创建的时候，ZooKeeper都会为其分配一个全局唯一的sessionID。
记录 zookeeper频繁得重复创建连接然后关闭影响节点稳定问题
日常记录
04-22 2383
背景 hadoop集群上运行着flink数据同步任务。数据同步得技术架构是flume采集到kafka，再用flink程序进行消费得流程。近来发现数据不稳定。开始因为一些不同机构之间有些网络升级等问题导致。后来出现问题：数据同步错误；并且kafka单台服务挂掉，zookeeper单台服务挂掉。 排错过程记录 1.kafka集群修改 发现数据不稳定后，首先在yarn上发现flink流任务正在运行，未挂掉。再连接服务器查看java进程 jps 结果发现某一台机器没有kafka任务和zookeeper任务 31
Zookeeper学习笔记——Zookeeper会话
qq_41688455的博客
11-17 530
会话是Zookeeper中的重要概念之一，客户端与服务端之间的任何交互操作都与会话相关，比如：临时节点的生命周期、客户请求的顺序执行、Watcher通知机制等。 1、会话状态 Zookeeper的会话状态可分为CONNECTING、CONNECTED、RECONNECTING、RECONNECTED和CLOSE等。 开始创建Zookeeper句柄时，会话的状态为CONNECTING，同时，客户端会...
基于ZooKeeper的分布式Session实现
热门推荐
谈祥庆的博客
01-02 3万+
1．  认识ZooKeeper ZooKeeper——“动物园管理员”。动物园里当然有好多的动物，游客可以根据动物园提供的向导图到不同的场馆观赏各种类型的动物，而不是像走在原始丛林里，心惊胆颤的被动物所观赏。为了让各种不同的动物呆在它们应该呆的地方，而不是相互串门，或是相互厮杀，就需要动物园管理员按照动物的各种习性加以分类和管理，这样我们才能更加放心安全的观赏动物。回到我们企业级应用系统中，随着
ZooKeeper JAVA API 之环境准备和创建会话
技术分享
05-01 164
    Zookeeper是一个开放源代码的分布式协调服务，由雅虎创建，是Google Chubby的开源实现。Zookeeper的设计目标是将那些复杂且容易出错的分布式一致性服务封装起来，构成一个高效可靠的元语集，并以一系列简单易用的接口提供给用户使用。 单机模式部署与运行（Windows） 确保已经安装了JAVA 1.6及其以上版本的JDK 下载Zookeeper    http:/...
Zookeeper实战-使用原生api开发
进击的数据小白
02-29 688
zookeeper 提供了java api来进行node的创建、删除、数据的获取设置、子节点的状态的观察、权限的设置。并且zookeeper客户端提供了异步操作，并有监听机制，更为方便的提供对zookeeper数据的监听和维护，本文通过几个例子来进行java api的学习和使用。 依赖引入 java api要引入mvn依赖，这里采用3.4.8，如下所示: <dependency> ...
ZooKeeper分布式协调：主-从应用与API实践
书中通过实例和深入的解释，帮助读者理解和掌握ZooKeeper的核心概念和使用。 在描述中提到的一个具体示例是关于空闲/忙碌状态的管理，这是一个主从应用的场景。在这个例子中，从节点并不直接使用空闲/忙碌状态，以...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值