Zookeeper实现分布式锁(javaAPI)

Zookeeper实现分布式锁(javaAPI)

最近学习了zookeeper,发现zookeeper还是很强大的,能做的事情很多,比如数据的发布/订阅、master选举、分布式队列、分布式锁等等,我自己是在win10装了个虚拟机,然后在上面跑zookeeper(版本是3.4.12,这里的版本是虚拟机上的版本,不是pom的版本)。
使用zookeeper其实有三种方式:javaAPI、zkClient、curator,我这里使用的是javaAPI,其实使用后我个人觉得curator封装的更好,不过这里就不贴代码了,先用javaAPI来实现,因为其他两种都是基于这个去做封装的,所以最麻烦的如果都懂了,换种形式的理解起来也就不难了~

  • 开发环境
    • jdk1.8、springboot、STS

添加的依赖

    <dependency>
        <groupId>org.apache.zookeeper</groupId>
        <artifactId>zookeeper</artifactId>
        <version>3.4.8</version>
    </dependency>

添加完如果快捷提示没有出现对应的类记得install和update一下啊

代码块

DistributeLock.java:

import java.io.IOException;
import java.util.List;
import java.util.Random;
import java.util.SortedSet;
import java.util.TreeSet;
import java.util.concurrent.CountDownLatch;
import java.util.concurrent.TimeUnit;
import org.apache.zookeeper.CreateMode;
import org.apache.zookeeper.KeeperException;
import org.apache.zookeeper.ZooDefs;
import org.apache.zookeeper.ZooKeeper;

public class DistributeLock {
    //根节点
    private static final String ROOT_LOCKS="/LOCKS";

    private ZooKeeper zooKeeper;
    //回话超时时间
    private int sessionTimeout;
    //记录锁节点ID
    private String lockID;
    //保存的数据,这里我就随便写了1和2
    private final static byte[] data = {1,2};
    //计数器
    private CountDownLatch countDownLatch = new CountDownLatch(1);
    //构造方法
    public DistributeLock() throws IOException, InterruptedException {
        this.zooKeeper = ZookeeperClient.getInstance();
        this.sessionTimeout = ZookeeperClient.getSessionTimeout();
    }

    //获取锁的方法
    public boolean lock() throws KeeperException, InterruptedException {
        /**这里有地方是需要注意的,因为我们创建的是临时有序节
        点,所有获取节点的时候我们是认定为获取最小的一个并且获
        取成功则认为它获取到了锁,而创建节点的时候这里传的是
        ROOT_LOCK/,zookeeper在为我们创建节点是时候会帮我
        们生成这样的节点LOCKS/00000001,自动带上序号*/
        lockID = zooKeeper.create(ROOT_LOCKS + "/", data, ZooDefs.Ids.OPEN_ACL_UNSAFE, 
                CreateMode.EPHEMERAL_SEQUENTIAL);
        System.out.println(Thread.currentThread().getName() + 
                "-->成功创建了lock节点[" + lockID + "],开始去竞争锁");

        //获取根节点下的所有子节点
        List<String> childrenNodes = zooKeeper.getChildren(ROOT_LOCKS, true);
        //排序,从小到大
        SortedSet<String> sortedSet = new TreeSet<>();
        for(String c : childrenNodes) {
            sortedSet.add(ROOT_LOCKS + "/" + c);
        }
        String first = sortedSet.first();
        if(lockID.equals(first)) {
            //表示当前就是最小的节点
            System.out.println(Thread.currentThread().getName() + 
                    "-->成功获得锁,lock节点为:["+ lockID +"]");
            return true;
        }
        SortedSet<String> lessThenLockId = sortedSet.headSet(lockID);
        if(!lessThenLockId.isEmpty()) {
            //拿到比当前lockID这个节点更小的上一个节点
            String prevLockID = lessThenLockId.last();
            /**这个地方其实是去监听prevLockID,为什么要这样做呢,因为我当前的lockID不能
               成功获得锁,那其实也就意味着我这个节点下面的更不可能获得锁了,获得锁的只有可
               能是他往前的节点,所以去监听上一个节点
            */
            zooKeeper.exists(prevLockID, new LockWatcher(countDownLatch));
            /**
                传了一个计数器到watcher也就是监听,当我监听到了该节点做了删除操作或者它的会
                话超时了,那么这个时候计数器减1
            */
            countDownLatch.await(sessionTimeout, TimeUnit.MILLISECONDS);
            //上面这段代码意味着如果会话超时或者节点被删除了
            System.out.println(Thread.currentThread().getName() + 
                    "成功获取锁:[" + lockID + "]");
        }
        return true;
    }


    public boolean unlock() {

        System.out.println(Thread.currentThread().getName() + "-->开始释放锁["
                + lockID + "]");
        try {
            //这里delete的时候版本传的-1,意思是忽略版本的控制
            zooKeeper.delete(lockID, -1);
            System.out.println("节点[" + lockID + "]成功被删除");

        } catch (InterruptedException e) {
            // TODO Auto-generated catch block
            e.printStackTrace();
        } catch (KeeperException e) {
            // TODO Auto-generated catch block
            e.printStackTrace();
        }
        return false;
    }

    public static void main(String[] args) {
        Random random = new Random();
        CountDownLatch latch = new CountDownLatch(10);
        for(int i = 0; i < 10; i++) {
            new Thread(() -> {
                DistributeLock lock = null;

                try {
                    lock = new DistributeLock();
                    latch.countDown();
                    latch.await();
                    try {
                        lock.lock();
                    } catch (KeeperException e) {
                        // TODO Auto-generated catch block
                        e.printStackTrace();
                    }
                    Thread.sleep(random.nextInt(500));
                } catch (IOException e) {
                    // TODO Auto-generated catch block
                    e.printStackTrace();
                } catch (InterruptedException e) {
                    // TODO Auto-generated catch block
                    e.printStackTrace();
                } finally {
                    if(lock != null) {
                        lock.unlock();
                    }
                }
            }).start();
        }





    }

}

LockWatcher.java(监听器的代码):

import java.util.SortedSet;
import java.util.TreeSet;
import java.util.concurrent.CountDownLatch;
import org.apache.zookeeper.WatchedEvent;
import org.apache.zookeeper.Watcher;
import org.apache.zookeeper.Watcher.Event.EventType;

public class LockWatcher implements Watcher {

    private CountDownLatch latch;
    //构造函数传了计数器进来
    public LockWatcher(CountDownLatch latch) {
        this.latch = latch;
    }

    @Override
    public void process(WatchedEvent event) {
        // TODO Auto-generated method stub
        //当事件类型为删除节点时,计数器减1
        if(event.getType() == EventType.NodeDeleted) {
            latch.countDown();
        }
    }
}

ZookeeperClient.java:

import java.io.IOException;
import java.util.concurrent.CountDownLatch;
import org.apache.zookeeper.WatchedEvent;
import org.apache.zookeeper.Watcher;
import org.apache.zookeeper.ZooKeeper;

public class ZookeeperClient {
    //这里是我虚拟地的地址,只做了单机的,没做集群,如果是集群地址用逗号分隔开
    private final static String CONNECTIONSTRING = "192.168.1.100:2181";
    //会话超时时间
    private static int sessionTimeout = 5000;

    //获取连接
    public static ZooKeeper getInstance() throws IOException, InterruptedException {
        final CountDownLatch connectStatus = new CountDownLatch(1);
        ZooKeeper zooKeeper = new ZooKeeper(CONNECTIONSTRING, sessionTimeout, new Watcher() {

            @Override
            public void process(WatchedEvent event) {
                // TODO Auto-generated method stub
                //当状态为已连接的时候,计数器减1
                if(event.getState() == Event.KeeperState.SyncConnected) {
                    connectStatus.countDown();
                }
            }
        });
        connectStatus.await();
        return zooKeeper;
    }

    public static int getSessionTimeout() {
        return sessionTimeout;
    }
}

代码到这里就结束啦,其实要跑起来还是不麻烦的,主要是我觉得比较重要的地方是要明白为什么zookeeper为什么可以实现分布式锁,其实这跟他的数据模型有很大的关系(树形),而我们这里为什么使用的是临时有序节点,一是因为有序的,所以获取锁的原则是以获取到最小节点的判定为成功,二是因为会话关闭后节点不会一直存在于zookeeper当中。

如果大家发现有什么问题或者更好的意见欢迎交流啊~


  • 0
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
### 回答1: 使用 ZooKeeper 实现分布式锁最常见的方法是使用公平(Fair Lock)。在这种情况下,在 ZooKeeper 集群中创建一个特殊的临时节点,并使用它来保持定状态。当一个客户端尝试获取时,它会尝试创建这个临时节点,如果节点创建成功,则说明该客户端已经获得了。 使用 ZooKeeper 进行分布式锁实现需要使用 ZooKeeper 的原子操作,例如创建节点和监视节点,以保证的正确性。 代码示例如下: ```java public class DistributedLock { private ZooKeeper zk; private String lockNode; private String lockPath; public DistributedLock(ZooKeeper zk, String lockNode) { this.zk = zk; this.lockNode = lockNode; this.lockPath = "/locks/" + lockNode; } public void lock() throws Exception { while (true) { try { zk.create(lockPath, new byte[0], ZooDefs.Ids.OPEN_ACL_UNSAFE, CreateMode.EPHEMERAL); return; } catch (KeeperException.NodeExistsException e) { waitForLock(); } } } public void unlock() throws Exception { zk.delete(lockPath, -1); } private void waitForLock() throws Exception { CountDownLatch latch = new CountDownLatch(1); Watcher lockWatcher = new Watcher() { @Override public void process(WatchedEvent event) { if (event.getType() == EventType.NodeDeleted) { latch.countDown(); } } }; zk.exists(lockPath, lockWatcher); latch.await(); } } ``` 该代码示例提供了一个简单的实现,可以作为创建自己的分布式锁的基 ### 回答2: 在基于 ZooKeeper 实现 Java 分布式锁的过程中,可以按照以下步骤进行: 1. 创建一个基于 ZooKeeper 的客户端对象。 2. 在 ZooKeeper 上创建一个持久化的节点,作为的根节点。 3. 当需要进行操作时,创建一个临时有序节点作为当前请求的节点。 4. 调用 `getChildren` 方法获取根节点下的所有节点,并根据节点的序号进行排序。 5. 检查当前节点是否是根节点下序号最小的节点,如果是则获取到,执行业务逻辑。 6. 如果当前节点不是根节点下序号最小的节点,则注册监听根节点下序号比自己小一的节点。 7. 当监听到序号比自己小一的节点删除时,重复步骤 4-6 直到获取到。 8. 业务逻辑执行完成后,可以删除当前节点,释放资源。 此外,还需要特别注意以下几个问题: 1. 分布式锁的超时机制:在创建临时节点时,可以指定一个超时时间,当超过该时间后,如果还未获取到,可以删除当前节点,避免死。 2. 的释放:在业务逻辑执行完成后,需要手动删除当前节点。如果由于某些原因未能正常删除,则需要提供一种机制,在节点创建时设置一个 TTL(time-to-live),让 ZooKeeper节点过期后自动删除。 3. 节点的竞争:在并发较高的情况下,可能会出现多个客户端同时创建临时节点的情况。这时可以使用 `CyclicBarrier` 或者 `CountDownLatch` 进行同步,确保每次只有一个客户端创建节点。 4. 异常情况的处理:在进行操作时,需要处理各种异常情况,比如连接断开、网络超时等,保证系统的稳定性和可靠性。 综上所述,基于 ZooKeeper 可以实现 Java 分布式锁,通过创建临时有序节点和监听上一个节点的删除来实现的竞争和获取。 ### 回答3: 实现基于 ZooKeeperJava 分布式锁可以遵循以下步骤: 1. 连接 ZooKeeper:首先,通过 Java API 连接到 ZooKeeper 服务器,可以使用 zookeeper API 提供的 ZooKeeper 类来创建一个连接对象。 2. 创建节点:在 ZooKeeper 上创建一个父节点作为的根节点,该节点的所有子节点都作为节点。可以使用 zookeeper API 的 create() 方法创建临时顺序节点。 3. 获取:每个需要获取的进程都要通过创建一个临时顺序节点来竞争。通过 zookeeper API 的 getChildren() 方法获取根节点的所有子节点,如果创建的节点序号是当前所有节点中最小的,则表示获取到了。 4. 监听节点变化:如果未能获取到,应该在创建节点后,使用 zookeeper API 的 exists() 方法注册一个监听器来监听创建的子节点。当监听到创建的子节点发生变化时,判断自己的节点是否变成了最小的节点,如果是则表示获取到了。 5. 释放:对于已经获取到的进程,执行完任务后,需要通过 zookeeper API 的 delete() 方法将自己创建的节点删除,这样其他进程就能获取到该了。 需要注意的是,在分布式环境下,网络通信可能会出现延迟或故障,因此需要考虑到这些情况来保证分布式锁的正确性和可靠性。此外,还需考虑到异常情况处理、死检测和容错等问题,以确保分布式锁的高可用性和可靠性。 以上是使用 ZooKeeper 实现 Java 分布式锁的基本步骤,通过合理地使用 ZooKeeperAPI,可以轻松实现分布式环境下的机制。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值