Zookeeper客户端Curator使用(分布式锁实现)

说明

注意: 如未安装Zookeeper服务端,请先移步《docker安装Zookeeper(单点)》搭建简易zk环境。

使用Curator框架实现简单CRUD操作请看《Zookeeper客户端Curator使用(增删改查)》

本篇文章关于Zookeeper实现分布式锁。

概述

1. 线程锁和分布式锁的区别

线程锁:主要用来给方法、代码块加锁。当某个方法或代码使用锁,在同一时刻仅有一个线程执行该方法或该代码段。

图1

线程锁只在同一JVM中有效果,因为线程锁的实现在根本上是依靠线程之间共享内存实现的,比如synchronized是共享对象头,显示锁Lock是共享某个变量(state)。

分布式锁:分布式锁,即分布式系统中的锁,解决了分布式系统中控制共享资源访问的问题。分布式锁是在分布式或者集群环境下,多进程可见,并且互斥的锁。

图2

2. ZK实现分布式锁分析

客户端向zookeeper集群建立连接并在一个永久节点下创建有序的临时子节点后,根据编号顺序,最小顺序的子节点获取到锁,其他子节点由小到大监听前一个节点。

图3

当拿到锁的节点处理完事务后,释放锁,后一个节点监听到前一个节点释放锁后,立刻申请获得锁,以此类推。

图4

3. ZK实现分布式锁流程图

图5

使用

1.原生Zookeeper代码实现分布式锁

按照上面zk分布式锁分析和流程图,使用原生zookeeper相关的api实现分布式锁,具体代码如下

public static class DistributedLock {
    private ZooKeeper client;

    /**
     * 等待zk连接成功
     */
    private CountDownLatch countDownLatch;

    /**
     * 等待节点变化
     */
    private CountDownLatch waitLatch;

    /**
     * 当前节点
     */
    private String currentNode;

    /**
     * 前一个节点路径
     */
    private String waitPath;

    /**
     * 根节点
     */
    private String lockPath;

    public DistributedLock(String connectString, int sessionTimeOut, String path) throws Exception {
        countDownLatch = new CountDownLatch(1);
        waitLatch = new CountDownLatch(1);
        lockPath = path;
        client = new ZooKeeper(connectString, sessionTimeOut, watchedEvent -> {
            // 连上ZK后,释放
            if (watchedEvent.getState() == Watcher.Event.KeeperState.SyncConnected) {
                countDownLatch.countDown();
            }

            // waitLatch 需要释放 (节点被删除并且删除的是前一个节点)
            if (watchedEvent.getType() == Watcher.Event.EventType.NodeDeleted &&
                    watchedEvent.getPath().equals(waitPath)) {
                waitLatch.countDown();
            }
        });

        // 等待Zookeeper连接成功,连接完成继续往下走
        countDownLatch.await();

        Stat stat = client.exists(lockPath, false);
        if (stat == null) {
            // 根节点不存在,则创建
            client.create(lockPath, lockPath.getBytes(), ZooDefs.Ids.OPEN_ACL_UNSAFE, CreateMode.PERSISTENT);
        }
    }

    /**
     * 加锁
     */
    public void lock() {
        try {
            // 创建有序临时子节点
            currentNode = client.create(lockPath + "/seq-", null, ZooDefs.Ids.OPEN_ACL_UNSAFE, CreateMode.EPHEMERAL_SEQUENTIAL);

            // 如果是最小序号节点,则获取锁;如果不是就监听前一个节点
            List<String> children = client.getChildren(lockPath, false);

            // 子节点排序
            Collections.sort(children);

            // 截取子节点名称
            String nodeName = currentNode.substring((lockPath + "/").length());

            // 通过名称获取子节点在集合的位置
            int index = children.indexOf(nodeName);

            if (index == -1) {
                System.out.println("数据异常");
            } else if (index == 0) {
                // 最小序号子节点,则获取锁
                return;
            } else {
                // 监听前一个节点变化
                waitPath = (lockPath + "/") + children.get(index-1);
                client.getData(waitPath,true,null);

                waitLatch.await();
                return;
            }

        } catch (KeeperException e) {
            e.printStackTrace();
        } catch (InterruptedException e) {
            e.printStackTrace();
        }
    }

    /**
     * 释放锁
     *
     * @throws KeeperException
     * @throws InterruptedException
     */
    public void unlock() throws KeeperException, InterruptedException {
        client.delete(currentNode, -1);
    }
}

模拟两个进程抢占分布式锁流程,测试代码如下:

public static void main(String[] args) throws Exception {
    String connString = "192.169.7.171:2181";
    int sessionTimeOut = 3000;
    String lockPath = "/jms";
    // 创建两个分布式锁,模拟两个进程抢占分布式锁流程
    DistributedLock lock1 = new DistributedLock(connString, sessionTimeOut, lockPath);
    DistributedLock lock2 = new DistributedLock(connString, sessionTimeOut, lockPath);

    new Thread(new Runnable() {
        @Override
        public void run() {
            try {
                lock1.lock();
                System.out.println("线程 [" + Thread.currentThread().getName() + "]" + "->抢到分布式锁--开始工作");

                Thread.sleep(5000);
                lock1.unlock();
                System.out.println("线程 [" + Thread.currentThread().getName() + "]" + "->释放分布式锁--结束工作");
            } catch (InterruptedException | KeeperException e) {
                e.printStackTrace();
            }
        }
    }).start();

    new Thread(new Runnable() {
        @Override
        public void run() {
            try {
                lock2.lock();
                System.out.println("线程 [" + Thread.currentThread().getName() + "]" + "->抢到分布式锁--开始工作");

                Thread.sleep(5000);
                lock2.unlock();
                System.out.println("线程 [" + Thread.currentThread().getName() + "]" + "->释放分布式锁--结束工作");
            } catch (InterruptedException | KeeperException e) {
                e.printStackTrace();
            }
        }
    }).start();
}

2.使用Curator框架实现分布式锁

首先要引入Curator框架

<dependency>
      <groupId>org.apache.curator</groupId>
      <artifactId>curator-framework</artifactId>
      <version>5.4.0</version>
</dependency>
<dependency>
      <groupId>org.apache.curator</groupId>
      <artifactId>curator-recipes</artifactId>
      <version>5.4.0</version>
</dependency>

使用InterProcessMutex类来实现分布式锁

public static class DistributedLock {
    private CuratorFramework client;
    private InterProcessMutex mutex;

    public DistributedLock(String connString, String lockPath) {
        this(connString, lockPath, new ExponentialBackoffRetry(3000,5));
    }

    public DistributedLock(String connString, String lockPath, ExponentialBackoffRetry retryPolicy) {
        try {
            client = CuratorFrameworkFactory.builder()
                    .connectString(connString)
                    .retryPolicy(retryPolicy)
                    .build();
            client.start();

            mutex = new InterProcessMutex(client, lockPath);
        } catch (Exception e) {
            e.printStackTrace();
        }
    }

    /**
     * 获取分布式锁
     *
     * @throws Exception
     */
    public void acquire() throws Exception {
        mutex.acquire();
    }

    /**
     * 获取分布式锁(指定时间)
     *
     * @param time  时间
     * @param unit  时间单位
     * @return boolean
     * @throws Exception
     */
    public boolean acquire(long time, TimeUnit unit) throws Exception {
        return mutex.acquire(time, unit);
    }

    /**
     * 释放分布式锁
     *
     * @throws Exception
     */
    public void release() throws Exception {
        mutex.release();
    }
}

模拟50个进程抢占分布式锁,测试代码如下:

public static void main(String[] args) {
    // 模拟50个进程抢占分布式锁
    String connString = "192.169.7.171:2181";
    int threadCount = 50;
    CountDownLatch countDownLatch = new CountDownLatch(threadCount);
    for (int i = 0; i < threadCount; i++) {
        new Thread(new Runnable() {
            @Override
            public void run() {
                try {
                    countDownLatch.await();

                    // 1.创建分布式锁
                    DistributedLock lock = new DistributedLock(connString, "/jms");

                    // 2.抢分布式锁
                    lock.acquire();

                    System.out.println("线程 [" + Thread.currentThread().getName() + "]" + "->抢到分布式锁--开始工作");

                    // 3.模拟执行业务逻辑
                    Thread.sleep(500L);

                    // 4.释放分布式锁
                    lock.release();
                    System.out.println("线程 [" + Thread.currentThread().getName() + "]" + "->释放分布式锁--结束工作");
                } catch (Exception e) {
                    e.printStackTrace();
                }
            }
        }).start();

        countDownLatch.countDown();
    }
}

源码

代码仓库地址: https://github.com/james-java/curator-example

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 216,843评论 6 502
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 92,538评论 3 392
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 163,187评论 0 353
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,264评论 1 292
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,289评论 6 390
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,231评论 1 299
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,116评论 3 418
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,945评论 0 275
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,367评论 1 313
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,581评论 2 333
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,754评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,458评论 5 344
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,068评论 3 327
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,692评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,842评论 1 269
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,797评论 2 369
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,654评论 2 354

推荐阅读更多精彩内容