Zookeeper学习-08 Zookeeper 分布式锁

一、设计

使用临时顺序znode来表示获取锁的请求,创建最小后缀数字znode的用户成功拿到锁。


01 设计.png

二、避免羊群效应(herd effect)

把锁请求者按照后缀数字进行排队,后缀数字小的锁请求者先获取锁。如果所有的锁请求者都watch锁持有者,当代表锁持有者的znode被删除后,所有的锁请求者都会都会通知到(惊着了),但是只有一个锁请求者能拿到锁。这就是羊群效应。


02锁持有者.png

三、代码结构

03代码结构.png
  1. org.apache.zookeeper.recipes.lock.ZNodeName:临时节点名称,能够根据sequence进行排序。实现了Comparable接口。名称中以'-'分割,并且在构造函数中提取sequence值。compareTo方法中,先根据sequence比较,如果相等,再根据前缀prefix比较:


    04 compareTo.png
  2. org.apache.zookeeper.recipes.lock.ZooKeeperOperation:锁实现接口。并且能够实现重试操作。主要实现类为org.apache.zookeeper.recipes.lock.WriteLock中的私有内部类:org.apache.zookeeper.recipes.lock.WriteLock.LockZooKeeperOperation,为实际的获取锁操作类。

  3. org.apache.zookeeper.recipes.lock.LockListener:锁监控接口,定义了获取锁和释放锁的回调方法。

  4. org.apache.zookeeper.recipes.lock.ProtocolSupport:主要提供retryOperation等同步操作。

  5. org.apache.zookeeper.recipes.lock.WriteLock:互斥写锁的主要实现,主要是选举一个leader节点。通过调用lock()方法来尝试获取锁。可以注册一个监听器LockListener在获取锁或者是释放锁的时候调用。也可以通过调用 isOwner()来询问是否拥有锁:


    05 lock.png

四、调试跟踪

为了避免超时,更改org.apache.zookeeper.test.ClientBase类中的超时时间设置:


06 clientBase.png

进入org.apache.zookeeper.recipes.lock.WriteLock中的lock()方法:


07 断点lock方法.png

进入org.apache.zookeeper.recipes.lock.ProtocolSupport中的ensureExists方法,判断目录是否存在:


08 断点ensureExists方法.png

如果不存在,则创建,且创建模式为PERSISTENT


09 PERSISTENT.png
10 断点ensureExists方法.png

进入retryOperation方法,通过重试机制(默认重试次数retryCount为10次)执行接口ZooKeeperOperation实现类的execute()方法,


11 断点retryOperation方法.png

具体为执行org.apache.zookeeper.recipes.lock.WriteLock.LockZooKeeperOperation类的execute()方法
努力尝试查找最小后缀数字的znode节点成功拿到锁。


12 execute方法.png

13 锁判断.png

然后再创建一个客户端,再次进行加锁:
14 执行另一个锁.png

15 另一个锁目录判断.png

16案例执行成功.png

五、相关问题

  1. 对于分布式锁的场景,如果创建的是临时节点,当T1请求获取锁后,执行相应业务逻辑,但是此时业务逻辑还没有执行完成,因网络原因导致session过期,临时节点就会被服务端删除。这样的话,其他节点也可以获取锁,分布式锁就被破坏了。对于此种问题,可以通过创建持久性节点来解决。
  2. znode是否类似于Redis中的Key的概念?
    可以把znode理解成Redis的一个Key,但是znode之间有层次关系。
  3. 在某些场景,经常用Redis做分布式锁(setnx命令),只是redis没有将请求者进行排队, 与 zookeeper的分布式锁有和区别?
    如果一个调用setnx的Redis客户端crash,它设置的key还会存在,换言之锁不会自动释放。在ZooKeeper里面,我们用临时节点表示锁,如果ZooKeeper客户端crash,它的锁会自动释放;ZooKeeper实现的锁可以在锁释放时只通知一个锁请求者,还保证锁分配的FIFO。Zookeeper的锁方案更加完备。
    另外Redis(https://redis.io/commands/setnx)本身也不推荐使用setnx了。
  4. zookeeper分布式锁为了避免羊群效应,采用的是公平锁。但是公平锁有一个副作用:
    比如节点1获得了锁,节点2客户端watch节点1,节点3客户端watch节点2,如果此时节点2的客户端心跳失败,触发watch机制,节点3的客户端要更换watch节点,也就是会watch锁持有者节点1,否则一旦节点1释放锁后,其他节点客户端就会永远感知不到。
    但是非公平锁,不会存在这个问题。中间其它未持有锁的client端的session失效,并不会对其他客户端产生影响。在锁竞争并不会特别激烈的场景下,非公平锁的性能会更佳。正因为如此,jdk下JUC包里面的锁类默认都采用非公平模式。
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 160,444评论 4 365
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 67,867评论 1 298
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 110,157评论 0 248
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 44,312评论 0 214
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 52,673评论 3 289
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 40,802评论 1 223
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 32,010评论 2 315
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 30,743评论 0 204
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 34,470评论 1 246
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 30,696评论 2 250
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 32,187评论 1 262
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 28,538评论 3 258
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 33,188评论 3 240
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 26,127评论 0 8
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 26,902评论 0 198
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 35,889评论 2 283
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 35,741评论 2 274