Zookeeper ZAB协议分析

1. ZAB协议

ZAB协议(Zookeeper Atomic Broadcast Protocol)是Zookeeper系统专门设计的一种支持崩溃恢复的原子广播协议。Zookeeper使用该协议来实现分布数据一致性并实现了一种主备模式的系统架构来保持各集群中各个副本之间的数据一致性。

ZAB协议理论与Zookeeper对该协议的实现还是存在一些差别,本文将针对ZAB的协议本身和Zookeeper的实现两个维度来介绍。

1.2 ZAB协议的四阶段

在详细介绍ZAB协议之前,我们先介绍一下ZAB协议中的一些常用术语。

服务器的状态

  • Looking:该状态表示集群中不存在群首节点,进入群首选举过程。
  • Leading:群首状态,表示该服务器是群首节点。
  • Following:跟随者状态,表示该服务器是群首的Follow节点。
    注意:服务器默认是Looking状态

节点的持久数据状态

  • history: 当前节点接收到的事务提议的log
  • acceptedEpoch:follower节点已经接受的leader更改年号的NEWEPOCH提议
  • currentEpoch:当前所处的年代
  • lastZxid:history中最近接收到的提议的zxid

a. 选举阶段

在选举阶段,只要有节点有集群中超过半数的节点支持,该节点就会被作为准Leader。该节点暂不会作为Leader节点来提供服务,能否真正作为Leader节点,还依赖与后续的阶段能否正常完成。

b. 发现阶段

在选举出Leader节点后,集群进入发现阶段。Follow与准Leader进行通信,同步集群中各个节点的状态,确认集群中最新提议历史。


ZAB协议发现阶段

c. 同步阶段

在完成发现阶段后,准Leader可以获取集群中最新的提议历史。准Leader在该阶段会把最新的提议历史同步到集群中的所有节点。当同步完成时,准Leader才会真正成为Leader,执行Leader的工作。


ZAB协议同步阶段

d. 广播阶段

到了该阶段,Zookeeper才能真正对外提供事务服务,leader可以进行消息的广播。


ZAB协议广播阶段

2. Zookeeper的仲裁原则

对于ZAB协议来说,遵循如下的仲裁原则:少数服从多数
深入解读,可以得出如下的几点:

    1. 群首选举过程中有超过一半的节点达成一致则选举过程结束。
    1. 事务的确认同样遵循该原则,只要得到半数以上的支持,则表示事务成功。
    1. 少数服从多数可以保证集群分裂也存在至少一个公共节点。
    1. Zookeeper的集群数配置奇数更为合理,因为n与n+1的容错是相等的,n这里为奇数。

3. Zookeeper对ZAB协议的实现

Java版本对ZAB协议的实现与原理有一定的区别,ZAB的实现只有三个阶段:

  • 选举阶段
  • 恢复阶段(发现阶段+同步阶段)
  • 广播阶段

3.1. 选举阶段

服务选举阶段,要求服务器之间两两相交,下面我们详细介绍一下Zookeeper服务器间的连接方式。
首先,每个服务器会记录本服务器自身的sid。sid由服务器的配置文件指定。
其次,Zookeeper只允许sid较大的服务器与sid较小的服务器建立连接。这样可以避免建立多余的连接。

在选举阶段,Zookeeper有不同的算法来实现群首的选举,部分算法已经废弃,这里我们介绍其中的FastLeaderElection算法。

群首选举的流程图如下:


群首选举步骤

选举过程中比较重要的一步是判断是否变更选票,这里的详细判断逻辑如下:

  1. 优先选择epoch较大
  2. epoch相等时,优先选择zxid较大的
  3. epoch和zxid都相等时,选择server id较大的

3.2 恢复阶段

该阶段,follower同步自己的最新的zxid给leader,leader来决定如何同步。
注意:

  1. 同步事务时,Zookeeper根据oldThreshold来判断是同步相差部分还是全量数据
  2. 对于leader zxid之后的事务,leader会发送trunc指令来中支
    恢复的具体流程如下:


    image.png

3.3 广播阶段

该阶段接收服务并进行事务广播,不过详细介绍。

参考资料:https://www.jianshu.com/p/9f3a9528524f

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 204,921评论 6 478
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 87,635评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 151,393评论 0 338
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,836评论 1 277
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,833评论 5 368
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,685评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,043评论 3 399
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,694评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 42,671评论 1 300
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,670评论 2 321
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,779评论 1 332
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,424评论 4 321
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,027评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,984评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,214评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 45,108评论 2 351
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,517评论 2 343

推荐阅读更多精彩内容