《设计数据密集型应用》第五章(3) 数据副本:Multiple-leader

上一节我们介绍了关于数据副本中的Single leader模型,该模型的一大缺点就是只有一个leader,如果leader出现故障,将无法向数据库中写入数据。

本节我们将介绍Multiple leader的复制模型,也就是有多个leader接收写请求,并将请求转发给其他follower,以及未直接接收到该请求的leader。

使用场景

对于单数据中心来说,使用多个leader的模型,增加的复杂性要比得到的收益更大。那么,Multiple-leader的使用场景主要有哪些呢?

多数据中心操作

对于多数据中心来说,如果使用Single-leader的话,leader只能在某个数据中心,所有数据中心的写请求都需要发送到该leader上。而使用Multiple-leader是很合适的,配置方式是为每个数据中心配置一个leader,每个leader将数据更新发送给其他的leader,数据中心内部使用常规的leader-follower的复制方式。

多数据中心的Multiple-leader

比较一下多数据中心的Single-leader和Multiple-leader两种方式:

  • 性能:Multiple-leader允许写请求发送到离用户最近的数据中心,减少了数据传输的延迟,可以得到更好的性能。
  • 数据中心故障容忍度:Single-leader在数据中心出现故障时,由其他数据中心的follower升级为leader;Multiple-leader可以直接将请求发送到其他数据中心,故障的数据中心在恢复前可以追上最新的进度。
  • 网络故障容忍度:Multiple-leader对网络故障的容忍度更高,可以在临时的网络故障下继续工作。

Multiple-leader的最大缺点是当数据被多个数据中心修改时,可能出现数据的冲突,在后面会讨论这个问题。由于Multiple-leader的特性在和数据库的其他特性一起使用时存在一些不可预知的问题,比如自增key、触发器等,Multiple-leader的使用是比较危险,并且是要尽量避免的。

客户端离线操作

如果客户端希望在不连接网络时进行数据操作,使用Multiple-leader是合适的。比如用户的移动设备可能未连接网络,此时可以认为设备中的本地数据库是一个数据中心,可以先修改本地数据库,然后在连接网络后将修改同步到远程数据库。

这更像是一个多数据中心的问题,每个设备是一个数据中心,并且数据中心的网络连接是不可靠的。使用Multiple-leader能解决该问题,但仍然会存在一些数据复制的错误,需要一些tricky的手段。

合作编辑

一些在线编辑软件,允许多用户同时编辑一个文档。此时想象成用户修改本地的数据块,并将修改的数据异步复制到其他服务器,同样需要处理的是冲突的问题。

处理写冲突

Multiple-leader的最大问题就是可能会出现写冲突,因此需要解决写冲突的问题。

两个leader的写冲突
同步/异步冲突检测

如果采用异步冲突检测的机制,多用户都可以成功修改各自的数据,在随后的某个点进行冲突检测,此时可能已经来不及提示用户解决冲突了。

如果采用同步冲突检测的机制,只有数据replica复制完成后,其他用户才能写入数据,这样就丢失了Multiple-leader的好处,还不如使用Single-leader了。

避免冲突

解决冲突最简单的方法是避免冲突。比如用户只能修改他自己的数据时,可以将每个用户的写请求使用路由至相同的数据中心,从该用户的视角来看,这是一个Single-leader的模型。

但是当某个数据中心出现故障时,该方法就失效了,仍然需要处理不同数据中心可能的数据差异。

转换到一致的状态

如果能够将不同数据中心的数据副本的修改,最终统一为一致的状态,那么就不存在数据冲突的问题了。实现的方式有以下几种:

  • 为每个写请求分配一个ID,选择最高的ID作为winner,并且丢弃其他的写请求。如果使用的时间戳,这项技术成为last write wins(LWW)。这项技术是很流行的,但可能会导致数据丢失,后面会继续讨论。
  • 为每个数据replica分配一个ID,允许更高ID的replica覆盖低ID的replica。这种方法同样有可能会导致数据丢失。
  • 将所有值合并在一起,比如按字母排序并串联起来。
  • 在外部记录所有数据冲突,并由用户开发的应用代码在随后解决这些冲突。
自定义冲突解决逻辑

最合适的方法是由应用自定义冲突解决的方式,解决的时机有以下两种:

  • 写入时:在写入时检测到冲突后,调用冲突处理器,执行写好的脚本解决冲突。
  • 读取时:冲突发生时存储所有的值,在读取时检测到冲突,应用解决该冲突并将正确的数据写回到数据库中,CouchDB使用的是该方式。

需要注意,这种冲突解决的方法没有考虑一个事务中包含多个请求时事务的完整性。

Multiple-leader的拓扑结构

在Multiple-leader的模型下,leader之间的拓扑结构有以下三种形式:

Multiple-leader的三种拓扑结构
  • 圆形/星型拓扑:写请求在leader之间按一定顺序转发。为了避免无限循环,为每个写请求打一个标记,标记已经处理过的leader,leader会丢弃已经处理过的请求。当某个node出现故障时,系统将无法通信,只能等待节点恢复。

  • 多对多拓扑:写请求由一个leader同时发送给其他所有leader。该拓扑结构可以避免单一节点的故障导致的问题,但由于节点之前的传输速度不同,可能导致数据的顺序错误。

多对多拓扑,数据顺序错误

这类似一种因果关系的保证,因此可以使用类似时间戳的方式保证执行的先后顺序,但在多leader的情况下时钟时间是不能被信任的。后面我们会介绍一种称为version vertors的技术是用来解决该问题的。

小结

Multiple-leader的数据冲突问题,目前仍然很难被完美的解决,因此在确定使用该模型时,需要仔细阅读文档,并进行充分的测试,以保证提供了我们需要的可靠性。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 218,546评论 6 507
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 93,224评论 3 395
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 164,911评论 0 354
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,737评论 1 294
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,753评论 6 392
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,598评论 1 305
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,338评论 3 418
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 39,249评论 0 276
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,696评论 1 314
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,888评论 3 336
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 40,013评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,731评论 5 346
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,348评论 3 330
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,929评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 33,048评论 1 270
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 48,203评论 3 370
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,960评论 2 355

推荐阅读更多精彩内容