从死锁认识MySQL锁

前言

作为后端开发人员,几乎每天都与数据库打交道。对着变化莫测的需求,紧张的工期,很多程序员日复一日写着CRUD代码,无暇理会数据库实际执行原理,这是技术提高的门槛。
秉着工作处处皆学问,知其然知其所以然的信念,日常生活中我都会把遇到的问题摘录下来,总结分析背后的技术原理。

一、遇见死锁

组长让我实现一个提交申请单的功能。因为用户可以重复提交申请,而申请只能保留一份,因此我在插入新申请insert操作前,先按照用户id删除delete他之前所有申请记录。确保两个操作的一致性,我加了事务@Transactional。
简单的功能,简洁的实现。事与愿违,表中出现重复用户id记录的。查看数据发现,新的记录插入成功,是旧的数据没有删除成功。既然是事务,为什么一个执行成功,一个失败呢?

+-----------------+-----------+---------------+-----------+
| id              | member_id | nick_name     | is_delete |
+-----------------+-----------+---------------+-----------+
| 181025163317920 |      3288 | 蕉仔伟🍌        |          |
| 181026142458439 |      3288 | 赛亚人        |          |
| 181030104733141 |      3288 | 百变小樱      |           |
| 181030105733272 |      3288 | 柴犬慕斯      |           |
+-----------------+-----------+---------------+-----------+
4 rows in set (0.01 sec)

带着问题找原因,看看数据库的状态报告:

mysql> show engine innodb status;
| InnoDB |      |
=====================================
LATEST DETECTED DEADLOCK
------------------------
2018-11-28 20:07:24 0x7f286deb7700
*** (1) TRANSACTION:
TRANSACTION 41443739, ACTIVE 0 sec inserting
mysql tables in use 1, locked 1
LOCK WAIT 3 lock struct(s), heap size 1136, 2 row lock(s), undo log entries 1
MySQL thread id 230974, OS thread handle 139810027362048, query id 73704659 172.31.0.8 apiuser update
INSERT INTO media_user_apply  ( id,real_name,nick_name,member_id,media_user_id,mobile,sex,id_num,education,contact_way,summary,is_delete,status,create_time,update_by,update_time,type,member_type ) VALUES( 181115110822284,'12','12',2910,null,null,1,'',0,'','',0,0,'2018-11-15 11:08:19.59',null,null,1,1 )
*** (1) WAITING FOR THIS LOCK TO BE GRANTED:
RECORD LOCKS space id 1045 page no 4 n bits 136 index member_id_index of table `mongcent_news`.`media_user_apply` trx id 41443739 lock_mode X locks gap before rec insert intention waiting
Record lock, heap no 34 PHYSICAL RECORD: n_fields 2; compact format; info bits 0
 0: len 4; hex 80000b5f; asc    _;;
 1: len 8; hex 8000a4a5997e1503; asc      ~  ;;

*** (2) TRANSACTION:
TRANSACTION 41443740, ACTIVE 0 sec inserting, thread declared inside InnoDB 5000
mysql tables in use 1, locked 1
3 lock struct(s), heap size 1136, 2 row lock(s), undo log entries 1
MySQL thread id 242484, OS thread handle 139811600373504, query id 73704661 172.31.0.8 apiuser update
INSERT INTO media_user_apply  ( id,real_name,nick_name,member_id,media_user_id,mobile,sex,id_num,education,contact_way,summary,is_delete,status,create_time,update_by,update_time,type,member_type ) VALUES( 181115110822286,'12','12',2910,null,null,1,'',0,'','',0,0,'2018-11-15 11:08:19.591',null,null,1,1 )
*** (2) HOLDS THE LOCK(S):
RECORD LOCKS space id 1045 page no 4 n bits 136 index member_id_index of table `mongcent_news`.`media_user_apply` trx id 41443740 lock_mode X locks gap before rec
Record lock, heap no 34 PHYSICAL RECORD: n_fields 2; compact format; info bits 0
 0: len 4; hex 80000b5f; asc    _;;
 1: len 8; hex 8000a4a5997e1503; asc      ~  ;;

*** (2) WAITING FOR THIS LOCK TO BE GRANTED:
RECORD LOCKS space id 1045 page no 4 n bits 136 index member_id_index of table `mongcent_news`.`media_user_apply` trx id 41443740 lock_mode X locks gap before rec insert intention waiting
Record lock, heap no 34 PHYSICAL RECORD: n_fields 2; compact format; info bits 0
 0: len 4; hex 80000b5f; asc    _;;
 1: len 8; hex 8000a4a5997e1503; asc      ~  ;;

*** WE ROLL BACK TRANSACTION (2)

从报告的LATEST DETECTED DEADLOCK中,我们可以看到执行事务过程中,发生的死锁。而发生死锁的原因,有句话很关键

RECORD LOCKS space id 1045 page no 4 n bits 136 index member_id_index of table mongcent_news.media_user_apply trx id 41443739 lock_mode X locks gap before rec insert intention waiting

这句话究竟告诉了我们什么呢?我们先来普及一下MySQL锁的知识

二、MySQL锁

1. 共享锁与排他锁

在 InnoDB 中实现了两个标准的行级锁,可以简单的看为两个读写锁:

  • S :共享锁(Share Lock)又叫读锁,其他事务可以继续加共享锁,但是不能继续加排他锁。
  • X :排他锁(Exclusive Lock)又叫写锁,一旦加了写锁之后,其他事务就不能加锁了。

锁与锁之间具有兼容性兼容性是指事务 A 获得一个某行某种锁之后,事务 B 同样的在这个行上尝试获取某种锁,如果能立即获取,则称兼容,反之叫冲突

X S
X 冲突 冲突
S 冲突 兼容

纵轴是代表已有的锁,横轴是代表尝试获取的锁。

2.意向锁

意向锁在 InnoDB 中是表级锁,顾名思义它是用来表达一个事务想要获取什么。如果用行锁加表锁,需要遍历每一行是否有行锁,但使用意向锁,只需要判断意向锁中的行就可以了。
事务在请求某一行的S锁和X锁前,需要先获得对应表的IS、IX锁。
意向锁分为:

  • IS:意向共享锁(Intent Share Lock)表达一个事务想要获取一张表中某几行的共享锁。
  • IX:意向排他锁(Intent Exclusive Lock)表达一个事务想要获取一张表中某几行的排他锁。

在 InnoDB 中由于支持的是行级的锁,因此 InnboDB 锁的兼容性可以扩展如下:

IX IS X S
IX 兼容 兼容 冲突 冲突
IS 兼容 兼容 冲突 兼容
X 冲突 冲突 冲突 冲突
S 冲突 兼容 冲突 兼容

三.锁算法

1.记录锁(Record Lock)

记录锁是锁住记录的,这里要说明的是这里锁住的是索引记录,而不是我们真正的数据记录:
如果锁的是非主键索引,会在自己的索引上面加锁之后然后再去主键上面加锁锁住。
如果没有表上没有索引(包括没有主键),则会使用隐藏的主键索引进行加锁。
如果要锁的列没有索引,则会进行全表记录加锁。

2.间隙锁(Gap Lock)

间隙锁顾名思义锁间隙,不锁记录。锁间隙的意思就是锁定某一个范围,间隙锁又叫 gap lock,其不会阻塞其他的 gap lcok,但是会阻塞 插入间隙锁 ,这也是用来防止 幻读 的关键。

3.插入意向锁

插入意向锁是一种Gap Lock,在insert操作时产生。

  • 插入意向锁之间互不排斥,所以即使多个事务在同一区间插入多条记录,只要记录本身(主键、唯一索引)不冲突,那么事务之间就不会出现冲突等待。

4.Next-key Lock

这个锁本质是记录锁+ 间隙锁。在 RR 隔离级别下(InnoDB 默认),InnoDB 对于行的扫描锁定都是使用此算法,但是如果查询扫描中有唯一索引会退化成只使用记录锁。
为什么呢? 因为唯一索引能确定行数,而其他索引不能确定行数,有可能在其他事务中会再次添加这个索引的数据造成幻读。
这里也说明了为什么 MySQL 可以在 RR 级别下解决幻读。

请求/持有 Gap Insert Intention Record Next-Key
Gap 兼容 兼容 兼容 兼容
Insert Intention 冲突 兼容 兼容 冲突
Record 兼容 兼容 冲突 冲突
Next-Key 兼容 兼容 冲突 冲突

四.解决死锁

理解完InnoDB的锁与锁算法,我们回到最初的问题。探索一下,为什么我的代码会发生死锁。
从网上找到日志的翻译:

lock_mode X locks gap before rec 表示Gap Lock,Gap锁是用来防止insert的
lock_mode X locks rec but not gap 表示Record Lock

lock_mode X 表示Next-Key Lock
lock_mode X insert intention waiting 表示Insert Intention Lock

因此锁日志中lock_mode X locks gap before rec insert intention waiting的意思就是在事务1、事务2持有Gap Lock的时,再请求Insert Intention Lock。我们之前说了在持有间隙锁时,请求插入意向锁,会导致冲突,阻塞事务。
本来两个事务如果分别独立运行都能顺利运行。但如果是同时执行的时候,就不一样了:
1.第一句命令执行了delete操作,事务1、事务2分别都对目标索引加了Next-key Lock
2.事务1执行insert操作前,它会请求Insert Intention Lock,当它发现有事务2的Gap Lock,于是发生了冲突,事务1阻塞。同理,事务2执行insert操作也发生了冲突,事务1阻塞。
3.此时事务1等事务2释放锁,事务2等事务1释放锁,出现了回路等待,产生了死锁
4.数据发现了死锁,最终决定WE ROLL BACK TRANSACTION (2),回滚了事务2的插入操作,事务1的插入操作执行成功。

解决方法

死锁的原因在于Gap LockInsert Intention Lock的冲突,而从上面的Next-key Lock定义中得知,如果扫描中有唯一索引会退化成只使用记录锁。所以,我们只要把deletewhere条件改成使用唯一索引或者主键,即可避免产生Gap Lock,从而避免了死锁。

后记

今晚是平安夜,在此我也祝大家的数据库能够平平安安。Merry Christmas !


我全部都要.jpeg
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 218,525评论 6 507
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 93,203评论 3 395
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 164,862评论 0 354
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,728评论 1 294
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,743评论 6 392
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,590评论 1 305
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,330评论 3 418
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 39,244评论 0 276
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,693评论 1 314
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,885评论 3 336
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 40,001评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,723评论 5 346
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,343评论 3 330
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,919评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 33,042评论 1 270
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 48,191评论 3 370
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,955评论 2 355

推荐阅读更多精彩内容

  • Mysql概述 数据库是一个易于访问和修改的信息集合。它允许使用事务来确保数据的安全性和一致性,并能快速处理百万条...
    彦帧阅读 13,678评论 10 461
  • MySQL技术内幕:InnoDB存储引擎(第2版) 姜承尧 第1章 MySQL体系结构和存储引擎 >> 在上述例子...
    沉默剑士阅读 7,417评论 0 16
  • 当一个系统访问量上来的时候,不只是数据库性能瓶颈问题了,数据库数据安全也会浮现,这时候合理使用数据库锁机制就显得异...
    初来的雨天阅读 3,574评论 0 22
  • 壹 “不如在最初,你在旁边,默默看着我,我心知你在看我,转过脸去,把眼睛微微掠起看往远处。那里有夏日夜色中的树枝,...
    宁子Lotus阅读 560评论 0 0
  • 今天读完托马斯.斯坦利《邻家的百万富翁》这本书,这本书写于1995年,主要是通过大量收集分析百万富翁样本,对他们的...
    周七七智趣人生阅读 211评论 0 0