索引失效

引言
  • 在一个列或多个列上建立索引,其本质是为这些列上的数据组织成平衡二叉树(B+Tree)之后,将基于全表扫描的O(N)时间复杂度优化为基于二分查找的O(logN)时间复杂度,以大大提升效率。
  • 每一条sql语句在提交到Mysql服务端后,在真正执行前都会经过优化器优化,优化器会判断能否使用索引,如果有多个索引可以使用,还会进行成本计算来选择一个较优的执行方式。
  • 不恰当的sql语句往往无法利用索引来进行查询优化,反而为创建索引白白浪费磁盘空间。
  • 下面介绍几种会造成索引失效的不恰当查询方法。
最左前缀匹配原则
  • 多数索引失效的情况都发生在联合索引的情况,比如在使用联合索引时没有遵守最左前缀匹配原则。
  • 先说下什么是最左前缀匹配原则,首先创建一个简单的表t1,并在a, b列上添加联合索引idx_a_b。
 CREATE TABLE t1(
      id INT NOT NULL auto_increment,
      a  INT NOT NULL,
      b  Int NOT NULL,
      PRIMARY KEY(id),
      KEY idx_a_b(a, b)
     );
  • 再给表中添加一些演示数据
INSERT INTO t1 VALUES(1, 1, 1),(2,1,2),(3,2,2),(4,2,3),(5,2,4),(6,3,1),(7,3,2);
SELECT * FROM t1;
+----+---+---+
| id | a | b |
+----+---+---+
|  1 | 1 | 1 |
|  2 | 1 | 2 |
|  3 | 2 | 2 |
|  4 | 2 | 3 |
|  5 | 2 | 4 |
|  6 | 3 | 1 |
|  7 | 3 | 2 |
+----+---+---+
  • 我们先给出一些符合最左匹配原则和一些不符合最左匹配原则的示例,再分析具体原因。
SELECT * FROM t1 WHERE a = xxx AND b = xxx;  # 符合
SELECT * FROM t1 WHERE a = xxx AND b = xxx;  # 符合
SELECT * FROM t1 WHERE b = xxx;              # 不符合

可以看到最后一条查询语句跳过了a直接对b进行查询,不符合最左前缀匹配原则。(以上只是一些示例,还有很多复杂的情况。)

  • 因为我们在列ab上添加了联合索引idx_a_b, Mysql会为我们在磁盘上建立一个二级索引(非聚簇索引),我们假设这个二级索引如下所示(只是一个简单的示意图,叶子结点之间还有双向链表相连,且叶节点还会存储主键值)
    idx_a_b索引结构
  • 这颗B+树中会根据列a进行排序,在列a值相同的情况下,再根据列b的值进行排序。
  • 现在我们查询(2,2)
SELECT * FROM t1 WHERE a=2 AND b=2;
+----+---+---+
| id | a | b |
+----+---+---+
|  3 | 2 | 2 |
+----+---+---+
  • 再使用EXPLAIN对该条语句进行分析
EXPLAIN SELECT * FROM t1 WHERE a=2 AND b=2;
+------+-------------+-------+------+---------------+---------+---------+-------------+------+-------------+
| id   | select_type | table | type | possible_keys | key     | key_len | ref         | rows | Extra       |
+------+-------------+-------+------+---------------+---------+---------+-------------+------+-------------+
|    1 | SIMPLE      | t1    | ref  | idx_a_b       | idx_a_b | 8       | const,const |    1 | Using index |
+------+-------------+-------+------+---------------+---------+---------+-------------+------+-------------+
  • 发现其确实是利用到了我们设置的索引idx_a_b,其具体步骤:
  1. B+Tree的第一层与非叶子结点(2,4)比较,因为列a值都相同,此时再比较列b的值。
  2. 因为 b的值2 < 4,此时确定到左侧的叶节点上继续查找。
  3. 在左侧的页节点内部继续使用同上二分查找的方式定位到目的节点,最后再根据主键值(未画出)进行回表操作。
  • 同理,我们分析一下SELECT * FROM t1 WHERE a = 2;
EXPLAIN SELECT * FROM t1 WHERE a=2;
+------+-------------+-------+------+---------------+---------+---------+-------+------+-------------+
| id   | select_type | table | type | possible_keys | key     | key_len | ref   | rows | Extra       |
+------+-------------+-------+------+---------------+---------+---------+-------+------+-------------+
|    1 | SIMPLE      | t1    | ref  | idx_a_b       | idx_a_b | 4       | const |    3 | Using index |
+------+-------------+-------+------+---------------+---------+---------+-------+------+-------------+

可以看到也成功利用索引查找到列第一个满足a=2的记录,然后再通过记录间的前后指针将满足要求的记录全部查找出来。

  • 再看一下违反了最左前缀匹配原则的查询SELECT * FROM t1 WHERE b = 2
EXPLAIN SELECT * FROM t1 WHERE b=2;
+------+-------------+-------+-------+---------------+---------+---------+------+------+--------------------------+
| id   | select_type | table | type  | possible_keys | key     | key_len | ref  | rows | Extra                    |
+------+-------------+-------+-------+---------------+---------+---------+------+------+--------------------------+
|    1 | SIMPLE      | t1    | index | NULL          | idx_a_b | 8       | NULL |   13 | Using where; Using index |
+------+-------------+-------+-------+---------------+---------+---------+------+------+--------------------------+

那么问题来了,虽然possible_keys确实等于null,但是实际上key里却用到了idx_a_b索引,不是说违反了最左前缀匹配原则,会发生索引失效么?其实使用了索引和以二分查找的方式使用索引是不一样的,这里虽然用到了idx_a_b索引,也只是因为这个联合索引上有b这个列,并且在这个索引上使用了扫描的方式来获取满足条件的主键值再进行回表操作,与之前利用二分查找的方式相比是很慢的。 我们还可以注意到ref这一列的值为NULL,也就是说确实没用到任何等值匹配条件,索引确实失效了。

  • 为什么违反了最左前缀匹配原则的查询语句就会导致索引失效呢?我们把上图叶子节点的值中a列不考虑,只看b列,则其为1、2、2、3、4、1、2。很显然是无序的,而能够使用二分查找的最根本条件就是有序,所以自然也就无法利用二分查找来提升效率,正确的使用索引了。
利用索引优化排序操作
  • 前面我们说了索引已经为我们将某些列上的数据组织成有序,那么当在查询中涉及排序操作时,很多时候可以避免在内存中排序,提升效率。比如以下三条语句。
EXPLAIN SELECT * FROM t1 ORDER BY a, b;
+------+-------------+-------+-------+---------------+---------+---------+------+------+-------------+
| id   | select_type | table | type  | possible_keys | key     | key_len | ref  | rows | Extra       |
+------+-------------+-------+-------+---------------+---------+---------+------+------+-------------+
|    1 | SIMPLE      | t1    | index | NULL          | idx_a_b | 8       | NULL |   13 | Using index |
+------+-------------+-------+-------+---------------+---------+---------+------+------+-------------+

 EXPLAIN SELECT * FROM t1 ORDER BY a;
+------+-------------+-------+-------+---------------+---------+---------+------+------+-------------+
| id   | select_type | table | type  | possible_keys | key     | key_len | ref  | rows | Extra       |
+------+-------------+-------+-------+---------------+---------+---------+------+------+-------------+
|    1 | SIMPLE      | t1    | index | NULL          | idx_a_b | 8       | NULL |   13 | Using index |
+------+-------------+-------+-------+---------------+---------+---------+------+------+-------------+
EXPLAIN SELECT * FROM t1 ORDER BY  b;
+------+-------------+-------+-------+---------------+---------+---------+------+------+-----------------------------+
| id   | select_type | table | type  | possible_keys | key     | key_len | ref  | rows | Extra                       |
+------+-------------+-------+-------+---------------+---------+---------+------+------+-----------------------------+
|    1 | SIMPLE      | t1    | index | NULL          | idx_a_b | 8       | NULL |   13 | Using index; Using filesort |
+------+-------------+-------+-------+---------------+---------+---------+------+------+-----------------------------+

前两条因为尊从了最左前缀匹配原则,取出的数据本身就是有序的,而最后一条可以看到了使用了Using filesort,因为以b列中的元素本身不是有序的,所以需要在内存中再进行一次排序。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 216,402评论 6 499
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 92,377评论 3 392
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 162,483评论 0 353
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,165评论 1 292
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,176评论 6 388
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,146评论 1 297
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,032评论 3 417
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,896评论 0 274
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,311评论 1 310
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,536评论 2 332
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,696评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,413评论 5 343
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,008评论 3 325
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,659评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,815评论 1 269
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,698评论 2 368
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,592评论 2 353

推荐阅读更多精彩内容

  • 准备数据 最佳左前缀法则 where条件==>order by 条件==>group by 条件 按顺序遵守最佳左...
    尹楷楷阅读 968评论 0 2
  • MySQL索引失效的几种情况 1.索引无法存储null值 a.单列索引无法储null值,复合索引无法储全为null...
    白纸糊阅读 1,811评论 0 1
  • 1.索引无法存储null值 a.单列索引无法储null值,复合索引无法储全为null的值。b.查询时,采用is n...
    鑫奕航阅读 149评论 0 0
  • 1、全值匹配我最爱,最左前缀要遵守 条件与索引一一对应 2、带头大哥不能死,中间兄弟不能断 组合索引 ...
    愤怒的哪吒阅读 330评论 0 0
  • 索引失效 只要我们了解索引是如何使用B+这个数据结构创建,那么就更容易理解下面索引失效的原因。 对staff表的(...
    MononokeHime阅读 898评论 0 1