MySQL InnoDB关键特性 插入缓冲/两次写/自适应哈希索引等

一 插入缓冲

1.1 解决的问题

插入多条数据时,除了需要插入聚集索引外,还需要插入到非聚集索引中,然而非聚集索引的插入走的是随机写,这个操作会影响性能。

1.2 基本原理

插入非聚集索引时,不会直接写到真正的非聚集索引里面去,而是先写到一个叫插入缓冲的临时文件中(注意插入缓冲虽然名字叫缓冲,实际上是临时文件)

然后依赖后台线程将插入缓冲中的内容更新到真正的非聚集索引上去。

由于对插入缓冲的写是连续的,所以这种操作就解决了随机写的问题。

1.3 使用条件

并不是所有对非聚集索引的更新都会使用插入缓冲,需要满足以下两个条件:

  • 非聚集索引不是唯一的
  • 要插入的非聚集索引页不在内存中

为什么不能是唯一索引的?

因为如果是唯一索引,则插入的时候就需要判断是否有重复,而这个判断的过程本身就包含一次随机读,所以即使使用了插入缓冲也无法解决磁盘随机读写的问题

为什么非聚集索引页不能在内存中?

其实并不是非聚集索引页不能在内存中,而是在内存中的非聚集索引页就不需要走插入缓冲了。因为如果在内存中的话,那直接写内存中的缓存页即可。

这里可能还会有疑问,写了内存中的缓存页后,把缓存页刷新到磁盘时不是也会随机写磁盘吗?

其实不是的,内存中的缓存页被更新后不会立即刷新到磁盘中,而是等待后台线程刷新。所以这里也不会随机读写磁盘。

可能还会有疑问,如果内存中的缓存页被更新后不直接刷新到磁盘,那么宕机时岂不是会丢失数据吗?

其实这里也不会,因为在写内存中的缓存页时会先写重做日志,记录更新的内容,而这个重做日志是会在事务提交前就刷新到磁盘中的,所以即使宕机,也可以用重做日志恢复数据。另外重做日志也是磁盘上连续的空间,所以也不会有随机读写

二 两次写

2.1 解决的问题

当数据库写物理页时,如果宕机了,那么可能会导致物理页的一致性被破坏。

可能有人会说,重做日志不是可以恢复物理页吗?实际上是的,但是要求是在物理页一致的情况下。

也就是说,如果物理页完全是未写之前的状态,则可以用重做日志恢复。如果物理页已经完全写完了,那么也可以用重做日志恢复。但是如果物理页前面2K写了新的数据,但是后面2K还是旧的数据,则种情况下就无法使用重做日志恢复了。

这里的两次写就是保证了物理页的一致性,使得即使宕机,也可以用重做日志恢复。

2.2 基本原理

在写物理页时,并不是直接写到真正的物理写上去,而是先写到一个临时页上去,临时页写完后,再写物理页。

这样一来:

  • 如果写临时页时宕机了,物理页还是完全未写之前的状态,可以用重做日志恢复
  • 如果写物理页时宕机了,则可以使用临时页来恢复物理页

2.3 具体实现

  • InnoDB中共享表空间中划了2M的空间,叫做double write,专门存放临时页。
  • InnoDB还从内存中划出了2M的缓存空间,叫做double write buffer,专门缓存临时页
  • 每次写物理页时,先写到double write buffer中,然后从double write buffer写到double write上去。最后再从double write buffer写到物理页上去

你问我为什么要有 double write buffer 这个东西?其实吧InnoDB里面物理页都 会有内存缓存。只是这里单把这2M的缓存取了个名字而已。

三 自适应哈希索引

InnoDB自动监控对索引的查找,如果发现建立哈希索引可以提高效率,则会自动建立

可以使用innodb_adaptive_hash_index来启用或者关闭,默认是开启的

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 212,222评论 6 493
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,455评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 157,720评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,568评论 1 284
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,696评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,879评论 1 290
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,028评论 3 409
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,773评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,220评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,550评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,697评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,360评论 4 332
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,002评论 3 315
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,782评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,010评论 1 266
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,433评论 2 360
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,587评论 2 350

推荐阅读更多精彩内容