MySQL调优(一)-MySQL架构

Mysql基本架构图

mysql基本架构图

连接器

  • 连接器负责跟客户端建立连接,获取权限、维持和管理连接
    1、用户名密码验证
    2、查询权限信息,分配对应的权限
    3、可以使用show processlist查看现在的连接
    4、如果太长时间没有动静,就会自动断开,通过wait_timeout控制,默认8小时
  • 连接可以分为两类
    1、长连接:推荐使用,但是要周期性的断开连接
    2、短连接:指的是每次执行完很少的几次查询就断开连接,下次查询再重新建立一个。

查询缓存(MySQL8.0 版本后移除)

  • 当执行查询语句的时候,会先去查询缓存的结果,之前执行过的sql语句及其结果可能以Key-value的形式存储在缓存中,如果额能找到则直接返回,如果找不到,就继续执行后续的阶段。

但是不推荐使用查询缓存:
1、查询缓存的失效比较频繁,只要表更新,缓存就会清空
2、缓存对应更新的数据命中率比较低

分析器

  • 词法分析:Mysql需要把输入的字符串进行识别
  • 语法分析
    1、根据语法规则判断这个SQL语句是否满足Mysql的语法,如果不符合就会报错 “You have an error in your SQL synta”

优化器

  • 在具体执行SQL语句之前,要先经过优化器的处理
    1、当表中有多个索引的时候,决定用哪个索引
    2、当SQL语句需要做多表关联的时候,决定表的连接顺序
  • 不同的执行方式对SQL语句的执行效率影响很大
    1、RBO:基于规则的优化
    2、CBO:基于成本的优化

Redo日志-innodb存储引擎的日志文件

  • 当发生数据修改的时候,innodb引擎会将记录写到redo log中,并更新内存,此时更新就算是完成了,同时innodb引擎会在何时的时机将记录操作到磁盘中
  • Redo log是固定大小的,是循环写入的过程
  • 有了redo log之后,innodb就可以保证即使数据库发生异常重启,之前的记录也不会丢失,叫做crash-safe


    image.png

疑惑?

  • 既然要避免IO,为什么写redo log的时候不会造成io的问题?


    image.png

    image.png

undo log

  • undo log是为了实现事务的原子性,在Mysql数据库InnoDB存储引擎中,还用undo log来实现多版本并发控制(MVCC)
  • 在操作任何数据之前,首先将数据备份到一个地方(这个存储数据备份的地方称为 undo log)。然后进行数据的修改。如果出现了错误或者用户执行了Rollback语句,系统可以利用 undo log中的备份将数据恢复到事务开始之前的状态
  • undo log是逻辑日志,可以理解为:
    1、当delete一条记录时,undo log中会记录一条对应的inser记录
    2、当insert一个记录时,undo log中会记录一条对应的delete记录
    3、当update一条记录时,它记录一条对应相反的update记录

bin log 服务端的日志文件

  • bin log时server层的日志,主要做mysql功能层面的事情
  • 与redo日志的区别
    1、redo是innodb独有的,bin log是所有引擎都可以使用的
    2、redo是物理日志,记录的是在某一个数据页上做了什么修改,bin log是逻辑日志,记录的是这个语句的原始逻辑
    3、redo是循环写的,空间会用完,bin log是可以追加的,不会覆盖之前的日志信息

bin log

  • bin log 中会记录所有的逻辑,并且采用追加写的方式
  • 一般在企业中数据库会有备份系统,可以定期执行备份,备份呢的周期可以自己设置
  • 恢复数据的过程:
    1、找到最近一次的全量备份数据
    2、从备份的时间点开始,将备份的bin log取出来,重放到要恢复的那个时刻

数据更新的流程

image.png

执行流程

1、执行器先从引擎中找到数据,如果在内存中直接返回,如果不在内存中,查询后返回
2、执行器拿到数据之后会先修改数据,然后条用引擎接口重新写入数据
3、引擎将数据更新到内存,同时写数据到redo中,此时处于prepare阶段,并通过执行器执行完成,随时可以操作
4、执行器生成这个操作的bin log
5、执行器调用引擎的事务提交接口,引擎把刚刚写完的redo改成commit状态,更新完成

redo log的两阶段提交

  • 先写redo log后写binlog:
    假设在redo log写完,binlog还没有写完的时候,MySQL进程异常重启。由于我们前面说过的,redo log写完之后,系统即使崩溃,仍然能够把数据恢复回来,所以恢复后这一行c的值是1。但是由于binlog没写完就crash了,这时候binlog里面就没有记录这个语句。因此,之后备份日志的时候,存起来的binlog里面就没有这条语句。然后你会发现,如果需要用这个binlog来恢复临时库的话,由于这个语句的binlog丢失,这个临时库就会少了这一次更新,恢复出来的这一行c的值就是0,与原库的值不同。
  • 先写binlog后写redo log:
    如果在binlog写完之后crash,由于redo log还没写,崩溃恢复以后这个事务无效,所以这一行c的值是0。但是binlog里面已经记录了“把c从0改成1”这个日志。所以,在之后用binlog来恢复的时候就多了一个事务出来,恢复出来的这一行c的值就是1,与原库的值不同。
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
禁止转载,如需转载请通过简信或评论联系作者。
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 215,463评论 6 497
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 91,868评论 3 391
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 161,213评论 0 351
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 57,666评论 1 290
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 66,759评论 6 388
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 50,725评论 1 294
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,716评论 3 415
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,484评论 0 270
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,928评论 1 307
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,233评论 2 331
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,393评论 1 345
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,073评论 5 340
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,718评论 3 324
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,308评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,538评论 1 268
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,338评论 2 368
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,260评论 2 352

推荐阅读更多精彩内容