Dble路由解析流程

本文分两部分:

第一部分讲解 从NIO获取sql命令到开始路由解析 的这段流程。该部分只是粗略讲解,以便调试代码的时候大约知道“我从何处来?”;
第二部分详细讲解路由解析的流程。

一、从NIO获取sql命令到开始路由解析

1、前端处理器的消费者

启动Skynet,SkynetServer类会开启4个前端处理器线程FrontEndHandlerRunner.java,4个是CPU核数。

for (int i = 0; i < system.getProcessorExecutor(); i++) {
          businessExecutor.execute(new FrontEndHandlerRunnable(frontHandlerQueue));
 }

从下图可以看出,前端处理器线程用来处理一个阻塞队列FrontHandlerQueue中的元素,是一个消费者,run()方法中是一个while(true)的死循环,当阻塞队列FrontHandlerQueue中没有值时,代码阻塞,有值时,向下执行,主要业务由handler.handle();去处理。

public class FrontEndHandlerRunnable implements Runnable {
    private final BlockingQueue<FrontendCommandHandler> frontHandlerQueue;
    public FrontEndHandlerRunnable(BlockingQueue<FrontendCommandHandler> frontHandlerQueue) {
        this.frontHandlerQueue = frontHandlerQueue;
    }

    @Override
    public void run() {
        FrontendCommandHandler handler;
        while (true) {
            try {
                handler = frontHandlerQueue.take();
                .........
                handler.handle();
                .........

2、前端处理器的生产者

消费者有了,接下来我们去找生产者。回到SkynetServer.java中,显而易见,这是一个饿汉式单例,它有很多成员变量,在这里我们可以看到我们需要的前端处理器队列:

private BlockingQueue<FrontendCommandHandler> frontHandlerQueue;

结合前面的代码,我们可以发现,项目中任何给frontHandlerQueue队列添加元素的地方都是生产者,我们在代码中一直追寻frontHandlerQueue变量,最终到了FrontCommandHandler.handler(byte[] data)方法中,该方法的最后一行代码如下:

SkynetServer.getInstance().getFrontHandlerQueue().offer(this);

this为FrontCommandHandler的实例,显而易见,此处就是生产者生产对象,并放入前端处理队列的地方。
由此方法向上追溯,会找到NIOSocketWR.java的asyncRead()方法,它是负责读数据的方法,由RW.java这个负责读写数据的线程来调用。

管中窥豹,可见一斑。其实Skynet中几乎所有的生产者消费者模式都是如此,在SkynetServer.java这个单例中统一定义,根据它里面的引用都能找到其生产者,然后由多线程的处理器去消费。

3、获取sql语句和sql类型

上文提到FrontEndHandlerRunnable.java中的run()方法中调用了 handler.handle(),几乎所有的业务逻辑都由该方法处理,我们点进去继续看这个方法,一直到FrontendCommandHandler.java的handleData(byte[] data)方法,里面有许多的switch—case判断,如下图:

protected void handleData(byte[] data) {
              .........
        switch (data[4]) {
            case MySQLPacket.COM_INIT_DB:
                commands.doInitDB();
                source.initDB(data);
                break;
            case MySQLPacket.COM_QUERY:
                commands.doQuery();
                source.query(data);
                break;
               .........              

handleData(byte[] data)方法的入参就是一个完成的数据包,我们取了data中的第5个字节来判断命令类型,之所以取第5个字节,这是根据mysql协议的约定的报文结构来的,在这里对mysql的报文结构做一个极简单回顾:


MySQL报文结构

如图,Mysql的报文结构前4个字节为消息头,其中前3个是字节合在一起说明本条消息的长度,第4个字节是序号,用于保证消息的顺序。从第5个字节往后为客户端正式的命令请求报文,而命令请求报文的第1个字节又为当前命令类型,如下图:


MySQL客户端命令请求报文

上述代码中有多个switch—case判断,我们只需关注case MySQLPacket.COM_QUERY,我们发出的大部分sql命令都会走这个分支,我们进入source.query(data)中,发现该方法中首次将数据解析成了sql语句:
    public void query(byte[] data) {
        // 取得语句
        String sql = null;
        try {
            MySQLMessage mm = new MySQLMessage(data);
            mm.position(5);
            sql = mm.readString(charsetName.getClient());
        } catch (UnsupportedEncodingException e) {
            .........
        this.query(sql);
    }

追踪代码中 this.query(sql)方法,一直到ServerQueryHandler.java中的query(String sql):

public void query(String sql) {
         .........
         //通过字符串解析,获取sql语句的类型
        int rs = ServerParse.parse(sql);
        .........
        int sqlType = rs & 0xff;
        //处理注释
        if (isWithHint) {
            .........
            c.execute(sql, rs & 0xff);
        } else {
            //根据sql类型,分发给不同的handler进行处理
            switch (sqlType) {
                case ServerParse.EXPLAIN:
                    ExplainHandler.handle(sql, c, rs >>> 8);
                    break;
                case ServerParse.EXPLAIN2:
                    Explain2Handler.handle(sql, c, rs >>> 8);
                    break;
                case ServerParse.DESCRIBE:
                    DescribeHandler.handle(sql, c);
                    break;
                case ServerParse.SET:
                    SetHandler.handle(sql, c, rs >>> 8);
                    break;
                case ServerParse.SHOW:
                    ShowHandler.handle(sql, c, rs >>> 8);
                    break;
                case ServerParse.SELECT:
                    SelectHandler.handle(sql, c, rs >>> 8);
                    break;
                    .........
                default:
                    .........
                    c.execute(sql, rs & 0xff);
            }
        }
    }

该方法较长,篇幅原因,上面只截取了相对重要的部分,注释其实已经很清楚了,最终会交由各个sql类型的handler去处理,以常用的 select 类型为例,调用了SelectHandler.handle(sql, c, rs >>> 8),该方法最终还是调用ServerConnection.java的execute(String sql, int type)方法,殊途同归,其它种类的解析器也会除了特殊情况直接返回的,都会调用该方法去做路由解析。

二、详解路由解析流程

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 219,110评论 6 508
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 93,443评论 3 395
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 165,474评论 0 356
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,881评论 1 295
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,902评论 6 392
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,698评论 1 305
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,418评论 3 419
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 39,332评论 0 276
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,796评论 1 316
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,968评论 3 337
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 40,110评论 1 351
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,792评论 5 346
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,455评论 3 331
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 32,003评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 33,130评论 1 272
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 48,348评论 3 373
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 45,047评论 2 355