记录首次使用RabbitMQ

1、安装及启动:

2、业务逻辑:

  • 每接受50条消息,插入一次数据库
  • 若半小时内还未接受到50条消息,将已有的数据先插入

3、代码实现:

  • 安装依赖:
composer require php-amqplib/php-amqplib
  • 发送消息:
    private function getConn()
    {
        return new AMQPStreamConnection(
            C('RABBITMQ.host'),
            C('RABBITMQ.port'),
            C('RABBITMQ.login'),
            C('RABBITMQ.password'),
            C('RABBITMQ.vhost')
        );
    }

    /**
     * 此方法向rabbitmq服务发送模拟数据
     */
    public function send()
    {
        $connection = $this->getConn();
        /** @var AMQPChannel $channel */
        $channel = $connection->channel();

        $channel->exchange_declare(self::EXCHANGE, self::EXCHANGE_TYPE, false, true, false);
        $body = '{"mailno":"3102478466' . rand(100, 999) . '","callTime":"2019-06-03 20:00:51","ringTime":"10","returnAnswerTime":' . rand(0, 50) . ',"businessType":"delivery"}';
        $msg = new AMQPMessage($body);
        $channel->basic_publish($msg, self::EXCHANGE, self::ROUTING_KEY);

        $this->shutdown($channel, $connection);
    }
  • 接受数据 :

循环50次消息消费
利用超时异常解决半小时无消息进来的业务

    /**
     * @throws ErrorException
     */
    public function receive()
    {
        $connection = $this->getConn();
        /** @var AMQPChannel $channel */
        $channel = $connection->channel();

        $channel->exchange_declare(self::EXCHANGE, self::EXCHANGE_TYPE, false, true, false);
        $channel->queue_declare(self::QUEUE, false, true, false, false);
        $channel->queue_bind(self::QUEUE, self::EXCHANGE, self::ROUTING_KEY);

        $iSql = '';
        $iSqlPre = "INSERT ……";
        $expirePeriod = 30 * 60;

        // 每次处理50条数据
        for ($i = 0; $i < self::PROCESS_NUM_PT; $i++) {
            $channel->basic_consume(
                self::QUEUE,
                self::TAG . uniqid() . (string)$i,
                false,
                false,
                false,
                false,
                function ($msg) use ($iSqlPre, $i, &$iSql) {
                    $this->process_message($msg, $iSqlPre, $i + 1, $iSql);
                }
            );
        }

        try {
            // 30分钟内未接到新的消息则提前插入已存在的数据
            while ($channel->is_consuming()) {
                $channel->wait(null, false, $expirePeriod);
            }
        } catch (AMQPTimeoutException $e) {
            Log::write(
                sprintf(
                    "%s: %s, start inserting data due to no message in 30 minutes.",
                    self::TAG,
                    $e->getMessage()
                )
            );
            if (!empty($iSql)) {
                $iSql = sprintf($iSqlPre, rtrim($iSql, ','));
                ……
            }
            $this->shutdown($channel, $connection);
            $this->receive();
        }

        $this->shutdown($channel, $connection);
    }

    /**
     * @param AMQPMessage $message
     * @param string $iSqlPre
     * @param int $num
     * @param string $iSql
     */
    private function process_message($message, $iSqlPre, $num, &$iSql)
    {
        if (empty($message->body)) {
            return;
        }

        /** @var AMQPChannel $channel */
        $channel = $message->delivery_info['channel'];

        // 1表示未更新,2表示已更新及已acknowledge
        $state = 1;

        try {
            $data = json_decode($message->body, true);

            if ($data['businessType'] != 'delivery') {
                return;
            }

            // 更新
            ……

            // 插入
            $iSql .= 

            ……

            $channel->basic_ack($message->delivery_info['delivery_tag']);

            $state = 2;

            if ($num >= self::PROCESS_NUM_PT) {
                $iSql = sprintf($iSqlPre, rtrim($iSql, ','));
                ……
                $iSql = '';
            }
        } catch (Exception $e) {
            if ($state == 1) {
                $channel->basic_nack($message->delivery_info['delivery_tag'], true, true);
            }
            if ($num >= self::PROCESS_NUM_PT && (!empty($iSql))) {
                $this->redis->lPush(sprintf('%s:%s', self::TAG, 'Exp'), $iSql);
                $iSql = '';
            }
            Log::write(
                sprintf(
                    "%s: %s, body of the message: %s",
                    self::TAG,
                    $e->getMessage(),
                    $message->body
                )
            );
        }
    }
  • 循环函数嵌套(递归)次数限制

报错如下:
PHP Fatal error: Maximum function nesting level of '500' reached, aborting! in /mnt/d/…… on line 185
PHP Stack trace:……

解决方法:

namespace ……下加入下行代码(top观察了一会,没啥异常,暂不知道是否有隐患):

ini_set('xdebug.max_nesting_level', -1);

或者不使用receive自身嵌套,使用handle代替,每分钟执行一次handle,crontab -e 中加入:

* * * * * nohup php /……/index.php Module/Controller/handle > /dev/null &
    /**
     * @throws ErrorException
     */
    public function handle()
    {
        if (!$this->redis->exists(self::EXPIRE_KEY)) {
            $this->redis->set(self::EXPIRE_KEY,1);
            $this->receive();
        }
    }

    /**
     * @throws ErrorException
     */
    public function receive()
    {
        ……
        } catch (AMQPTimeoutException $e) {
            $this->redis->del(self::EXPIRE_KEY);
            Log::write(
                sprintf(
                    "%s: %s, start inserting data due to no message in 30 minutes.",
                    self::TAG,
                    $e->getMessage()
                )
            );
            if (!empty($iSql)) {
                $iSql = sprintf($iSqlPre, rtrim($iSql, ','));
                ……
            }
            $this->shutdown($channel, $connection);
        }

        $this->shutdown($channel, $connection);
    }

keyword: rabbitmq 定量处理消息 指定时间内 无消息推送

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 212,222评论 6 493
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,455评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 157,720评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,568评论 1 284
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,696评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,879评论 1 290
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,028评论 3 409
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,773评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,220评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,550评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,697评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,360评论 4 332
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,002评论 3 315
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,782评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,010评论 1 266
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,433评论 2 360
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,587评论 2 350

推荐阅读更多精彩内容

  • 包含的重点内容:JAVA基础JVM 知识开源框架知识操作系统多线程TCP 与 HTTP架构设计与分布式算法数据库知...
    消失er阅读 4,308评论 1 10
  • 如果觉得焦虑,觉得生活失去意义,唯一可以治愈我的方法就是好好吃饭,好好睡觉。 在学校总会有一种莫名的压力,开始焦虑...
    朝朝和慕慕阅读 136评论 0 1
  • 我最近得了一种病。简称“看见bug头晕眼花腰膝酸软手抖脚抽筋综合症”。比如,在地铁上看见到站指示灯亮错了,差点从座...
    ZML1024阅读 106评论 0 0
  • 从小就被教育要听爸妈的话,要听老师的话,貌似我们就这样从听话中一路走来。不知从什么时候开始学会了会任性,有了自己的...
    续写不尽de未来阅读 317评论 0 3
  • 有些话不便对你说 有些日子不好跟你过 若说真爱一生 那这世间可能真的不能得偿所愿 只愿心愿不曾辜负,只愿大家安好 ...
    Jiandan阅读 128评论 0 0