RocketMQ(八)消息类型--事务消息

分布式事务的章节中,讲解了可靠消息最终一致性实现方案https://www.jianshu.com/p/3186a0a76c1d,本篇以具体实现代码举例。

简介RocketMq事务消息

消息队列RocketMQ提供的分布式事务消息适用于所有对数据最终一致性有强需求的场景。

可靠消息最终一致性方案是指当事务发起方执行完成本地事务后发出一条消息到消息中间件,事务参与方(消息消费者)一定能够接收到消息并处理事务成功,此方案强调的是只要消息发给事务参与方,则最终事务要达到一致。

可靠消息最终一致性方案原理

原理

两个主要过程

半事务消息:暂不能投递的消息,发送方已经成功地将消息发送到了消息队列RocketMQ版服务端,但是服务端未收到生产者对该消息的二次确认,此时该消息被标记成“暂不能投递”状态,处于该种状态下的消息即半事务消息。

消息回查:由于网络闪断、生产者应用重启等原因,导致某条事务消息的二次确认丢失,消息队列RocketMQ版服务端通过扫描发现某条消息长期处于“半事务消息”时,需要主动向消息生产者询问该消息的最终状态(Commit或是Rollback),该询问过程即消息回查。

代码实现

三种状态:

RocketMQLocalTransactionState.COMMIT:提交事务,允许订阅方消费该消息。
RocketMQLocalTransactionState.ROLLBACK:回滚事务,消息将被丢弃不允许消费。
RocketMQLocalTransactionState.Unknow:暂时无法判断状态,等待固定时间以后消息队列RocketMQ版服务端向发送方进行消息回查。

控制器:

    /**
     * 事务消息发送
     */
    @RequestMapping("/send/transaction")
    public void transaction() {
        rocketMqProducer.sendTransaction("test_transaction", "事务消息");
    }

生产者:

    /**
     * 发送事务消息
     * @date: 2020/11/30
     * @param topic
     * @param msgBody 
     * @return void
     * @author weirx
     * @version 3.0
     */
      public void sendTransaction(String topic, String msgBody) {
        //发送事务消息
        rocketMQTemplate.sendMessageInTransaction(topic, MessageBuilder.withPayload(msgBody).build(), null);
    }

生产者监听:
即文章前面提到的两个主要过程
1)用于接收发送的半事务消息回调,然后执行本地事务,并返回本地事务状态。
2)当本地事务执行没有进行commit或rollback时,由mq进行发起本地事务回查。

package com.cloud.bssp.message.rocketmq.producer;

import lombok.SneakyThrows;
import lombok.extern.slf4j.Slf4j;
import org.apache.rocketmq.spring.annotation.RocketMQTransactionListener;
import org.apache.rocketmq.spring.core.RocketMQLocalTransactionListener;
import org.apache.rocketmq.spring.core.RocketMQLocalTransactionState;
import org.springframework.messaging.Message;
import org.springframework.stereotype.Component;
import org.springframework.transaction.annotation.Transactional;

/**
 * 监听生产者发送消息后的回调,以及本地事务回查
 *
 * 注意:在rocketmq 2.1.0 版本重构了事务消息api,@RocketMQTransactionListener注解额txProducerGroup属性去掉了
 * 可参考:https://blog.csdn.net/z69183787/article/details/109958380
 * @date: 2020/11/30
 * @author weirx
 * @version 3.0
 */
@Slf4j
@Component
@RocketMQTransactionListener
public class ProducerTransactionMessageListener implements RocketMQLocalTransactionListener {

    /**
     * mq收到半事务消息后的回调方法,此处执行本地事务
     * @date: 2020/11/30
     * @param message
     * @param o
     * @return org.apache.rocketmq.spring.core.RocketMQLocalTransactionState
     * @author weirx
     * @version 3.0
     */
    @SneakyThrows
    @Override
    @Transactional(rollbackFor = Exception.class)
    public RocketMQLocalTransactionState executeLocalTransaction(Message message, Object o) {
        log.info("half message send success,msg = {}" , message);
        try {
            //模拟一秒业务处理时间
            Thread.sleep(1000);
        }catch (Exception e) {
            return RocketMQLocalTransactionState.ROLLBACK;
        }
        log.info("local transaction success, tell mq to commit");
        return RocketMQLocalTransactionState.COMMIT;
    }

    /**
     * mq回查本地事务的状态
     * @date: 2020/11/30
     * @param message
     * @return org.apache.rocketmq.spring.core.RocketMQLocalTransactionState
     * @author weirx
     * @version 3.0
     */
    @Override
    public RocketMQLocalTransactionState checkLocalTransaction(Message message) {
        log.info("check local transaction state");
        //模拟本地事务的回查业务
        if (System.currentTimeMillis() % 3 == 0){
            log.info("local transaction execute success,transaction commit");
            return RocketMQLocalTransactionState.COMMIT;
        }else {
            log.info("local transaction execute failed,transaction rollback");
            return RocketMQLocalTransactionState.ROLLBACK;
        }
    }
}

消费者:

/**
 * RocketMqProducer
 * @date: 2020/11/26
 * @author weirx
 * @version 3.0
 */
@Slf4j
@Component
@RocketMQMessageListener(topic = "test_transaction", selectorExpression = "*", consumerGroup = "test_transaction")
public class TransactionMessageListener implements RocketMQListener<MessageExt> {

    @Override
    public void onMessage(MessageExt messageExt) {
        byte[] body = messageExt.getBody();
        String msg = new String(body);
        log.info("receive async message:{}", msg);
    }
}

结果:上面的代码模拟的一定成功的过程

2020-11-30 10:27:09.175  INFO 10200 --- [nio-8085-exec-4] m.r.p.ProducerTransactionMessageListener : half message send success,msg = GenericMessage [payload=byte[12], headers={rocketmq_TOPIC=test_transaction, rocketmq_FLAG=0, id=b0987012-7b89-f5a9-f539-00435c10bcf5, contentType=text/plain;charset=UTF-8, rocketmq_TRANSACTION_ID=AC10020827D818B4AAC29796731C0000, timestamp=1606703220762}]
2020-11-30 10:27:25.799  INFO 10200 --- [nio-8085-exec-4] m.r.p.ProducerTransactionMessageListener : local transaction success, tell mq to commit
2020-11-30 10:27:48.923  INFO 10200 --- [MessageThread_1] c.c.b.m.r.c.TransactionMessageListener   : receive async message:事务消息

模拟本地事务处理失败

修改生产者监听代码:

    /**
     * mq收到半事务消息后的回调方法,此处执行本地事务
     * @date: 2020/11/30
     * @param message
     * @param o
     * @return org.apache.rocketmq.spring.core.RocketMQLocalTransactionState
     * @author weirx
     * @version 3.0
     */
    @SneakyThrows
    @Override
    @Transactional(rollbackFor = Exception.class)
    public RocketMQLocalTransactionState executeLocalTransaction(Message message, Object o) {
        log.info("half message send success,msg = {}" , message);
        try {
            //模拟一秒业务处理时间
            Thread.sleep(1000);
            //增加异常抛出
            throw new Exception("模拟本地事务处理失败");
        }catch (Exception e) {
            log.info("local transaction failed, msg = {}" , e.getMessage());
            return RocketMQLocalTransactionState.ROLLBACK;
        }
//        log.info("local transaction success, tell mq to commit");
//        return RocketMQLocalTransactionState.COMMIT;
    }

执行结果,上面代码返回给mq消费端rollback,消息并没有被consumer消费:

2020-11-30 10:53:55.290  INFO 60932 --- [nio-8085-exec-1] m.r.p.ProducerTransactionMessageListener : half message send success,msg = GenericMessage [payload=byte[12], headers={rocketmq_TOPIC=test_transaction, rocketmq_FLAG=0, id=eb1817a9-3b09-896f-6862-25f717ec75b7, contentType=text/plain;charset=UTF-8, rocketmq_TRANSACTION_ID=AC100208EE0418B4AAC297AF13A00000, timestamp=1606704834320}]
2020-11-30 10:53:56.291  INFO 60932 --- [nio-8085-exec-1] m.r.p.ProducerTransactionMessageListener : local transaction failed, msg = 模拟本地事务处理失败

模拟事务回查

同样修改生产者监听这里,将状态设置为NUKNOWN(不确定是否成功):

/**
     * mq收到半事务消息后的回调方法,此处执行本地事务
     * @date: 2020/11/30
     * @param message
     * @param o
     * @return org.apache.rocketmq.spring.core.RocketMQLocalTransactionState
     * @author weirx
     * @version 3.0
     */
    @SneakyThrows
    @Override
    @Transactional(rollbackFor = Exception.class)
    public RocketMQLocalTransactionState executeLocalTransaction(Message message, Object o) {
        log.info("half message send success,msg = {}", message);
        try {
            //模拟一秒业务处理时间
            Thread.sleep(1000);
            //增加异常抛出
//            throw new Exception("模拟本地事务处理失败");
        } catch (Exception e) {
            log.info("local transaction failed, msg = {}", e.getMessage());
            return RocketMQLocalTransactionState.ROLLBACK;
        }
//        log.info("local transaction success, tell mq to commit");
//        return RocketMQLocalTransactionState.COMMIT;
        log.info("local transaction unknown");
        return RocketMQLocalTransactionState.UNKNOWN;
    }

结果,UNKNOWN状态下,执行了回查方法:

2020-11-30 13:25:02.878  INFO 24904 --- [nio-8085-exec-3] m.r.p.ProducerTransactionMessageListener : half message send success,msg = GenericMessage [payload=byte[12], headers={rocketmq_TOPIC=test_transaction, rocketmq_FLAG=0, id=558db1b3-2495-4309-996b-1463f6b2c938, contentType=text/plain;charset=UTF-8, rocketmq_TRANSACTION_ID=AC100208614818B4AAC2983971720003, timestamp=1606713901460}]
2020-11-30 13:25:03.879  INFO 24904 --- [nio-8085-exec-3] m.r.p.ProducerTransactionMessageListener : local transaction unknown
2020-11-30 13:25:44.230  INFO 24904 --- [pool-2-thread-1] m.r.p.ProducerTransactionMessageListener : check local transaction state
2020-11-30 13:25:44.230  INFO 24904 --- [pool-2-thread-1] m.r.p.ProducerTransactionMessageListener : local transaction execute failed,transaction rollback

修改生产者监听,阻塞60s:

    /**
     * mq收到半事务消息后的回调方法,此处执行本地事务
     * @date: 2020/11/30
     * @param message
     * @param o
     * @return org.apache.rocketmq.spring.core.RocketMQLocalTransactionState
     * @author weirx
     * @version 3.0
     */
    @SneakyThrows
    @Override
    @Transactional(rollbackFor = Exception.class)
    public RocketMQLocalTransactionState executeLocalTransaction(Message message, Object o) {
        log.info("half message send success,msg = {}", message);
        try {
            //休眠60s
            Thread.sleep(60000);
            //增加异常抛出
//            throw new Exception("模拟本地事务处理失败");
        } catch (Exception e) {
            log.info("local transaction failed, msg = {}", e.getMessage());
            return RocketMQLocalTransactionState.ROLLBACK;
        }
//        log.info("local transaction success, tell mq to commit");
//        return RocketMQLocalTransactionState.COMMIT;
        log.info("local transaction unknown");
        return RocketMQLocalTransactionState.UNKNOWN;
    }

在线程阻塞期间,成功调用了回查方法,成功提交了事务,并被消费:

2020-11-30 13:37:46.398  INFO 53084 --- [nio-8085-exec-1] m.r.p.ProducerTransactionMessageListener : half message send success,msg = GenericMessage [payload=byte[12], headers={rocketmq_TOPIC=test_transaction, rocketmq_FLAG=0, id=74c0bb1c-801c-03be-ca19-aa36815ea64d, contentType=text/plain;charset=UTF-8, rocketmq_TRANSACTION_ID=AC100208CF5C18B4AAC2984517580000, timestamp=1606714665623}]
2020-11-30 13:38:36.361  INFO 53084 --- [pool-2-thread-1] m.r.p.ProducerTransactionMessageListener : check local transaction state
2020-11-30 13:38:38.015  INFO 53084 --- [pool-2-thread-1] m.r.p.ProducerTransactionMessageListener : local transaction execute success,transaction commit
2020-11-30 13:38:41.855  INFO 53084 --- [MessageThread_1] c.c.b.m.r.c.TransactionMessageListener   : receive async message:事务消息
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 212,185评论 6 493
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,445评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 157,684评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,564评论 1 284
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,681评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,874评论 1 290
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,025评论 3 408
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,761评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,217评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,545评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,694评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,351评论 4 332
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,988评论 3 315
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,778评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,007评论 1 266
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,427评论 2 360
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,580评论 2 349

推荐阅读更多精彩内容