mysql 事务并发问题之存在性判断后插入多条问题

古之学者必有师。师者,所以传道受业解惑也。

一个简单的需求,先判断表中是否存在对应的记录。不存在则插入,存在则忽略。
如果使用先select查询是否存在,然后使用insert语句插入数据这种方式。在事务并发执行下会出现插入多条的事务并发问题。这个问题就像之前遇到的更新丢失的问题一样。关于更新丢失可以看看这篇文章 https://www.jianshu.com/p/bfd7c684412d

原理如下: 事务并发执行。A事务和B事务开始时都看到的是数据是不存在的


image.png

接下来我们做个验证

准备数据环境
CREATE TABLE `jdbcstudy`.`test`  (
  `id` int(11) NOT NULL AUTO_INCREMENT,
  `a` varchar(255) CHARACTER SET utf8 COLLATE utf8_general_ci NULL DEFAULT NULL,
  `b` varchar(255) CHARACTER SET utf8 COLLATE utf8_general_ci NULL DEFAULT NULL,
  `c` varchar(255) CHARACTER SET utf8 COLLATE utf8_general_ci NULL DEFAULT NULL,
  `d` varchar(255) CHARACTER SET utf8 COLLATE utf8_general_ci NULL DEFAULT NULL,
  PRIMARY KEY (`id`) USING BTREE
) ENGINE = InnoDB AUTO_INCREMENT = 1 CHARACTER SET = utf8 COLLATE = utf8_general_ci ROW_FORMAT = Dynamic;

写个service接口

package com.springboot.study.demo1.service;

/**
 *@program: springboot_study
 *@description:
 *@author: yinkai
 *@create: 2020-03-05 09:45
 */
public interface TestService {

    void insertOrIgnore(String a,String b,String c,String d) ;
}

service实现类

  • 使用 @Transactional注解表示本方法需在一个事务中执行,隔离级别是RR,传播属性是 REQUIRED
  • insertOrIgnore方法先判断符合a,b,c,d字段的记录是不是存在,若不存在则插入,存在则忽略
  • 为了测试结果更明显。在判断之后,插入之前添加了睡眠3秒
package com.springboot.study.demo1.service.impl;

import com.springboot.study.demo1.service.TestService;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.jdbc.core.JdbcTemplate;
import org.springframework.stereotype.Service;
import org.springframework.transaction.annotation.Isolation;
import org.springframework.transaction.annotation.Propagation;
import org.springframework.transaction.annotation.Transactional;

import java.util.List;
import java.util.Map;
import java.util.concurrent.TimeUnit;

/**
 *@program: springboot_study
 *@description:
 *@author: yinkai
 *@create: 2020-03-05 09:46
 */
@Service
public class TestServiceImpl implements TestService {
    @Autowired
    JdbcTemplate jdbcTemplate;

    @Transactional(rollbackFor = Exception.class,isolation = Isolation.REPEATABLE_READ,propagation = Propagation.REQUIRED)
    @Override
    public void insertOrIgnore(String a,String b,String c,String d)  {
        List<Map<String, Object>> maps = jdbcTemplate.queryForList("select count(1) isOne from test where a = ? and b = ? and c = ? and d = ? for update;",a,b,c,d);
        Long isOne = (Long) maps.get(0).get("isOne");

        //查询后睡三秒
        try {
            TimeUnit.SECONDS.sleep(3);
        } catch (InterruptedException e) {
            e.printStackTrace();
        }
        //返回记录为0,插入
        if(0 == isOne){
            jdbcTemplate.update("INSERT INTO jdbcstudy.test(a, b, c, d) VALUES (?,?, ?, ?);",a,b,c,d);
        }


    }
}

写个测试类

  • 测试类里开了三个线程去执行testService.insertOrIgnore()方法
package com.springboot.study.demo1;

import com.springboot.study.demo1.service.TestService;
import lombok.SneakyThrows;
import org.junit.runner.RunWith;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.boot.test.context.SpringBootTest;
import org.springframework.test.annotation.Rollback;
import org.springframework.test.context.junit4.SpringRunner;

/**
 *@program: springboot_study
 *@author: yinkai
 *@create: 2020-02-29 14:23
 */
@RunWith(SpringRunner.class)
@SpringBootTest
public class Test {

    @Autowired
    TestService testService;

    @Rollback(value = false)
    @org.junit.Test
    public void test() throws InterruptedException {
        System.out.println("123");

        Thread  thread = null;
        //开3个线程对应三个事务,并发插入。看看结果如何
        for (int i = 1; i <= 3; i++) {
             thread = new Thread(new Runnable() {
                @Override
                public void run() {
                    testService.insertOrIgnore("a1", "b1", "c1", "d1");
                }
            }, Integer.toString(i));

            thread.start();
        }
        thread.join();
    }

}

来看看执行结果,果然表中被插入了多条数据


image.png

既然问题出现了,那总得解决呀?

解决方法1,使用悲观锁、排他锁、X锁

将insert代码修改如下,后面加个 for update

List<Map<String, Object>> maps = jdbcTemplate.queryForList("select count(1) isOne from test where a = ? and b = ? and c = ? and d = ? for update;",a,b,c,d);

然后需要添加一个联合索引 index_a_b_c_d(a,b,c,d)。因为mysql的innodb引擎的行锁实现是依赖索引的,如果不加索引则会锁住全表。若插入a=a2,b=b2,c=c2,d=d2 也会被阻塞,这个问题等下再讨论~


image.png

完了再次执行程序,报出异常如下

Exception in thread "3" Exception in thread "1" org.springframework.dao.DeadlockLoserDataAccessException: PreparedStatementCallback; SQL [INSERT INTO jdbcstudy.test(a, b, c, d) VALUES (?,?, ?, ?);]; Deadlock found when trying to get lock; try restarting transaction; nested exception is
按照翻译理解就是事务发生死锁了,这个提示未免有些笼统。其实这里根本不是死锁问题呀,只是锁等到超时而已。因为只有一个事务持锁

不过程序的执行结果是ok的


image.png
解决方法二,使用mysql自带关键字解决

使用 IGNORE 关键字可以完美解决这个问题;注意也需要添加联合索引,且索引的类型必须是UNIQUE的,这是IGNORE 的特性

image.png

TestServiceImpl 代码可以改成这样,在insert语句上加上IGNORE 关键字

package com.springboot.study.demo1.service.impl;

import com.springboot.study.demo1.service.TestService;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.jdbc.core.JdbcTemplate;
import org.springframework.stereotype.Service;
import org.springframework.transaction.annotation.Isolation;
import org.springframework.transaction.annotation.Propagation;
import org.springframework.transaction.annotation.Transactional;

import java.util.concurrent.TimeUnit;

/**
 * @program: springboot_study
 * @description:
 * @author: yinkai
 * @create: 2020-03-05 09:46
 */
@Service
public class TestServiceImpl implements TestService {
    @Autowired
    JdbcTemplate jdbcTemplate;

    @Transactional(rollbackFor = Exception.class, isolation = Isolation.REPEATABLE_READ, propagation = Propagation.REQUIRED)
    @Override
    public void insertOrIgnore(String a, String b, String c, String d) {

        //查询后睡三秒
        try {
            TimeUnit.SECONDS.sleep(3);
        } catch (InterruptedException e) {
            e.printStackTrace();
        }
        jdbcTemplate.update("INSERT  IGNORE  INTO jdbcstudy.test(a, b, c, d) VALUES (?,?, ?, ?);", a, b, c, d);

    }
}

执行后查看表数据,完全ok


image.png
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 215,539评论 6 497
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 91,911评论 3 391
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 161,337评论 0 351
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 57,723评论 1 290
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 66,795评论 6 388
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 50,762评论 1 294
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,742评论 3 416
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,508评论 0 271
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,954评论 1 308
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,247评论 2 331
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,404评论 1 345
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,104评论 5 340
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,736评论 3 324
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,352评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,557评论 1 268
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,371评论 2 368
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,292评论 2 352

推荐阅读更多精彩内容