spring 分布式锁 SchedulerLock

(spring 分布式锁 SchedulerLock,整合redis冲突、jdbc异常问题)

### 简介

ShedLock的作用,确保任务在同一时刻最多执行一次。如果一个任务正在一个节点上执行,则它将获得一个锁,该锁将阻止从另一个节点(或线程)执行同一任务。**如果一个任务已经在一个节点上执行,则在其他节点上的执行不会等待,只需跳过它即可** 。

ShedLock使用Mongo,JDBC数据库,Redis,Hazelcast,ZooKeeper或其他外部存储进行协调,即通过外部存储来实现锁机制。

### 用法

- 启用和配置计划的锁定

- 注释您的计划任务

-  配置锁提供者

此处以jdbc数据库方式为例,如需要使用其他外部存储方式,对应修改shedlock-provider。

##### 启用和配置计划的锁定

- 导入schedulerLock项目

**gradle方式**

```javascript

// shedlock 项目 , 2.1.0稳定版

compile('net.javacrumbs.shedlock:shedlock-provider-jdbc-template:2.1.0')

// JDBC ,匹配shedlock的2.2.0版

compile('net.javacrumbs.shedlock:shedlock-spring:2.2.0')

```

**Maven方式**

```javascript

// shedlock 项目 , 2.1.0稳定版

<dependency>

    <groupId>net.javacrumbs.shedlock</groupId>

    <artifactId>shedlock-spring</artifactId>

    <version>2.1.0</version>

</dependency>

// JDBC ,匹配shedlock的2.2.0版

<dependency>

    <groupId>net.javacrumbs.shedlock</groupId>

    <artifactId>shedlock-provider-jdbc-template</artifactId>

    <version>2.2.0</version>

</dependency>

```

- 启用SchedulerLock

  使用@EnableSchedulerLock注释将库集成到Spring中。

```javascript

import net.javacrumbs.shedlock.spring.annotation.EnableSchedulerLock;

import org.mybatis.spring.annotation.MapperScan;

import org.springframework.boot.SpringApplication;

import org.springframework.boot.autoconfigure.SpringBootApplication;

import org.springframework.boot.web.servlet.ServletComponentScan;

import org.springframework.scheduling.annotation.EnableScheduling;

import org.springframework.transaction.annotation.EnableTransactionManagement;

// 开启定时任务注解

@EnableScheduling

// 开启定时任务锁,默认设置锁最大占用时间为30s

@EnableSchedulerLock(defaultLockAtMostFor = "PT30S")

@MapperScan(basePackages="cn.pilipa.finance.salary.persistence")

@ServletComponentScan

public class SalaryApplication {

public static void main(String[] args) {

SpringApplication.run(SalaryApplication.class, args);

}

}

```

##### 注释计划任务

- 在定时任务上添加@SchedulerLock注解

```javascript

import net.javacrumbs.shedlock.core.SchedulerLock;

...

@Scheduled(...)

@SchedulerLock(name = "scheduledTaskName")

public void scheduledTask() {

  // do something

}

```

##### 配置锁提供者

- 创建提供锁的外部存储(jdbc、redis、MongoDB...)

例 :    JDBC ,创建表结构

```javascript

CREATE TABLE shedlock(

    name VARCHAR(64) ,

    lock_until TIMESTAMP(3) NULL,

    locked_at TIMESTAMP(3) NULL,

    locked_by  VARCHAR(255),

    PRIMARY KEY (name)

)

```

说明

|属性|说明  |

|--|--|

| name | 锁名称 ,name必须是主键|

| lock_until | 释放锁时间 |

| locked_at |  获取锁时间|

| locked_by |  锁提供者|

DB形式的外部存储需要创建表结构,redis等非结构形式的外部存储template会根据@SchedulerLock声明的锁名称自动创建对应的键值对,提供锁。

- 配置Bean

```javascript

import net.javacrumbs.shedlock.provider.jdbctemplate.JdbcTemplateLockProvider;

...

@Bean

public LockProvider lockProvider(DataSource dataSource) {

    return new JdbcTemplateLockProvider(dataSource);

}

```

### SchedulerLock 参数

- **@SchedulerLock**

只有带注释的方法被锁定,库忽略所有其他计划的任务。您还必须指定锁的名称。同一时间只能执行一个任务。

- **name**

分布式锁名称,注意 锁名称必须唯一。

- **lockAtMostFor & lockAtMostForString**

指定在执行节点死亡时应将锁保留多长时间。这只是一个备用选项,在正常情况下,任务完成后立即释放锁定。 您必须将其设置lockAtMostFor为比正常执行时间长得多的值。如果任务花费的时间超过 lockAtMostFor了所导致的行为,则可能无法预测(更多的进程将有效地持有该锁)。

lockAtMostFor 单位 毫秒

lockAtMostForString  使用“ PT14M” 意味着它将被锁定不超过14分钟。

- **lockAtLeastFor & lockAtLeastForString**

该属性指定应保留锁定的最短时间。其主要目的是在任务很短且节点之间的时钟差的情况下,防止从多个节点执行。

`例:假设您有一个任务,每15分钟执行一次,通常需要花费几分钟才能运行。此外,您希望每15分钟最多执行一次。在这种情况下,您可以像这样配置`

```javascript

@Scheduled(fixedDelay = 1000*60*15)

@SchedulerLock(name = "queryRechargeBill", lockAtMostFor = 1000*60*15, lockAtLeastFor = 1000*60*5)

public void queryRechargeBill(){

// do something

}

```

该锁将持有5分钟,5分钟释放,当节点异常或者死亡,该锁默认在15分钟后自动释放。在正常情况下,ShedLock在任务完成后立即释放锁定。实际上,我们不必这样做,因为@EnableSchedulerLock中提供了默认值,  但我们选择在此处覆盖它。

###  版本冲突问题

- jdbc外部存储实现 启动报错 

`nested exception is org.springframework.beans.factory.NoSuchBeanDefinitionException: No qualifying bean of type 'org.springframework.data.redis.connection.RedisConnectionFactory' available: expected at least 1 bean which qualifies as autowire candidate. Dependency annotations: {}`

该问题是因为项目中的redis自定义bean造成的,使用的redis jar(org.springframework.data:spring-data-redis),造成版本冲突。解决方法:

更换redis库

```css

compile('org.springframework.boot:spring-boot-starter-parent:2.0.2.RELEASE')

compile('org.springframework.boot:spring-boot-starter-data-redis')

```

- redis 外部存储实现 启动报错

shedlock-provider-redis-spring 与 org.springframework.data:spring-data-redis 冲突,

`java.lang.NoSuchMethodError: org.springframework.data.redis.connection.RedisConnection.set([B[BLorg/springframework/data/redis/core/types/Expiration;Lorg/springframework/data/redis/connection/RedisStringCommands$SetOption;)Ljava/lang/Boolean;`

  解决方法,更换低版本的 shedlock,这里我选择的是1.8.2版本

  * 如果您依赖spring-data-redis 2-请使用ShedLock 1.xx

  * 如果您依赖spring-data-redis 1-请使用ShedLock 0.xx

  * 在所有其他情况下,您可以使用两个版本,最好是1.xx

- 要求和依赖性

Java 8

SLF4J的API

Spring框架(可选)

###  故障排除

1. 检查存储。如果使用的是JDBC,请检查ShedLock表。如果为空,则未正确配置ShedLock。如果有多个同名记录,则您缺少主键。

2. 使用ShedLock调试日志。ShedLock使用记录器名称在DEBUG级别记录有趣的信息net.javacrumbs.shedlock。它应该可以帮助您了解正在发生的事情。

3. 对于短期任务,请考虑使用lockAtLeastFor。如果任务是短期运行的,它们可以一个接一个地执行,lockAtLeastFor可以防止执行。

4. 如果遇到奇怪的错误,抱怨代理不是proxy类,ThreadPoolTaskScheduler请检查https://github.com/lukas-krecan/ShedLock/issues/115或 此StackOverflow问题

###  总结

ShedLock支持两种模式的Spring集成,分别是 预定方法代理、TaskScheduler代理。我们默认选择最简单也是最实用的方式:预定方法代理(即 @SchedulerLock 的形式),ShedLock会围绕每个带有@SchedulerLock注释的方法创建AOP代理。这种方法的主要优点是它不依赖于Spring调度。缺点是即使直接调用该方法也会应用锁定。还应注意,当前仅支持返回void的方法,如果您注释并调用具有非void返回类型的方法,则会引发异常。

预定方法代理 ![预定方法代理 流程图](https://upload-images.jianshu.io/upload_images/9582479-fbedc872ee6eff3a?imageMogr2/auto-orient/strip%7CimageView2/2/w/1240)

由于大多数项目都依赖redis缓存,此处建议使用jdbc方式提供外部存储,可以避免很多版本间互相冲突的问题。如果对TaskScheduler代理方式有兴趣,可以参考源码。

[ShedLock源码库](https://github.com/lukas-krecan/ShedLock)

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 203,547评论 6 477
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,399评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 150,428评论 0 337
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,599评论 1 274
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,612评论 5 365
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,577评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,941评论 3 395
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,603评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,852评论 1 297
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,605评论 2 321
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,693评论 1 329
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,375评论 4 318
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,955评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,936评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,172评论 1 259
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 43,970评论 2 349
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,414评论 2 342

推荐阅读更多精彩内容