spring boot:使用多个线程池实现实现任务的线程池隔离(spring boot 2.3.2)

一,为什么要使用多个线程池?

使用多个线程池,
把相同的任务放到同一个线程池中,
可以起到隔离的作用,避免有线程出错时影响到其他线程池,
例如只有一个线程池时,
有两种任务,下单,处理图片,
如果线程池被处理图片的任务占满,影响下单任务的进行

说明:刘宏缔的架构森林是一个专注架构的博客,地址:https://www.cnblogs.com/architectforest

对应的源码可以访问这里获取: https://github.com/liuhongdi/

二,演示项目的相关信息

1,项目地址:

https://github.com/liuhongdi/multithreadpool

2,项目功能说明:

创建了两个线程池,

一个负责发邮件,

另一个负责处理图片

实际演示中都是sleep

3,项目结构:如图:

image

三,java代码说明:

1,ThreadPoolConfig.java


@Configuration
@EnableAsync public class ThreadPoolConfig { //用来生成缩略图的线程池
    @Bean(name = "imageThreadPool") public ThreadPoolTaskExecutor imageThreadPool() {
        ThreadPoolTaskExecutor executor = new ThreadPoolTaskExecutor(); // 设置核心线程数,它是可以同时被执行的线程数量
        executor.setCorePoolSize(2); // 设置最大线程数,缓冲队列满了之后会申请超过核心线程数的线程
        executor.setMaxPoolSize(10); // 设置缓冲队列容量,在执行任务之前用于保存任务
        executor.setQueueCapacity(50); // 设置线程生存时间(秒),当超过了核心线程出之外的线程在生存时间到达之后会被销毁
        executor.setKeepAliveSeconds(60); // 设置线程名称前缀
        executor.setThreadNamePrefix("imagePool-"); // 设置拒绝策略
        executor.setRejectedExecutionHandler(new ThreadPoolExecutor.CallerRunsPolicy()); // 等待所有任务结束后再关闭线程池
        executor.setWaitForTasksToCompleteOnShutdown(true); //初始化
 executor.initialize(); return executor;
    } //用来发邮件的线程池
    @Bean(name = "emailThreadPool") public ThreadPoolTaskExecutor emailThreadPool() {
        ThreadPoolTaskExecutor executor = new ThreadPoolTaskExecutor(); // 设置核心线程数,它是可以同时被执行的线程数量
        executor.setCorePoolSize(2); // 设置最大线程数,缓冲队列满了之后会申请超过核心线程数的线程
        executor.setMaxPoolSize(10); // 设置缓冲队列容量,在执行任务之前用于保存任务
        executor.setQueueCapacity(50); // 设置线程生存时间(秒),当超过了核心线程出之外的线程在生存时间到达之后会被销毁
        executor.setKeepAliveSeconds(60); // 设置线程名称前缀
        executor.setThreadNamePrefix("emailPool-"); // 设置拒绝策略
        executor.setRejectedExecutionHandler(new ThreadPoolExecutor.CallerRunsPolicy()); // 等待所有任务结束后再关闭线程池
        executor.setWaitForTasksToCompleteOnShutdown(true); //初始化
 executor.initialize(); return executor;
    }
}

说明:配置要使用的线程池,按业务类型区分开,

注意命名:一个命名为:emailThreadPool

一个命名为:imageThreadPool

另外注意线程池使用了不同的前缀,使实际运行时区分

2,HomeController.java

@RequestMapping("/home")
@Controller public class HomeController {
    @Resource private MailService mailService;

    @Resource private ImageService imageService;

    @Resource private ThreadPoolTaskExecutor imageThreadPool; //监控线程池的状态, //我们得到的数字,只是大体接近,并不是严格的准确数字
    @GetMapping("/poolstatus")
    @ResponseBody public String poolstatus() {
        String statusStr = ""; int queueSize = imageThreadPool.getThreadPoolExecutor().getQueue().size();
        statusStr +="当前排队线程数:" + queueSize; int activeCount = imageThreadPool.getThreadPoolExecutor().getActiveCount();
        statusStr +="当前活动线程数:" + activeCount; long completedTaskCount = imageThreadPool.getThreadPoolExecutor().getCompletedTaskCount();
        statusStr +="执行完成线程数:" + completedTaskCount; long taskCount = imageThreadPool.getThreadPoolExecutor().getTaskCount();
        statusStr +="总线程数:" + taskCount; return statusStr;
    } //异步发送一封注册成功的邮件
    @GetMapping("/asyncmail")
    @ResponseBody public String regMail() {
        mailService.sendHtmlMail(); return "mail sended";
    } //异步执行sleep1秒10次
    @GetMapping("/asyncimage")
    @ResponseBody public Map<String, Object> asyncsleep() throws ExecutionException, InterruptedException { long start = System.currentTimeMillis();
        Map<String, Object> map = new HashMap<>();
        List<Future<String>> futures = new ArrayList<>(); for (int i = 0; i < 50; i++) {
            Future<String> future = imageService.asynctmb(i);
            futures.add(future);
        }
        List<String> response = new ArrayList<>(); for (Future future : futures) {
            String string = (String) future.get();
            response.add(string);
        }
        map.put("data", response);
        map.put("消耗时间", String.format("任务执行成功,耗时{%s}毫秒", System.currentTimeMillis() - start)); return map;
    }
}

3,MailServiceImpl.java

@Service public class MailServiceImpl  implements MailService { 
  private Logger logger= LoggerFactory.getLogger(MailServiceImpl.class);

    @Resource private MailUtil mailUtil; //异步发送html格式的邮件,演示时只是sleep1秒
    @Async(value="emailThreadPool")
    @Override public void sendHtmlMail() {
         logger.info("sendHtmlMail begin"); try {
            Thread.sleep(2000);    //延时1秒
 } catch(InterruptedException e) {
            e.printStackTrace();
        }
    }
}

说明:Async注解指定线程池的名字是:emailThreadPool

4,ImageServiceImpl.java

@Service public class ImageServiceImpl implements ImageService { private Logger logger= LoggerFactory.getLogger(MailServiceImpl.class); //演示处理图片,只是sleep1秒
    @Async(value="imageThreadPool")
    @Override public Future<String> asynctmb(int i) {
        logger.info("asynctmb begin");
        String start= TimeUtil.getMilliTimeNow(); try {
            Thread.sleep(1000);    //延时1秒
 } catch(InterruptedException e) {
            e.printStackTrace();
        } //log.info("async function sleep   end");
        String end=TimeUtil.getMilliTimeNow(); return new AsyncResult<>(String.format("asynctmb方法,第 %s 个线程:开始时间:%s,结束时间:%s",i,start,end));
    }
}

说明:Async注解指定线程池的名字是:imageThreadPool

四,测试效果:

1,测试一个线程:访问:

http://127.0.0.1:8080/home/asyncmail

查看控制台:

2020-08-10 14:54:35.671  INFO 2570 --- [    emailPool-1] c.m.demo.service.impl.MailServiceImpl    : sendHtmlMail begin

可以看到线程的前缀是emailThreadPool的线程的前缀

2,测试多个线程:访问:

http://127.0.0.1:8080/home/asyncimage

可以看到返回信息:

...
"消耗时间":"任务执行成功,耗时{25052}毫秒"

执行时每次并发的线程数是2,一共创建了50个线程,

每个线程sleep用时1秒

所以共用时25秒,

3,查看线程池状态:访问:

http://127.0.0.1:8080/home/asyncimage

同时访问:

http://127.0.0.1:8080/home/poolstatus

可以看到返回的状态信息:

当前排队线程数:44当前活动线程数:2执行完成线程数:54总线程数:100

说明:ThreadPoolExecutor中的统计信息只是近似值,不是完全准确的数字

进阶的动态注册线程池


    @Value("${service.short.names}")
    private String serviceShortNames;

    @Bean
    public void initExecutors() {
        ConfigurableApplicationContext applicationContext = (ConfigurableApplicationContext) ApplicationContextHelper.getApplicationContext();
        DefaultListableBeanFactory autowireCapableBeanFactory = (DefaultListableBeanFactory) applicationContext.getAutowireCapableBeanFactory();

        for (String serviceName : serviceShortNames.split(",")) {
            BeanDefinitionBuilder beanDefinitionBuilder = BeanDefinitionBuilder.rootBeanDefinition(VisiableThreadPoolTaskExecutor.class);

            beanDefinitionBuilder.addPropertyValue("corePoolSize", CORE_POOL_SIZE);
            beanDefinitionBuilder.addPropertyValue("maxPoolSize", MAX_POOL_SIZE);
            beanDefinitionBuilder.addPropertyValue("queueCapacity", QUEUE_CAPACITY);
            beanDefinitionBuilder.addPropertyValue("keepAliveSeconds", KEEP_ALIVE_SECONDS);
            beanDefinitionBuilder.addPropertyValue("threadNamePrefix", THREAD_NAME_PREFIX + serviceName + "-");
            beanDefinitionBuilder.addPropertyValue("waitForTasksToCompleteOnShutdown", WAIT_FOR_TASKS_TO_COMPLETE_ON_SHUTDOWN);
            beanDefinitionBuilder.setLazyInit(false);

            String beanName = serviceName + ASYNC_EXECUTOR_SUFFIX;
            beanDefinitionBuilder.setScope(ConfigurableBeanFactory.SCOPE_SINGLETON);  // 默认单例
            autowireCapableBeanFactory.registerBeanDefinition(beanName, beanDefinitionBuilder.getBeanDefinition());
        }
    }
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 217,826评论 6 506
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 92,968评论 3 395
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 164,234评论 0 354
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,562评论 1 293
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,611评论 6 392
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,482评论 1 302
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,271评论 3 418
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 39,166评论 0 276
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,608评论 1 314
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,814评论 3 336
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,926评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,644评论 5 346
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,249评论 3 329
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,866评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,991评论 1 269
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 48,063评论 3 370
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,871评论 2 354

推荐阅读更多精彩内容