多线程与线程池的一系列问题

自己开的坑,陆陆续续填坑中,自以为是地觉得基础知识很扎实,一个人接手了公司的一个小项目,结果遇到了多线程并发和阻塞的问题,让人欲哭无泪。特开此文,记录开发中遇到的各种问题以及解决方法,引以为戒。

一、线程池

我所负责的项目是一个高并发的任务调度,所以就很想当然地用到了线程池,线程池的基本原理也不用多说,但是不得不提的一点是线程池的拒绝策略,这个是经常被大家所忽略的,我当初也是直接复制粘贴网上的代码根本没有细看,最后导致的一个问题就是任务没法管理,完全脱离了控制。

我当前的任务管理是用spring的定时器实现的,定时器的作用是每个一段时间就新建几个任务提交给线程池进行处理,这样可以保持任务的并发量维持在一定的量并且不会浪费cpu,但是当这类任务已经完成,不再需要执行时,我关闭定时器,而任务还是在执行之中。其原因在于定时器的触发间隔内,我所提交的任务线程池不一定能够执行完,在旧有的任务没有完成的情况下,又会有新的任务提交进来,这种情况得不到解决,导致线程池被塞满各种来不及执行的任务。而当定时器取消该任务并且不再提交时,线程池中的未执行任务还在排队等候,总有一天能够被cpu翻到牌子得以运行,这也导致了任务数量超出预期效果。

那么为了更好地控制任务,我们需要改变策略

1.在执行任务的时候检查任务数量是否足够,然后再选择执行。

我显然不喜欢这种,强迫症不允许这样浪费

2.调整线程池大小,策略设置为拒绝所有,就是队列满时再提交任务直接拒绝。

rejectedExecutionHandler选择AbortPolicy,其他策略可以自行百度

这样的话同时也限制了其他任务,我不能接受

3.待任务执行完成再提交新的任务

这不得不提到spring自带的定时任务了,在spring4.x.x版本以上,实现了基于注解的定时器,与quartz差不多,提供了三种定时器,cron,fixDelay和fixRate。

cron是基于cron表达式的一种定时器,更灵活当然也更复杂,fixDelay是每隔一段时间执行一次任务,而fixRate顾名思义就是心跳,与fixDelay差不多,但又有很大的不同。

特别需要注意的是这些定时器的触发策略。cron和fixDelay是在上一个定时任务完成之后再触发定时器,也就是说如果前一个定时任务还没有执行完成,不会再创建新的定时任务。只要当前一个任务执行完成之后再来启动自己的定时功能,等到正确的时间进行触发。而fixRate则不同,它是不管上一个任务是否完成,都会在触发器规定的时间内创建一个定时任务,可以说是相当准时。

基于以上,我选择了cron表达式。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 214,904评论 6 497
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 91,581评论 3 389
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 160,527评论 0 350
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 57,463评论 1 288
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 66,546评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 50,572评论 1 293
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,582评论 3 414
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,330评论 0 270
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,776评论 1 307
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,087评论 2 330
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,257评论 1 344
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,923评论 5 338
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,571评论 3 322
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,192评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,436评论 1 268
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,145评论 2 366
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,127评论 2 352

推荐阅读更多精彩内容

  • 前段时间遇到这样一个问题,有人问微信朋友圈的上传图片的功能怎么做才能让用户的等待时间较短,比如说一下上传9张图片,...
    加油码农阅读 1,197评论 0 2
  • 先看几个概念:线程:进程中负责程序执行的执行单元。一个进程中至少有一个线程。多线程:解决多任务同时执行的需求,合理...
    yeying12321阅读 541评论 0 0
  • 先看几个概念:线程:进程中负责程序执行的执行单元。一个进程中至少有一个线程。 多线程:解决多任务同时执行的需求,合...
    孙福生微博阅读 95,567评论 38 314
  • 当你宁静无依,于匆匆岁月中久久心寄却未能辉映半点皎洁,明月当空你是否还能守候。当你旁观纠缠,于茫茫人群中殷殷热忱却...
    青春被忘路阅读 239评论 0 2
  • 3.冯神神啊 我第一次见到Q小姐,是在鹅岭那条大马路上,她从出租车里出来,背一个Gucci的包,头发随风起舞。对Q...
    冯神神啊阅读 225评论 1 4