自定义的线程池实现任务的出入队列

一、抽象类Task

import com.xhtech.hermes.commons.util.UUIDUtil;

import java.util.concurrent.atomic.AtomicBoolean;

public abstract class Task {

    private String id;

    private boolean success = false;

    private AtomicBoolean invalid = new AtomicBoolean(false);

    public abstract void execute();

    public String id() {
        if (id == null) {
            id = UUIDUtil.genId();
        }
        return id;
    }

    public Task expire() {
        return invalid.compareAndSet(false, true) ? this : null;
    }

    public boolean success() {
        return success;
    }

    public Task success(boolean success) {
        this.success = success;
        return this;
    }
}

二、任务队列包装类

import org.apache.commons.lang3.concurrent.BasicThreadFactory;
import org.slf4j.Logger;
import org.slf4j.LoggerFactory;
import org.springframework.core.task.TaskRejectedException;

import java.util.Map;
import java.util.concurrent.*;
import java.util.concurrent.atomic.AtomicBoolean;

public class TaskQueueScheduler {

    private final Logger logger = LoggerFactory.getLogger(TaskQueueScheduler.class);

    public static final int DEFAULT_EVENT_LOOP_THREADS = Runtime.getRuntime().availableProcessors() * 2;

    private static final StopTask STOP_TASK = new StopTask();

    private static final String DEFAULT_NAME = TaskQueueScheduler.class.getSimpleName();

    private String name;

    private int queueSize = -1;

    private int poolSize = 0;

    private LinkedBlockingDeque<Task> queue;

    private Map<String, Task> queueing = new ConcurrentHashMap<>();

    private ThreadPoolExecutor executor;

    private LinkedBlockingQueue consumerQueue = new LinkedBlockingQueue();

    private AtomicBoolean running = new AtomicBoolean(false);

    private CountDownLatch stopLatch;

    public TaskQueueScheduler() {
        this(-1, true);
    }

    public TaskQueueScheduler(String name) {
        this(DEFAULT_EVENT_LOOP_THREADS, -1, true, name);
    }

    public TaskQueueScheduler(int poolSize, String name) {
        this(poolSize,-1, true, name);
    }

    public TaskQueueScheduler(int poolSize, int queueSize) {
        this(poolSize, queueSize, true);
    }

    public TaskQueueScheduler(int poolSize, boolean start) {
        this(poolSize, -1, start);
    }

    public TaskQueueScheduler(int poolSize, boolean start, String name) {
        this(poolSize, -1, start, name);
    }

    public TaskQueueScheduler(int poolSize, int queueSize, boolean start) {
        this(queueSize, start, DEFAULT_NAME);
    }

    public TaskQueueScheduler(int poolSize, int queueSize, boolean start, String name) {
        this.poolSize = poolSize;
        this.queueSize = queueSize;
        this.name = name;
        this.queue = queueSize > 0 ? new LinkedBlockingDeque(queueSize) : new LinkedBlockingDeque();
        this.executor = createExecutor(name);

        if (start) {
            start();
        }
    }

    private ThreadPoolExecutor createExecutor(String name) {
        BasicThreadFactory factory = new BasicThreadFactory.Builder().namingPattern(name + "-thread-%d").priority(Thread.MAX_PRIORITY).build();
        return new ThreadPoolExecutor(poolSize, poolSize, 0, TimeUnit.MILLISECONDS, consumerQueue, factory);
    }

    public synchronized void add(Task task) throws TaskRejectedException {
        if (queueSize != -1 && queue.size() > queueSize) {
            throw new TaskRejectedException("The queue is full");
        }

        if (task == STOP_TASK || enqueueing(task)) {
            queue.add(task);
        } else {
            logger.info("Task processing in queue");
        }
    }

    public synchronized void addFirst(Task task) throws TaskRejectedException {
        if (queueSize != -1 && queue.size() > queueSize) {
            throw new TaskRejectedException("The queue is full");
        }

        if (enqueueing(task)) {
            queue.addFirst(task);
        } else {
            logger.info("Task processing in queue");
        }
    }

    private boolean enqueueing(Task task) {
        return queueing.putIfAbsent(task.id(), task) == null;
    }

    private boolean dequeueing(Task task) {
        return queueing.remove(task.id()) != null;
    }

    private Task dequeueing(String id) {
        return queueing.remove(id);
    }

    public Task getQueueingTask(String id) {
        Task task = dequeueing(id);
        return task != null ? task.expire() : null;
    }

    public int size() {
        return queue.size();
    }

    public void start() {
        if (running.compareAndSet(false, true)) {
            stopLatch = new CountDownLatch(poolSize);

            for (int i = 0; i < poolSize; i++) {
                executor.submit(new TaskQueueConsumer());
            }
        }
    }

    public void stop() {
        logger.info("try stop...");
        if (running.compareAndSet(true, false)) {
            logger.info("it's in running");
            for (int i = 0; i < poolSize; i++) {
                add(STOP_TASK);
            }

            try {
                logger.info("start await");
                stopLatch.await();
                logger.info("end await");
            } catch (InterruptedException e) {
                e.printStackTrace();
            }
        }
        logger.info("finish stop...");
    }

    public void shutdown() {
        stop();
        executor.shutdown();
    }

    public boolean isRunning() {
        return running.get();
    }

    class TaskQueueConsumer implements Runnable {
        @Override
        public void run() {
            try {
                Task task;
                while (running.get() && (task = queue.take()) != null && task != STOP_TASK) {
                    if (dequeueing(task) && task.expire() != null) {
                        try {
                            task.execute();
                        } catch (Throwable e) {
                            logger.error(e.getMessage(), e);
                        }
                    }
                }
            } catch (Throwable e) {
                logger.error(e.getMessage(), e);
            } finally {
                logger.warn("{}[{}] is shutdown", name, Thread.currentThread().getName());
                stopLatch.countDown();
            }
        }
    }

    static class StopTask extends Task {
        @Override
        public void execute() {
        }
    }
}

三、测试

import lombok.extern.slf4j.Slf4j;
import org.junit.Test;

@Slf4j
public class TaskQueueSchedulerTest {

    private TaskQueueScheduler taskQueueScheduler;
    public void addTask(Task task) {
        if (taskQueueScheduler == null) {
            synchronized (this) {
                if (taskQueueScheduler == null) {
                    taskQueueScheduler = new TaskQueueScheduler(4, getClass().getSimpleName());
                }
            }
        }

        taskQueueScheduler.add(task);
    }


    @Test
    public void test(){
        taskQueueScheduler = new TaskQueueScheduler(4, getClass().getSimpleName());
        taskQueueScheduler.start();
        for (int i = 0; i < 10; i++) {
            final int k = i;
            taskQueueScheduler.add(new Task() {
                @Override
                public void execute() {
                    doSth(2 + k);
                }
            });
        }

        log.info("start stop");

        taskQueueScheduler.stop();
        log.info("end stop");


    }

    private void doSth(long ms){
        try {

            log.info("start {}", ms);
            Thread.sleep(ms);
            log.info("end {}", ms);
        } catch (InterruptedException e) {
            e.printStackTrace();
        }
    }

}
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 216,125评论 6 498
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 92,293评论 3 392
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 162,054评论 0 351
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,077评论 1 291
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,096评论 6 388
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,062评论 1 295
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,988评论 3 417
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,817评论 0 273
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,266评论 1 310
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,486评论 2 331
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,646评论 1 347
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,375评论 5 342
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,974评论 3 325
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,621评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,796评论 1 268
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,642评论 2 368
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,538评论 2 352

推荐阅读更多精彩内容