swift limitedQueuePool

线程爆炸

多线程编程里,由于GCD的便利使用,很容易就在queue里dispatch一个block,很方便。当有大量的block提交到并行队列里的时候,并行队列可能会创造许多线程,有些任务内部会有锁,会导致线程休眠、阻塞;这可能会使并行队列创造更多的线程去执行其他任务,大量的线程会抢占CPU的资源。此时大量的时间花费在切换线程中,简称线程爆炸。

解决方案

很简单 限制并发数目即可
具体方案有以下两种

  1. 创建多个serial queue 代替concurrent queue
    查看了YYDispatchQueuePool的实现方式。使用多个串行队列来代替GCD的并行队列来。需要添加新的任务时,会从创建过的串行队列里通过轮询的方法获取串行队列来添加任务。
    下面写了一个swift简单版
public final class AtomicInteger {
    
    private let lock = DispatchSemaphore(value: 1)
    private var _value: Int
    
    public init(value initialValue: Int = 0) {
        _value = initialValue
    }
    
    public var value: Int {
        get {
            lock.wait()
            defer { lock.signal() }
            return _value
        }
        set {
            lock.wait()
            defer { lock.signal() }
            _value = newValue
        }
    }
    
    public func decrementAndGet() -> Int {
        lock.wait()
        defer { lock.signal() }
        _value -= 1
        return _value
    }
    
    public func incrementAndGet() -> Int {
        lock.wait()
        defer { lock.signal() }
        _value += 1
        return _value
    }
}
public class DispatchQueuePool {
    private static var maxQueueCount = 32
    private var counter: AtomicInteger = AtomicInteger(value: 0)
    private var queueCount: Int = 0
    private var serialQueuePool: [DispatchQueue] = []
    private func createSerialQueue(label: String, qos: DispatchQoS) {
        for _ in 0..<queueCount {
            let queue = DispatchQueue(label: label, qos: qos)
            serialQueuePool.append(queue)
        }
    }
    init(_ label: String, qos: DispatchQoS, queueCount: Int = 0) {
        if queueCount > DispatchQueuePool.maxQueueCount {
            fatalError("queueCount 不合法")
        }
        self.queueCount = queueCount > 0 ? queueCount : ProcessInfo.processInfo.activeProcessorCount
        createSerialQueue(label: label, qos: qos)
    }
    convenience init(_ label: String) {
        self.init(label, qos: .default)
    }
    /// counter需要加锁 可能在不同的线程调用
    var queue: DispatchQueue {
        return serialQueuePool[counter.incrementAndGet() / queueCount]
    }
    
}
  1. 使用信号量控制个数

这里提供两种API, 一种需要在work里回调leave(),方便work里嵌套异步回掉. 一种是同步执行 即work() 执行完毕后即是否信号量

class LimitedDiapatchQueue {
    /// 信号量控制个数
    private var lock: DispatchSemaphore
    /// 实际执行队列
    private var concurrentQueue: DispatchQueue
    /// 需要一个串行队列来派发和控制个数,以免阻塞当前线程
    private var dispatchQueue: DispatchQueue
    
    init(_ label: String, qos: DispatchQoS = .default, limitCount: Int = 5) {
        concurrentQueue = DispatchQueue(label: label, qos: qos, attributes: .concurrent)
        lock = DispatchSemaphore(value: limitCount)
        dispatchQueue = DispatchQueue(label: label)
    }
    typealias LimitedLeave = () -> Void
    /**
     concurrent queue will limit the thread count.
     
     Calling this method will asyc dispatch a block in the current queue.
     
     - Parameters:
        - work: The block to execute.
     - Precondition: the blcok paramater in `work` must be called.
     */
    public func async(execute work: @escaping (LimitedLeave) -> Void) {
        dispatchQueue.async { [weak self] in
            self?.lock.wait()
            self?.concurrentQueue.async {
                work({
                    self?.lock.signal()
                })
            }
        }
    }
    /**
     concurrent queue will limit the thread count.
     
     Calling this method will syc dispatch a block in the current queue.
     this method maybe blcok the reveiver thread
     - Parameters:
        - work: The block to execute.
     - Precondition: the blcok paramater in `work` must be called.
     */
    public func sync(execute work: @escaping (LimitedLeave) -> Void) {
        dispatchQueue.sync { [weak self] in
            self?.lock.wait()
            self?.concurrentQueue.sync {
                work({
                    self?.lock.signal()
                })
            }
        }
    }
    /**
     concurrent queue will limit the thread count.
     
     Calling this method will asyc dispatch a block in the current queue.
     
     - Parameters:
     - work: The block to execute.
     - Precondition: the blcok paramater in `work` must be called.
     */
    public func async(execute work: @escaping () -> Void) {
        dispatchQueue.async { [weak self] in
            self?.lock.wait()
            self?.concurrentQueue.async {
                work()
                self?.lock.signal()
            }
        }
    }
    /**
     concurrent queue will limit the thread count.
     
     Calling this method will syc dispatch a block in the current queue.
     this method maybe blcok the reveiver thread
     - Parameters:
     - work: The block to execute.
     */
    public func sync(execute work: @escaping () -> Void) {
        dispatchQueue.sync { [weak self] in
            self?.lock.wait()
            self?.concurrentQueue.sync {
                work()
                self?.lock.signal()
            }
        }
    }
    
}

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 204,684评论 6 478
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 87,143评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 151,214评论 0 337
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,788评论 1 277
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,796评论 5 368
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,665评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,027评论 3 399
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,679评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 41,346评论 1 299
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,664评论 2 321
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,766评论 1 331
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,412评论 4 321
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,015评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,974评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,203评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 45,073评论 2 350
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,501评论 2 343