python - GIL

python解释器

我们一直说python是解释性语言,不需要编译,并不是说操作系统真的就能识别.py文件的代码了,机器永远只能识别01010101,要想在机器上运行,编译的过程少不了,而python解释器的工作,就是将python代码转换成机器能识别的010101二进制指令。

python解释器是一个程序,常见的有:

  • CPython:C语言开发,使用最广,默认的解释器
  • IPython:基于CPython之上的交互式解释器
  • PyPy:采用JIT技术,对python代码进行动态编译,追求执行速度
  • Jython:运行在Java平台上的解释器,可以直接编译成Java字节码执行
  • IronPython:同理Jython,运行在 .Net 平台上

GIL全局解释器锁

同进程内的多线程,一个线程运行会霸占python解释器,使其他线程无法运行,所以python的多线程其实并不是同时进行的。而多进程是由系统分配资源,等于每个进程都有一个python解释器,所以多进程可以同时进行,但是资源开销大。

GIL底层实现原理

image.png

上面这张图,就是 GIL 在 Python 程序的工作示例。其中,Thread 1、2、3 轮流执行,每一个线程在开始执行时,都会锁住 GIL,以阻止别的线程执行;同样的,每一个线程执行完一段后,会释放 GIL,以允许别的线程开始利用资源。

如果线程一直阻塞呢?是不是就一直锁住了?或者说线程是否就会完全执行完了?
答案是NO。
CPython 中还有另一个机制,叫做间隔式检查(check_interval),意思是 CPython 解释器会去轮询检查线程 GIL 的锁住情况,每隔一段时间,Python 解释器就会强制当前线程去释放 GIL,这样别的线程才能有执行的机会,这就是cpython为线程提供了并发能力
但这个并发能力并不一定是我们想要的,因为我们的python代码可能需要保证原子性,如:给10000长度的列表sort,如果因为cpython的间隔式检查,在这个功能还没执行完的时候就将执行权切换给了另外一个线程,这显然不是我们想要的,显然就很不线程安全了,所以我们需要人为加锁

什么是线程安全?
因为同一进程内的线程之间是资源共享的

  • 共享的好处是,可以不用频繁的加载资源,而资源加载是属于IO操作,是比较耗时的
  • 共享的坏处是,多进程间可以随意修改资源,势必会因为数据混乱而导致业务出错

为了要保证多线程之间的资源一致性,所以Cpython解释器使用了GIL,来保证每次只有一个线程能执行,从一定程度上保证了线程安全。但并不绝对,在实际编码过程中,依然要人为加锁。

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 212,542评论 6 493
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,596评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 158,021评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,682评论 1 284
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,792评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,985评论 1 291
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,107评论 3 410
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,845评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,299评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,612评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,747评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,441评论 4 333
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,072评论 3 317
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,828评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,069评论 1 267
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,545评论 2 362
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,658评论 2 350

推荐阅读更多精彩内容

  • 首先来看一个例子, 假设我们取n=100000000,首先采用单线程情况下执行这个函数count_down。 这时...
    Litt1eQ阅读 199评论 0 1
  • GIL,中文译为全局解释器锁。在讲解 GIL 之前,首先通过一个例子来直观感受一下 GIL 在 Python 多线...
    wanzhouyi阅读 139评论 0 1
  • Python中的GIL锁 在Python中,可以通过多进程、多线程和多协程来实现多任务。 在多线程的实现过程中,为...
    陌染007阅读 429评论 0 0
  • 有所收获,特将原文翻译如下。 原文:What is the Python Global Interpreter L...
    vickeex阅读 369评论 0 2
  • 我是黑夜里大雨纷飞的人啊 1 “又到一年六月,有人笑有人哭,有人欢乐有人忧愁,有人惊喜有人失落,有的觉得收获满满有...
    陌忘宇阅读 8,531评论 28 53