Linux学习-内存管理篇(六)-内存回收(lru链表)

一、页面回收触发方式

Linux中页面回收主要是通过两种方式触发的:

  • 由“内存严重不足”事件触发的。

  • 由后台进程 kswapd触发的,该进程周期性地运行,一旦检测到当系统空闲内存小于阈值,就会触发页面回收操作。

二、哪些页框可以回收
  • 属于内核的大部分页框是不能够进行回收的,比如内核栈、内核代码段、内核数据段以及大部分内核使用的页框。

  • 进程使用的页框可以进行回收的,比如进程代码段、进程数据段、进程堆栈、进程访问文件时映射的文件页、进程间共享内存使用的页。

而lru链表的作用本质上就是能够让系统在那些可以回收的页框当中,选择到理想的回收页框进行回收。

三、回收页的操作与分类

Linux进程的页分为如下几种:

  • 文件页(file-backed pages):有文件背景的页面,如代码段,要交换的话,可以直接和硬盘对应的文件进行交换。

  • 匿名页(anonymous pages):如进程堆、栈、数据段使用的页、匿名mmap共享内存时使用的页、shmem共享内存时使用的页等,如果要交换,需要交换到虚拟内存-swapfile或者linux的swap硬盘分区。

  • 被锁在内存中禁止换出的进程页(包括以上两种页)。

内核对进程使用的页进行回收操作主要分两种:

  • 直接将一些页释放。

  • 将页回写保存到磁盘(这里又分为磁盘区和swap区两种),然后再释放。

四、通过lru链表如何回收

lru链表组织的页包括:可以存放到swap分区中的匿名页,映射了文件的文件页,以及被锁在内存中禁止换出的进程页。所有属于这些情况的页都必须加入到lru链表中,无一例外,而剩下那些没有加入到lru链表中的页,基本也就剩内核使用的页框了。

zone与页框关系

lru链表并不是一个系统中只有一个,而是每个zone有一个,那么下面针对一个zone来分析lru链表:

一个lru链表描述符中总共有5个双向链表头,它们分别描述五中不同类型的链表:

  • LRU_INACTIVE_ANON:称为非活动匿名页lru链表(swap)

  • LRU_ACTIVE_ANON:称为活动匿名页lru链表(swap)

  • LRU_INACTIVE_FILE:称为非活动文件页lru链表(磁盘)

  • LRU_ACTIVE_FILE:称为活动文件页lru链表(磁盘)

  • LRU_UNEVICTABLE:此链表中保存的是此zone中所有禁止换出的页的描述符。

简单说,就是针对匿名页和文件页都拆分成一个活跃,一个不活跃的链表。禁止换出页单独一链。

那么lru链表进行的操作主要有以下几种:

  • 将不处于lru链表的新页放入到lru链表中

  • 将非活动lru链表中的页移动到非活动lru链表尾部

  • 将处于活动lru链表的页移动到非活动lru链表

  • 将处于非活动lru链表的页移动到活动lru链表

  • 将页从lru链表中移除

当然这些操作并不是一个个执行的,因为存在激烈的锁竞争,所以内核提供了一个lru缓存的机制,它将一些需要相同处理的页集合起来,一个lru缓存的大小为14,当达到这个数量时再对它们进行一批次的处理。

上面的lru链表操作,除了最后一项移除操作外,其他四样操作除非在特殊情况下, 否则都需要依赖于lru缓存。

系统通过若干标志位来标记页的迁移状态,其中,PG_active/PG_referenced用于标识页面活跃度,前者标识页面时活跃的;后者表示页面最近是否被访问过,每访问一次便会置位。

内存页的状态迁移图

大概逻辑是:
页面通过lru批处理,转来转去,从活动链表转到非活动链表,从非活动链表靠前转到链尾,在内存回收时,非活动链表链尾的页被回收掉。

具体清理:
不管是kswapd还是直接页面回收,最终都调用shrink_slab和shrink_zone;

  • 直接页面回收:反复调用这两个函数,若特定循环次数内没能成功释放N个page,则调用OOM killer;

  • Kswapd:对每个zone都调用shrink_zone();

Shrink_zone原理:

1 通过shrink_active_list()将页面从active移到inactive list;

2 调用shrink_inactive_list()将inactive list的页放入临时链表,最终调用shrink_page_list()回收

最后介绍一下Swappiness:

Linux的内存回收(memory reclaim),可以从文件页、匿名页两种页面里回收,swapiness决定了回收这二类页面的优先级

swappiness越大,越倾向于回收匿名页;(倾向于积极的使用swap分区,并把内存上的数据及时的搬运到swap空间里面.100告诉内核,只要有可能,尽量将内存中不常访问的数据移动到swap中)

swappiness越小,越倾向于回收file-backed的页面。(更倾向于使用物理内存.0告诉内核尽可能不要将内存移到swap中)

当然,它们的回收方法都是一样的LRU算法。Swappiness默认值为60

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
禁止转载,如需转载请通过简信或评论联系作者。
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 218,525评论 6 507
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 93,203评论 3 395
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 164,862评论 0 354
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,728评论 1 294
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,743评论 6 392
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,590评论 1 305
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,330评论 3 418
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 39,244评论 0 276
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,693评论 1 314
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,885评论 3 336
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 40,001评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,723评论 5 346
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,343评论 3 330
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,919评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 33,042评论 1 270
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 48,191评论 3 370
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,955评论 2 355

推荐阅读更多精彩内容

  • SWAP/swappiness/kswapd原理,swap分区优先级的妙用 概述 本文讨论的swap基于Linux...
    xywzhen阅读 5,205评论 1 5
  • 操作系统对内存的管理 没有内存抽象的年代 在早些的操作系统中,并没有引入内存抽象的概念。程序直接访问和操作的都是物...
    Mr槑阅读 16,701评论 3 24
  • 1 内存寻址 1.1 物理地址、虚拟地址以及线性地址 物理地址: 物理内存的内存单元地址 虚拟地址: 程序员看到的...
    疯狂小王子阅读 2,816评论 3 21
  • 第17章 回收页框 页框回收算法 内存及磁盘高速缓存抓取了那么多的页框但从未释放任何页框。因此,迟早所有的空闲内存...
    rlkbk阅读 1,118评论 1 2
  • 前言 内存管理一向是所有操作系统书籍不惜笔墨重点讨论的内容,无论市面上或是网上都充斥着大量涉及内存管理的教材和资料...
    木有sky阅读 907评论 0 1