《嵌入式Linux内存与性能详解》笔记1——内存测量

一、前言

在我们编写 嵌入式linux 应用程序时,往往为了业务实现而忽略了一些代码优化的问题。使得程序臃肿,内存使用不合理,导致一些程序运行缓慢的问题。当然了,在当今师姐,嵌入式设备的内存问题似乎也越来越小,因为内存在逐渐增大,笔者目前开发的设备其内存已经达到了 4G。但我们不一定一直开发大内存的设备,有时我们也会面临开发小内存设备的境地。所以我们有必要学习如何优化内存,要达到优化内存的目的我们就需要知道有哪些内存占用得大,所以我们就需要 检查内存

二、内存分类

在Linux中,我们可以将进程大致分为 4 种,分别是:

  • V(irtual)SS:指 单个进程 全部可访问的地址空间,其有可能包括尚未在内存中驻留的部分。对于确定单个进程实际内存使用大小 VSS 用处不大。
  • R(esident)SS:指单个进程实际占用的内存大小。RSS 也不太准确,是因为它还包括该进程所使用共享库全部内存大小。一个共享库,可能被多个进程使用,但该共享库实际只会被装入内存一次。
  • P(roportional)SS:PSS 相对于 RSS 计算共享库内存大小是按比例的。N个进程共享,该库对 PSS 大小的贡献只有1/N。
  • U(nique)SS:USS是单个进程私有的内存大小,即该进程独占的内存部分。USS揭示了运行一个特定进程在的真实内存增量大小。如果进程终止,USS就是实际被返还给系统的内存大小。一般我们用该内存代表进程实际使用的内存

三、系统内存测量方法

3.1 free

最直观的我们可以使用 free 查看一个系统的内存使用,如下:

free指令

上图所示中的各个内存分别如下:

  • buffers:用于给 Linux 系统中块设备做缓冲区,在某些时候可以回收使用。
  • cached:用来缓冲我们所打开的文件。 在 linux 系统中,如果内存充足,系统会使用内存来缓存一些文件,从而加快进程的运行速度。当内存不足时,这些内存就会被回收。
  • free:空闲内存
    真正可用的内存为 free+buffers+cached

3.2 /proc

我们都知道 proc目录 是存放 linux 内核生成信息的目录,我们可以通过访问该目录来获取一些内核数据,其中就包括内存。

3.2.1 meminfo

如下图所示,我们可以直接查看系统内存总的使用信息

meminfo

同理,总的系统内存使用情况为 MemFree + Buffers + Free

那么以上就是 系统内存 的使用情况查看了,现在我们可以知道系统内存的使用情况了,那么是哪些进程占用了这些内存了,找出这些进程我们就可以对其进行优化

四、进程内存测量方法

进程内存使用情况的测量我们依旧离不开 /proc文件系统。在 /proc 目录下有一些数字,这些数字都是一个目录,它们都代表着一个 进程,可以通过访问这些 纯数字目录 下的文件来获取进程信息。如下所示:

/proc目录

我们可以从中的几个属性来衡量进程内存的使用情况,包括 statmsmapmapsmemmap。其中 maps 需要和 memmap 联合使用才能测量出具体使用的 物理内存情况,但 memmap 有些系统版本并不支持,所以这里就不细讲其使用方法,我们主要说明 statmsmapmaps

4.1 进程内存分类

本小节讲解一个小知识点,就是进程内存可以简单分类一下:

  • 虚拟内存
  • 物理内存

我们都知道应用程序都有 4G内存空间,那么这对应就是 虚拟内存。linux 系统不是简单的响应我们的内存请求,当我们使用 malloc 的时候系统不会 实时 分配内存给应用程序,而是当应用程序访问 malloc 分配的内存时,产生 缺页异常 才分配 物理内存页 给应用程序。要注意,一个 物理内存页4K Bytes 大小。

4.2 进程内存测量

本小节直接给大家展示各个属性的使用方法,读者们可以自行实现一个小程序,通过以下属性查看其内存使用情况

4.2.1 statm

我们直接使用 cat 命令查看 statm 属性,如下所示:

statm

这里的 7 个数,他们的单位都是 物理内存页(4K)。它们的意思如下:

  • Size (total pages): 进程虚拟地址空间的大小
  • Resident(pages):应用程序正在使用的物理内存的大小
  • Shared(pages):共享页数
  • Trs(pages):程序所拥有的可执行虚拟内存的大小
  • Lrs(pages):被映像到任务的虚拟内存空间的库的大小
  • Drs(pages): 程序数据段和用户态的栈的大小
  • dt(pages):脏页数量(已经修改的物理页面)

SizeTrsLrsDrs 分别对应于进程的 虚拟内存,而 Residentshareddr 对应于 物理内存

4.2.2 maps

我们直接使用 cat 命令查看 maps 属性,如下所示:

maps

maps 的每一行都描述一个 VMA,其各属性意义分别如下:

  • 第一列00010000-00011000 代表该内存段的虚拟地址。
  • 第二列r-xp 代表着该内存的权限,其值含义为: r=读w=写x=执行s=共享p=私有
  • 第三列00000000 代表该段在程序文件中的便宜
  • 第四列1f:12 代表映射文件所在存储介质的主设备号和次设备号。可以通过 cat /proc/devices 来查看设备信息, 并查找出该内存映射位于什么设备文件。比如 1f 的十进制为 31,其在设备信息中为 mtdblock 文件。所以该段内存映射位于 mtdblock设备 的文件。如果该属性为 0,则表示该内存没有映射到 程序文件 中,这种叫 匿名虚拟内存区域(Anonymous Virtual Memory Area),一般是 堆和栈
  • 第五列1052503 映像文件的节点号;
  • 第六列/mnt/mem_optmize 映像文件的路径,对应着执行文件所对在的路径。

我们看下面几行信息:

00010000-00011000 r-xp 00000000 00:12 1052503 /mnt/mem_optmize
00020000-00021000 r--p 00000000 00:12 1052503 /mnt/mem_optmize
00021000-00022000 rw-p 00001000 00:12 1052503 /mnt/mem_optmize
00022000-00043000 rw-p 00000000 00:00 0 [heap]
be8b2000-be8d3000 rw-p 00000000 00:00 0 [stack]

第一行权限为 r-xp,即 只读可执行,所以该段内存位于 代码段
第二行权限为 r--p,即只有 只读 权限,可以判断该段内存位于 只读数据段
第三行权限为 rw-p,即 读写 权限,可以判断该段内存位于 数据段
第四行 和 第五行 在结尾告诉我们它们分别为 堆段栈段

当然了,其余段笔者就不分析了,有兴趣的读者可以自行查看资料学习。

4.2.3 smaps

我们直接使用 cat 命令查看 smaps 属性,如下所示:

smaps

上图只展示了其中一个段,各个属性意义如下:

  • 第一行:与 maps 的属性一样
  • size:进程使用内存空间,并不一定实际分配了内存,属于 VSS
  • Rss:实际分配的内存(不需要缺页中断就可以使用的)
  • Pss:平摊计算后的使用内存(有些内存会和其他进程共享,例如mmap进来的)
  • Shared_Clean:和其他进程共享的未改写页面
  • Shared_Dirty:和其他进程共享的已改写页面
  • Private_Clean:未改写的私有页面页面
  • Private_Dirty:已改写的私有页面页面
  • Referenced:标记为访问和使用的内存大小
  • Anonymous:不来自于文件的内存大小
  • Swap:存在于交换分区的数据大小(如果物理内存有限,可能存在一部分在主存一部分在交换分区)
  • KernelPageSize:内核页大小
  • MMUPageSize:MMU页大小,基本和Kernel页大小相同

这里简单的罗列一下公示:

  • USS = Private_Clean + Private_Dirty
  • PSS = USS + (Shared_Clean + Shared_Dirty)/n
  • RSS = Private_Clean + Private_Dirty + Shared_Clean + Shared_Dirty

一般情况下,我们查看 Private_CleanPrivate_Dirty 即可,它们的和可以看成是进程内存的使用情况(不包括共享库等共享内存)

五、参考链接

Linux内存管理 一个进程究竟占用多少空间?-VSS/RSS/PSS/USS https://www.cnblogs.com/arnoldlu/p/9375377.html
Linux smaps接口文件结构https://www.cnblogs.com/0616--ataozhijia/p/3999661.html
书籍《嵌入式linux内存与性能详解》

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 213,186评论 6 492
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,858评论 3 387
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 158,620评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,888评论 1 285
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 66,009评论 6 385
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 50,149评论 1 291
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,204评论 3 412
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,956评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,385评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,698评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,863评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,544评论 4 335
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,185评论 3 317
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,899评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,141评论 1 267
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,684评论 2 362
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,750评论 2 351

推荐阅读更多精彩内容