Tracer: hwlat - 硬件延迟检测

hwlat_detector是一种特殊的跟踪器,用于检测由某些底层硬件或者固件的行为引起的大型系统延迟。并且这个跟踪器数据不依赖于Linux系统。

Linux内核中的这段代码起初是为了检测x86架构上的SMIs(System Management Interrupts 系统管理中断)问题,最初是为了"RT(Real Time)"补丁编写,因为实时(RT)内核对延迟非常敏感。

上面提到hwlat_detector的数据不依赖于Linux系统,是由于SMIs不由Linux内核提供服务,这意味着它(SMIs)甚至不知道它们正在发生什么。SMIs的服务由BIOS代码设置并提供服务,通常用于关键事件,例如热传感器和风扇的管理。有时候SMI用于其他任务,这些任务在处理过程中会花费过多的时间(有时会到毫秒级别),如果试图将SMI延迟保持在微妙级别,那这就是一个问题了(可以考虑BIOS调优或者更换硬件)。

hwlat_detector工作原理是占用一个CPU的可配置时间量(禁用中断),轮询CPU时间戳计数器一段时间,然后查找"TSC"数据中的间隙。任何间隙都表示轮询被中断的时间,并且由于中断被禁用,唯一可以影响的就是SMI或者硬件hiccup(例如NMI,但是能够被追踪)。

使用:
enalbe: # echo hwlat > /sys/kernel/tracing/current_tracer
接口目录/sys/kernel/tracing/hwlat_detector/中包含2个参数widthwindow

  • width (usec): default 500,000 (0.5秒)
  • window (usec): default 1,000,000 (1秒)

默认值表示每1秒,hwlat探测器将回旋0.5秒。如果tracing_thresh为0时,则它将更改为默认值10 usec。如果观察到任何超过阀值的延迟,则将数据写入跟踪缓存区tracing ring buffer
这里有个特殊设置,当tracing_thresh为0时,如果这时加载了另外一个追踪器,则会将值设置回0。hwlat_detector会保存tracing_thresh最后的一个值,在hwlat_detector再次加载时,如果thresh仍然为0,则恢复tracing_thresh的值。

下面的tracing目录/文件将会用于hwlat_detector: (/sys/kernel/tracing/)

  • tracing_thresh: 要考虑的最小延迟值(单位:微妙)
  • tracing_max_latency: 实际观察到的最大延迟值(单位:微妙)
  • tracing_cpumask: 移动hwlat线程的CPU
  • hwlat_detector/width: 在一个运行窗口内回旋的时间量(单位:微妙)
  • hwlat_detector/window: 一个运行窗口的时间量 (单位:微妙)
  • hwlat_detector/mode: 运行线程的模式 (v5.x开始的新参数)

默认情况下,一个hwlat检测器的内核线程在新窗口开始时以循环的方式在cpumask指定的CPU之间迁移,可以通过修改mode值来修改运行方式:

  • none: 不强制迁移
  • round-robin: 默认方式,跨cpumask中指定的每个CPU迁移
  • per-cpu: 为tracing_cpumask中的每个CPU创建一个线程

Note:请不要在生产环境中使用hwlat检测器。它的目的就是手动运行以确定硬件平台是否存在系统固件服务的延迟问题。

所有数据来源: Linux Tracing Technologies

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 212,294评论 6 493
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,493评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 157,790评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,595评论 1 284
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,718评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,906评论 1 290
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,053评论 3 410
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,797评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,250评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,570评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,711评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,388评论 4 332
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,018评论 3 316
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,796评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,023评论 1 266
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,461评论 2 360
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,595评论 2 350

推荐阅读更多精彩内容