如何定位生产上CPU飙高100%的问题?(理论分析篇)

概括来说,分三步:

1,首先找到是哪个进程的CPU占有率飙到了100%。

2,根据进程号pid,定位到是哪个线程,找到对应线程的tid。

3,导出对应线程的dump日志文件,分析日志文件定位具体代码。



要解决这个问题,你应该具备以下技能:

1,linux的top命令。

2,jvm监控工具jps。

3,jvm监控工具jstack。



图片发自简书App


OK,接下来我们详细看一下如何定位问题。



一,linux的top命令如何使用


linux的top命令类似于windows下的任务管理器,我们可以使用linux命令来查看生产服务器的cpu使用情况。


常用命令如下:

top:每隔5秒显示所有进程的资源占用情况。

top -d 2:每隔2秒显示所有进程的资源占用情况。

top -c:每隔5秒显示所有进程的资源占用情况,并显示进程的命令行参数(默认只有进程名称)。

top -p 12345 -p 6789:每隔5秒显示12345和6789这2个进程的资源占用情况。

top -d 2 -c -p 123456:每隔2秒显示PID为12345的进程的资源占用情况,并显示该进程启动的命令行参数。


OK,我们可以使用下面的命令来查看某个线程下所有线程的CPU使用情况:

top -H -p pid

例如查找进程号为12345的进程下所有线程的使用情况:

top -H -p 12345


OK,我们离目标更近一步了,根据PID我们找到了tid,接下来我们就要使用另外一个命令了:jstack,找到了线程id意味着接下来的工作就要交给jvm提供的分析工具了。操作系统只能帮我们到这里了。



二,jvm监控工具jps


top命令很强大,不过我们也可以使用jvm提供的jps分析工具,这个是jvm专属的进程分析工具。

jps -lvm:查看当前服务器上运行的java进程。我们可以获取到java应用的pid。

接下来我们使用jstack -l pid命令查看java应用的堆栈信息。

总之,有2种方式可以获取到java应用的pid。

1,使用top命令

2,使用jps命令


jps的功能和linux的ps命令类似,都是用来查看进程的运行信息的。下面我们来看一下具体的参数都是什么含义。

jps -q:只列出进程id,注意这里列出的是jvm进程,非jvm进程jps是无能为力的。

jps -m:列出启动应用时传给main方法的参数。

jps -l:列出jvm进程id和运行主类全称。

jps -v:列出jvm进程启动时的jvm参数。



三,jstack性能分析工具


jstack可以导出某个线程的运行情况和当前状态等信息,命令如下:

jstack 98765 > 98765jstack.log


我们即可以把日志拉到本地来分析,也可以直接在linux上分析。总之,我们找到了日志文件,并且知道,文件里记录了线程98765的一些信息。接下来我们就是查看这个日志文件,定位到具体代码的位置。


四,如何分析日志文件定位到具体的代码


jstack导出的日志文件中,可能会包含以下几个关键信息:

1,Deadlock:死锁。

2,Runnable:执行中。

3,Waiting for condition:等待资源。

4,Waiting on monitor entry:等待获取监视器。

5,Suspended:暂停。

6,Object.wait()或者TIMED_WAITING:对象等待中。

7,Blocked:阻塞

8,Parked:停止


CPU飙高的问题,通常线程状态是Runnable。我们找到线程的状态信息后,再分析下面的详细堆栈信息,就可以大概定位到出问题的代码。


这里还有几个标识我们必须要清楚:

tid:java线程id。

nid:native线程id。

prio:线程优先级。


jps列出的id,到底是pid还是tid?

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 220,884评论 6 513
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 94,212评论 3 395
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 167,351评论 0 360
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 59,412评论 1 294
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 68,438评论 6 397
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 52,127评论 1 308
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,714评论 3 420
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 39,636评论 0 276
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 46,173评论 1 319
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 38,264评论 3 339
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 40,402评论 1 352
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 36,073评论 5 347
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,763评论 3 332
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 32,253评论 0 23
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 33,382评论 1 271
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 48,749评论 3 375
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 45,403评论 2 358

推荐阅读更多精彩内容