nginx+php-fpm的502优化

前段时间,网站突然开始出现502。第一想法可能是QPS突然飙升,导致服务器迎接不暇;遂立马登上服务器加大fpm进程数;话说回来如果加大进程数能解决问题的话,这也是当前最快的问题解决方式。并在心中不由的一喜,难道网站访问量突然上升,我们要迎来高并发了吗?本人一直想实际的接触和解决高并发问题,然后像各位大神那样去分享一波经验;此处应有一波自豪而又邪恶的表情,哈哈哈...

然而问题并没有因为添加进程数而得到真正解决。在刚添加进程数时,情况确实有所改善。但短暂的十几分钟后,就又开始出现问题了。由于返回的是nginx的502错误页面,我们也就首先查看nginx的日志。跟踪到错误信息确实是nginx在代理fpm处理时出现超时。那么确实印证了fpm抗QPS能力不足的问题。遂继续加大fpm进程数,此时fpm进程数已经扩大10倍了。由于原先站点访问量一般,并且当前服务器只处理动态页面和数据接口,其他文件资源全部走的CDN和云存储;那么最初的fpm进程数只开了20,在相当长的一段时间里也没出现什么问题。确实也是访问量没上来,QPS最高也就一百出头(^_^)a。加到200进程数后,当前确实没有再收到502的情况反馈。当前问题算是解了。

但回过头来去查看问题时候,发现QPS并没有想象中爆发的那么厉害,最大QPS也才100多!那么问题来了,是什么情况导致PHP进程被占用而无法应对100多的QPS呢?

总的来说可以归结于单个PHP请求处理时间太长;当多数fpm进程被长时间处理的请求占用时,整个站点的抗QPS能力就下降了。当降到无法抗住当前QPS时,就开始频繁的502了。

由于系统较复杂,想直接找出慢执行的请求的代码并不容易。这时,fpm的slowlog功能价值就体现出来了。设置slowlog的timeout时间,并设计存放log路径。纪录能直接精确到方法,还是很赞的。然后对着纪录结果去优化对应的程序逻辑代码吧!

由于调整业务逻辑以及一些详细的优化策略都需要相对较长的时间,那么当前可以先进行一些fpm调整。上述加大进程数是一个,但一台机器的最大进程数还是有上限的。那么为了不让慢执行长时间占用进程,设置fpm的request_terminate_timeout。由于我们站点基本没有特意需要长时间执行PHP的业务,那么就可以选择降低这个值。直接设置成5s,当超出5秒无法处理完直接结束当前执行并跳出504。这样的做法好处在于,不会因为个别慢处理请求导致整站拖垮。当然对于有特殊需求长时间处理的业务就需要根据实际情况来调整了。由于我们的web系统目标是快速且纯萃,那么这样做很合适我们。对于需要长时间执行的业务,我们进行了业务逻辑拆分使用异步处理的方式进行。

我们系统拆分和分布式系统计划还在实施中,暂且写到这吧……

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 211,884评论 6 492
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,347评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 157,435评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,509评论 1 284
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,611评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,837评论 1 290
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,987评论 3 408
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,730评论 0 267
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,194评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,525评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,664评论 1 340
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,334评论 4 330
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,944评论 3 313
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,764评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,997评论 1 266
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,389评论 2 360
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,554评论 2 349

推荐阅读更多精彩内容