检瓜子网络性能优化纪实

检瓜子网络性能优化纪实

一、背景

        检瓜子是瓜子二手车为二手车评估师开发的智能车辆评估检测工具App。在两年的开发维护中,有一个问题一直困扰着一线评估师:做一些操作时偶尔会出现“网络异常,请重试”的提示,影响评估师的检测效率,用户体验不友好。为此,技术团队针对这个问题开始做了一系列的动作以提高网络请求的成功率,提升用户体验。

二、网络性能原状

        优化一个问题,首先要清楚这个问题目前影响范围,影响程度是怎样的,这样在做优化的时候才能做出前后的对比,以数据展现优化动作的效果,并逐步提高。为此我们对App内所有的网络请求进行了监控。以2017-11-1日数据为例:

    ** 网络请求成功数量:1087028

    ** 网络请求失败数量:7291

    ** 网络失败率:0.67%

        除了我们自己APP的监控,我们同时接入了第三方网络监控平台“听云”,十月中旬的检测数据如下图,图中“j******i.guazi.com”是检瓜子的网络请求域名,不难发现我们后端服务的网络性能确实和一些优秀的后端服务“up.qiniu.com”之间有明显差距。

听云网络错误率检测数据

三、网络错误原因分析

        我们对2017-11-1所有的网络错误根据异常的原因做了聚合,然后分别对每个原因进行错误占比的统计。主要分为DNS解析异常和Socket超时异常。明细数据如下图:

网络错误原因及占比                                           

四、DNS异常解决方案

        为了解决DNS异常的问题,我们尝试了 http dns (利用一个 HTTP 的查询目标域名IP的 服务替代默认的 dns解析过程)。我们进行了三天的灰度对比,样本比例为4:6(40%未采用http dns,60% 采用了 http dns)。收集了灰度数据如下图:

http dns 灰度对比数据

        分析图中数据可得出几个结论:

        ** 采用了 Http dns 之后我们的网络错误率降低了 20 % 以上。

        ** dns 错误占所有错误的比例大幅降低。

        ** dns 错误占比降低幅度大于网络错误占比降低幅度:一部分dns错误转移为了Socket超时错误。

五、Socket超时解决方案

        Http 通信在连接建立了以后,开始进入 Socket 通信阶段,这个阶段包含三个主要时间段:

        ** 客户端通过网络发送request数据报文到server

        ** server处理request并生成response (服务端接口性能、延时)

        ** 服务端通过网络将response发送回客户端

1、网络原因

        为了及时发现和解决网络延时导致的 socket timeout 我们接入了第三方听云的 ping 检测服务。它利用分布在全国的不同城市不同运营商(移动、联通、电信)的终端节点定时 ping 目标域名或者IP,查看ping的丢包率以及延时信息。这些节点的类型为 last mile 节点,和我们的目标用户节点类型一致。 如果某些节点有问题能够及时报警,以便推动运维人员帮助我们解决网络问题。


全国网络延时对比图

   

部分网络节点异常信息

2、服务器接口响应时间

        导致socket timeout 的另一个主要原因是因为服务端的接口响应时间过长,偶尔会出现接口延时超过 20S 的严重问题。为了能够及时的推送服务端优化接口性能,我们也对每个接口的延时进行了监控。每周发出一个接口响应时间最长 top 10 的榜单。以便服务端有针对性的解决某个接口延时的问题。经过几周的共同努力我们的接口平均响应时间从523ms降低到了357ms。

接口延时 Top 10 榜单

    下图是一个接口优化后接口延时的前后对比,延时曲线有了明显的变化。

接口优化前后对比图

       此方法在与服务端、运维人员讨论后,我们在公司范围内对所有业务线的所有接口进行了统一的监控,更好的帮助研发人员发现问题并及时解决。

Nginx Avg Time system
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 215,463评论 6 497
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 91,868评论 3 391
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 161,213评论 0 351
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 57,666评论 1 290
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 66,759评论 6 388
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 50,725评论 1 294
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,716评论 3 415
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,484评论 0 270
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,928评论 1 307
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,233评论 2 331
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,393评论 1 345
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,073评论 5 340
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,718评论 3 324
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,308评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,538评论 1 268
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,338评论 2 368
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,260评论 2 352

推荐阅读更多精彩内容

  • 国家电网公司企业标准(Q/GDW)- 面向对象的用电信息数据交换协议 - 报批稿:20170802 前言: 排版 ...
    庭说阅读 10,946评论 6 13
  • https://nodejs.org/api/documentation.html 工具模块 Assert 测试 ...
    KeKeMars阅读 6,320评论 0 6
  • Android 自定义View的各种姿势1 Activity的显示之ViewRootImpl详解 Activity...
    passiontim阅读 172,028评论 25 707
  • 听着歌的男人 带着口罩的女子 牵着孩子的老人 都拥在 这片狭窄的空间里 他微眯着眼 你沉思着 我紧紧拉着扶手 一起...
    半城离火阅读 468评论 2 6
  • 文学理论课上,老师抛出一个话题:文品与人品。关于《黄金时代》,关于萧红,由一个网上的短微博引入。 假如,要你跟帖,...
    牛芘蓎阅读 1,525评论 0 1