杭州第六届测试沙龙收获梳理

趁着下班空闲的一会时间回顾了一下12.19日参加的杭州第六届测试沙龙的收获,四个议题,收获多多,大概整理了一下,明确一下一些内容的方向。

具体的PPT不知道官方允不允许放出来,就先不抛了,后面有回应的再加上分享的PPT
image

1.《云设计工具前端性能测试建设及实践》

  • 主讲人: 寻迹 酷家乐 质量效能部
  • 收 获:从0到1建设一项测试领域所需要的流程,以及测试落地时候所需要做的事情。
  • 详 情:
  1. 要有对测试产品完善的认知,产品解决什么问题?用户场景是什么样子?新增的测试领域能为用户带来什么体验?方便制定测试目标。
    1. 对测试产品的技术架构有清晰的认识,方便测试工作中技术方案的制定以及测试工作中所采用的技术手段。
    2. 参考业界同行在这个领域是怎么做的?移植到自己的产品进行调整优化,完善出属于自己产品的测试方向。
    3. 针对于制定的测试方向和自己业务的难点进行一一对应,然后进行问题细分,制定不同方向的测试指标。
  • 具体的建设流程如下:
流程
  • 其他:
    期间听众提问了三个问题,都是和UI自动化相关的内容,大意是遇到一些UI界面上锯齿要怎么处理,由此可鉴一部分测试关注点更注重在功能实现的环节上。

2.《手淘AIOps实战-消息全链路智能监控》

  • 主讲人: 阿里巴巴-董福铭(吾铭)、黄俊(豆豆)
  • 收 获: 自己在下一阶段的规划里也有关于日志监控的内容,相当于帮忙点了一盏明灯,瞻仰一下前沿的同行们对于日志这块是怎么处理的。
  • 细 节:
    1. 日志协议统一。我们这里的业务有多种协议,涉及后台服务,前端应用,智能设备,智能硬件。想去查询日志的时候,需要到各个角落里去收集查看,如果有统一的日志协议,的确是可以上送平台,做集中处理。
    2. 高度不同,领悟不到啊,我多加油!!!

3. 《质量-监控体系建设》

  • 主讲人: 王静文 有赞
  • 收 获: 对监控的一个整体认识。


    image
  • 细 节:
    1. 监控的4个黄金指标
      1. 延迟:服务处理某个请求所需要的时间。
      2. 流量:使用系统中的某个高层次的指标针对系统负载需求所进行的度量。
      3. 错误:请求失败的速率。
      4. 饱和度:服务容量有多满,比如CPU,IO,内存等等
    2. 告警信息规范。上面聊到了下一阶段有做日志监控的想法,所以这个规范对我来说还是比较及时的。
      1. 告警标题。精简并且有指导性,提升处理效率。
        示例:服务名称-上送时间
      2. 告警级别。设置合理的告警级别 info?warn?critical?
        示例:报警等级, 这里有一个要明确的点是:要和后台人员制定好日志打印规则,不然全部是info是没有意义的
      3. 告警原因。信息明确,告警规则清楚。
        示例:规划是报警日志上下20条
      4. 告警人提醒:开发,运维,测试。
        示例:企业微信发送项目群
      5. 响应规范。谁在响应?什么问题?影响什么场景?什么用户?处理方式是什么?

4. 《质量效能改进三板斧》

  • 主讲人: 贺达 E签宝
  • 收 获:
    1. 对电子签名业务以及产业链的了解(借PPT里的一张图),一个极其小众的业务类型,比我现在负责的公交业务类型还小众。
      image
    2. 前辈是怎么用两年的时间把一个团队从一穷二白的囧到鸟枪加大炮,一个团队崛起的历程,值得借鉴的地方有很多很多。
    3. 认识到自己对自动化工作方向的错误(最大的收获)。
  • 细 节:
    1. 自动化方向的错误。市面上常见的测试框架
      1. pytest/unitest(负责用例执行)+SQL/yaml/Excel(用例存储)+Allure(报告展示)+钩子(邮件/钉钉/企业微信通知)+Jenkins/Gitlab(CI)+request(模拟HTTP请求,其他协议另选模块)
      2. Httprunner(负责用例执行)+yaml(用例存储)+其他
      3. pytest/unitest(负责用例执行)+rebotfarmwark(负责用例编写)+其他
      4. Testng+httpclient+Allure+SQL/yaml/Excel(用例存储)+钩子(邮件/钉钉/企业微信通知)+Jenkins/Gitlab(CI)
      5. Testng+restassured(模拟HTTP请求)+ExtentTestNGIReport(报告)+其他

之前我在选择和练手如上的这些框架的时候,第一反应就是减少使用者的代码量,尽量可以在SQL,Excel,Yaml等格式的文档中直接编写用例,为了实现这个效果,尽可能的做出异常判断,但是,远远没有JMeter做的完善。

JMeter是可以实现零代码实现接口自动化,有自定义需求的时候也可以通过jar包来实现扩展,那么,自己写自动化脚本的意义在哪?

在看到如下的对比过程中,突然意识到一个事情:


选型

测试是一个技术岗位,日常工作中不应该去减少代码量,甚至应该去增加代码量,只有这样,才能逐渐理解开发所实现的逻辑,也可以摆脱测试只是点点点的岗位,进一步还可以实现codereview的目标,摆脱鄙视链末端。从这个角度来看,我之前的自动化方向一直就是错的。

那么自动化的意义在哪?提效,尽可能的提高测试同学来编写自动化脚本的质量与速度,提供排查手段,发现错误迅速定位,提高排查问题的能力(自己踩的坑还要自己填),附带珍藏的自动化测试架构图!


image

image
    1. PPT里的介绍的开源工具链接,一身技术来源于网络(菜是原罪),还是要归还于网络的。
    1. 质量红线的设计思路以及实施方案。目前在我的团队里边很难推动这个事情,就先看看了,需要的时候及时借鉴。
    1. 数据工厂的解决方案,膜拜一下大佬,真的是用了一个很巧的思路并且成本很低来解决数据工厂的难点。


      image

竟然是通过flask+swagger的方式来解决,swagger的UI是修改过的,这样才贴合自身的业务,甚至于swagger的原始数据也应该是做了修改。但是,这么一种解决方案,极大的降低了测试不用又搞前端,又搞后端的形式,再膜拜一遍,这种方式是真的巧,有空的时候试着实现一下。


image
    1. 照着敲了一遍示例代码,发现学了Java之后对之前Python的一知半解理解的更透彻了一点。之前对于私有变量(private),特殊变量是没什么感受的,知道有这么一回事,但是没用过,抄了一下代码,发现还能这么玩,受教了,截图中有个调试工具,蛮好用的,推荐一下。


      附调试
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 212,542评论 6 493
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,596评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 158,021评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,682评论 1 284
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,792评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,985评论 1 291
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,107评论 3 410
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,845评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,299评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,612评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,747评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,441评论 4 333
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,072评论 3 317
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,828评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,069评论 1 267
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,545评论 2 362
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,658评论 2 350

推荐阅读更多精彩内容

  • 测试发现bug 开发不认为是bug的时候你怎么办? 说法一: 1、首先明确开发说不是bug的理由。 2、如果是需求...
    忘生__dd4f阅读 794评论 0 0
  • 成为一名优秀的Android开发,需要一份完备的知识体系[https://github.com/Android-A...
    字节跳不动阅读 2,834评论 0 15
  • 久违的晴天,家长会。 家长大会开好到教室时,离放学已经没多少时间了。班主任说已经安排了三个家长分享经验。 放学铃声...
    飘雪儿5阅读 7,515评论 16 22
  • 今天感恩节哎,感谢一直在我身边的亲朋好友。感恩相遇!感恩不离不弃。 中午开了第一次的党会,身份的转变要...
    迷月闪星情阅读 10,559评论 0 11
  • 可爱进取,孤独成精。努力飞翔,天堂翱翔。战争美好,孤独进取。胆大飞翔,成就辉煌。努力进取,遥望,和谐家园。可爱游走...
    赵原野阅读 2,723评论 1 1