IntelliTest(3) - Test to Code Binding, Test Case Management[译]

[作者提醒:从Visual Studio 2015 RC 版本开始,“Smart Unit Tests”已经更名为“IntelliTest”]


  在这篇文章中,我们讲到IntelliTest如何自动生成测试用例,以及当被测代码改变时,如何更新这些用例。针对一段被测代码,IntelliTest会生成一个PUT方法,和一个或多个测试用例方法。在下面的示例图中,展示了以Pex开头的特性的使用,它用于定义用例和被测代码的约束关系,这些特性都定义在Microsoft.Pex.Framework命名空间下。

image.png

在编译时,这些特性将作为它们所作用的类或方法的元数据,嵌入到程序集中。在后续的调用中,IntelliTest通过反射,拿到元数据,并拿到定义在PUT上的契约。

  也许你已经发现了,自动生成的测试用例都是传统单元测试,它们也会显示在Visual Studio 的测试用例浏览窗口中,就像你手写的那些测试用例一样。不过,自动生成的测试用例并不希望被编辑。每一个自动生成的测试用例都会调用PUT方法,PUT方法又会调用被测代码。

  将自动生成的单元测试和PUT测试方法分开,使得PUT测试方法可以作为一个统一的可以验证被测代码正确性的地方,通过PUT测试方法的调用,所有测试用例都将被验证。在以后的博客中,我们会讨论正确性验证的方法,但这不是本篇博客讨论的重点。将自动生成的测试用例和PUT测试方法放在同一个程序集中也是非常重要。

  关于自动生成的测试用例的管理,可遵循如下规则:

  • 防止重复的用例。使用IntelliTest的过程中,测试引擎会经常性的探测被测代码,并生成测试用例,因此很可能会生成一些重复的用例,这些重复的用例都需要被移除掉。
  • 删除那些无关紧要的测试用例。随着被测代码的修改,之前的测试用例很可能变得无效,因此这部分测试用例需要被移除掉。

  那么如何实践以上规则呢?
  将自动生成的测试用例和PUT测试方法放在一个程序集中,测试引擎通过扫描程序集中的Pex特性,优先处理已经存在的测试用例(这些测试用例都被PexGeneratedBy修饰),它获取到这些用例的源码,然后移除其中的空白占位符,然后使用最终的字符串计算hash值。做完这些之后,测试引擎就有了一个测试用例集合对应的hash字典,有了这个字典,在新的一次探测过程中,就可以决定哪些测试用例已存在,而哪些是新添加的。对于那些没有在新的探索中生成的用例,引擎会主动删除之。

  让测试用例和随时有变更可能的代码保持同步是一件很困难的事情,主动去修改大量测试用例以适配新的被测代码,开销无疑是巨大的。我们希望这套自动管理的测试用例的机制可以在面对这种变更时,可以更加轻松的应对。

强烈建议阅读英文原文



2017-10-20 10:43:52

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 203,271评论 5 476
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,275评论 2 380
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 150,151评论 0 336
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,550评论 1 273
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,553评论 5 365
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,559评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,924评论 3 395
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,580评论 0 257
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,826评论 1 297
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,578评论 2 320
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,661评论 1 329
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,363评论 4 318
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,940评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,926评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,156评论 1 259
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 42,872评论 2 349
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,391评论 2 342

推荐阅读更多精彩内容

  • Spring Cloud为开发人员提供了快速构建分布式系统中一些常见模式的工具(例如配置管理,服务发现,断路器,智...
    卡卡罗2017阅读 134,580评论 18 139
  • 文章来自:http://blog.csdn.net/mj813/article/details/52451355 ...
    好大一只鹏阅读 9,186评论 2 126
  • 1.测试与软件模型 软件开发生命周期模型指的是软件开发全过程、活动和任务的结构性框架。软件项目的开发包括:需求、设...
    宇文臭臭阅读 6,702评论 5 100
  • 1.测试与软件模型 软件开发生命周期模型指的是软件开发全过程、活动和任务的结构性框架。软件项目的开发包括:需求、设...
    Mr希灵阅读 21,925评论 7 277
  • 今天上午在竹园宾馆与中国十大名厨,中国烹饪大师相聚会一一一
    廖其定阅读 311评论 0 0