移动应用测试与其他类型的软件测试不同的一个重要方式是在环境方面。另一个重要的区别是与支持移动应用测试的工具。因此,在本章中,我们将讨论工具,包括性能测试工具和功能测试自动化。我们还将讨论测试环境,你正在测试的移动应用类型如何影响你的测试环境需求,以及你如何组合测试环境资源,以满足你的测试需求,同时保持在你的预算限制之内。
本章的主要内容有:工具;环境和协议;基于应用的具体环境;真实的设备、模拟器、仿真器和云性能测试工具和支持;测试自动化。
工具
工具要求:
- 是否需要测试多个环境或协议?
- 要模拟不同的设备吗?
- 需要模拟用户或多个并发用户进行性能测试?
- 移动操作系统和版本及不断扩展的多样性?
- 位置模拟?
- 各种网络速度,网络类型,服务质量,网络连接状态的变化,以及其他可靠性问题?
- 模拟器还是真实设备?
- 处理输入和输出问题,例如验证码和光学字符识别?
还要关注工具的易用易学性及技术支持等。
还需要考虑:
- 需要这个工具做什么?
- 需要商业,外部或其他专业支持吗?
- 如何解决工具维护问题,特别是考虑到移动世界正在迅速变化?
- 要进行哪些类型的自动化测试以及该工具将如何实际执行这些测试?
- 是否有可靠的测试准则?
- 如何在错误的假阳性率和假阴性率的长序列中运行测试?
- 该工具可能会产生许多所谓的“片状测试”,有时会返回误报,其他时间会通过?
- 该工具会创建许多不可维护的测试,这些测试会在最轻微的变化时产生大量的误报?
- 自动化的商业案例是什么?在这个商业案例中,您是否明确解决了短期和长期成本,效率和有效性问题,速度和准确性的好处,风险和机会?
- 你有没有考虑过短期和长期问题?
如果找不到合适的工具,您可以构建自己的工具。但构建自己的工具可能比使用商业工具或使用开源更昂贵。
参考资料
- 全文 https://www.jianshu.com/p/b0eb98724f98
- 书籍:ASTQB-BCS移动测试基础指南 Mobile Testing An ASTQB-BCS Foundation Guide - 2018.pdf
- 本文最新版本地址
- 本文涉及的python测试开发库 谢谢点赞!
- 本文相关海量书籍下载
- 2018最佳人工智能机器学习工具书及下载(持续更新)
环境和协议
比如下载中断。省电模式。
设备功能和功能除了环境中的其他项目,您还必须考虑设备本身。例如,如果您的应用使用相机读取QR码,则必须考虑不同的相机,相机分辨率,相机可能具有的设置等。
你应该考虑屏幕尺寸。例如,如果您有一个旨在显示非常详细图像的应用程序,那么在小屏幕上看起来不会那么好看。
你还需要考虑照明。这是我的Android手机出现问题的区域。通常,它试图调暗屏幕,我假设尝试根据环境光来节省电池电量。这很好,但是,当我在手机上播放视频时,我经常注意到它出错了,它太过暗淡了。
更多测试点参见 https://www.jianshu.com/p/b0eb98724f98。
对于兼容性等,众包和云测试也是个不错的方式,但是要注意保密。
测试可用性,请使用真实的设备,特别是如果您正在处理类似游戏的事情。您需要在真实设备上进行一些性能测试,以便了解真实设备的怪癖和局限性如何影响应用程序性能。通常模拟器比真实手机的操作难度更大。
DevOps和敏捷也需要考虑。