什么才是好的测试用例?

news2024/11/29 10:53:38

对于测试用例来讲,“好的”测试用例一定是一个完备的集合,能够覆盖所有的等价类以及各种边界值,而跟能否发现缺陷无关。

如果把测试软件看做一个池塘,软件缺陷是池塘中的鱼,建立测试用例集的过程就像是在编织一张捕鱼网,“好的”测试用例集就是一张能够覆盖整个池塘的大鱼网,只要池塘里面有鱼,这个大渔网就一定能把鱼给捞上来。

如果渔网本事是完整的且合格的,那么捞不到鱼,就证明池塘里面没有鱼,而渔网的好坏与池塘中是否有鱼无关。

“好的” 测试用例必须具备哪些特征?

好的测试用例,必须具备一下三个特征:

1.整体完备性

  • “好的”测试用例一定是一个完备的整体,是有效用例组合的集合,能够完成全覆盖测试需求。

2.等价类划分的准确性

  • 指的是对于每个等价类都能保证只要其中一个输入测试通过,其他输入也一定测试通过。

3.等价类集合的完备性

  • 需要保证所有可能的边界值和边界条件都已经正确识别。

能做到以上三点,就可以肯定测试是充分且完备的,即做到了完整的测试需求覆盖。

三种最常用的测试用例设计方法

从理论层面上讲设计用例的方法很多:比如等价类划分,边界值分析法,错误推断法,因果图法,判定表驱动分析法,正交试验设计法,功能图分析法,场景设计法,形式化方法,扩展有限状态机方法等等,但是实际在企业的过程实践中,真正具有实用价值并且常用的只有前三种方法。

对于那些与生命相关的或者间接相关的软件,比如飞行控制,轨道交通的列车控制,医疗检测相关的软件或者系统,由于达到变态的测试覆盖率要求,会采用更多的设计方法。

对于大多数软件而言,综合使用等价类划分,边界值分析,和错误推断法这三大类的测试方法就足够了。

以下讲介绍这三类方法的核心概念和使用时要注意的问题:

举一个实际的例子来解释一下这三类方法的核心概念以及在使用时需要注意的问题

第一、等价类划分方法

我们知道等价类中任意一个输入数据对于揭露程序中潜在错误都具有同等效果,后续我们只要从每个等价类中任意选取一个值进行测试,就可以用少量具有代表性的测试输入取得较好的测试覆盖结果。

举一个具体的例子:学生信息系统中有一个“考试成绩”的输入项,成绩的取值范围是0~100之间的整数考试成绩及格的分数线是60

为了测试这个输入项,显然不可能用0~ 100的每一个数去测试,通过需求描述可以知道没输入0~59之间的任意整数

考试成绩及格的分数线是60

为了测试这个输入项,显然不可能用0~ 100的每一个数去测试,通过需求描述可以知道,输入0~ 59之间的任意整数,以及输入60~100之间的任意整数,去验证和揭露输入框的潜在缺陷可以看做是等价的

那么就可以在0~ 59和60~100之间各随机抽取一个整数来进行验证,这样的设计就构成了所谓的“有效等价类”

但是到这并没有完成等价类划分的工作,因为等价类划分方法的另一个关键点是要找出所以“无效等价类”,显然,如果输入的成绩是负数,或者是大于100的数等都构成了“无效等价类”

在考虑了无效等价类后,最终设计的测试用例为:

  1. 有效等价类1:0~59 之间的任意整数
  2. 有效等价类2:59~100之间的任意整数
  3. 无效等价类1:小于0的负数
  4. 无效等价类2: 大于100的整数
  5. 无效等价类3:0~100之间的任何浮点数
  6. 无效等价类4:其他任意非数字字符

第二,边界值分析方法

边界值分析是对等价类划分的补充,你从工程实践经验中可以发现,大量的错误发生在输入输出的边界值上所以需要对边界值进行重点测试,通常选取真好等于、刚刚大于或者刚刚小于边界的值作为测试数据

我们在看学生信息系统中“考试成绩”例子,选取的边界值数据应该包括:-1,0,1,59,60,61,99,100,101

第三,错误推断法

错误推断方法是基于对被测试软件系统设计的理解,过完经验以及个人直觉,推测出软件可能存在的缺陷从而有针对性的设计测试用例的方法。这个方法强调的是对被策划思软件的需求理解以及设计实现的细节把握当然还有个人能力

比如,web界面的GUI功能测试,需要考虑浏览器在有缓存和没有缓存的下的表现;Web Service的API测试,需要考虑被测试API所依赖的第三方API出错下的处理逻辑;对于代码级的单元测试,需要考虑被测函数的输入参数为空情况下的内部处理逻辑等等,由此可见,这些测试用例的设计都是基于曾经遇到的问题而进行的错误推测,很大程度上取决于个人能力。

在公司中,为了降低对 个人能力的依赖,通常会建立常见缺陷知识库,在测试设计的过程中,会使用缺陷知识库作为检查点列表,去帮助优化补充测试用例的设计

在中小企业中,可能最初的方法就是建立一个简单的wiki页面,让测试工程师完成测试用例的最初设计后对应这个wiki页面先做一轮自检如果在后面测试中发现了新的点,就会继续完善这个wiki页面

对于测试基础架构比较成熟的中大型软件企业,通常会以改缺陷知识库作为数据驱动测试的输入来自动化生成部分的测试数据

如何才能设计出“好的”测试用例

在真实的工程实践中,不同的软件项目在研发生命周期的各个阶段都会有不同的测试类型

比如说,传统软件的开发阶段通常会有单元测试,软件模块集成阶段会有代码级集成测试,打包部署后会有面向终端用户的GUI测试,在比如,电商网站的测试会分为服务端基于API测试,中间件测试前端GUI测试等,对于每一种不同的测试类型,设计出“好的”测试用例的关注点和方法论可能会有很大的差异,有些可能采用黑盒放法
有些可能采用白盒方法,有些还会采用灰盒方法(比如,微服务架构中的测试),所以很难有一套放之四海而皆准的套路

所以,在这边文章中,以最简单,最容易理解的面向终端用户的GUI测试为例,聊聊怎么去设计一个“好的”测试用例

面向终端用户的GUI测试,最核心的测试点就是验证软件对需求的满足程度,这就要求测试工程师对被测软件的需求有深入的理解,深入理解被测软件的需求的最好方法是,测试工程师在需求分析和设计阶段就开始介入,因为这个阶段是理解和掌握软件的原始业务需求的最好时机

只有真正理解了原始业务需求之后,才有可能从业务需求的角度去设计针对性明确,从终端用户使用场景考虑的端到端(end-2-end)的测试用例集,这个阶段的测试用例设计,主要目的是验证各个业务需求是否被满足,主要采用基于黑盒的测试用例设计方法

在具体的用例设计时,首先需要搞清楚每一个业务需求所对应的多个软件功能需求点,然后分析出每个软件功能需求点对应的多个测试需求点,最后在针对每个测试需求点设计测试用例。

在用例设计过程中,可能觉得会有点绕,但是没有关系,我以“用户登录”功能的测试用例设计为例,画出一张图来理清楚这些概念之间的映射关系图中的业务需求到软件功能需求,软件功能需求到测试需求,以及测试需求到测试用例的映射关系,在非和互联网软件企业的实践中,通常会使用需求追踪管理工具(比如ALM,DOORS,JIRA,Testink等)来管理,并以此来衡量测试用例对业务需求,软件功能需求的覆盖率

具体到测试用例本身的设计,有两个关键点需求你注意

1.从软件功能需求出发,全面地,无遗漏地识别出测试需求是至关重要的,这将直接关系到用例的测试覆盖率

比如,如果你没有识别出用户登录功能的安全性测试需求,那么后续设计的测试用例就完全不会涉及安全性,最终造成重要测试漏洞

2.对于识别出每个测试需求点,需求综合运用等价类划分,边界值分析和错误推断法来全面地设计测试用例,这里需要注意的是,要综合运用这三种方法,并针对每个测试需求点的具体情况,进行灵活的选择

以“用户登录”的功能测试需求为例,你首先应该对“用户名”和“密码”这两个输入项分别进行等价类划分,列出对应的有效等价类和无效等价类对于无效等价类的识别可以采用错误猜测法(比如,用户包含特殊字符等),然后基于两者可能的组合,设计出第一批测试用例。

等价类划分完成后,你需要补充"用户名"和“密码”这两个输入项的边界值的测试用例,比如用户名为空(NULL)、用户名长度刚刚大于允许长度等

用例设计的其他经验

分享三个独家秘笈,来帮助设计出“好的”测试用例集

1.只有深入理解被测试软件的架构,才能 设计出“有的放矢”的测试用例集,去发现系统边界以及系统集成上的潜在缺陷

作为测试工程师,切记不能把整个被测试系统看做一个大黑盒,你必须对内部的架构有清楚的认识,比如数据库连接方式,数据库读写分离

消息中间件kafka的配置,缓存系统的层级分布,第三方系统的集成等等

2.必须深入理解被测软件的设计与实现细节,深入理解软件内部的处理逻辑单单根据测试下需求点设计的用例,只能覆盖“表面”的一层,往往会覆盖不到内部的处理流程、分支处理、而没有覆盖到的部分就很可能出现缺陷遗漏

在具体实践中,你可以通过代码覆盖率指标找出可能的测试遗漏点

同时,切忌不要以开发代码的实现为依据设计测试用例,因为开发代码实现的错误会导致测试用例也出错,所以你应该根据2原始需求设计测试用例

3.需要引入需求覆盖率和代码覆盖率来衡量测试执行的完备性,并以此为依据来找出遗漏的测试点。

总结

首先,要明白,“好的”测试用例一定是一个完备的集合,它能够覆盖所有等价类以及各种边界值,而能发现软件缺陷并不是衡量测试用例好坏的标准

其次,设计测试用例的方法有很多种,但综合运用等价类划分,边界值分析和错误推测方法,可以满足绝大数软件测试用例设的需求

再次,“好的”测试用例在设计时,需要从软件功能需求出发,全面地,无遗漏地识别出测试需求至关重要

最后,如果想设计“好的”测试用例,你必须深入理解被测软件的架构设计,深入软件内部的处理逻辑,需求覆盖率和代码覆盖率这两个指标可以帮你衡量测试执行的完备性。

最后

为了回馈铁杆粉丝们,我给大家整理了完整的软件测试视频学习教程,朋友们如果需要可以自行免费领取 【保证100%免费】

软件测试面试文档

我们学习必然是为了找到高薪的工作,下面这些面试题是来自阿里、腾讯、字节等一线互联网大厂最新的面试资料,并且有字节大佬给出了权威的解答,刷完这一套面试资料相信大家都能找到满意的工作。

全套资料获取方式:

在这里插入图片描述

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/646317.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

新能源驱动电机NVH开发研究

摘要: 本文介绍了新能源驱动电机行业发展现状,详细论述了目前行业内主流电机: 1、驱动电机现状 驱动电机是新能源车辆和混合动力车辆的核心动力源,基于电磁感应效应,驱动电机将整车提供的电能转化为机械能&#xff0c…

一文3000字从0到1用【 pytest+excel】实现自动化接口测试

项目结构 1.common 存放公用方法 login.py 前置条件类public.py 获取文件指定目录类 复制代码 2. base 存放底层方法类 method.py复制代码 3. data 存放数据 data.xls 复制代码 4. tests 存放用例类 pytest test_excel.py5. utils存放工具类operationExcel.py 复制代码 代…

谷歌高级语法有哪些,以及如何开发国外客户

谷歌高级语法指令常用的有下面几个: site、inurl、intitle、intext、filetype、link、index of、related 谷歌高级语法用法: 1.Site的三种常用用法 示例:site域名(site:org) site域名contact(site:org contact) 产…

HarmonyOS元服务端云一体化开发快速入门(上)

一、前提条件 您已使用已实名认证的华为开发者帐号登录DevEco Studio。 请确保您的华为开发者帐号余额充足,账户欠费将导致云存储服务开通失败。 二、选择云开发模板 1.选择以下任一种方式,打开工程创建向导界面。 如果当前未打开任何工程&#xff0c…

【宿舍管理系统】注册登录页面的实现(前端)

目录 一.创建一个jsp文件,命名为login.jsp 代码: 1. 2. 3. 4. 5. 6. ​编辑 二. 创建一个css文件,并命名为style.css 1. ​编辑效果如下: ​编辑 代码解析: 2. 效果如下: 代码解析&#xff1…

如何做好《关键信息基础设施安全保护要求》提到的收敛暴露面?

5月1日,《信息安全技术 关键信息基础设施安全保护要求》(GB/T 39204-2022)国家标准正式实施。该标准作为关键信息基础设施安全保护标准体系的构建基础,提出了关键信息基础设施安全保护的三项基本原则,为运营者开展关键…

华为OD机试真题 JavaScript 实现【最左侧冗余覆盖子串】【2023Q2 100分】

一、题目描述 给定两个字符串 s1 和 s2 和正整数k,其中 s1 长度为 n1,s2 长度为 n2, 在s2中选一个子串,满足: 该子串长度为n1k;该子串中包含s1中全部字母;该子串每个字母出现次数不小于s1中对应的字母&am…

2023年,现在学Python还吃香吗?计算机专业怎么样?

自从ChatGPT诞生以来,各大科技公司纷纷推出了自己的AI产品,在这个赛道上卷生卷死,纷纷布局。 从Google的Bard AI、OpenAI出走团队的Claude,到中国的众多公司,如百度的文心一言。 总的来说,AI的应用领域日…

Java培训周期一般多长?Java培训班过来人告诉你!

市场上比较靠谱的java培训机构的培训时间一般都是5-6个月,好程序员是4个月,个别培训机构可能因为班型不同而有所区别。学的时间太短学到的知识可能会有遗漏,造成基础不扎实;学习时间太长也会过于拖沓,还降低了整个培训的性价比。 …

qt creator使用问题

qt creator 多版本安装需要卸载之前的版本,安装目录默认在Qt目录下(qt的sdk也在qt目录下) 编译过程中遇到一些很奇怪问题,建议优先重新编译。 issue qtcreator inappropriate for the inferior 构建套件,前面的感…

YOLO-V5分类实战系列 —— 快速训练自己的数据集

YOLO-V5 训练自己的分类模型 1、获取官方源码2、测试官方源码2.1、公开数据集测试源码 3、源码模块解析3.1、数据读取 4、快速开始训练自己的数据4.1、准备自己的数据4.2、配置训练参数 1、获取官方源码 官方代码:https://github.com/ultralytics/yolov5 更新版本&a…

【Matter】Matter学习笔记1

文章目录 前言Matter协议架构1.Matter Over IPV62.Matter协议架构3.Matter标准协议架构 Matter网络拓扑结构Mesh组网1.单一网络拓扑2.星形网络拓扑 设备数据模型(Date Model)1.设备和端点(Node、Endpoint)2.节点角色(N…

58、基于51单片机GPS定位自动报站时间显示语音播报公交车系统设计(程序+原理图+PCB源文件+参考论文+开题报告+任务书+元器件清单等)

摘 要 1831年,英国的沃尔特汗考为他的国家制造出了世界上第一辆装载发动机的公共汽车,至今,公交车已经经历过近200年的发展过程。从刚开始“闷罐头”样式到如今配套空调系统;从专人售票至无人售票;从人工报站至半自动…

咖啡店小程序开发 让烟火小店更有生机

随着人们生活水平的提高和生活压力的增大,很多人都靠喝咖啡来缓解疲劳和压力,也为我们的生活增添了一丝情趣,但高峰时期排队购买一杯咖啡很浪费时间,很多赶时间的上班族不得不放弃。随着互联网技术深入到各行各业,传统…

电商人看过来,这个 AI 工具可以一键生成商品背景图

在2023年,如果你还不会玩AI,那你就out了。如果AI只是作为娱乐的话,学起来还是挺费劲的,但是如何将AI嵌入到我们的工作流程中,从而提升工作效率,这很重要。 于是,经过小编一个下午的疯狂测试&am…

华为OD机试真题 JavaScript 实现【通信误码】【2022Q4 100分】,附详细解题思路

一、题目描述 信号传播过程中会出现一些误码,不同的数字表示不同的误码ID,取值范围为1~65535,用一个数组记录误码出现的情况。 每个误码出现的次数代表误码频度,请找出记录中包含频度最高误码的最小子数组长度。 二、输入描述 …

【色度学】颜色的显色系统

我的理解: HSV模型应该对应的是下面的:色相、视明度、饱和度的定义。 1. 色彩的心里属性 1.1 色相Hue 色相是指颜色的基本相貌,它是颜色彼此区别的最主要和最基本的特征,它表示颜色质的区别,也叫色调。 从光的物理刺…

大厂精简人员,技术人员如何跳出“舒适圈”

你还记得自己为求职焦虑是什么时候吗? 是刚毕业找工作,还是第一次跳槽,还是在毫无准备的情况下被优化掉? 疫情下,裁员消息成为这个年底让所有互联网从业人员最为关注的新闻。企业选择剥离主线业务之外的枝枝蔓蔓&…

Mediapipe实时3D目标检测和跟踪(自动驾驶实现)

🚀 导语 3D目标检测是根据物体的形状、位置和方向来识别和定位物体的任务。在2D目标检测中,被检测到的物体仅表示为矩形边界框。3D目标检测任务通过预测物体周围的包围框,可以获取物体的三维位置信息。 3D目标检测在各行各业都有广泛的应用。…

(2023年最新版)史上最全Python/Java自动化测试学习路线图!没有之一!

废话少说,直接上干货! 保证是你2023年看到最全最详细的自动化测试进阶学习路线全栈图!!赶紧保存! 由于全图图片太大上传不了,这里就不展示了。需要的小伙伴们可以文末小卡片联系我 下面展示部分截图&#…