如何描述 bug
一个合格的 bug 描述应该包括以下几个部分:
发现问题的版本
开发人员需要知道出现问题的版本,才能够获取对应版本的代码来重现故障,并且版本的标识也有利于统计和分析每个版本的质量。
问题出现的环境
环境分为硬件环境和软件环境,如果是 web 项目,需要描述浏览器版本,客户机操作系统等,如果是 app 项目,需要描述机型、分辨率、操作系统版本等。详细的环境描述有利于故障的定位。
错误重现的步骤
描述问题重现的最短路径
预期行为的描述
要让开发人员知道怎么样才是正确的,尤其要以用户的角度来描述程序的行为是怎样的。如果是依据需求提出的故障,最好写明需求的来源。
错误行为的描述
描述错误的现象,crash 等可以上传 log,UI 问题可以附带截图。
其他
某些公司会有一些其他的要求,例如故障的分类:功能故障,界面故障,兼容性故障等。也可能会有优先级的分类,严重影响测试需要开发人员优先修改的,可以将优先级设置为高。
bug 的级别
每个公司对 bug 的定义可能有所不同,在定义 bug 级别之前需要仔细查看公司规范,下面我提供一个 bug 级别的参考。
1、Blocker(崩溃):
阻碍开发或者测试工作的问题;造成系统崩溃、死机、死循环,导致数据库数据丢失,与数据库连接错误,主要功能丧失,基本模块缺失等问题。如:代码错误、死循环、数据库发生死锁、重要的一级菜单功能不能使用等(该问题在测试过程中较少出现,一旦出现应立即终止当前版本测试)。
2、Critical(严重):
系统主要功能部分丧失、数据库保存调用错误、用户数据丢失,一级功能菜单不能使用但是不影响其他功能的测试。功能设计与需求严重不符,模块无法启动或调用,程序重启、自动退出,关联程序间调用冲突,安全问题、稳定性等。如:软件中数据保存后数据库中显示错误,用户所要求的功能缺失,程序接口错误,数值计算统计错误等(该等级问题出现在不影响其他功能测试的情况下可以继续该版本测试)。
3、Major(一般):
功能没有完全实现但是不影响使用,功能菜单存在缺陷但不会影响系统稳定性。如:操作时间长、查询时间长、格式错误、边界条件错误,删除没有确认框、数据库表中字段过多等(该问题实际测试中存在最多)
4、Minor(次要):
界面、性能缺陷,建议类问题,不影响操作功能的执行,可以优化性能的方案等。如:错别字、界面格式不规范,页面显示重叠、不该显示的要隐藏,描述不清楚,提示语丢失,文字排列不整齐,光标位置不正确,用户体验感受不好,可以优化性能的方案等(此类问题在测试初期较多,优先程度较低;在测试后期出现较少,应及时处理)。
bug 的生命周期
● New:新发现的Bug,未经评审决定是否指派给开发人员进行修改。
● Open:确认是Bug,并且认为需要进行修改,指派给相应的开发人员。
● Fixed:开发人员进行修改后标识成修改状态,有待测试人员的回归测试验证。
● Rejected:如果认为不是Bug,则拒绝修改。
● Delay:如果认为暂时不需要修改或暂时不能修改,则延后修改。
● Closed:修改状态的Bug经测试人员的回归测斌验证通过,则关闭Bug。
● Reopen:如果经验证Bug仍然存在,则需要重新打开Bug,开发人员重新修改 。
无效的 bug:open->closed open->rejected->closed
如何发现更多的 bug
多进行逆向思维和发散性的思维。
不要局限于测试用例和需求文档。
尽早介入项目,不要等到开发的差不多了再介入项目。
万能公式:功能测试+性能测试+界面测试+兼容性测试+易用性测试+安全测试
功能测试:可能来自于需求文档,也可能来自于生活经验。
性能测试:功能没有问题不代表性能一定是好的,性能往往表现在一些极端情况下。
界面测试:颜色、形状、大小、材质、文字、输入框、图片、下拉框...所有可以看到的元素。
兼容性测试:浏览器的兼容性、版本兼容性、系统兼容性、数据兼容性......
易用性测试:软件是否具备简单易上手的属性。
安全测试:隐私数据是否加密,能否防止SQL注入,是否存在越权问题。
内容拓展
提 bug 时和开发人员产生了冲突怎么办?
(1)多反思自己,是不是 bug 创建的时候描述不太清楚;
(2)开发人员对 bug 级别不认可,测试人员需要明确企业 bug 定级规范,拿着规范跟开发人员沟通,bug定级一定要有理有据。
(3)合理友好的进行沟通,站在用户的角度反问:如果你是用户,你能忍受这样的问题吗。
(4)不仅能够发现问题,最好也能够提出解决方案。
(5)如果确实是 bug,友好沟通已经不能解决问题,那么就召开 bug 评审会议。需要有相关代表来参加:产品代表、开发代表、测试代表等。