软件测试结果分析和质量报告

如同代码是程序员的成果之一,测试报告和质量报告是测试人员的主要成果之一。对于一个好的测试报告,是建立在正确的、足够的测试结果的基础之上,不仅要提供必要的测试结果的实际数据,同时要对结果进行分析,发现产品中问题的本质,对产品质量进行准确的评估。

1.缺陷分析

对缺陷进行分析,确定测试是否达到结束的标准,也就是判定测试是否已达到用户可接受的状态。在评估缺陷时应遵照缺陷分析策略中制定的分析标准,最常用的缺陷分析方法有:

缺陷分布报告,允许将缺陷计数作为一个或多个缺陷参数的函数来显示,生成缺陷数量与缺陷属性的函数,如缺陷在程序模块的横向分布、严重性缺陷在不同的产生原因上的分布等。

缺陷趋势报告,按各种状态将缺陷计数作为时间的函数显示,如缺陷数量在整个测试周期的时间分布。趋势报告可以是累计的,也可以是非累计的,可以看出缺陷增长和减少的趋势;

缺陷年龄报告,是一种特殊类型的缺陷分布报告,显示缺陷处于活动状态的时间,展示一个缺陷处于某种状态的时间长短,从而了解处理这些缺陷的进度情况。

测试结果进度报告,展示测试过程在被测应用的几个版本中的执行结果以及测试周期,显示对应用程序进行若干次迭代和测试生命周期后的测试过程执行结果

同时,也可以在项目结束后进行缺陷分析,以改进开发和测试进程,如:

通过缺陷(每日或每周新发现的缺陷)趋势分析来了解测试的效率,也可根据丢失的Bug数目和发现总的Bug数,可以了解测试的质量。可以根据执行的总测试用例数,计算出每发现一个Bug所需要的测试用例数、测试时间等,对不同阶段、不同模块等进行对比分析。

通过缺陷数量或在模块的分布情况,可以掌握程序代码的质量,如通过对每千行代码所含的Bug数分析,了解程序代码质量。通过缺陷(每日或每周修正/关闭的缺陷)趋势分析开发团队解决Bug的能力或状态

2.产品总体质量分析

对测试的结果进行整理、归纳和分析,一般借助于Excel文件、数据库和一些直方图、圆饼图、趋势图等来进行分析和表示,主要的方法有对比分析、根本原因(Root Cause)查找、问题分类、趋势(时间序列)分析等。

对比分析,软件来执行测试结果与标准输出的对比工作,因为可能有部分的输出内容是不能直接对比的(比如,对运行的日期时间的记录,对运行的路径的记录,以及测试对象的版本数据等),就要用程序进行处理。

根本原因(Root Cause)查找,“分析”是找出不吻合的地方并指出错误的可能起因。

问题分类,“分类”包括各种统计上的分项,例如,对应的源程序的位置,错误的严重级别(提示、警告、非失效性错误、失效性错误等),新发现的还是已有记录的错误。

趋势(时间序列)分析,根据所发现的软件缺陷历史数据进行分析,预测未来情况。

其它统计分析,通过对缺陷进行分类,然后利用一些成熟的统计方法对已有数据进行分析,以了解软件开发中主要问题或产生问题的主要原因,从而比较容易提高软件质量。

转载:http://www.uml.org.cn/Test/201105041.asp

时间: 2024-10-26 21:49:45

软件测试结果分析和质量报告的相关文章

解析《中国互联网软件测试行业2018年度调研报告》

之前收到了一份TesterHome的调查问卷邀请:2018年度中国测试行业问卷调研.最近问卷的汇总结果出来了,有2000+的测试童鞋参与了问卷调查. 从幸存者偏差角度来说,无论是覆盖率还是准确性,结果都有待商榷.不过也能从一定程度上给予参考. 这里我会挑几个测试同学们感兴趣的部分,说说我的看法,请大家理性看待... 传送门:中国互联网软件测试行业2018年度调研报告 一.测试人员年龄分布 从年龄的分布区间来看,目前测试行业的主力军还是26~30岁的同学.中国互联网行业软件测试岗位大概起始于04年

用Sonarqube检查和度量代码质量(2)——使用Sonarqube分析代码质量

前面说到Sonarqube的5种方式可以分析代码质量,首推第一种方式,万能的. 下载源代码到Sonarqube所在服务器,比如下面目录结构: 然在在此根目录下,创建sonar-project.properties 文件,如下图所示配置. # Required metadata sonar.projectKey=my:testtools sonar.projectName=testools sonar.projectVersion=1.0 # Path to the parent source c

Testin实验室发布国庆出行旅途类APP质量报告:携程力压去哪儿夺冠

Testin实验室发布国庆出行旅途类APP质量报告:携程力压去哪儿夺冠 2014/09/28 · Testin · 实验室报告 一年一度的十一黄金周即将临近,旅游软件成为每外出行人手机必装软件,为此全球最大的应用及游戏真机自动化云测试平台Testin云测旗下实验室(lab.testin.cn)精选10款热门旅游软件,从热度.兼容性.稳定性.用户体验等详细解读,希望给每一位旅人提供有价值的参考,让旅途更加便捷和精彩. Testin实验室精选携程.去哪儿.非常准.艺龙.途牛.铁友火车票.穷游.淘在路

移动支付:暗礁险滩之地?——为《每周质量报告》挑挑刺

移动支付:暗礁险滩之地? --为<每周质量报告>挑挑刺 本文为<移动信息>约稿,版权所有,发行权归<移动信息>.严禁除<移动信息>及本文作者博客之外的任何网站转载!2014年6月23日声明. 6月15日,央视<每周质量报告>播放了一集节目<移动支付的隐忧>.这集节目一经播出,在读者们中立即引起了热烈的讨论. 该节目声称,Android智能手机存在漏洞,如果黑客设置一个公共钓鱼wifi,就有可能通过此漏洞盗取蹭网者的支付宝及银行卡账户,

Linux内核分析第一次学习报告

Linux内核分析第一次学习报告 学生 黎静 学习内容 1.存储程序计算机工作模型 冯诺依曼体系结构:核心思想为存储程序计算机. CPU抽象为for循环,总是执行下一条指令,内存保存指令和数据,CPU来解释和执行这些指令. API:应用程序编程接口(程序员与计算机的接口界面) ABI:二进制接口,指令编码(程序员与CPU的接口界面) 2.X86汇编 1.寄存器 (1)通用寄存器 (2)段寄存器: (3)标志寄存器 2.计算机的汇编指令 (1)movl指令: 寄存器寻址,寄存器模式,以%开头的寄存

全球依靠PointWise.18.0.R1.build.20160823网格计算分析高质量

全球依靠PointWise.18.0.R1.build.20160823网格计算分析高质量 自1984年以来被全球的工程师和科学家能够可靠地生成高质量的网格CFD.它可以生成高精度的网格以使 得分析结果更加准确.同时它还可以分析并不完美的CAD模型,同时不需要人工清理模型.PointWise.18.0.R1.build.20160823Carlson.SurvPC.v5.03ZWCAD.ZW3D.2016.SP.v20.00.CHINESE中望CAD软件BUW.SmartAssembly.6.0

Testin云测发布首份国内应用质量报告:半数APP平均启动时间不合格

Testin云测发布首份国内应用质量报告:半数APP平均启动时间不合格 2014/10/23 · Testin · 实验室报告 日前,Testin云测旗下质量管家Master通过随机取样1605款国内主流移动应用,在1258款主流移动设备进行了测试后,发布首份国内应用质量报告,显示1.59%的应用等待时间在3秒以上,平均CPU消耗为13.2%,2/3移动应用CPU占用率高出平均值,5%应用占用CPU高达30%. 数据显示,国内移动应用平均启动时间为2.75秒,近半数移动应用启动时间高于平均线(2

项目中的软件测试管理分析

项目中的软件测试管理分析

js实现不同城市空气质量报告显示柱形图

一,实现理论基础 (1)首先使用pageState这个对象记录当前页面的选项,根据不同选项来切换数据显示 (2)使用时期函数,随机生成测试数据 (3)使用innerHTML给页面实时添加渲染的内容图表 (4)使用随机数,生成随机的不同颜色给条形图 (5)使用title属性,来实现当鼠标移动到某个层面上,显示title内容的提示框 (6)使用事件代理将各个radio的变化事件函数,绑定到其父元素上 (7)使用new Date(item)).getDay() == 6来某一天是周几,如果是6,就说明