首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >如何衡量我的测试有多有效?我应该使用什么度量标准?

问如何衡量我的测试有多有效?我应该使用什么度量标准?
EN

Stack Exchange QA用户
提问于 2019-11-18 12:27:26
回答 3查看 979关注 0票数 1

我是作为SQA工作,并主要做烟雾测试和回归测试手动。但是我认为这需要花费更多的时间,我不确定它是否经过了完全的测试。

EN

回答 3

Stack Exchange QA用户

发布于 2019-11-18 14:02:12

测试的有效性是一个很大的问题。

在我们的行业中,有这么多人专注于“测试、测试数量、测试运行时间、失败频率”,而没有关注“我的测试有多有效?”

为了评估测试,从业务价值开始。问以下问题:

  • 什么是软件发布周期?每6个月一次,每两周一次,每两周一次,一天多次,这将需要与测试和测试用例截然不同的策略。
  • 企业认为什么级别的失败是可以接受的?在银行等一些业务中,对可能需要更多测试的失败可能没有什么容忍度。在其他公司,如创业公司,消费者的增长就是一切,即使10%的客户有错误,这对于运营中的商业模式来说也是可以的。

测试有效性的实际KPI (度量)是困难的。不成熟的组织(就质量而言)更倾向于

  • 试验次数
  • 虫数*
  • 故障率

一个更成熟的组织(在测试和质量保证方面)可能倾向于更多地考虑以下方面的措施:

  • 受影响的收入
  • 受影响客户
  • 生产测试
  • AB和金丝雀试验
  • 加快新产品的上市速度
  • 合适的测试金字塔
  • 平均生产失败间隔时间
  • 从生产故障中恢复的平均时间
  • 适当的单位、综合和用户界面测试部门

*臭虫数量的问题是,它很容易成为一个非常客观的衡量标准,很容易在表现出改进的愿望范围内被玩弄和操纵。质量的衡量应与当前的发展进程相关。根据其他人稍后发现的bug数量来衡量结果,可以在问题出现时解决个别问题,但不一定是需要改进的基本过程,并导致这些问题能够首先发生。

票数 7
EN

Stack Exchange QA用户

发布于 2020-01-15 10:56:28

编辑:这个答案更适合测量自动化测试套件。但是我会把它保留在这里,因为问题有自动测试标签。

当我听说这件事时,我突然想到了一个概念,那就是突变测试:

突变测试包括以小的方式修改程序。每个变异版本称为突变体,测试、检测和拒绝突变体,导致原始版本的行为与突变体不同。这叫做杀死变种人。测试套件是由他们杀死的突变体的百分比来衡量的。

不过,根据您的编译成本,计算此指标可能非常昂贵。

票数 1
EN

Stack Exchange QA用户

发布于 2020-01-10 13:52:00

以下是qa测试公司用于评估QA团队的测试效率指标:

  • 每个应用阶段报告的缺陷数量
  • 功能测试覆盖率
  • 验证的缺陷数量
  • 编写的自动化测试用例数
票数 0
EN
页面原文内容由Stack Exchange QA提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://sqa.stackexchange.com/questions/41573

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档