开会的时候听测试同事说到一个词,叫测试覆盖率。说实话,不懂这是什么意思,于是开完会搜索了下
1.https://zhuanlan.zhihu.com/p/37767185 软件测试覆盖率常用的计算公式,这些怎么运用到工作中,程序怎么走?
2.https://www.zentao.net/redirect-index-19587.html 这里谈及测试自动化=更高的测试覆盖率,自动化这个是绝对认同的,只是不知道该怎么落地实施
感觉理论是大概清楚了,但不清楚在实际落地或者实施过程中怎么做?
还引发出来的一些列问题: 接口自动化覆盖率指什么呢? 测试覆盖率不只是代码覆盖率,还应该有需求覆盖率(网友观点)。那么需求覆盖率又是什么?
请大家解疑!!!
1
pckillers 2021-09-15 13:41:58 +08:00 1
都是用来刷 KPI 与美化年报的东西。 单元测试的代码覆盖率至少还有工具能量化,但覆盖率低到底是测试代码写的不完善还是工程代码里那些额外的异常处理代码太多这又是另一个撕逼点了。
接口测试这种黑盒测试谈覆盖率就更加搞笑了。 你可以说有针对一个接口做过接口测试就算覆盖到了,也可以说接口的每一个参数每种可能性都要测到才算覆盖。 而那种动辄几十个参数的接口想完全覆盖是打算写几千万条用例跑上一整天才能测完么? 需求覆盖率? 有哪个产品可以满足一切用户需求的? 又有几个需求文档是精确定义每一个功能而不是摸棱两可的?搞笑! |
2
liprais 2021-09-15 13:48:50 +08:00
单看这个没啥意义
比如你写了个方法算 sin 的值叫 f 测试的时候直接写 f(45 度)等于根号 2 就算覆盖了 |
4
pckillers 2021-09-15 14:40:25 +08:00
|
5
rihkddd 2021-09-15 15:45:18 +08:00
如果要了解概念,可以看一下 wiki: https://en.wikipedia.org/wiki/Code_coverage
针对你的问题: 1. 实际落地一般经常看的有行覆盖率,函数覆盖率(好统计,容易提升),分支覆盖率,例如以前百度 C++模块要求 80%行覆盖率,60%分支覆盖率(时间长了,记忆不一定准确)。有工具可以统计出来,基本思路就是对代码插桩。 2. 自动化跟代码覆盖率没有关系,无论手动测试、自动化测试,亦或者是单元测试、接口测试、集成测试都是可以获取覆盖率的。 3. 接口自动化覆盖率应该是自己定的一个概念,互联网服务以 http 形式的 API 居多,相对独立。如果这个接口有一条或者多条自动化测试用例覆盖,那就接口覆盖了。跟代码覆盖率不是一个概念。至于需求覆盖率,应该类似,很少听到这种提法。 补充一点:覆盖率不能表示测试覆盖的完备性,只是用来指导如何提高提高测试覆盖完备性的手段。 |