注册 登录  
 加关注
查看详情
   显示下一条  |  关闭
温馨提示!由于新浪微博认证机制调整,您的新浪微博帐号绑定已过期,请重新绑定!立即重新绑定新浪微博》  |  关闭

风之云的足迹

点击这里添加博客描述

 
 
 

日志

 
 

【转载】测试覆盖率强迫症  

2010-07-11 01:32:51|  分类: 软件测试 |  标签: |举报 |字号 订阅

  下载LOFTER 我的照片书  |

我曾经服务于这样的客户,开发团队由于需求不明晰,验收条件缺乏,导致返工严重;知识分享的缺乏,导致人员间不能相互替换,工作无法合理分配,进度 缓慢;架构划分的不合理,又没有频繁的在各团队间进行集成,导致发布难度大,周期长。内忧外患下,团队领导人却仅对于测试覆盖率表现出异乎寻常的热情,与 之形成鲜明对比的是对于其它的问题冷漠和麻木。人们似乎很容易犯这样的错误,由于不确定应该做什么,或者不知道如何去做最重要的事情,最终将注意力放在了 易于提升的次等重要的事情上。

很多团队的领袖不遗余力地提升测试覆盖率,以至于患上了“测试覆盖率大于90强迫症”,89.99%的测试覆盖率也会让他们寝食难安,并发明了自动 化测试覆盖率检查工具(当测试覆盖率达不到90%,测试便会失败)来减轻自己的症状。在我看来,这一强迫症的病因在于对项目控制的力不从心引发的压力无法 排除,加强对于测试覆盖率(或者项目其它生命体征)的要求从技术决策变成了心理上的减压渠道。面对可能的项目失败,他蛮可以说:“技术职位上我尽了最大的 努力,看看测试覆盖率!项目的失败应归罪于愚蠢的合同(销售),不清晰的需求(业务分析师),又或者是不切实际的进度安排(项目管理者)。”

抛开管理因素不谈, 从技术上讲,高测试覆盖率和高质量的软件能够被等同起来么?看看下面的例子:

public class Calculator {
public static Decimal Divide(Decimal operand1, Decimal operand2) {
operand1.Divide(operand2)
}
}

[Test]
public void two_divide_one_should_return_two() {
Assert.AreEqual(2, Calculator.Divid(2, 1));
}

NCover会告诉我们测试已经完全覆盖了功能(测试覆盖率100%)。可事实果真如此么?现有的测试至少不能回答系统在如下情况下对于“除法”这 个功能的期待是什么?

  • 除数为Null
  • 被除数为Null
  • 被除数为0

测试覆盖率仅仅能够告诉团队什么没有被测试,根本就回答不了软件是否经过了有效测试!

舌苔厚重反映的是消化问题,治疗方案当然不是刷刷舌头这么简单,同样,测试覆盖率低的病灶常常是:

  • 团队成员没有写测试的习惯,没有意识到写测试的重要性,不想写
  • 代码难于测试,不会写
  • 赶进度,没有时间写

相对于提升测试覆盖率,这些问题解决起来就要复杂的多,也棘手的多。我不确定特定环境上述问题的解决问题是什么,但是我很确定补测试不是良 方,它往往会催生出没有Assert的畸形测试以及大量针对getter/setter的无用测试

检查覆盖率得到好的结果可以增强团队信心,巩固测试实践;而得到坏的结果则需要综合分析,找到原因,制定改进方案。这是团队积累经验,提升能力的一 种有效途径,单纯要求提高覆盖率则是头疼医头,脚疼医脚的可笑方法。测试不是为了代码需要被测试的需求而存在,它存在的原因是市场需要以低成本生产高质量 软件。补测试无法满足测试实践的内在需求。在我看来,利用覆盖率的分析结果在团队中引发一个话题,讨论系统模型的可测试性、设计的合理性,并藉此改 善产品才是更加可取的做法,单纯追求覆盖率常常反映出团队将流程和目标混淆起来,甚至误将流程当作了目标。

如果不再要求所有的组件必须被覆盖,我们就必须回答一个新的问题:“哪些组件应该被覆盖? 多少覆盖率比较合适?”。以我的经验,在考虑测试 策略时至少需要参考业务价值,功能变化趋势以及缺陷率这三个因素:业务价值是核心,讨论清楚业务流程和价值,优先针对高业务价值的功能分析和设计 测试。其次是根据组件的变化趋势有重点的投资测试。系统中一定存在常常变化的组件,对于这些组件多投入一些测试有助于减少破坏已完成功能的风险,并进而提 高团队的信心。Bug则是另一个风向标,向我们指明系统的哪些部分比较薄弱。对Bug进行一下分类整理,我们就能很容易的发现系统的这些薄弱区域;在这些 区域添加测试、修补有缺陷的功能,将有助于提高产品的质量。

去解决数据掩盖之下的问题难度更大也更令人恐惧,没人清楚我们可以走多远,但重要的是我们已经出发。恐惧和无所适从是因为我们所面对的新领域再没有 绝对的对错,再没有容易做出的决策,我们需要更多经验,承担更多的风险,它迫使我们驶出了心理舒适区,开始在心理学习区锻炼自我,挑战自我,只有这样数据 强迫症才会被清除治愈。


原文地址:http://www.infoq.com/cn/articles/test-coverage-ocd

  评论这张
 
阅读(459)| 评论(0)
推荐 转载

历史上的今天

在LOFTER的更多文章

评论

<#--最新日志,群博日志--> <#--推荐日志--> <#--引用记录--> <#--博主推荐--> <#--随机阅读--> <#--首页推荐--> <#--历史上的今天--> <#--被推荐日志--> <#--上一篇,下一篇--> <#-- 热度 --> <#-- 网易新闻广告 --> <#--右边模块结构--> <#--评论模块结构--> <#--引用模块结构--> <#--博主发起的投票-->
 
 
 
 
 
 
 
 
 
 
 
 
 
 

页脚

网易公司版权所有 ©1997-2018