在软件发布之前如何预估残留缺陷?

在回答这个问题之前,我们首先理清思路,测试的质量首先就体现在缺陷的质量上面。就是发现了多少缺陷,缺陷的严重程度如何,缺陷发现的早晚,缺陷的分布等待,作为测试的结果直接向客户表明了测试的质量。然而测试的质量又有什么所决定呢?是测试用例,测试用例的覆盖率,测试用例的精细度,深度,直接决定了能发现缺陷的多少。所以,要在未发布之前预估缺陷的遗留情况,就要检查测试用例的覆盖情况。

1.根据测试用例和SRS中功能点的一一对应关系,还有概要设计、详细设计中的对应关系,这个跟着矩阵,检查是否所有的功能点都被覆盖到了。

2.覆盖到功能点包括起码几个方面,1是正面的用例,2是负面的测试用例,3是所有的分支路径和错误处理是否都做了。

3.对于有些需求,比如性能需求可能没有在功能测试用例涉及到,而性能需求也没有专门的收集,这就需要专门的收集,并且细化测试。因为很可能所有的功能都满足了,但是性能并不满足。系统并发用户使用并没有测试。这是很容易遗漏的,在项目快收尾阶段仍然需要检查一下是否所有的非功能点都测试过了。

4.通过以上分析,如果发现有没有覆盖到得,覆盖不足的就是可能有缺陷遗留的地方。

以上总体是为了保证:所有系统该实现的功能都得到实现了,同时系统没有去做任何不该做的事情。

然而,并非通过以上途径就可以确保能够发现所有改发现的缺陷了。我们还可以通过比较分析当前的缺陷数据和历史相关数据来检查:

1.如果这个被测系统有之前的版本的测试数据,那我们可以比较以前的这个版本所有的缺陷,看看以前一共多少个模块,平均每个模块发现了多少缺陷,然后客户又发现了多少缺陷。而我们现在这些相应的模块发现了多少缺陷。为什么比以前多,为什么比以前少,等等,很多可以比较的地方

2.类比同类产品的测试,比如都是j2ee,同样类型的系统,平均每kloc代码一共发现多少缺陷?平均每kloc代码一共能写出多少测试用例?平均每个功能点能写出多少测试用例,发现多少bug?而我们目前写了多少测试用例,发现了多少bug?那些模块发现的多或者少?然后检查原因,到底是为什么?因为这些都是可能存在缺陷遗漏的地方。

3.对于不同的测试人员,做数据的比较,看谁发现的多,谁发现的少,谁发现的某种类型的缺陷多,或者少?因为常常是某些测试人员之容易看到某类型的缺陷,而遗漏另外一些类型的缺陷。

4.对本被测系统的缺陷库做分析统计,各种类型的缺陷比例各是多少?这个比例是否符合历史数据的比例?分析统计以前产品的遗留缺陷比例,然后对比当前的产品。

5.分析本公司,或者本测试团队以前的所有的非测试用例找到的缺陷,还有产品发布后被客户提出的缺陷。这些缺陷往往是我们团队自身固有的问题导致的盲区,这些缺陷类型和特点需要在本次测试中专门关注。

6.分析测试方案、测试用例、开发的详细设计、概要设计的评审文档,以及相应的评审数据,发现的缺陷比例是否合理,以此判断分析是否评审的到位,如果评审不到位,则测试用例可能质量不够高,有遗漏,则测试就可能会少发现缺陷,这些地方需要认真检查。

7.具体的缺陷遗留比例可以根据上面提到的各项数据对比分析来确定,比如同类型,同代码量的软件应该能写1000个测试用例,发现2000个bug,而我们发现了1800个bug,则可以怀疑我们还遗留200个缺陷,但是,这只是怀疑,还需要分析是否由于开发团队的成熟导致的确只有1800个bug。这都是需要进一步分析论证的。

以上通过各种方式和角度的数据统计和对比,学习以前的经验,借此发现系统可能存在的潜在问题。然而可能还会发现不全,我们有以下手段可以应对:

1.找经验相对比较丰富的测试人员,或者非本项目的测试人员来对本系统做随机测试。虽说是随机,但是,其实因为都是有经验的人员,而且对相关的系统都很熟悉,测试目的还是非常强的,同时这个测试过程,需要有本系统的测试人员陪同讲解,类似于配对开发而言的配对测试一样。

2.问开发人员,他们怀疑他们的系统什么地方可能会有缺陷,然后专门去测试这些地方

3.如果开发有单元测试,这时候我们可以分析单元测试的结果,看看单元测试的覆盖率,是语句覆盖还是判定覆盖,逻辑覆盖,等等,如果某些重要的功能点的覆盖率不够,我们可以专门去从单元测试和集成测试外加系统测试的高度做相应的测试,力图将这几个重点模块的测试覆盖率达到最高。如果之前没有单元测试,这时候也可以分析代码,测试重要的判断点。

总结:基本上我能想到的就是以上这些从测试角度,不涉及开发而谈的方法,判断分析出系统潜在的有问题的地方,以及相应的补救措施。但是需要说明这些方法必须在整个测试过程中实施,而不是快要交付之前才开始检查,这是团队管理人员,在项目计划中必须预留相应的时间和人力贯彻执行的。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 157,198评论 4 359
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 66,663评论 1 290
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 106,985评论 0 237
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 43,673评论 0 202
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 51,994评论 3 285
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 40,399评论 1 211
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 31,717评论 2 310
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 30,407评论 0 194
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 34,112评论 1 239
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 30,371评论 2 241
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 31,891评论 1 256
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 28,255评论 2 250
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 32,881评论 3 233
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 26,010评论 0 8
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 26,764评论 0 192
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 35,412评论 2 269
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 35,299评论 2 260

推荐阅读更多精彩内容

  • 文章来自:http://blog.csdn.net/mj813/article/details/52451355 ...
    好大一只鹏阅读 9,158评论 2 126
  • 1.测试与软件模型 软件开发生命周期模型指的是软件开发全过程、活动和任务的结构性框架。软件项目的开发包括:需求、设...
    宇文臭臭阅读 6,664评论 5 100
  • 1.测试与软件模型 软件开发生命周期模型指的是软件开发全过程、活动和任务的结构性框架。软件项目的开发包括:需求、设...
    Mr希灵阅读 21,832评论 7 277
  • 1---今天,你做后妈了吗? 在中国教育现状如此让人焦灼的今天,无论...
    菓然悦活阅读 395评论 0 3
  • 布鲁纳主张学习的目的在于以发现学习的方式,使学科的基本结构转变为学生头脑中的认知结构。 1、认知的学习观:学习是主...
    土豆哦阅读 1,178评论 0 0