(項(xiàng)目C和項(xiàng)目D)則維持原來的流程。
經(jīng)過各項(xiàng)統(tǒng)計(jì)指標(biāo)比較分析,可以發(fā)現(xiàn)流程改進(jìn)后的效果較為顯著。限于篇幅,本文只選取幾個(gè)指標(biāo)做一說明。
3.1 客戶滿意度
從客戶滿意度調(diào)查中,可以看出流程改進(jìn)后的客戶感覺效果還是有一定的提高。尤其是在Bug書寫、跟蹤上有了明顯的提高;在Bug數(shù)量質(zhì)量上客戶也表示比較滿意。總之,數(shù)據(jù)分析表明,針對某一個(gè)特定的外包測試項(xiàng)目,將風(fēng)險(xiǎn)管理思想與CMMI認(rèn)證體系標(biāo)準(zhǔn)有機(jī)結(jié)合,可以適當(dāng)改進(jìn)軟件外包測試流程,提高測試效率和測試水平,并能取得明顯的效果。
3.2 流動(dòng)人員培訓(xùn)后初次發(fā)現(xiàn)Bug的時(shí)間的數(shù)字表示從流動(dòng)人員接受培訓(xùn)開始到發(fā)現(xiàn)第一個(gè)Bug的時(shí)間間隔,單位精確到“周”。從流動(dòng)人員的培訓(xùn)中可以看出,雖然培訓(xùn)時(shí)間一樣,但效果卻有很大的差別,采用新的流程可以縮短新來人員的適應(yīng)期,更快地進(jìn)入到正常的工作狀態(tài)中。由此看來,新的測試流程在人員流動(dòng)率越高的情況下其優(yōu)勢越突顯。在本企業(yè)高達(dá)21%的人員流動(dòng)率下,新流程的實(shí)施明確減緩了排名第一的風(fēng)險(xiǎn)“人員流動(dòng)率太高”所帶來的危害。
3.3 測試用例覆蓋率
由于加入了評審程序能提高大約5%的覆蓋率(用項(xiàng)目A、B與項(xiàng)目C、D比較所得)。無論是工作效率還是測試用例覆蓋率都可以讓客戶更加滿意,同時(shí)由于測試用例覆蓋率的提高,還能引導(dǎo)測試人員找到更多的Bug。
3.4 Bug優(yōu)先級分布
各項(xiàng)指標(biāo)表明,風(fēng)險(xiǎn)識別中所提到的“大量重復(fù)Bug”、“大量錯(cuò)誤Bug”以及“提交Bug數(shù)量太少或者在某些時(shí)期太少”都能在新的流程下得到有效改善。而且從總體情況上來看,采用新流程的項(xiàng)目A和項(xiàng)目B在優(yōu)先級的分布上比其他兩個(gè)項(xiàng)目要稍好。
很明顯高優(yōu)先級的Bug比率得到了提高,風(fēng)險(xiǎn)“提交的絕大多數(shù)是無關(guān)緊要的Bug”得到了有效的控制。