系統(tǒng)測試報告實例

1、XX系統(tǒng)測試總結報告1引言1.1 編寫目的編寫該測試總結報告主要有以下幾個目的1 .通過對測試結果的分析,得到對軟件質(zhì)量的評價2 .分析測試的過程,產(chǎn)品,資源,信息,為以后制定測試方案提供參考3 .評估測試測試執(zhí)行和測試方案是否符合4 .分析系統(tǒng)存在的缺陷,為修復和預防bug提供建議1.2 背景1.3 用戶群主要讀者：XX工程治理人員,XX工程測試經(jīng)理其他讀者：XX工程相關人員.1.4 定義嚴重bug：出現(xiàn)以下缺陷,測試定義為嚴重bug?系統(tǒng)無響應,處于死機狀態(tài),需要其他人工修復系統(tǒng)才可復原.?點擊某個菜單后出現(xiàn)Thepagecannotbedisplayed或者返回異常錯誤.或者返回或者返或

2、者返回?進行某個操作增加、修改、刪除等后,出現(xiàn)Thepagecannotbedisplayed異常錯誤?當對必填字段進行校驗時,未輸入必輸字段,出現(xiàn)Thepagecannotbedisplayed回異常錯誤?系統(tǒng)定義不能重復的字段輸入重復數(shù)據(jù)后,出現(xiàn)“Thepagecannotbedisplayed異常錯誤1.5 測試對象略1.6 測試階段系統(tǒng)測試1.7 測試工具Bugzilla缺陷治理系統(tǒng)1.8 參考資料?XX需求和設計說明書?XX數(shù)據(jù)字典?XX后臺治理系統(tǒng)測試方案?XX后臺治理系統(tǒng)測試用例?XX工程方案?2測試概要XX后臺治理系統(tǒng)測試從2007年7月2日開始到2007年8月10日結束,共持

3、續(xù)39天,測試功能點174個,執(zhí)行2385個測試用例,平均每個功能點執(zhí)行測試用例13.7個,測試共發(fā)現(xiàn)427個bug,其中嚴重級別的bug68個,無效bug44個,平均每個測試功能點2.2個bug.XX總共發(fā)布11個測試版本,其中B1B5為方案內(nèi)迭代開發(fā)版本針對工程方案的基線標識,B6-B8為回歸測試版本.方案內(nèi)測試版本,B1-B4測試進度依照工程方案時間準時完成測試并提交報告,其中B4版本推遲一天發(fā)布版本,測試通過增加一個人日,準時完成測試.B5版本推遲發(fā)布2天,測試增加2個人日,準時完成測試.B6-B11為方案外回歸測試版本,測試增加5個工作人日的資源,準時完成測試.XX測試通過Bugzi

4、lla缺陷治理工具進行缺陷跟蹤治理,B1B4測試階段都有詳細的bug分析表和階段測試報告.2.1進度回憶版本/時間方案開始時間實際開始時間方案完成時間實際完成時間加班增加資源B12007.7.22007.7.22007.7.52007.7.5否否B22007.7.162007.7.162007.7.192007.7.19否否B32007.7.232007.7.232007.7.252007.7.24否2個人日B42007.7.282007.7.292007.7.312007.7.311個人1天1個人2天2個人日B52007.8.12007.8.22007.8.62007.8.3否2個人日B62

5、007.8.42007.8.42個人1天2個人日B72007.8.52007.8.51個人1天1個人日B8B92007.8.92007.8.92007.8.102007.8.10r否2個人日B10合計1個人6天11個人日2.2測試執(zhí)行此次測試嚴格根據(jù)工程方案和測試方案執(zhí)行,按時完成了測試方案規(guī)定的測試對象的測試.針對測試方案規(guī)定的測試策略,在測試執(zhí)行中都有表達,在測試執(zhí)行過程中,依據(jù)測試方案和測試用例,對系統(tǒng)進行了完整的測試2.3測試用例2.3.1 功能性系統(tǒng)實現(xiàn)的主要功能,包括查詢,添加,修改,刪除.系統(tǒng)實現(xiàn)的次要功能,包括為用戶分配酒店,為用戶分配權限,渠道酒店綁定,渠道RATE綁定,權限

6、限制菜單按鈕.需求規(guī)定的輸入輸出字段,以及需求規(guī)定的輸入限制2.3.2 易用性操作按鈕提示信息正確性,一致性,可理解性限制條件提示信息正確性,一致性,可理解性必填項標識輸入方式可理解性中文界面下數(shù)據(jù)語言與界面語言的一致性3測試環(huán)境3.1.1軟硬件環(huán)境硬件環(huán)境應用效勞器數(shù)據(jù)庫效勞器客戶端硬件配置CPU:Intel(R)Celeron(R)CPU2.40GHzstepping01Memory：1048256kHD:ST380817AS80GSATACPU:Intel(R)Celeron(R)CPU2.40GHzstepping01Memory：1048256kHD:ST380817AS80GSAT

7、ACPU:Intel(R)Celeron(R)CPU2.40GHzstepping01Memory：1048256kHD:ST380817AS80GSATA軟件配置OS:CentOS4.2JDK1.5.0_06Apache2.2.0Tomcat5.5.15OS:CentOS4.2MySQL5.0.17LinuxWindow2000Professional(SP2)IE6.0.2900.2180.xpsp_sp2網(wǎng)絡環(huán)境10MLAN10MLAN10MLAN3.1.2網(wǎng)絡拓撲4測試結果4.1Bug趨勢圖此次黑盒測試總共發(fā)布11個版本,B1-B5為方案內(nèi)迭代開發(fā)版本針對工程方案的基線標識B6-B11

8、為進行的回歸測試版本,bug版本趨勢圖如下列圖所示：bug版本趨勢圉第一階段,增量確認測試.時間從2007年7月2日到2007年8月3日.從Bug趨勢圖中可以看出,每個版本的bug數(shù)根本維持在60個左右.B1:從圖中看到B1共有33個BUG,由于B1版本有一個功能模塊在B2版本才開始測試,B1測試模塊相對較少,所以B1版本bug相對較少.B2:由于B1中的一個功能模塊增加到Build2中進行測試,這一版本除了對B1中的BUG進行驗證同時對B1進行了回歸測試,所以B2中的bug數(shù)相對B1出現(xiàn)了明顯的增長趨勢,83: B3版本由于有B2版本的bug驗收測試,以及B1,B2的回歸測試,共發(fā)現(xiàn)67個b

9、ug,和B2根本保持一致.84: B4版本bug數(shù)有一個下降的趨勢,是由于B4版本推遲發(fā)布,新增加了測試人員參與測試,對系統(tǒng)不夠熟悉,以及測試時間緊張,局部測試用仞沒有執(zhí)行,測試覆蓋度不夠,所以發(fā)現(xiàn)bug數(shù)呈下降趨勢.85: B5版本bug數(shù)又有一個增加的趨勢,主要是由于開發(fā)功能模塊多,該版本需求定義不明確.第二階段,BUG驗證和功能回歸確認測試.時間從2007年8月4日到2007年8月14日.B6和B7進行了回D3測試,B8沒有進行回歸測試,只3證了B1B7的bug.B6:進行第一輪回歸測試,發(fā)現(xiàn)的bug數(shù)為33個,遺留一個問題,為數(shù)據(jù)字典種類默認值問題B7:進行第二輪回歸測試,第一次回歸測

10、試沒有涉及到權限限制菜單按鈕的測試,在本次回歸bug.測試的時候,重點進行了這個方面的測試,又發(fā)現(xiàn)了大量的權限相關的B8:B8沒有進行全面的回歸測試,只驗證了B1B7未通過驗證的bug,所以該版本的bug數(shù)明顯比擬少.B9:B9版本進行了全面的回歸測試,同時重點測試了權限限制,所以發(fā)先的bug數(shù)又呈現(xiàn)上升的趨勢.測試發(fā)現(xiàn)44個bug,嚴重級別的bug為14個,嚴重級別的bug集中在權限限制上,功能性嚴重bug沒有發(fā)現(xiàn),說明權限限制依舊不穩(wěn)定,但是系統(tǒng)功能已經(jīng)穩(wěn)定.B10：B10版本驗證了B9版本發(fā)現(xiàn)得bug,沒有進行全面的回歸測試.B10版本在驗證bug的時候,重現(xiàn)翻開Bug6個,新增bug2

11、個,重新翻開bug有5個為嚴重級別bug,是關于權限限制的bug,而新發(fā)現(xiàn)的bug,1個為嚴重級別的bug,也是屬于權限限制的.說明,權限限制還存在著問題,需要修改權限治理bug,重新發(fā)布版本后進行全面的回歸測試.B10版本新發(fā)現(xiàn)的bug詳細分析見遺留bug分析.B11：B11中驗證了B1B10未驗證的bug,重點測試了權限限制,同時進行了查詢,添加,刪除,修改的功能測試,測試過程中未發(fā)現(xiàn)bug.4.2 Bug嚴重程度測試發(fā)現(xiàn)的bug主要集中在normal和minor階段,屬于一般性的缺陷,但是測試的時候,出現(xiàn)了68個嚴重級別的bug,出現(xiàn)嚴重級別的bug主要表現(xiàn)在以下幾個方面?系統(tǒng)主要功能沒

12、有實現(xiàn)?添加數(shù)據(jù)代碼重復后,出現(xiàn)的找不到頁面的錯誤多語言處理,未考慮非語種代碼的情況數(shù)據(jù)庫設計未考慮系統(tǒng)治理員角色,導致用系統(tǒng)治理員進行操作的時候出現(xiàn)找不到頁面錯權限限制異常嚴重級別bug按版本分布如下:Version由嚴重bug版本分布圖可以看出,嚴重級別的bug版本趨勢和bug版本趨勢根本是一致的,但是,在B7和B9版本中年,嚴重級別的bug明顯增多,主要原因是B7和B9版本測試了權限限制按鈕功能,權限問題出現(xiàn)的嚴重級別的bug比擬多.權PMbug主要表現(xiàn)：?具有相應按鈕操作的權限,頁面無相應按鈕,無法執(zhí)行該功能?無相應按鈕操作權限,頁面有相應按鈕,點擊按鈕能出現(xiàn)權限異常錯誤?有相應按鈕操

13、作權限,有相應按鈕,執(zhí)行該功能出現(xiàn)權限異常錯誤4.3 Bug引入階段bug引入階段分析圖口需求設計階段后臺編碼階段前臺編碼階段口測試階段發(fā)布階段由上圖可以看出,主要為前臺編碼和頁面設計方面的bug,占到了全部bug的2/3.4.4Bug引入原因由上圖可以看出,主要為前臺編碼和易用性方面的bug,占到了全部bug的2/3.4.5 Bug狀態(tài)分布由bug狀態(tài)圖可以看出,未解決的bug有4個,主要是B8中新提交的bug,是關于用戶治理的bug暫時沒有解決.bug,由于用戶權限治理需要重新設計所以,該局部的5測試結論5.1 功能性系統(tǒng)正確實現(xiàn)了通過數(shù)據(jù)字典治理根底數(shù)據(jù)的功能,實現(xiàn)了數(shù)據(jù)內(nèi)容的多語言功能

14、,實現(xiàn)了中英文界面.實現(xiàn)了根底數(shù)據(jù)治理,酒店集團治理,酒店根底信息治理,渠道治理,代理治理,用戶治理的查詢,添加,修改,刪除的功能,系統(tǒng)還實現(xiàn)了將權限限制細化到菜單按鈕的功能.系統(tǒng)在實現(xiàn)用戶治理下的權限治理功能時,存在重大的缺陷,權限限制不嚴密,權限設計有遺漏.5.2 易用性現(xiàn)有系統(tǒng)實現(xiàn)了如下易用性：?查詢,添加,刪除,修改操作相關提示信息的一致性,可理解性?輸入限制的正確性?輸入限制提示信息的正確性,可理解性,一致性現(xiàn)有系統(tǒng)存在如下易用性缺陷：?界面排版不美觀?輸入,輸出字段的可理解性差?輸入缺少解釋性說明?中英文對應的正確性?中英文混排5.3 可靠性現(xiàn)有系統(tǒng)的可靠性限制不夠嚴密,很多限制是

15、通過頁面限制實現(xiàn)的,如果頁面限制失效,可以向數(shù)據(jù)庫插入數(shù)據(jù),引發(fā)錯誤.現(xiàn)有系統(tǒng)的容錯性不高,如果系統(tǒng)出現(xiàn)錯誤,返回錯誤類型為找不到頁面錯誤,無法回復到出錯前的狀態(tài)5.4 兼容性現(xiàn)有系統(tǒng)支持window下的IE瀏覽器和傲游瀏覽器,支持linux系統(tǒng)下的IE瀏覽器和火狐瀏覽器.現(xiàn)有系統(tǒng)未進行其他兼容性測試5.5 平安性現(xiàn)有系統(tǒng)限制了以下平安性問題：?把某一個登錄后的頁面保存下來,不能單獨對其進行操作不進行登錄?直接輸入某一頁面的Url能否翻開頁面并進行操作不應該允許.現(xiàn)有系統(tǒng)未限制以下平安性問題：?用戶名和密碼應對大小寫敏感?登陸錯誤次數(shù)限制6分析摘要6.1 覆蓋率此次測試,所有測試用例都是在中文

16、界面下執(zhí)行,未在英文界面下執(zhí)行,測試不包括英文界面下的測試,也不包括正對英文譯的測試.此次測試,局部頁面需求描述無明確的定義,對輸入限制無詳細定義,無明確的測試依據(jù),在測試過程中,測試是根據(jù)輸入字段含義,測試人員理解,以及和工程經(jīng)理,開發(fā)人員溝通獲得測試依據(jù),無法保證測試依據(jù)的正確性和完整性,因此,沒有進行完整的,正確的無效數(shù)據(jù)的測試,測試覆蓋率不夠,無法保證測試的有效性和正確性下面為此次測試測試用例覆蓋率分析圖：測試用例覆善生濟析6.2 遺留缺陷的影響1.缺陷描述：酒店娛樂項添加頁面,距離字段無單位,建議增加單位缺陷影響：距離字段無單位說明,無衡量標準,用戶易用性不好推遲原因：需求定義無單位

17、定義,統(tǒng)一在升級版本中解決2.缺陷描述：酒店根底信息治理模塊,默認語言設置不一致.用中文查詢酒店,進入酒店根底信息模塊后,如下模塊,語言顯示為“請選擇列表貝囿添加貝囿取消政策停留政策擔保政策機場參照點會議室詳情打包促銷效勞Rate而其他模塊語言顯示“中文語言缺陷影響：相同功能模塊默認語言設置不一致,一致性不好推遲原因：默認語言設置,目前無統(tǒng)一標準,升級版本中統(tǒng)一3 .缺陷描述：tomcat日志有亂碼,日志無工程名稱,查看不方便缺陷影響：其他工程日志都有工程名稱,日志無工程名稱,查看不方便推遲原因：目前的日志為了調(diào)試方便,顯示了很多其它信息,在工程正式發(fā)布時會統(tǒng)一處理的.4 .缺陷描述：取消政策

18、治理要么,取消時間“天/小時缺少單位補充字段缺陷影響：該處由于是兩個不同的單位時間,需要有另外一個單位補充字段補充所所填寫內(nèi)容的單位推遲原因：該缺陷單位補充字段本來存在,譯不夠準確,不能理解為補充單位的字段,需要等譯完畢后再確認.5 .缺陷描述：數(shù)據(jù)字典種類修改,默認值設置后,在調(diào)用該數(shù)據(jù)字典種類的數(shù)據(jù)字典,默認值無顯示缺陷影響：數(shù)據(jù)字典種類的默認值設置后,不能顯示設置的默認值,相當于數(shù)據(jù)字典種類默認值設置功能未實現(xiàn)推遲原因：該功能暫時不好實現(xiàn),需要和和系統(tǒng)的默認語種一起處理.6 .缺陷描述：擔保政策治理頁面,EdpositDue缺少解釋行輸入描述信息缺陷影響：缺少解釋性輸入描述信息,用戶不理

19、解應該輸入什么內(nèi)容推遲原因：需求沒有描述,需要解釋性說明文字由工程經(jīng)理整理后,在升級版本中添加7 .缺陷描述：多媒體添加,文件上傳功能未實現(xiàn)缺陷影響：文件上傳功能未實現(xiàn)推遲原因：該功能暫時不好完成,在下個版本中完成8 .缺陷描述：參照點添加權限和修改權限單獨限制出現(xiàn)權限異常錯誤缺陷影響：用戶執(zhí)行添加,修改時,出現(xiàn)權限異常,無法完成任務推遲原因：B9版本發(fā)現(xiàn)該權限,B10版本未通過驗證,目前該模塊開發(fā)人員調(diào)休,無法修改bug,9 .缺陷描述：酒店渠道綁定關系權限限制出現(xiàn)權限異常錯誤缺陷影響：a權限限制易用性不好,會引起用戶誤操作；b權限限制錯誤推遲原因：B9版本發(fā)現(xiàn)該權限,B10版本未通過驗證.

20、該模塊后臺無insert權限,只有Update權限,與其他模塊不同,需要重新設置權限限制方式.10 .缺陷描述：酒店Rate綁定關系權限限制出現(xiàn)權限異常錯誤缺陷影響：a權限限制易用性不好,會引起用戶誤操作；b權限限制錯誤推遲原因：B9版本發(fā)現(xiàn)該權限,B10版本未通過驗證.該模塊后臺無insert權限,只有Update權限,與其他模塊不同,需要重新設置權限限制方式.11 .缺陷描述：新建業(yè)務治理員權限用戶,進入打包促銷頁面出現(xiàn)權限異常錯誤缺陷影響：除系統(tǒng)治理員外,其他用戶無法進行打包促銷操作推遲原因：B10版本發(fā)現(xiàn)該bug,目前該模塊開發(fā)人員調(diào)休,無法修改bug6.3建議?在工程開始的時候應該制

21、定編碼標準,數(shù)據(jù)庫標準,需求變更標準,開發(fā)和測試人員都嚴格根據(jù)標準進行,可以在后期減少由于開發(fā),測試不一致而導致的問題,同時也可以降低溝通本錢.?發(fā)布版本的時候,正確布置測試環(huán)境,減少由于測試環(huán)境,測試數(shù)據(jù)庫數(shù)據(jù)的問題而出現(xiàn)的無效bug.?開發(fā)人員解決bug的時候,填寫bug原因以及解決方式,方便bug的跟蹤.?開發(fā)人員在開發(fā)版本上發(fā)現(xiàn)bug,可以通知測試人員,由于開發(fā)人員發(fā)現(xiàn)的bug很有可能在測試版本上出現(xiàn),而測試人員和開發(fā)人員的思路不同,有可能測試人員沒有發(fā)現(xiàn)該bug,而且,這樣可以保證發(fā)現(xiàn)的bug都能夠被跟蹤.7度量7.1資源消耗測試時間2007年7月2日至2007年8月6日共35天測試人力1人X7天+1人X35天=42人大硬件資源效勞器：PC2臺客戶端：PC2臺7.2缺陷密度8典型缺陷引入原因分析測試過程中發(fā)現(xiàn)的缺陷主要有以下幾個方面：1 .需求定義不明確需求文檔中,存在功能定義錯誤,輸入輸出字段描述錯誤,輸入輸出字段限制定義錯誤,輸入輸出限制定義缺失這幾種類型的缺陷.使得開發(fā)人員根據(jù)需求進行設計時,沒有考慮相關功能的關聯(lián)性,以及需求錯誤的地方