系統(tǒng)測試報告實例匯總

XX系統(tǒng)測試總結報告1 引言1.1 編寫目的編寫該測試總結報告主要有以下幾個目的1 通過對測試結果的分析，得到對軟件質量的評價2 分析測試的過程，產(chǎn)品，資源，信息，為以后制定測試計劃提供參考3 評估測試測試執(zhí)行和測試計劃是否符合4 分析系統(tǒng)存在的缺陷，為修復和預防bug提供建議1.2 背景1.3 用戶群 主要讀者：XX項目管理人員，XX項目測試經(jīng)理其他讀者：XX項目相關人員。1.4 定義嚴重bug：出現(xiàn)以下缺陷，測試定義為嚴重bug 系統(tǒng)無響應，處于死機狀態(tài)，需要其他人工修復系統(tǒng)才可復原。 點擊某個菜單后出現(xiàn)“The page cannot be displayed”或者返回異常錯誤。 進行某個操作（增加、修改、刪除等）后，出現(xiàn)“The page cannot be displayed” 或者返回異常錯誤 當對必填字段進行校驗時，未輸入必輸字段，出現(xiàn)“The page cannot be displayed” 或者返回異常錯誤 系統(tǒng)定義不能重復的字段輸入重復數(shù)據(jù)后，出現(xiàn)“The page cannot be displayed” 或者返回異常錯誤1.5 測試對象略1.6 測試階段系統(tǒng)測試1.7 測試工具 Bugzilla缺陷管理系統(tǒng)1.8 參考資料XX需求和設計說明書XX數(shù)據(jù)字典XX后臺管理系統(tǒng)測試計劃XX后臺管理系統(tǒng)測試用例XX項目計劃2 測試概要XX后臺管理系統(tǒng)測試從2007年7月2日開始到2007年8月10日結束，共持續(xù)39天，測試功能點174個，執(zhí)行2385個測試用例，平均每個功能點執(zhí)行測試用例13.7個，測試共發(fā)現(xiàn)427個bug，其中嚴重級別的bug68個，無效bug44個，平均每個測試功能點2.2個bug。XX總共發(fā)布11個測試版本，其中B1B5為計劃內迭代開發(fā)版本（針對項目計劃的基線標識），B6B8為回歸測試版本。計劃內測試版本，B1B4測試進度依照項目計劃時間準時完成測試并提交報告，其中B4版本推遲一天發(fā)布版本，測試通過增加一個人日，準時完成測試。B5版本推遲發(fā)布2天，測試增加2個人日，準時完成測試。B6B11為計劃外回歸測試版本，測試增加5個工作人日的資源，準時完成測試。XX測試通過Bugzilla缺陷管理工具進行缺陷跟蹤管理，B1B4測試階段都有詳細的bug分析表和階段測試報告。2.1 進度回顧版本/時間計劃開始時間實際開始時間計劃完成時間實際完成時間加班增加資源B12007.7.22007.7.22007.7.52007.7.5否否B22007.7.162007.7.162007.7.192007.7.19否否B32007.7.232007.7.232007.7.252007.7.24否2個人日B42007.7.282007.7.292007.7.312007.7.311個人1天1個人2天2個人日B52007.8.12007.8.22007.8.62007.8.3否2個人日B62007.8.42007.8.42個人1天2個人日B72007.8.52007.8.51個人1天1個人日B8B92007.8.92007.8.92007.8.102007.8.10否2個人日B10合計1個人6天11個人日2.2 測試執(zhí)行此次測試嚴格按照項目計劃和測試計劃執(zhí)行，按時完成了測試計劃規(guī)定的測試對象的測試。針對測試計劃規(guī)定的測試策略，在測試執(zhí)行中都有體現(xiàn)，在測試執(zhí)行過程中，依據(jù)測試計劃和測試用例，對系統(tǒng)進行了完整的測試2.3 測試用例2.3.1 功能性系統(tǒng)實現(xiàn)的主要功能，包括查詢，添加，修改，刪除。系統(tǒng)實現(xiàn)的次要功能，包括為用戶分配酒店，為用戶分配權限，渠道酒店綁定，渠道RATE綁定，權限控制菜單按鈕。需求規(guī)定的輸入輸出字段，以及需求規(guī)定的輸入限制2.3.2 易用性 操作按鈕提示信息正確性，一致性，可理解性 限制條件提示信息正確性，一致性，可理解性必填項標識輸入方式可理解性中文界面下數(shù)據(jù)語言與界面語言的一致性3 測試環(huán)境3.1.1 軟硬件環(huán)境硬件環(huán)境應用服務器數(shù)據(jù)庫服務器客戶端硬件配置CPU：Intel(R) Celeron(R) CPU 2.40GHz stepping 01Memory： kHD：STAS 80G SATACPU：Intel(R) Celeron(R) CPU 2.40GHz stepping 01Memory： kHD：STAS 80G SATACPU：Intel(R) Celeron(R) CPU 2.40GHz stepping 01Memory： kHD：STAS 80G SATA軟件配置OS：CentOS 4.2JDK 1.5.0_06Apache 2.2.0Tomcat 5.5.15OS：CentOS 4.2MySQL 5.0.17 LinuxWindow 2000 Professional （SP2）IE6.0.2900.2180.xpsp_sp2網(wǎng)絡環(huán)境10M LAN10M LAN10M LAN 3.1.2 網(wǎng)絡拓撲4 測試結果4.1 Bug趨勢圖此次黑盒測試總共發(fā)布11個版本，B1B5為計劃內迭代開發(fā)版本（針對項目計劃的基線標識），B6-B11為進行的回歸測試版本，bug版本趨勢圖如下圖所示：第一階段，增量確認測試。時間從2007年7月2日到2007年8月3日。從Bug趨勢圖中可以看出，每個版本的bug數(shù)基本維持在60個左右。B1：從圖中看到B1共有33個BUG，因為B1版本有一個功能模塊在B2版本才開始測試，B1測試模塊相對較少，所以B1版本bug相對較少。B2：由于B1中的一個功能模塊增加到Build 2中進行測試，這一版本除了對B1中的BUG進行驗證同時對B1進行了回歸測試，所以B2中的bug數(shù)相對B1出現(xiàn)了明顯的增長趨勢， B3：B3版本因為有B2版本的bug驗收測試，以及B1,B2的回歸測試，共發(fā)現(xiàn)67個bug，和B2基本保持一致。B4：B4版本bug數(shù)有一個下降的趨勢，是因為B4版本推遲發(fā)布，新增加了測試人員參與測試，對系統(tǒng)不夠熟悉，以及測試時間緊張，部分測試用例沒有執(zhí)行，測試覆蓋度不夠，所以發(fā)現(xiàn)bug數(shù)呈下降趨勢。B5：B5版本bug數(shù)又有一個增加的趨勢，主要是由于開發(fā)功能模塊多，該版本需求定義不明確。 第二階段，BUG驗證和功能回歸確認測試。時間從2007年8月4日到2007年8月14日。B6和 B7進行了回歸測試，B8沒有進行回歸測試，只驗證了B1B7的bug。B6 ：進行第一輪回歸測試，發(fā)現(xiàn)的bug數(shù)為33個，遺留一個問題，為數(shù)據(jù)字典種類默認值問題B7 ：進行第二輪回歸測試，第一次回歸測試沒有涉及到權限控制菜單按鈕的測試，在本次回歸測試的時候，重點進行了這個方面的測試，又發(fā)現(xiàn)了大量的權限相關的bug。B8 ：B8沒有進行全面的回歸測試，只驗證了B1B7未通過驗證的bug，所以該版本的bug數(shù)明顯比較少。B9 ：B9版本進行了全面的回歸測試，同時重點測試了權限控制，所以發(fā)先的bug數(shù)又呈現(xiàn)上升的趨勢。測試發(fā)現(xiàn)44個bug，嚴重級別的bug為14個，嚴重級別的bug集中在權限控制上，功能性嚴重bug沒有發(fā)現(xiàn)，說明權限控制依舊不穩(wěn)定，但是系統(tǒng)功能已經(jīng)穩(wěn)定。B10：B10版本驗證了B9版本發(fā)現(xiàn)得bug，沒有進行全面的回歸測試。B10版本在驗證bug的時候，重現(xiàn)打開Bug6個，新增bug2個，重新打開bug有5個為嚴重級別bug，是關于權限控制的bug，而新發(fā)現(xiàn)的bug，1個為嚴重級別的bug，也是屬于權限控制的。說明，權限控制還存在著問題，需要修改權限管理bug，重新發(fā)布版本后進行全面的回歸測試。B10版本新發(fā)現(xiàn)的bug詳細分析見遺留bug分析。B11：B11中驗證了B1B10未驗證的bug，重點測試了權限控制，同時進行了查詢，添加，刪除，修改的功能測試，測試過程中未發(fā)現(xiàn)bug。4.2 Bug嚴重程度 測試發(fā)現(xiàn)的bug主要集中在normal和minor階段，屬于一般性的缺陷，但是測試的時候，出現(xiàn)了68個嚴重級別的bug，出現(xiàn)嚴重級別的bug主要表現(xiàn)在以下幾個方面 系統(tǒng)主要功能沒有實現(xiàn) 添加數(shù)據(jù)代碼重復后，出現(xiàn)的找不到頁面的錯誤 多語言處理，未考慮非語種代碼的情況 數(shù)據(jù)庫設計未考慮系統(tǒng)管理員角色，導致用系統(tǒng)管理員進行操作的時候出現(xiàn)找不到頁面錯誤 權限控制異常嚴重級別bug按版本分布如下：由嚴重bug版本分布圖可以看出，嚴重級別的bug版本趨勢和bug版本趨勢基本是一致的，但是，在B7和B9版本中年，嚴重級別的bug明顯增多，主要原因是B7和B9版本測試了權限控制按鈕功能，權限問題出現(xiàn)的嚴重級別的bug比較多。權限bug主要表現(xiàn)： 具有相應按鈕操作的權限，頁面無相應按鈕，無法執(zhí)行該功能 無相應按鈕操作權限，頁面有相應按鈕，點擊按鈕能出現(xiàn)權限異常錯誤 有相應按鈕操作權限，有相應按鈕，執(zhí)行該功能出現(xiàn)權限異常錯誤4.3 Bug引入階段由上圖可以看出，主要為前臺編碼和頁面設計方面的bug，占到了全部bug的2/3。4.4 Bug引入原因由上圖可以看出，主要為前臺編碼和易用性方面的bug，占到了全部bug的2/3。4.5 Bug狀態(tài)分布由bug狀態(tài)圖可以看出，未解決的bug有4個，主要是B8中新提交的bug，是關于用戶管理的bug，因為用戶權限管理需要重新設計所以，該部分的bug暫時沒有解決。5 測試結論5.1 功能性系統(tǒng)正確實現(xiàn)了通過數(shù)據(jù)字典管理基礎數(shù)據(jù)的功能，實現(xiàn)了數(shù)據(jù)內容的多語言功能，實現(xiàn)了中英文界面。實現(xiàn)了基礎數(shù)據(jù)管理，酒店集團管理，酒店基礎信息管理，渠道管理，代理管理，用戶管理的查詢，添加，修改，刪除的功能，系統(tǒng)還實現(xiàn)了將權限控制細化到菜單按鈕的功能。系統(tǒng)在實現(xiàn)用戶管理下的權限管理功能時，存在重大的缺陷，權限控制不嚴密，權限設計有遺漏。5.2 易用性 現(xiàn)有系統(tǒng)實現(xiàn)了如下易用性： 查詢，添加，刪除，修改操作相關提示信息的一致性，可理解性 輸入限制的正確性 輸入限制提示信息的正確性，可理解性，一致性現(xiàn)有系統(tǒng)存在如下易用性缺陷： 界面排版不美觀 輸入，輸出字段的可理解性差 輸入缺少解釋性說明 中英文對應的正確性 中英文混排5.3 可靠性現(xiàn)有系統(tǒng)的可靠性控制不夠嚴密，很多控制是通過頁面控制實現(xiàn)的，如果頁面控制失效，可以向數(shù)據(jù)庫插入數(shù)據(jù)，引發(fā)錯誤?，F(xiàn)有系統(tǒng)的容錯性不高，如果系統(tǒng)出現(xiàn)錯誤，返回錯誤類型為找不到頁面錯誤，無法回復到出錯前的狀態(tài)5.4 兼容性現(xiàn)有系統(tǒng)支持window下的IE瀏覽器和傲游瀏覽器，支持linux系統(tǒng)下的IE瀏覽器和火狐瀏覽器?，F(xiàn)有系統(tǒng)未進行其他兼容性測試5.5 安全性現(xiàn)有系統(tǒng)控制了以下安全性問題： 把某一個登錄后的頁面保存下來，不能單獨對其進行操作不進行登錄 直接輸入某一頁面的Url能否打開頁面并進行操作不應該允許。現(xiàn)有系統(tǒng)未控制以下安全性問題： 用戶名和密碼應對大小寫敏感 登陸錯誤次數(shù)限制6 分析摘要6.1 覆蓋率此次測試，所有測試用例都是在中文界面下執(zhí)行，未在英文界面下執(zhí)行，測試不包括英文界面下的測試，也不包括正對英文翻譯的測試。此次測試，部分頁面需求描述無明確的定義，對輸入限制無詳細定義，無明確的測試依據(jù)，在測試過程中，測試是根據(jù)輸入字段含義，測試人員理解，以及和項目經(jīng)理，開發(fā)人員溝通獲得測試依據(jù)，無法保證測試依據(jù)的正確性和完整性，因此，沒有進行完整的，正確的無效數(shù)據(jù)的測試，測試覆蓋率不夠，無法保證測試的有效性和正確性下面為此次測試測試用例覆蓋率分析圖：6.2 遺留缺陷的影響 1 缺陷描述：酒店娛樂項添加頁面， “距離”字段無單位，建議增加單位缺陷影響：距離字段無單位說明，無衡量標準，用戶易用性不好推遲原因：需求定義無單位定義，統(tǒng)一在升級版本中解決2 缺陷描述：酒店基礎信息管理模塊，默認語言設置不一致。用中文查詢酒店，進入酒店基礎信息模塊后，如下模塊，語言顯示為“請選擇”列表頁面添加頁面取消政策停留政策擔保政策機場參照點會議室詳情打包促銷服務Rate而其他模塊語言顯示“中文語言”缺陷影響：相同功能模塊默認語言設置不一致，一致性不好推遲原因：默認語言設置，目前無統(tǒng)一標準，升級版本中統(tǒng)一3 缺陷描述：tomcat日志有亂碼，日志無項目名稱，查看不方便缺陷影響：其他項目日志都有項目名稱，日志無項目名稱，查看不方便推遲原因：目前的日志為了調試方便，顯示了很多其它信息，在項目正式發(fā)布時會統(tǒng)一處理的。4 缺陷描述：取消政策管理要么，取消時間“天/小時”缺少單位補充字段缺陷影響：該處因為是兩個不同的單位時間，需要有另外一個單位補充字段補充所所填寫內容的單位推遲原因：該缺陷單位補充字段本來存在，翻譯不夠準確，不能理解為補充單位的字段，需要等翻譯完畢后再確認。5 缺陷描述：數(shù)據(jù)字典種類修改，默認值設置后，在調用該數(shù)據(jù)字典種類的數(shù)據(jù)字典，默認值無顯示缺陷影響：數(shù)據(jù)字典種類的默認值設置后，不能顯示設置的默認值，相當于數(shù)據(jù)字典種類默認值設置功能未實現(xiàn)推遲原因：該功能暫時不好實現(xiàn)，需要和和系統(tǒng)的默認語種一起處理。6 缺陷描述：擔保政策管理頁面，“Edposit Due”缺少解釋行輸入描述信息缺陷影響：缺少解釋性輸入描述信息，用戶不理解應該輸入什么內容推遲原因：需求沒有描述，需要解釋性說明文字由項目經(jīng)理整理后，在升級版本中添加7 缺陷描述：多媒體添加，文件上傳功能未實現(xiàn)缺陷影響：文件上傳功能未實現(xiàn)推遲原因：該功能暫時不好完成，在下個版本中完成8 缺陷描述：參照點添加權限和修改權限單獨控制出現(xiàn)權限異常錯誤缺陷影響：用戶執(zhí)行添加，修改時，出現(xiàn)權限異常，無法完成任務推遲原因：B9版本發(fā)現(xiàn)該權限，B10版本未通過驗證，目前該模塊開發(fā)人員調休，無法修改bug，9 缺陷描述：酒店渠道綁定關系權限控制出現(xiàn)權限異常錯誤缺陷影響：a權限控制易用性不好，會引起用戶誤操作;b權限控制錯誤推遲原因：B9版本發(fā)現(xiàn)該權限，B10版本未通過驗證。該模塊后臺無insert權限,只有Update權限，與其他模塊不同，需要重新設置權限控制方式。10缺陷描述：酒店Rate綁定關系權限控制出現(xiàn)權限異常錯誤缺陷影響：a權限控制易用性不好，會引起用戶誤操作;b權限控制錯誤推遲原因：B9版本發(fā)現(xiàn)該權限，B10版本未通過驗證。該模塊后臺無insert權限,只有Update權限，與其他模塊不同，需要重新設置權限控制方式。11缺陷描述：新建業(yè)務管理員權限用戶，進入打包促銷頁面出現(xiàn)權限異常錯誤缺陷影響：除系統(tǒng)管理員外，其他用戶無法進行打包促銷操作推遲原因：B10版本發(fā)現(xiàn)該bug，目前該模塊開發(fā)人員調休，無法修改bug6.3 建議 在項目開始的時候應該制定編碼標準，數(shù)據(jù)庫標準，需求變更標準，開發(fā)和測試人員都嚴格按照標準進行，可以在后期減少因為開發(fā)，測試不一致而導致的問題，同時也可以降低溝通成本。 發(fā)布版本的時候，正確布置測試環(huán)境，減少因為測試環(huán)境，測試數(shù)據(jù)庫數(shù)據(jù)的問題而出現(xiàn)的無效bug。 開發(fā)人員解決bug的時候，填寫bug原因以及解決方式，方便bug的跟蹤。 開發(fā)人員在開發(fā)版本上發(fā)現(xiàn)bug，可以通知測試人員，因為開發(fā)人員發(fā)現(xiàn)的bug很有可能在測試版本上出現(xiàn)，而測試人員和開發(fā)人員的思路不同，有可能測試人員沒有發(fā)現(xiàn)該bug，而且，這樣可以保證發(fā)現(xiàn)的bug都能夠被跟蹤。7 度量7.1 資源消耗測試時間2007年7月2日至2007年8月6日共35天測試人力1人7天1人35天42人天硬件資源服務器：PC 2臺客戶端：PC 2臺7.2 缺陷密度8 典型缺陷引入原因分析測試過程中發(fā)現(xiàn)的缺陷主要有以下幾個方面： 1 需求定義不明確需求文檔中，存在功能定義錯誤，輸入輸出字段描述錯誤，輸入輸出字段限制定義錯誤，輸入輸出限制定義缺失這幾種類型的缺陷。使得開發(fā)人員根據(jù)需求進行設計時，沒有考慮相關功能的關聯(lián)性，以及需求錯誤的地方，在測