某軟件系統(tǒng)經(jīng)典測(cè)試報(bào)告

1、軟件系統(tǒng)測(cè)試報(bào)告 某軟件系統(tǒng) 測(cè)評(píng)單位： 背景：如今網(wǎng)上招聘越來(lái)越普遍，但有些招聘系統(tǒng)的綜合性能不是很好，比如系統(tǒng)的冗余、系統(tǒng)的性能、安全性、完整性等等都有待提高，本次測(cè)試的目的就是針對(duì)本系統(tǒng)的性能進(jìn)行測(cè)試。一 實(shí)驗(yàn)?zāi)康?、通過(guò)對(duì)測(cè)試結(jié)果的分析，得到對(duì)軟件質(zhì)量的評(píng)價(jià)2、分析測(cè)試的過(guò)程，產(chǎn)品，資源，信息，為以后制定測(cè)試計(jì)劃提供參考3、評(píng)估測(cè)試測(cè)試執(zhí)行和測(cè)試計(jì)劃是否符合4、分析系統(tǒng)存在的缺陷，為修復(fù)和預(yù)防bug提供建議二、實(shí)驗(yàn)內(nèi)容該文檔的目的是描述網(wǎng)上招聘系統(tǒng)項(xiàng)目客戶端系統(tǒng)測(cè)試的總結(jié)報(bào)告，其主要內(nèi)容包括：l 系統(tǒng)環(huán)境簡(jiǎn)介1、軟件名稱：網(wǎng)上招聘求職系統(tǒng)2、軟件功能：為求職者提供求職、收藏、信息交互等

2、功能；為招聘單位提供招聘、收藏、信息交互等功能；為管理員提供管理網(wǎng)站公告、友情鏈接和網(wǎng)站會(huì)員的管理功能。3、用戶：求職者、招聘單位、管理員4、開發(fā)者：ZSSl 系統(tǒng)數(shù)據(jù)度量l 系統(tǒng)結(jié)果評(píng)估用戶群：1、項(xiàng)目管理人員 2、 測(cè)試人員范圍：該文檔定義了客戶端系統(tǒng)測(cè)試的結(jié)果，總結(jié)了測(cè)試客戶端的職位查詢、網(wǎng)上提交簡(jiǎn)歷、在線答題的基本功能，以及支持大數(shù)據(jù)量并發(fā)訪問(wèn)的性能，給出了測(cè)試的結(jié)論。2.1嚴(yán)重bug：出現(xiàn)以下缺陷，測(cè)試定義為嚴(yán)重bug系統(tǒng)無(wú)響應(yīng)，處于死機(jī)狀態(tài)，需要其他人工修復(fù)系統(tǒng)才可復(fù)原。點(diǎn)擊某個(gè)菜單后出現(xiàn)“The page cannot be displayed”或者返回異常錯(cuò)誤。進(jìn)行某個(gè)操作（增

3、加、修改、刪除等）后，出現(xiàn)“The page cannot be displayed” 或者返回異常錯(cuò)誤2.2縮寫說(shuō)明HR- Human Resource（人力資源管理）的縮寫。MVC-（模式視圖控制）的縮寫，表示一個(gè)三層的結(jié)構(gòu)體系。2.3測(cè)試類型a、功能性測(cè)試:按照系統(tǒng)需求定義中的功能定義部分對(duì)系統(tǒng)實(shí)行的系統(tǒng)級(jí)別的測(cè)試。b、非功能性測(cè)試:按照系統(tǒng)需求定義中的非功能定義部分（如系統(tǒng)的性能指標(biāo)，安全性能指標(biāo)等）對(duì)系統(tǒng)實(shí)行的系統(tǒng)級(jí)別的測(cè)試。c、測(cè)試用例：測(cè)試人員設(shè)計(jì)出來(lái)的用來(lái)測(cè)試軟件某個(gè)功能的一種情形2.4參考資料1 LoadRunner使用手冊(cè) 北京長(zhǎng)江軟件有限公司編制2 網(wǎng)上招聘客戶端需求說(shuō)明

4、 北京長(zhǎng)江軟件有限公司編制3 軟件測(cè)試技術(shù)概論 古樂(lè) 史九林編著 /清華大學(xué)出版社4 軟件測(cè)試：第二版 Paul C.Jorgensen著/機(jī)械工業(yè)出版社2.5測(cè)試執(zhí)行此次測(cè)試嚴(yán)格按照項(xiàng)目計(jì)劃和測(cè)試計(jì)劃執(zhí)行，按時(shí)完成了測(cè)試計(jì)劃規(guī)定的測(cè)試對(duì)象的測(cè)試。針對(duì)測(cè)試計(jì)劃規(guī)定的測(cè)試策略，在測(cè)試執(zhí)行中都有體現(xiàn)，在測(cè)試執(zhí)行過(guò)程中，依據(jù)測(cè)試計(jì)劃和測(cè)試用例，對(duì)系統(tǒng)進(jìn)行了完整的測(cè)試三、測(cè)試環(huán)境描述本測(cè)試的測(cè)試目的是驗(yàn)證網(wǎng)上招聘系統(tǒng)的客戶端能否實(shí)現(xiàn)應(yīng)聘者的職位查詢、簡(jiǎn)歷提交、問(wèn)卷的答復(fù)等基本功能，以及并發(fā)訪問(wèn)的性能。為此，采用Mercury的 LoadRunner 7.5測(cè)試工具進(jìn)行壓力測(cè)試，驗(yàn)證是否滿足系統(tǒng)的需求。

5、測(cè)試機(jī)器是安裝了LoadRunner 7.5測(cè)試工具的客戶機(jī)，可以執(zhí)行功能也可以采用工具錄制功能，并模擬多人并發(fā)訪問(wèn)系統(tǒng)，監(jiān)控系統(tǒng)的性能，得出分析結(jié)果。如圖G。圖G-1:測(cè)試機(jī)器的環(huán)境安裝了LoadRunner 7.5的客戶機(jī) 這個(gè)測(cè)試機(jī)器的配置環(huán)境如下：l 操作系統(tǒng)：WindowsXPl 配置工具：Tomcat5.0以上l 瀏覽器：Micrsoft IE 6.0.2800.1106l CPU：2.0以上四、功能測(cè)試執(zhí)行情況測(cè)試計(jì)劃單元測(cè)試（類測(cè)試）：2010年10月1日-2010年11月30日集成測(cè)試（交互測(cè)試）：2010年12月1日-2010年12月10日系統(tǒng)測(cè)試：2010年12月11日-

6、2010年12月31日測(cè)試方案單元測(cè)試方案：由開發(fā)人員在系統(tǒng)開發(fā)過(guò)程中對(duì)編寫的系統(tǒng)函數(shù)以及數(shù)據(jù)庫(kù)接口函數(shù)等使用白盒測(cè)試方法進(jìn)行單元測(cè)試。集成測(cè)試方案：由測(cè)試小組在單元測(cè)試結(jié)束后對(duì)使用黑盒測(cè)試方法對(duì)各單元組合在一起能否按照既定意圖寫作運(yùn)行進(jìn)行測(cè)試。系統(tǒng)測(cè)試方案：由測(cè)試小組在集成測(cè)試結(jié)束后對(duì)整個(gè)系統(tǒng)能否在實(shí)際軟件要求的環(huán)境正常運(yùn)行，并且對(duì)最終的系統(tǒng)軟件進(jìn)行全面的測(cè)試，以確保最終軟件系統(tǒng)滿足產(chǎn)品需求并且遵循系統(tǒng)設(shè)計(jì)。測(cè)試說(shuō)明由于篇幅有限，只寫出部分重要代表性測(cè)試用例，有個(gè)人注冊(cè)、個(gè)人簡(jiǎn)歷填寫、上傳照片的測(cè)試用例。其他測(cè)試略。表G-2是測(cè)試用例執(zhí)行情況的綜述。表G-2:測(cè)試用例的度量數(shù)據(jù)被測(cè)對(duì)象用例執(zhí)

7、行總數(shù)發(fā)現(xiàn)缺陷數(shù)首頁(yè)TestCase-FUNC-01TestCase-FUNC-02TestCase-FUNC-03TestCase-FUNC-04813填寫基本信息頁(yè)面TestCase-FUNC-05TestCase-FUNC-062919填寫工作經(jīng)歷頁(yè)面TestCase-FUNC-05TestCase-FUNC-071211填寫教育經(jīng)歷頁(yè)面TestCase-FUNC-05TestCase-FUNC-081011填寫工作技能頁(yè)面TestCase-FUNC-05TestCase-FUNC-09412填寫家庭關(guān)系頁(yè)面TestCase-FUNC-05TestCase-FUNC-10616填寫自我介

8、紹頁(yè)面TestCase-FUNC-05TestCase-FUNC-11111預(yù)覽應(yīng)聘者簡(jiǎn)歷TestCase-FUNC-05TestCase-FUNC-12010回答問(wèn)卷界面TestCase-FUNC-05TestCase-FUNC-13120直接訪問(wèn)后續(xù)頁(yè)面TestCase-Perf-1818并發(fā)訪問(wèn)系統(tǒng)TestCase-Perf-2010.2性能測(cè)試執(zhí)行情況性能測(cè)試是通過(guò)測(cè)試工具模擬個(gè)人同時(shí)訪問(wèn)系統(tǒng)的客戶端。首先錄制客戶端的基本操作，然后設(shè)置參數(shù)以保證個(gè)腳本的輸入是不完全一致的。通過(guò)設(shè)置執(zhí)行情景來(lái)實(shí)施性能測(cè)試，打開監(jiān)控窗口監(jiān)控系統(tǒng)運(yùn)行狀況，最后得到執(zhí)行結(jié)果報(bào)告。4.2.1活動(dòng)用戶視圖圖G是個(gè)

9、模擬用戶的運(yùn)行結(jié)果。從圖中可以看到有個(gè)虛擬用戶在同時(shí)訪問(wèn)系統(tǒng)的客戶端。圖G：個(gè)模擬用戶4.2.2每分鐘點(diǎn)擊數(shù)圖G是個(gè)用戶并發(fā)訪問(wèn)客戶端時(shí)，每分鐘的點(diǎn)擊數(shù)。從圖中可以看出，由于設(shè)定了集合點(diǎn)，點(diǎn)擊數(shù)大的集中在每次填寫完表單提交數(shù)據(jù)時(shí)。圖G：每分鐘的點(diǎn)擊數(shù) 4.2.3吞吐率圖G是個(gè)用戶訪問(wèn)時(shí)吞吐率，從圖中可以看出，同樣由于在每次提交數(shù)據(jù)時(shí)設(shè)定了集合點(diǎn)，吞吐率大都集中在每次填寫完表單、提交數(shù)據(jù)的時(shí)候。而前4個(gè)頁(yè)面由于需要下載圖片，因此吞吐率也相對(duì)較大。圖G：訪問(wèn)吞吐率4.2.4事務(wù)概要圖G是個(gè)模擬用戶的事務(wù)圖。圖G：事務(wù)圖說(shuō)明：事務(wù)分別對(duì)應(yīng)于每次點(diǎn)擊進(jìn)入下一個(gè)界面。順序依次是：init, login,

10、 config1,config2,config3,config4,config5,end4.2.5事務(wù)響應(yīng)時(shí)間圖G是模擬個(gè)并發(fā)用戶的設(shè)置的事務(wù)的響應(yīng)時(shí)間圖，從圖表中可以看出，在最后一次提交頁(yè)面時(shí)，反應(yīng)時(shí)間最長(zhǎng)。圖G：性能測(cè)試的事務(wù)響應(yīng)時(shí)間綜述上圖得到如下結(jié)論：l 并發(fā)用戶數(shù)：20l 通過(guò)交易總數(shù)：220l 總吞吐量：（bytes）5436861l 平均吞吐量（bytes/second）：22844l 總hits數(shù)：920l 每秒平均hits數(shù)：3.866事務(wù)時(shí)間響應(yīng)，見表G。表G：事務(wù)的響應(yīng)時(shí)間查 響應(yīng)時(shí)間差交易事務(wù)最大值 最小值平均值 變化率開始0000顯示職位列表查看職位詳細(xì)信息43.97

11、436.39937.5441.802填寫提交個(gè)人資料56.68749.68954.8681.677填寫提交工作經(jīng)歷42.15732.09436.2111.966填寫提交教育經(jīng)歷30.57719.28625.6402.262填寫提交基本技能17.73611.56314.9751.267填寫提交家庭成員12.4068.43611.0790.92填寫提交各人評(píng)價(jià)預(yù)覽簡(jiǎn)歷50.07848.23549.3270.468答題并提交結(jié)果6.8374.3155.650.568關(guān)閉網(wǎng)頁(yè)0000結(jié)束0000五、測(cè)試結(jié)果分析5.1 測(cè)試進(jìn)度和工作量度量 功能測(cè)試的進(jìn)度和工作量計(jì)劃與實(shí)際比較結(jié)果如下。5.1.1 進(jìn)度

12、度量表G4是測(cè)試進(jìn)度的計(jì)劃與實(shí)際結(jié)果比較。從度量數(shù)據(jù)看實(shí)際進(jìn)度與計(jì)劃基本相符。表G4：是測(cè)試進(jìn)度的度量數(shù)據(jù)任務(wù)計(jì)劃開始計(jì)劃結(jié)束實(shí)際開始實(shí)際結(jié)束測(cè)試計(jì)劃與設(shè)計(jì)2006-5-192006-5-262006-5-152006-6-1測(cè)試執(zhí)行2006-6-122006-7-22006-6-172006-7-1測(cè)試總結(jié)2006-7-32006-7-52006-6-302006-7-15.1.2 工作量度量 表G5是實(shí)際測(cè)試工作量的數(shù)據(jù)，與計(jì)劃基本相符。表G5：是測(cè)試工作量度量執(zhí)行任務(wù)開始時(shí)間結(jié)束時(shí)間工作量 （人時(shí)）測(cè)試計(jì)劃與設(shè)計(jì)2006-5-152006-6-120×3人時(shí)測(cè)試執(zhí)行2006-6

13、-172006-7-115×3人時(shí)測(cè)試總結(jié)2006-6-302006-7-16×3人時(shí)5.2 缺陷數(shù)據(jù)度量 表G6是測(cè)試過(guò)程缺陷數(shù)據(jù)的總結(jié)情況，從缺陷的嚴(yán)重程度看，嚴(yán)重和致命的缺陷占的比例較大，說(shuō)明系統(tǒng)還是存在嚴(yán)重問(wèn)題，需要重新修改，產(chǎn)品不能提交。從缺陷的類型看，功能缺陷、賦值缺陷和設(shè)計(jì)缺陷占比較大的比例，說(shuō)明設(shè)計(jì)和編碼過(guò)程中存在很大的問(wèn)題。表G6：測(cè)試過(guò)程的缺陷數(shù)據(jù)被測(cè)對(duì)象總數(shù)嚴(yán)重程度缺陷類型致命嚴(yán)重一般提示設(shè)計(jì)錯(cuò)誤賦值錯(cuò)誤算法錯(cuò)誤接口錯(cuò)誤功能錯(cuò)誤其它首頁(yè)30102210000填寫基本信息頁(yè)面90045000090填寫工作經(jīng)歷頁(yè)面11000010000填寫教育經(jīng)歷頁(yè)面11

14、000010000填寫工作技能頁(yè)面22000020000填寫家庭關(guān)系頁(yè)面66000060000填寫自我介紹頁(yè)面11000010000回答問(wèn)卷界面00000000000直接訪問(wèn)后續(xù)頁(yè)面808000800005.3 綜合數(shù)據(jù)分析 根據(jù)測(cè)試的結(jié)果可以得出如下的分析數(shù)據(jù)。用例執(zhí)行效率 執(zhí)行用例總數(shù) / 執(zhí)行總時(shí)間（小時(shí)） 128 / 45 2.84（個(gè)/小時(shí)）用例質(zhì)量 缺陷總數(shù) / 用例總數(shù) × 100 31 / 128 *100 24.2根據(jù)缺陷跟蹤結(jié)果得出缺陷的嚴(yán)重程序分布和的缺陷的類型分布，如圖G8和圖G9。缺陷嚴(yán)重程度分布餅圖： 圖G8：缺陷嚴(yán)重程度的分布缺陷類型分布餅圖： 圖G9：

15、缺陷類型分布圖可靠性現(xiàn)有系統(tǒng)的可靠性控制不夠嚴(yán)密，很多控制是通過(guò)頁(yè)面控制實(shí)現(xiàn)的，如果頁(yè)面控制失效，可以向數(shù)據(jù)庫(kù)插入數(shù)據(jù)，引發(fā)錯(cuò)誤?，F(xiàn)有系統(tǒng)的容錯(cuò)性不高，如果系統(tǒng)出現(xiàn)錯(cuò)誤，返回錯(cuò)誤類型為找不到頁(yè)面錯(cuò)誤，無(wú)法回復(fù)到出錯(cuò)前的狀態(tài)兼容性現(xiàn)有系統(tǒng)支持window下的IE瀏覽器和傲游瀏覽器，支持linux系統(tǒng)下的IE瀏覽器和火狐瀏覽器?，F(xiàn)有系統(tǒng)未進(jìn)行其他兼容性測(cè)試安全性現(xiàn)有系統(tǒng)控制了以下安全性問(wèn)題：ü 把某一個(gè)登錄后的頁(yè)面保存下來(lái)，不能單獨(dú)對(duì)其進(jìn)行操作不進(jìn)行登錄ü 直接輸入某一頁(yè)面的Url能否打開頁(yè)面并進(jìn)行操作不應(yīng)該允許。現(xiàn)有系統(tǒng)未控制以下安全性問(wèn)題：ü 用戶名和密碼應(yīng)對(duì)大小

16、寫敏感ü 登陸錯(cuò)誤次數(shù)限制5.4詳細(xì)測(cè)試結(jié)果1. 個(gè)人注冊(cè)功能測(cè)試如表序序號(hào)測(cè)試目的&先決條件測(cè)試輸入預(yù)期測(cè)試結(jié)果實(shí)際測(cè)試結(jié)果111目的：正確輸入，注冊(cè)能否操作成功用戶名：zhang(數(shù)字、字母、下劃線組成）密碼：123456 (長(zhǎng)度大于5的數(shù)字、字母、下劃線組成的字符串）重復(fù)密碼：123456（與密碼相同）密碼找回問(wèn)題：我是誰(shuí)？(字符串)密碼找回答案：張三(字符串)轉(zhuǎn)到成功頁(yè)面同預(yù)期測(cè)試結(jié)果2目的：檢測(cè)系統(tǒng)對(duì)用戶名的檢測(cè)程度2.1 不輸用戶名“用戶名不能為空”同預(yù)期測(cè)試結(jié)果2.2 輸入已存在用戶名:zhang用戶名已存在2.3 用戶名：123.abc“用戶名只能由數(shù)字字母下

17、劃線組成”2.4 用戶名：-12345“用戶名只能由數(shù)字字母下劃線組成”3目的：檢測(cè)系統(tǒng)對(duì)密碼輸入的檢測(cè)程度3.1 不輸入密碼“密碼不能為空且不能少于6位”同預(yù)期測(cè)試結(jié)果3.2 密碼：12345“密碼不能為空且不能少于6位”4目的：檢測(cè)系統(tǒng)對(duì)重復(fù)密碼輸入的檢測(cè)程度4.1 重復(fù)密碼：12345 “您兩次密碼輸入不一致”同預(yù)期測(cè)試結(jié)果4.2 密碼：_123abc重復(fù)密碼：_123ab “您兩次密碼輸入不一致”5目的：檢測(cè)系統(tǒng)對(duì)密碼找回問(wèn)題輸入的檢測(cè)程度不輸入密碼找回問(wèn)題“必填項(xiàng)不能為空”同預(yù)期測(cè)試結(jié)果6目的：檢測(cè)系統(tǒng)對(duì)密碼找回答案輸入的檢測(cè)程度不輸入密碼找回答案 “必填項(xiàng)不能為空”同預(yù)期測(cè)試結(jié)果5.5 測(cè)試結(jié)果評(píng)價(jià)測(cè)試結(jié)果顯示本系統(tǒng)已實(shí)現(xiàn)