澤眾軟件缺陷的嚴重程度上課講義

讓測試管理(guǎnlǐ)變輕松上海澤眾軟件(ruǎnjiàn)2008年9月第一頁，共80頁。軟件測試管理自動化測試工具選用自動化測試工具演示(yǎnshì)與實踐讓測試(cèshì)管理變輕松第二頁，共80頁。軟件測試過程(guòchéng)管理缺陷跟蹤與管理軟件測試管理(guǎnlǐ)第三頁，共80頁。軟件測試過程(guòchéng)管理缺陷跟蹤與管理軟件測試管理(guǎnlǐ)第四頁，共80頁。測試(cèshì)工作目的測試(cèshì)過程設計如何規(guī)劃測試(cèshì)測試(cèshì)策略軟件測試過程(guòchéng)管理第五頁，共80頁。在測試技術興起的早期，測試的目的主要有兩個：證明系統(tǒng)可用，滿足了需求；發(fā)現系統(tǒng)中的錯誤。隨著軟件技術的成熟，人們發(fā)現大量錯誤的根源在于需求和設計，因此現代測試的目的在于：證明系統(tǒng)可用，滿足了需求；發(fā)現系統(tǒng)中的錯誤；避免(bìmiǎn)錯誤的發(fā)生。軟件測試工作(gōngzuò)目的第六頁，共80頁。缺陷(quēxiàn)產生的原因第七頁，共80頁。測試工作(gōngzuò)的目的第八頁，共80頁。測試工作目的測試過程設計如何(rúhé)規(guī)劃測試測試策略軟件測試過程(guòchéng)管理第九頁，共80頁。項目(xiàngmù)過程流圖立項(lìxiànɡ)階段項目啟動(qǐdòng)階段項目計劃階段需求階段設計階段編碼階段集成測試階段系統(tǒng)測試階段項目結束單元測試測試過程測試預算測試團隊測試計劃測試需求測試用例設計測試執(zhí)行,缺陷管理測試執(zhí)行,缺陷管理軟件測試過程設計第十頁，共80頁。測試(cèshì)過程模型第十一頁，共80頁。測試計劃和實施(shíshī)的原則(一)窮盡測試是不可能的測試工作具有創(chuàng)造性和挑戰(zhàn)性測試是有風險的測試分析(fēnxī)、計劃和設計是非常重要的第十二頁，共80頁。測試計劃和實施(shíshī)的原則(二)測試者的工作態(tài)度非常重要時間和資源非常重要測試準備和時間表的重要性必須(bìxū)度量和跟蹤測試覆蓋度第十三頁，共80頁。測試工作目的測試過程設計如何(rúhé)規(guī)劃測試測試策略軟件測試過程(guòchéng)管理第十四頁，共80頁。如何(rúhé)規(guī)劃測試測試對象測試工作范圍項目(xiàngmù)限制制定測試策略測試資源和獲取第十五頁，共80頁。如何規(guī)劃(guīhuà)測試測試(cèshì)作為一個子項目來規(guī)劃第十六頁，共80頁。測試(cèshì)對象被測對象的特性基線被測對象的版本如何評價被測對象的質量(zhìliàng)？各個質量(zhìliàng)指標的優(yōu)先級是什麼？測試(cèshì)需求？第十七頁，共80頁。測試工作(gōngzuò)范圍確定測試(cèshì)工作范圍單元測試(cèshì)？集成測試(cèshì)？系統(tǒng)測試(cèshì)？第十八頁，共80頁。項目(xiàngmù)限制項目(xiàngmù)進度限制項目(xiàngmù)的成本限制資源的限制第十九頁，共80頁。制定(zhìdìng)測試策略技術方法和工具測試資源的估計和獲?。ㄈ肆?、設備、軟件工具）測試進度(jìndù)安排測試人員分工測試啟動準則測試結束準則與其他組的協(xié)同第二十頁，共80頁。測試(cèshì)資源和獲取測試資源(zīyuán)：人力設備軟件工具資源(zīyuán)獲取方式：人力設備和軟件工具第二十一頁，共80頁。測試工作目的(mùdì)測試過程設計如何規(guī)劃測試測試策略軟件測試過程(guòchéng)管理第二十二頁，共80頁。技術方法和工具測試進度安排測試人員的分工(fēngōng)測試的啟動準則測試結束準則與其他組的協(xié)同測試跟蹤測試(cèshì)策略第二十三頁，共80頁。技術(jìshù)方法和工具測試(cèshì)環(huán)境測試(cèshì)方法測試(cèshì)程序測試(cèshì)例設計方法第二十四頁，共80頁。測試進度(jìndù)安排測試(cèshì)工作階段的劃分：計劃設計檢查執(zhí)行報告分析如何保證測試(cèshì)計劃、設計、實現與開發(fā)任務的并行？PDCA模型(móxíng)第二十五頁，共80頁。測試人員的分工(fēngōng)測試任務分類測試管理測試設計測試實現(shíxiàn)測試執(zhí)行測試報告第二十六頁，共80頁。測試的啟動(qǐdòng)準則何時可以開始測試？在測試計劃階段就必須(bìxū)明確，而且是在整個項目組達成一致?？蓞⒖嫉臏蕜t：完成單元測試，單元測試符合結束準則建立代碼基線發(fā)布了測試版本通過版本基本驗證項第二十七頁，共80頁。測試結束(jiéshù)準則項目有預先定義的結束時間，因此測試工作也不可能無休止的進行?？蓞⒖嫉臏y試結束準則：所有需求都進行了驗證通過所有功能驗證無致命(zhìmìng)和嚴重的問題第二十八頁，共80頁。與其他(qítā)組的協(xié)同與開發(fā)組的協(xié)同與配置組的協(xié)同與質量經理的協(xié)同與項目(xiàngmù)各級管理者的協(xié)同第二十九頁，共80頁。組間協(xié)同(xiétóng)-與開發(fā)組測試組與開發(fā)組共同確認測試的范圍開發(fā)組為測試方案提供建議(jiànyì)測試組借鑒開發(fā)組的程序開發(fā)測試程序測試組與開發(fā)組共同確認測試開始和啟動準則測試組向開發(fā)組通報測試結果和分析測試組和開發(fā)組之前的版本傳遞經配置組完成。第三十頁，共80頁。組間協(xié)同(xiétóng)-配置組所有測試記錄提交配置組管理所有測試版本(bǎnběn)由配置組負責合成和發(fā)布第三十一頁，共80頁。組間協(xié)同(xiétóng)-質量經理與質量經理一起制定測試流程和規(guī)范質量經理審計測試的進行(jìnxíng)狀況第三十二頁，共80頁。組間協(xié)同(xiétóng)-各級管理者測試組與各級(ɡèjí)管理者共同確認測試的范圍各級(ɡèjí)管理者為測試方案提供建議測試組與各級(ɡèjí)管理者共同確認測試開始和啟動準則測試組向各級(ɡèjí)管理者通報測試結果和分析各級(ɡèjí)管理者監(jiān)控測試執(zhí)行進度和結果第三十三頁，共80頁。你計劃運行多少個測試用例？你實際運行了多少個測試用例？有多少個測試用例失敗了，在這些失敗的測試用例中，有多少個在錯誤得到修改后最終運行成功了？這些測試平均占用的運行時間比你預期的長還是短？你有沒有跳過一些測試？如果有的話，為什么？你的測試涵蓋了所有影響系統(tǒng)(xìtǒng)性能的重要事件嗎？你的測試小組是否要求提交一份關于所有測試結果（成功和失敗的）累計報告呢？如果是的話，你是否提交了這樣一份精確的報告呢？測試(cèshì)跟蹤第三十四頁，共80頁。測試用例工作(gōngzuò)表[項目名稱]測試包/用例狀態(tài)系統(tǒng)配置缺陷ID執(zhí)行人備注TFP功能測試內資企業(yè)開業(yè)PassA,B017Jack101………………………包匯總817……………………T：測試用例數量(shùliàng)；F：失敗數量(shùliàng)；P：成功數量(shùliàng)第三十五頁，共80頁。系統(tǒng)配置子表系統(tǒng)配置ID硬件信息操作系統(tǒng)軟件信息備注ACPU=6個內存=6G硬盤=100GHPUNIXWeblogic6.0BCPU=4個內存=4G硬盤=100GWindowsNTOracle817第三十六頁，共80頁。測試(cèshì)包工作表[項目名稱]測試包用例總數FailPass等待功能測試500104900性能測試10073……………總計1000100800100百分比10%80%10%第三十七頁，共80頁。擴展(kuòzhǎn)的測試用例工作表[項目名稱]負責人ID測試包/用例狀態(tài)系統(tǒng)配置缺陷ID負責人計劃日期實際日期計劃時長實際時長備注TFPJack2.000功能測試2.001內資企業(yè)開業(yè)PassA,B017Jack13/714/723101………………………包匯總817……………………第三十八頁，共80頁。軟件測試過程(guòchéng)管理缺陷跟蹤與管理軟件測試管理(guǎnlǐ)第三十九頁，共80頁。缺陷生命周期如何收集缺陷缺陷的優(yōu)先級缺陷的狀態(tài)缺陷的嚴重程度缺陷的類型缺陷報告缺陷趨勢(qūshì)缺陷統(tǒng)計缺陷跟蹤(gēnzōng)與管理第四十頁，共80頁。缺陷(quēxiàn)生命周期第四十一頁，共80頁。缺陷(quēxiàn)生命周期第四十二頁，共80頁。缺陷既指程序中存在的錯誤，例如(lìrú)語法錯誤、拼寫錯誤或者是一個不正確的程序語句，缺陷也指可能出現在設計中，甚至在需求、規(guī)格說明或其他的文檔中的種種錯誤。為了對缺陷進行管理，首先應對缺陷進行分類，通過對缺陷進行分類，可以迅速找出哪一類缺陷的問題最大，然后集中精力預防和排除這一類缺陷。這正是缺陷管理的關鍵，一旦這幾類缺陷得到控制，再進一步找到新的容易引起問題的幾類缺陷上。如何收集(shōují)缺陷第四十三頁，共80頁。缺陷(quēxiàn)的優(yōu)先級代碼(dàimǎ)解決(jiějué)優(yōu)先級描述1立即解決ResolveImmediately缺陷必須被立即解決2正常排隊NormalQueue缺陷需要正常排隊等待修復或列入軟件發(fā)布清單3不緊急NotUrgent缺陷可以在有時間允許時被糾正第四十四頁，共80頁。缺陷(quēxiàn)的狀態(tài)代碼(dàimǎ)缺陷(quēxiàn)狀態(tài)描述1已提交Submitted已提交的缺陷2已打開Opened已確認的缺陷，等待修復3已拒絕Rejected拒絕提交的缺陷，不需要修復或不是缺陷4已解決Resolved缺陷已被修復5已關閉Closed被修復的缺陷被確認，將其關閉第四十五頁，共80頁。缺陷(quēxiàn)的嚴重程度代碼(dàimǎ)缺陷嚴重(yánzhòng)等級描述1致命缺陷Critical不能執(zhí)行正常工作功能或重要功能危及生命或財產2嚴重缺陷Major嚴重影響系統(tǒng)要求或基本功能的實現且沒有辦法更正3普通缺陷Minor影響系統(tǒng)要求或基本功能的實現但有辦法更正4輕微缺陷Cosmetic是操作者遇到麻煩或不方便，但不影響執(zhí)行功能5其他缺陷Other其它錯誤，例如文字錯誤、布局不合理等第四十六頁，共80頁。按錯誤的影響和后果(hòuguǒ)分類按錯誤的性質和范圍分類缺陷(quēxiàn)的類型第四十七頁，共80頁。按錯誤(cuòwù)的影響和后果分類其他錯誤輕微錯誤普通錯誤嚴重(yánzhòng)錯誤非常嚴重(yánzhòng)的錯誤致命錯誤第四十八頁，共80頁。按錯誤(cuòwù)的性質和范圍分類功能錯誤系統(tǒng)錯誤加工(jiāgōng)錯誤數據錯誤代碼錯誤第四十九頁，共80頁。功能(gōngnéng)錯誤規(guī)格說明錯誤(cuòwù)功能錯誤(cuòwù)測試錯誤(cuòwù)測試標準引起的錯誤(cuòwù)第五十頁，共80頁。外部接口錯誤內部接口錯誤硬件結構錯誤操作系統(tǒng)錯誤軟件結構錯誤控制(kòngzhì)與順序錯誤資源管理錯誤系統(tǒng)(xìtǒng)錯誤第五十一頁，共80頁。算術與操作錯誤初始化錯誤控制(kòngzhì)和次序錯誤靜態(tài)邏輯錯誤加工(jiāgōng)錯誤第五十二頁，共80頁。動態(tài)數據錯誤靜態(tài)數據錯誤數據內容(nèiróng)錯誤數據結構錯誤數據屬性錯誤數據(shùjù)錯誤第五十三頁，共80頁。語法錯誤打字錯誤對語句(yǔjù)或指令不正確理解所產生的錯誤代碼(dàimǎ)錯誤第五十四頁，共80頁。按軟件生存期階段(jiēduàn)分類問題定義（需求分析）錯誤規(guī)格說明(shuōmíng)錯誤設計錯誤編碼錯誤第五十五頁，共80頁。問題(wèntí)定義（需求分析）錯誤它們是在軟件定義階段(jiēduàn)，分析員研究用戶的要求后所編寫的文檔中出現的錯誤。換句話說，這類錯誤是由于問題定義不滿足用戶的要求而導致的錯誤。第五十六頁，共80頁。不一致性錯誤冗余性錯誤不完整性錯誤不可(bùkě)行錯誤不可(bùkě)測試錯誤規(guī)格(guīgé)說明錯誤第五十七頁，共80頁。設計(shèjì)不完全錯誤算法錯誤模塊接口錯誤控制邏輯錯誤數據結構錯誤設計(shèjì)錯誤第五十八頁，共80頁。編碼過程中的錯誤是多種多樣的，大體可歸為以下幾種：數據說明錯、數據使用錯、計算(jìsuàn)錯、比較錯、控制流錯、界面錯、輸入／輸出錯，及其它的錯誤。編碼(biānmǎ)錯誤第五十九頁，共80頁。缺陷報告(bàogào)的目的摘要語言可重現的步驟測試數據截屏嚴重程序/優(yōu)先級別日志其他信息缺陷(quēxiàn)報告第六十頁，共80頁。缺陷(quēxiàn)趨勢Open&Close圖形缺陷遺漏(yílòu)圖形全部解決圖形缺陷發(fā)現趨勢圖形第六十一頁，共80頁。Open&Close圖形(túxíng)第六十二頁，共80頁。理想(lǐxiǎng)Open&Close圖形第六十三頁，共80頁。無休止的Open&Close圖形(túxíng)第六十四頁，共80頁。缺陷遺漏(yílòu)圖形第六十五頁，共80頁。全部解決(jiějué)圖形第六十六頁，共80頁。缺陷(quēxiàn)發(fā)現趨勢圖形第六十七頁，共80頁。缺陷(quēxiàn)統(tǒng)計缺陷嚴重程度(chéngdù)分布統(tǒng)計模塊-開發(fā)員-測試員-缺陷統(tǒng)計模塊缺陷率統(tǒng)計項目缺陷率統(tǒng)計第六十八頁，共80頁。缺陷嚴重程度分布(fēnbù)統(tǒng)計第六十九頁，共80頁。模塊-開發(fā)員-測試員-缺陷(quēxiàn)統(tǒng)計第七十頁，共80頁。模塊(mókuài)代號缺陷(quēxiàn)數N(KLOC)M1001165M10021912M1003307M10046220M1005211M1006143M100762缺陷(quēxiàn)數/KLOC3.21.64.23.1214.735年以下的工程師：缺陷數/KLOC>1212年以下的工程師：缺陷數/KLOC<6模塊缺陷率統(tǒng)計第七十一頁，共80頁。項目(xiàngmù)缺陷率統(tǒng)計第七十二頁，共80頁。自動化測試工具優(yōu)缺點自動