《測(cè)試管理》資料課件

測(cè)試管理TTCP質(zhì)量管理通道分會(huì)2005.5測(cè)試管理TTCP質(zhì)量管理通道分會(huì)1自我介紹張輝Hosea無(wú)線產(chǎn)品部-〉質(zhì)量管理組自我介紹張輝2概述測(cè)試過(guò)程管理成功的測(cè)試測(cè)試階段的有效性CMMI定義階段重點(diǎn)測(cè)試資源管理統(tǒng)計(jì)分析和決策支持概述3測(cè)試管理的目的對(duì)產(chǎn)品的整個(gè)測(cè)試流程進(jìn)行控制和管理提高公司軟件開發(fā)尤其是產(chǎn)品測(cè)試的管理水平灌輸和強(qiáng)化企業(yè)的管理理念確保公司開發(fā)產(chǎn)品的質(zhì)量進(jìn)一步提高公司的市場(chǎng)競(jìng)爭(zhēng)能力。測(cè)試管理的目的對(duì)產(chǎn)品的整個(gè)測(cè)試流程進(jìn)行控制和管理4測(cè)試管理的內(nèi)容測(cè)試流程控制和管理測(cè)試資源的管理測(cè)試產(chǎn)出，包括所有的過(guò)程文檔，缺陷等測(cè)試資源[人、工具/環(huán)境]統(tǒng)計(jì)分析和決策支持產(chǎn)品開發(fā)和測(cè)試的進(jìn)度產(chǎn)品設(shè)計(jì)、開發(fā)和測(cè)試的質(zhì)量對(duì)PMM、DE、TE的工作能力和工作效果進(jìn)行考核測(cè)試管理的內(nèi)容測(cè)試流程控制和管理5概述測(cè)試過(guò)程管理成功的測(cè)試測(cè)試階段的有效性CMMI定義階段重點(diǎn)測(cè)試資源管理統(tǒng)計(jì)分析和決策支持概述6軟件測(cè)試失效分析圖測(cè)試失效How?單元測(cè)試技術(shù)性能測(cè)試技術(shù)功能測(cè)試技術(shù)回歸測(cè)試技術(shù)問題分析能力缺少工具支持缺陷管理技術(shù)復(fù)用測(cè)試用力少Build后測(cè)試介入項(xiàng)目規(guī)劃不合理when項(xiàng)目組習(xí)慣開發(fā)測(cè)試時(shí)間太少缺少測(cè)試規(guī)范不協(xié)調(diào)測(cè)試與開發(fā)測(cè)試階段不清資源緊張公司測(cè)試人力What?與用戶缺少溝通測(cè)試范圍不清質(zhì)量目標(biāo)不清缺少測(cè)試標(biāo)準(zhǔn)測(cè)試對(duì)象模糊測(cè)試需求不明對(duì)用戶使用環(huán)境Where?統(tǒng)一的支持平臺(tái)開發(fā)測(cè)試缺乏缺乏了解了解開發(fā)環(huán)境缺乏按時(shí)到位測(cè)試資源不能測(cè)試開發(fā)共用公司資源緊張Who?與開發(fā)敵對(duì)與開發(fā)交流不暢同開發(fā)接口不明與QA交流不暢人員變更開發(fā)經(jīng)驗(yàn)不足測(cè)試團(tuán)隊(duì)協(xié)作測(cè)試職責(zé)不清測(cè)試經(jīng)驗(yàn)不足測(cè)試“全才”人員不足軟件測(cè)試失效分析圖測(cè)試How?單元測(cè)試技術(shù)性能測(cè)試技術(shù)功能測(cè)7改善和提高測(cè)試成功率參與測(cè)試的人員需要什么測(cè)試技能？怎樣提高測(cè)試人員的溝通能力？提升測(cè)試的團(tuán)隊(duì)協(xié)作能力？各類型軟件的測(cè)試特點(diǎn)質(zhì)量特性測(cè)試技術(shù)測(cè)試工具問題分析技術(shù)合理整合測(cè)試的資源/技術(shù)/流程/工具等合理規(guī)劃軟件測(cè)試、過(guò)程的實(shí)施指南等怎樣改善過(guò)程？人技術(shù)過(guò)程質(zhì)量目標(biāo)改善和提高測(cè)試成功率參與測(cè)試的人員需要什么測(cè)試技能？各類型8成功測(cè)試的定義成功的測(cè)試＝{有效的測(cè)試，高效的測(cè)試}有效的測(cè)試：能夠發(fā)現(xiàn)大量有效問題，并準(zhǔn)確定位高效的測(cè)試：一定時(shí)間和資源下，發(fā)現(xiàn)的有效問題多決定測(cè)試成功的因素：『質(zhì)量目標(biāo)、測(cè)試需求、測(cè)試策略、測(cè)試技術(shù)、測(cè)試人員、測(cè)試過(guò)程、測(cè)試環(huán)境』成功測(cè)試的定義成功的測(cè)試＝{有效的測(cè)試，高效的測(cè)試}9測(cè)試成功因素的分析影響測(cè)試因素優(yōu)先級(jí)質(zhì)量目標(biāo)（測(cè)試要達(dá)到什么目的）？測(cè)試需求（測(cè)試些什么？）？測(cè)試策略（怎樣測(cè)？）？測(cè)試工具技術(shù)（怎樣實(shí)施？）？測(cè)試過(guò)程（測(cè)試規(guī)程與測(cè)試過(guò)程跟蹤）？測(cè)試人員？測(cè)試環(huán)境（測(cè)試軟硬件環(huán)境）？測(cè)試成功因素的分析影響測(cè)試因素優(yōu)先級(jí)質(zhì)量目標(biāo)（測(cè)試要達(dá)到什么10明確的質(zhì)量目標(biāo)質(zhì)量目標(biāo)：項(xiàng)目產(chǎn)品要求達(dá)到的質(zhì)量要求測(cè)試停止的標(biāo)準(zhǔn)，測(cè)試通過(guò)的依據(jù)PM、DE、TE要有一致的質(zhì)量目標(biāo)質(zhì)量目標(biāo)要具備：明確性一致性優(yōu)先級(jí)的定義明確的質(zhì)量目標(biāo)質(zhì)量目標(biāo)：項(xiàng)目產(chǎn)品要求達(dá)到的質(zhì)量要求11明確的質(zhì)量目標(biāo)輸入SOWSRS“銀聯(lián)”規(guī)范1.SOW已得到認(rèn)證2.相關(guān)人員到位1.確定質(zhì)量指標(biāo)2.明確質(zhì)量規(guī)范和標(biāo)準(zhǔn)1.質(zhì)量指標(biāo)通過(guò)有效性檢查2.質(zhì)量指標(biāo)得到認(rèn)可1.可度量質(zhì)量目標(biāo)信息2.明確質(zhì)量目標(biāo)的活動(dòng)狀態(tài)的信息質(zhì)量指標(biāo)輸出質(zhì)量目標(biāo)的有效性準(zhǔn)則：1.明確性：確定的、可操作的、可跟蹤的、無(wú)二義性的、能量化的就量化2.一致性：質(zhì)量目標(biāo)是得到所有相關(guān)人員認(rèn)可的3.優(yōu)先級(jí)（可選）：在質(zhì)量目標(biāo)中給出優(yōu)先級(jí)排序，明確給出重點(diǎn)，這可根據(jù)項(xiàng)目實(shí)際情況靈活應(yīng)用。質(zhì)量目標(biāo)（銀聯(lián)項(xiàng)目事例）：1.性能：優(yōu)先級(jí)－高。最大每秒處理量大于“XXX”；”YYY”交易量情況下交易相應(yīng)時(shí)間小于“XXX”；并發(fā)處理用戶數(shù)不低于“XXX”；異地交易每秒處理交易量大于“XXX”等等；2.可靠性：優(yōu)先級(jí)－高。具體的質(zhì)量目標(biāo)可以是對(duì)隊(duì)列阻塞具有恢復(fù)能力；對(duì)通訊故障有恢復(fù)能力；系統(tǒng)硬件故障有數(shù)據(jù)安全管理和及數(shù)據(jù)恢復(fù)能力；系統(tǒng)持續(xù)正常工作時(shí)間大于“XXX”,系統(tǒng)在“YYY”交易量的情況下的持續(xù)正常工作時(shí)間大于“YYY”等；3.功能：系統(tǒng)具有“XXX”級(jí)的系統(tǒng)安全能力；系統(tǒng)具有“XXX”級(jí)的數(shù)據(jù)安全能力；系統(tǒng)功能100％運(yùn)轉(zhuǎn)等；4.可移植性：新老系統(tǒng)具有數(shù)據(jù)轉(zhuǎn)換能力。系統(tǒng)的可用性（滿足性能和可靠性前提的正常功能）是首要質(zhì)量目標(biāo)明確的質(zhì)量目標(biāo)輸入SOW1.SOW已得到認(rèn)證1.確定質(zhì)量指標(biāo)12有效的測(cè)試需求測(cè)試需求：明確測(cè)試需求，測(cè)試內(nèi)容『體現(xiàn)為軟件測(cè)試大綱，是一切測(cè)試工作的基礎(chǔ)，可以包括在測(cè)試計(jì)劃中』項(xiàng)目需求——系統(tǒng)能作什么測(cè)試需求——系統(tǒng)能做什么&不能做什么獲取不同層次的“測(cè)試需求”1.質(zhì)量要求：功能、性能、可靠性、安全性、操作性和維護(hù)2.用戶使用場(chǎng)景：驗(yàn)證軟件是正確的3.系統(tǒng)使用場(chǎng)景：綜合負(fù)載的系統(tǒng)表現(xiàn)有效的測(cè)試需求測(cè)試需求：明確測(cè)試需求，測(cè)試內(nèi)容13有效的測(cè)試策略測(cè)試策略：明確測(cè)試階段，測(cè)試類型測(cè)試內(nèi)容對(duì)需求的覆蓋測(cè)試內(nèi)容的優(yōu)先等級(jí)的劃分測(cè)試內(nèi)容重要程度的確定測(cè)試類型的確定測(cè)試階段的確定有效的測(cè)試策略測(cè)試策略：明確測(cè)試階段，測(cè)試類型14概述測(cè)試過(guò)程管理成功的測(cè)試測(cè)試階段的有效性CMMI定義階段重點(diǎn)測(cè)試資源管理統(tǒng)計(jì)分析和決策支持概述15測(cè)試計(jì)劃測(cè)試計(jì)劃常見的誤區(qū)：測(cè)試工作量太傾向于功能測(cè)試不太重視配置測(cè)試把壓力測(cè)試和負(fù)載測(cè)試總是放在“最后一分鐘”通常不進(jìn)行文檔測(cè)試通常不測(cè)試安裝過(guò)程過(guò)度依賴于Beta測(cè)試測(cè)試任務(wù)串行進(jìn)行沒有有效識(shí)別出項(xiàng)目的風(fēng)險(xiǎn)區(qū)域測(cè)試計(jì)劃測(cè)試計(jì)劃常見的誤區(qū)：16測(cè)試用例資產(chǎn)管理粒度的把握『實(shí)例』設(shè)計(jì)的難點(diǎn)設(shè)計(jì)的原則測(cè)試用例的有效性：1.無(wú)二義性，測(cè)試用例的描述要準(zhǔn)確，不同測(cè)試人員對(duì)其無(wú)二義性的理解。2.完整的測(cè)試步驟；3.完整的數(shù)據(jù)；4.適當(dāng)?shù)牧６?，根?jù)情況決定測(cè)試用例力度的粗細(xì)，過(guò)粗的測(cè)試用例易流于形式，過(guò)細(xì)的測(cè)試用例對(duì)于一定場(chǎng)景的測(cè)試組合太復(fù)雜，而且不易復(fù)用。5.可重復(fù)性，在后續(xù)測(cè)試中可復(fù)用。測(cè)試用例資產(chǎn)管理粒度的把握設(shè)計(jì)的難點(diǎn)設(shè)計(jì)的原則測(cè)試用例的有效17概述測(cè)試過(guò)程管理成功的測(cè)試測(cè)試階段的有效性CMMI的定義階段重點(diǎn)測(cè)試資源管理統(tǒng)計(jì)分析和決策支持概述18CMM中的測(cè)試過(guò)程約定：項(xiàng)目遵循組織方針實(shí)施軟件產(chǎn)品工程活動(dòng)前提條件： 1、為實(shí)施軟件產(chǎn)品工程活動(dòng)提供足夠的資源和資金 2、軟件工程技術(shù)人員接受相應(yīng)的技術(shù)培訓(xùn) 3、軟件工程技術(shù)人員的接受軟件工程規(guī)范的培訓(xùn) 4、項(xiàng)目經(jīng)理或其他管理人員接受項(xiàng)目技術(shù)內(nèi)容的宣介驗(yàn)證： 1、高層定期評(píng)審產(chǎn)品工程活動(dòng) 2、PM定期或事件驅(qū)動(dòng)評(píng)審軟件產(chǎn)品工程活動(dòng) 3、QA組評(píng)審軟件產(chǎn)品工程活動(dòng)、審核軟件產(chǎn)品工程產(chǎn)品、 報(bào)告質(zhì)量保證結(jié)果度量與分析： 1、應(yīng)用度量反映產(chǎn)品工程活動(dòng)的狀態(tài)CMM中的測(cè)試過(guò)程約定：項(xiàng)目遵循組織方針實(shí)施軟件產(chǎn)品工程活動(dòng)194、（評(píng)審測(cè)試標(biāo)準(zhǔn)，以及系統(tǒng)達(dá)到的各個(gè)層次可測(cè)試狀態(tài)，測(cè)試計(jì)劃/規(guī)程/測(cè)試用例同行評(píng)審）3、（評(píng)審設(shè)計(jì)，評(píng)審和測(cè)試代碼單元）2、（評(píng)審設(shè)計(jì)標(biāo)準(zhǔn)，評(píng)審需求，評(píng)審體系結(jié)構(gòu)，設(shè)計(jì)同行評(píng)審）CMM中的測(cè)試過(guò)程1、（評(píng)審軟件需求，評(píng)審軟件需求問題，需求規(guī)格說(shuō)明進(jìn)行同行評(píng)審。客戶/用戶評(píng)審需求）7、（文檔用戶評(píng)審文檔，同行評(píng)審，最終文檔評(píng)審）6、（用戶評(píng)審驗(yàn)收測(cè)試的測(cè)試用例）5、（評(píng)審測(cè)試用例和測(cè)試規(guī)程）活動(dòng)：1、需求分析2、系統(tǒng)設(shè)計(jì)3、編碼/構(gòu)造系統(tǒng)4、測(cè)試5、計(jì)劃和執(zhí)行集成測(cè)試6、計(jì)劃和執(zhí)行系統(tǒng)測(cè)試和驗(yàn)收測(cè)試7、編寫相關(guān)文檔4、（評(píng)審測(cè)試標(biāo)準(zhǔn)，以及系統(tǒng)達(dá)到的各個(gè)層次可測(cè)試狀態(tài)，3、（20CMMI中的測(cè)試內(nèi)容確定測(cè)試的產(chǎn)品建立測(cè)試環(huán)境測(cè)試環(huán)境測(cè)試規(guī)程和指標(biāo)測(cè)試的產(chǎn)品列表準(zhǔn)備測(cè)試建立測(cè)試規(guī)程和指標(biāo)CMMI中的測(cè)試內(nèi)容確定測(cè)試建立測(cè)測(cè)試環(huán)境準(zhǔn)備測(cè)試建立測(cè)21CMMI中的測(cè)試內(nèi)容實(shí)施測(cè)試分析測(cè)試結(jié)果測(cè)試報(bào)告測(cè)試結(jié)果交叉索引矩陣運(yùn)行日志操作演示缺陷報(bào)告變更請(qǐng)求測(cè)試產(chǎn)品和產(chǎn)品部件CMMI中的測(cè)試內(nèi)容實(shí)施分析測(cè)測(cè)試報(bào)告缺陷報(bào)告測(cè)試產(chǎn)品和產(chǎn)品22實(shí)用軟件的測(cè)試過(guò)程設(shè)計(jì)測(cè)試測(cè)試跟蹤與監(jiān)督明確質(zhì)量目標(biāo)計(jì)劃測(cè)試解決問題評(píng)價(jià)測(cè)試執(zhí)行測(cè)試實(shí)現(xiàn)測(cè)試測(cè)試技術(shù)內(nèi)容測(cè)試管理內(nèi)容實(shí)用軟件的測(cè)試過(guò)程設(shè)計(jì)測(cè)試測(cè)試跟蹤與監(jiān)督明確質(zhì)量目標(biāo)計(jì)劃測(cè)試23概述測(cè)試過(guò)程管理成功的測(cè)試測(cè)試階段的有效性CMMI的定義階段重點(diǎn)測(cè)試資源管理統(tǒng)計(jì)分析和決策支持概述24計(jì)劃測(cè)試－明確測(cè)試過(guò)程輸入項(xiàng)目計(jì)劃項(xiàng)目生命周期模型項(xiàng)目狀態(tài)報(bào)告項(xiàng)目質(zhì)量目標(biāo)1.項(xiàng)目生命周期模型得到認(rèn)可2.模型選擇理由明確1.根據(jù)項(xiàng)目生命周期模型選擇測(cè)試過(guò)程模型1.測(cè)試過(guò)程通過(guò)有效性檢查2.質(zhì)量指標(biāo)得到認(rèn)可1.測(cè)試過(guò)程活動(dòng)數(shù)量（WBS）;2.擬定測(cè)試過(guò)程的狀態(tài)；項(xiàng)目測(cè)試過(guò)程輸出質(zhì)量目標(biāo)的有效性準(zhǔn)則：1.可操作性，在項(xiàng)目資源等約束條件下可操作。2.可跟蹤性，實(shí)際測(cè)試過(guò)程中的所有活動(dòng)都應(yīng)該可以追溯到測(cè)試過(guò)程中來(lái)3.一致性：測(cè)試過(guò)程內(nèi)部的前后一致，各個(gè)測(cè)試迭代過(guò)程的一致：測(cè)試過(guò)程與其他項(xiàng)目過(guò)程的接口一致。不同項(xiàng)目模型下的測(cè)試過(guò)程：1.瀑布模型下：測(cè)試過(guò)程具有明顯的單向性，需要測(cè)試前期準(zhǔn)備，往往執(zhí)行測(cè)試和分析測(cè)試結(jié)果兩個(gè)過(guò)程階段持續(xù)的時(shí)間長(zhǎng)，在測(cè)試過(guò)程的管理上更應(yīng)注重測(cè)試后期各種資源的跟蹤；2.螺旋模型下：后期測(cè)試重點(diǎn)是性能測(cè)試，而且是在廣泛復(fù)用前期測(cè)試用例的基礎(chǔ)上。3.迭代/增量模型下：增量測(cè)試主要體現(xiàn)在功能上，對(duì)于性能和可靠性是整體系統(tǒng)的行為，必須是在整體系統(tǒng)或某個(gè)相對(duì)獨(dú)立的子系統(tǒng)完成后才能進(jìn)行計(jì)劃測(cè)試－明確測(cè)試過(guò)程輸入項(xiàng)目計(jì)劃1.項(xiàng)目生命周期模型得到認(rèn)25項(xiàng)目計(jì)劃項(xiàng)目需求項(xiàng)目質(zhì)量目標(biāo)項(xiàng)目測(cè)試過(guò)程測(cè)試計(jì)劃的有效性準(zhǔn)則：1.測(cè)試類型的完整性，軟件測(cè)試、環(huán)境測(cè)試和失效測(cè)試滿足“可用性”的質(zhì)量目標(biāo)。2.測(cè)試內(nèi)容的合理性，給出測(cè)試內(nèi)容的優(yōu)先級(jí)排序；3.測(cè)試技術(shù)的可行性：關(guān)鍵的測(cè)試技術(shù)、測(cè)試方法和測(cè)試工具要有充分的可行性試驗(yàn)數(shù)據(jù)或歷史證據(jù)4.測(cè)試資源可獲取測(cè)試大綱：1.測(cè)試的內(nèi)容。測(cè)試大綱是測(cè)試組通過(guò)對(duì)項(xiàng)目需求規(guī)格說(shuō)明書的評(píng)審，以及業(yè)務(wù)人員、開發(fā)人員和測(cè)試人員共同討論，從業(yè)務(wù)、技術(shù)、集成、測(cè)試、切換等多個(gè)角度來(lái)得到的。測(cè)試組一定要參與對(duì)需求的評(píng)審，不僅從測(cè)試的角度評(píng)審項(xiàng)目需求的可測(cè)試性，而且整理出測(cè)試大綱。。。測(cè)試計(jì)劃：1.測(cè)試策略/2.資源分配計(jì)劃測(cè)試－－制定測(cè)試計(jì)劃輸入1.項(xiàng)目測(cè)試過(guò)程已定義2.項(xiàng)目需求已認(rèn)可1.界定測(cè)試工作范圍2.制定測(cè)試策略3.制定測(cè)試大綱4.估計(jì)/5.風(fēng)險(xiǎn)分析6.確定測(cè)試角色和職責(zé)7.編寫并制定測(cè)試計(jì)劃1.測(cè)試計(jì)劃通過(guò)有效性檢查2.測(cè)試哦計(jì)劃通過(guò)組內(nèi)和組間的評(píng)審1.測(cè)試范圍估計(jì)、工作量估計(jì)、資源估計(jì)和進(jìn)度；2.制定測(cè)試計(jì)劃過(guò)程的狀態(tài)測(cè)試計(jì)劃測(cè)試大綱輸出項(xiàng)目計(jì)劃測(cè)試計(jì)劃的有效性準(zhǔn)則：測(cè)試大綱：計(jì)劃測(cè)試－－制定測(cè)試26跟蹤與監(jiān)督測(cè)試測(cè)試計(jì)劃變更請(qǐng)求測(cè)試過(guò)程狀態(tài)的有效性準(zhǔn)則：1.及時(shí)性，及時(shí)反映測(cè)試過(guò)程中的狀態(tài)，不要滯后2.測(cè)試過(guò)程狀態(tài)的準(zhǔn)確性，避免上報(bào)的測(cè)試狀態(tài)信息不真，可以結(jié)合問題庫(kù)中的客觀內(nèi)容與測(cè)試組員匯報(bào)的主觀信息綜合分析測(cè)試跟蹤對(duì)象：1.所有測(cè)試活動(dòng)的狀態(tài)和測(cè)試產(chǎn)物的狀態(tài)；2.測(cè)試估計(jì)和重新估計(jì)（規(guī)模、工作量、人員、資源、成本、進(jìn)度－覆蓋）；3.測(cè)試過(guò)程中的問題狀態(tài)；4.測(cè)試風(fēng)險(xiǎn)輸入1.測(cè)試計(jì)劃基線化2.變更有記錄1.跟蹤并記錄項(xiàng)目數(shù)據(jù)2.測(cè)試過(guò)程信息溝通3.測(cè)試問題管理4.測(cè)試過(guò)程評(píng)價(jià)與改進(jìn)6.更新測(cè)試計(jì)劃1.測(cè)試狀態(tài)通過(guò)有效性檢查1.測(cè)試實(shí)際工作量、資源和進(jìn)度的信息2.跟蹤測(cè)試過(guò)程的管理活動(dòng)狀態(tài)測(cè)試計(jì)劃測(cè)試狀態(tài)測(cè)試變更輸出跟蹤與監(jiān)督測(cè)試測(cè)試計(jì)劃測(cè)試過(guò)程狀態(tài)的有效性準(zhǔn)則：測(cè)試跟蹤對(duì)象27設(shè)計(jì)測(cè)試測(cè)試計(jì)劃測(cè)試大綱項(xiàng)目設(shè)計(jì)關(guān)鍵技術(shù)：1.覆蓋分析法(分析測(cè)試用例對(duì)測(cè)試大綱的覆蓋情況)/邊界值分析/等價(jià)類劃分/結(jié)構(gòu)覆蓋分析/接口覆蓋分析工具支持：1.測(cè)試用例設(shè)計(jì)工具，QARun/Load,WinRunner/LoadRunner2.測(cè)試用例管理工具，QADirector/TestDirector測(cè)試用例的有效性準(zhǔn)則：1.無(wú)二義性，測(cè)試用例的描述要準(zhǔn)確，不同測(cè)試人員對(duì)其無(wú)二義性的理解；2.完整的測(cè)試步驟；3.完整的數(shù)據(jù)；4.適當(dāng)?shù)牧６?，根?jù)情況決定測(cè)試用例粒度的粗細(xì)，過(guò)粗的測(cè)試用例易流于形式，過(guò)細(xì)的測(cè)試用例對(duì)于一定場(chǎng)景的測(cè)試組合太復(fù)雜，而且不易復(fù)用。5.可重復(fù)性，在后續(xù)測(cè)試中可復(fù)用輸入1.測(cè)試計(jì)劃基線化2.測(cè)試大綱基線化3.設(shè)計(jì)通過(guò)評(píng)審1.設(shè)計(jì)測(cè)試用例2.設(shè)計(jì)測(cè)試用例執(zhí)行規(guī)程和步驟3.設(shè)定測(cè)試完成的覆蓋指標(biāo)1.測(cè)試用例通過(guò)有效性檢查1.測(cè)試用例的數(shù)量2.跟蹤測(cè)試用例設(shè)計(jì)的狀態(tài)測(cè)試用例輸出設(shè)計(jì)測(cè)試測(cè)試計(jì)劃關(guān)鍵技術(shù)：測(cè)試用例的有效性準(zhǔn)則：輸入1.測(cè)試28實(shí)現(xiàn)測(cè)試（測(cè)試開發(fā)）測(cè)試大綱測(cè)試用例工具支持（舉例）：QARun/Load,WinRunner/LoadRunner都有二次開發(fā)能力，QALoad開發(fā)更是有2種方法，一種是基于錄制、回放原理進(jìn)行，通過(guò)編輯測(cè)試代碼，配置數(shù)據(jù)池的方式完成性能測(cè)試；另一種是基于QAload提供的庫(kù)函數(shù)進(jìn)行開發(fā)，測(cè)試人員自行編寫測(cè)試腳本，并配置符合業(yè)務(wù)實(shí)際情況的數(shù)據(jù)池。前一種方式比較簡(jiǎn)單，但無(wú)法完成對(duì)系統(tǒng)的深層測(cè)試：后者有大量的開發(fā)工作，技術(shù)難度高，但是非常靈活，能夠?qū)ο到y(tǒng)進(jìn)行深層的測(cè)試測(cè)試部件、腳本的有效性準(zhǔn)則：1.支持部件的正確性和覆蓋性，部件本身應(yīng)該正確，無(wú)異常錯(cuò)誤，并且覆蓋被測(cè)對(duì)象所有的接口狀態(tài)。2.腳本的高效性，腳本執(zhí)行效率應(yīng)該高，而且結(jié)果明確。輸入1.測(cè)試用例相對(duì)測(cè)試大綱通過(guò)冗余檢查1.生成測(cè)試腳本2.設(shè)計(jì)測(cè)試支持部件3.實(shí)現(xiàn)測(cè)試支持部件4.測(cè)試工具開發(fā)設(shè)計(jì)1.測(cè)試部件通過(guò)有效性檢查2.測(cè)試腳本通過(guò)有效性檢查1.測(cè)試部件的數(shù)量、狀態(tài)。測(cè)試腳本測(cè)試部件輸出實(shí)現(xiàn)測(cè)試（測(cè)試開發(fā)）測(cè)試大綱工具支持（舉例）：測(cè)試部件、腳本29執(zhí)行測(cè)試確認(rèn)測(cè)試、驗(yàn)收測(cè)試、α測(cè)試、β測(cè)試等回歸測(cè)試功能域測(cè)試接收測(cè)試系統(tǒng)測(cè)試集成測(cè)試執(zhí)行測(cè)試確認(rèn)測(cè)試、驗(yàn)收測(cè)試、α測(cè)試、β測(cè)試等回歸測(cè)試功能域測(cè)30評(píng)價(jià)測(cè)試問題報(bào)告結(jié)果報(bào)告軟件問題分析（舉例）：1.軟件問題密度分布，給出軟件問題相對(duì)軟件問題所在的區(qū)域、軟件問題產(chǎn)生的過(guò)程階段的分布情況。80/20表現(xiàn)2.軟件問題修改率/3.軟件問題發(fā)現(xiàn)率4.列出延期的軟件問題5.列出處于“打開”狀態(tài)和“待驗(yàn)”狀態(tài)的軟件問題6.嚴(yán)重問題的生命周期分析/7.漏出的軟件問題分布分析報(bào)告、評(píng)價(jià)報(bào)告有效性準(zhǔn)則：可追溯性1.分析結(jié)果可回溯，記錄分析的前提條件及相關(guān)假設(shè)，可以重現(xiàn)分析結(jié)果；2.評(píng)價(jià)結(jié)果可根據(jù)評(píng)價(jià)的依據(jù)重現(xiàn)。輸入1.所有問題已入庫(kù)2.測(cè)試結(jié)果報(bào)告已通過(guò)測(cè)試負(fù)責(zé)人的審查1.統(tǒng)計(jì)分析軟件結(jié)果報(bào)告和問題報(bào)告2.分析系統(tǒng)問題3.評(píng)價(jià)測(cè)試結(jié)果4.評(píng)價(jià)測(cè)試過(guò)程5.提交評(píng)價(jià)報(bào)告1.分析結(jié)果通過(guò)有效性檢查2.評(píng)價(jià)結(jié)果通過(guò)有效性檢查1.問題的數(shù)量、狀態(tài)/2.測(cè)試投入問題統(tǒng)計(jì)問題分析評(píng)價(jià)報(bào)告輸出評(píng)價(jià)測(cè)試問題報(bào)告軟件問題分析（舉例）：分析報(bào)告、評(píng)價(jià)報(bào)告有效31項(xiàng)目中測(cè)試過(guò)程的里程碑項(xiàng)目里程碑測(cè)試過(guò)程里程碑備注項(xiàng)目啟動(dòng)測(cè)試負(fù)責(zé)人角色到位需求里程碑測(cè)試計(jì)劃里程碑完成測(cè)試大綱和測(cè)試計(jì)劃設(shè)計(jì)里程碑測(cè)試設(shè)計(jì)里程碑完成測(cè)試用例構(gòu)造和集成里程碑實(shí)現(xiàn)測(cè)試進(jìn)行集成測(cè)試或子系統(tǒng)測(cè)試測(cè)試和交互執(zhí)行測(cè)試：功能凍結(jié)執(zhí)行測(cè)試：代碼凍結(jié)主要進(jìn)行系統(tǒng)測(cè)試和回歸測(cè)試等項(xiàng)目結(jié)束測(cè)試評(píng)價(jià)對(duì)系統(tǒng)或產(chǎn)品進(jìn)行質(zhì)量評(píng)價(jià)對(duì)測(cè)試過(guò)程進(jìn)行評(píng)價(jià)或改善項(xiàng)目中測(cè)試過(guò)程的里程碑項(xiàng)目里程碑測(cè)試過(guò)程里程碑備注項(xiàng)目啟動(dòng)測(cè)32概述測(cè)試過(guò)程管理成功的測(cè)試測(cè)試階段的有效性CMMI的定義階段重點(diǎn)測(cè)試資源管理統(tǒng)計(jì)分析和決策支持概述33測(cè)試人員的工作績(jī)效的評(píng)價(jià)誤區(qū)：僅從提交的問題單數(shù)量、測(cè)試執(zhí)行用例數(shù)量來(lái)判斷測(cè)試人員的好壞對(duì)測(cè)試人員發(fā)現(xiàn)的問題的價(jià)值沒有進(jìn)行評(píng)估不重視測(cè)試文檔的質(zhì)量不重視測(cè)試人員的綜合能力[必須本著以測(cè)試質(zhì)量為重、對(duì)測(cè)試負(fù)責(zé)的角度對(duì)測(cè)試人員績(jī)效進(jìn)行客觀評(píng)價(jià)。通過(guò)合理的績(jī)效評(píng)價(jià)，讓測(cè)試人員以積極的心態(tài)投入的測(cè)試工作中]測(cè)試人員的工作績(jī)效的評(píng)價(jià)誤區(qū)：34例子：模塊A很不穩(wěn)定，潛在的問題數(shù)可能有100個(gè)，由測(cè)試人員甲負(fù)責(zé)測(cè)試，他一個(gè)月執(zhí)行300個(gè)用例，提交50個(gè)問題單，發(fā)現(xiàn)30個(gè)有效問題，有10個(gè)嚴(yán)重問題；

模塊B比較穩(wěn)定，潛在的問題數(shù)可能有20個(gè)，由測(cè)試人員乙負(fù)責(zé)測(cè)試，他一個(gè)月執(zhí)行100個(gè)用例，提交20個(gè)問題單，發(fā)現(xiàn)18個(gè)有效問題，有8個(gè)嚴(yán)重問題；

分析：甲提交的問題單數(shù)量和執(zhí)行用例數(shù)量都要遠(yuǎn)遠(yuǎn)高于乙模塊B的遺留問題顯然少于模塊A甲執(zhí)行測(cè)試的充分性顯然不如乙甲提交的問題單雖然很多，但近半數(shù)是非問題，做了無(wú)用功，還影響到開發(fā)人員對(duì)問題的定位所消耗的時(shí)間。

例子：模塊A很不穩(wěn)定，潛在的問題數(shù)可能有100個(gè)，由測(cè)試人員35考核例子類型評(píng)定參數(shù)類型評(píng)定參數(shù)問題單提交的無(wú)效問題單比率用例執(zhí)行用例數(shù)問題單的描述的規(guī)范性用例評(píng)審次數(shù)問題單中嚴(yán)重問題所占比例新創(chuàng)建的用例數(shù)問題的質(zhì)量新增用例的價(jià)值需求設(shè)計(jì)等評(píng)審提出問題數(shù)需要評(píng)審的用例文檔測(cè)試報(bào)告的質(zhì)量修改刪除的用例數(shù)內(nèi)部測(cè)試經(jīng)驗(yàn)的文檔培訓(xùn)培訓(xùn)考核考核例子類型評(píng)定參數(shù)類型評(píng)定參數(shù)問題單提交的無(wú)效問題單比率用36測(cè)試文檔管理測(cè)試文檔包括：測(cè)試計(jì)劃測(cè)試大綱/測(cè)試用例測(cè)試開發(fā)的設(shè)計(jì)文檔缺陷列表、測(cè)試記錄測(cè)試報(bào)告。。。文檔的版本要與開發(fā)的版本保持一致對(duì)于測(cè)試用例要求盡量可復(fù)用測(cè)試報(bào)告中的數(shù)據(jù)需要進(jìn)行積累測(cè)試文檔管理測(cè)試文檔包括：37缺陷管理－－工具『你們用什么來(lái)進(jìn)行缺陷管理？』缺陷管理－－工具『你們用什么來(lái)進(jìn)行缺陷管理？』38缺陷管理－－工具缺陷管理的可用的方法：Word、Excel專門的缺陷管理工具『ClearQuest/TestDriector/Bugzilla/Mantis/…』Outlook里面的電子流Web頁(yè)面的管理系統(tǒng)『無(wú)論何種工具他們的基礎(chǔ)屬性都是一致。。。』缺陷管理－－工具缺陷管理的可用的方法：39缺陷管理－－問題屬性標(biāo)識(shí)問題記錄時(shí)間項(xiàng)目名字狀態(tài)優(yōu)先級(jí)詳細(xì)描述注入階段作者質(zhì)量工程師/發(fā)現(xiàn)者測(cè)試用例發(fā)現(xiàn)日期簡(jiǎn)單描述功能區(qū)域子狀態(tài)嚴(yán)重程度對(duì)應(yīng)版本或Build發(fā)現(xiàn)階段開發(fā)人員環(huán)境信息問題歷史缺陷管理－－問題屬性標(biāo)識(shí)發(fā)現(xiàn)日期40缺陷管理－－問題狀態(tài)OpenFixedTMRejectedReopenClosedWaitTEDEDETMDETETEDENewTETETE缺陷管理－－問題狀態(tài)OpenFixedTMRejectedR41缺陷管理－－問題類型錯(cuò)誤類型類型說(shuō)明用戶界面錯(cuò)誤界面顯示的普通文