產(chǎn)品測試管理培訓(xùn)

1、產(chǎn)品測試管理將研發(fā)戰(zhàn)略轉(zhuǎn)化為高效的行動1內(nèi)容提要1、產(chǎn)品測試管理綜述2、產(chǎn)品測試管理體系3、產(chǎn)品測試流程4、產(chǎn)品測試組織5、產(chǎn)品測試度量2第一節(jié):產(chǎn)品測試管理綜述3質(zhì)量基本概念探討質(zhì)量管理體系與測試產(chǎn)品測試的基本原則產(chǎn)品測試的常見方法產(chǎn)品測試管理綜述產(chǎn)品測試管理綜述4質(zhì)量基本概念探討地球的質(zhì)量約為61024千克高質(zhì)量的生活如何提高睡眠質(zhì)量。.(生活中廣義的質(zhì)量定義)符合需求適用/fitness for use“must-be quality”and”attractive quality”.對客戶的價值.(專家學(xué)者的質(zhì)量定義)5質(zhì)量基本概念探討質(zhì)量基本概念探討-如何衡量?產(chǎn)品/服務(wù)固有特性客戶要

2、求和期望符合指導(dǎo)0 50% 100%6質(zhì)量管理體系與測試質(zhì)量管理的發(fā)展 ISO9000 ISO14000 CMMI/QS9000 數(shù)理統(tǒng)計(jì) 抽樣檢查 專職檢查 嚴(yán)格控制 全面質(zhì)量管理統(tǒng)計(jì)質(zhì)量管理質(zhì)量檢驗(yàn)階段7質(zhì)量管理體系與測試質(zhì)量管理的活動 -質(zhì)量策劃 -質(zhì)量控制 -質(zhì)量保證 -質(zhì)量改進(jìn)質(zhì)量管理方法及工具 -PDCA -新老七種工具 -SPC/FMEA/QFD8質(zhì)量管理體系與測試質(zhì)量測試成本分析 利潤 預(yù)防 POC 評估 質(zhì)量成本 銷售收入 Failure ponc 運(yùn)營成本 開發(fā) 銷售/行政/人事等必要成本 思考:1測試越充分越全面越好嗎?9產(chǎn)品測試的基本原則測試的定義我們認(rèn)為測試是為了:

3、-發(fā)現(xiàn)系統(tǒng)存在的問題-樹立對系統(tǒng)的信心-增強(qiáng)團(tuán)隊(duì)對系統(tǒng)的熟悉程度,了解系統(tǒng)固有的缺陷10產(chǎn)品測試的基本原則測試的一個事實(shí):徹底的測試實(shí)際上不可操作!-如果讓我再測一遍,肯定能發(fā)現(xiàn)問題(某測試人員)-我們?nèi)绾蚊鎸@種局面?11產(chǎn)品測試的基本原則1 .客戶化測試 系統(tǒng)中有許多錯誤 客戶遇到的錯誤只占很小比例 針對客戶最容易遇到的錯誤進(jìn)行測試,以便改進(jìn)測試的有效性IBM: 客戶所看到的57%以上的故障是由占錯誤總數(shù)2%以下的錯誤引起的.OperationscenarioTestscenario12產(chǎn)品測試的基本原則2 .不同的測試等級不同系統(tǒng)/子系統(tǒng)需要不同測試質(zhì)量要求A災(zāi)難性的影響 C重要的影響需

4、要MC/DC測試 需要SC測試-引擎控制 -無線數(shù)據(jù)鏈接-飛行計(jì)算-導(dǎo)航處理B危險的影響 D次要性影響需DC測試 函數(shù)進(jìn)入/退出覆蓋率測試-差分GPS -飛機(jī)內(nèi)娛樂設(shè)施-飛機(jī)之間接近感應(yīng)133 .盡早測試在部署之后又發(fā)現(xiàn)軟件問題再進(jìn)行修復(fù)，這通常要多花100到1000倍的成本。要防患于未然.在特定時間達(dá)到既定目標(biāo)，在整個項(xiàng)目生命周期內(nèi)不斷對質(zhì)量進(jìn)行檢驗(yàn)和管理必不可少。產(chǎn)品測試的基本原則144 . Good-enough這是一種權(quán)衡投入/產(chǎn)出比的原則，測試既不要不充分也不要過分。不充分和過分都是一種不負(fù)責(zé)任的表現(xiàn)。產(chǎn)品測試的基本原則155 . PARETO(排列圖)一般情況下，在分析、設(shè)計(jì)、實(shí)驗(yàn)

5、階段的評審和測試工作能夠發(fā)現(xiàn)和避免80%的BUG，而系統(tǒng)的軟件測試能夠找出其余BUG中的80%。最后約5%的BUG只有在用戶大范圍、長時間的使用才會暴露出來。因此測試只能保證盡可能多地發(fā)現(xiàn)錯誤，不能保證發(fā)現(xiàn)所有的錯誤。產(chǎn)品測試的基本原則16小節(jié)結(jié) -完全測試基本不可能，應(yīng)制定合理的策略 -客戶化測試 -質(zhì)量目標(biāo)和測試強(qiáng)度 -為了減少投入，主張盡早測試 -測試需要在投入與收益上取得平衡 -專網(wǎng)捕魚策略討論：質(zhì)量是設(shè)計(jì)出來的，還是測試出來的？產(chǎn)品測試的基本原則17常見的測試方法白盒測試結(jié)構(gòu)測試（打開盒子）黑盒測試功能測試（不關(guān)心內(nèi)部結(jié)構(gòu)）單元測試（軟件單元模塊）集成測試（軟件集成模塊）其它測試系統(tǒng)

6、測試公司內(nèi)部測試，完全受控Alpha 測試模擬用戶環(huán)境，基本受控 Beta測試真實(shí)用戶環(huán)境，不受控18第二節(jié):產(chǎn)品測試管理體系19產(chǎn)品測試管理體系1.產(chǎn)品測試管理體系概述2.產(chǎn)品測試流程及生命周期3.產(chǎn)品測試項(xiàng)目管理4. 產(chǎn)品測試管理20產(chǎn)品測試管理體系概述質(zhì)量管理體系與測試管理體系映射流程組織測度流程測試測試組織21研發(fā)管理體系中的“測試”、投資管理團(tuán)隊(duì)中需包括：（便于較快傳達(dá)上級的產(chǎn)品變化情況）研發(fā)總監(jiān)測試總監(jiān)市場總監(jiān)財(cái)務(wù)總監(jiān)制造總監(jiān)2、產(chǎn)品測試從產(chǎn)品概念階段就需參與。（做出可測試性分析，能測哪些？不能做哪些？或委外等）3、計(jì)劃階段需做測試策略和計(jì)劃產(chǎn)品測試管理體系概述22產(chǎn)品測試流程及生

7、命周期1、瀑布模型（適用于開發(fā)過程變化較小，風(fēng)險小的項(xiàng)目）2、V模型、3、W模型（開發(fā)與測試并行）23項(xiàng)目管理知識體系產(chǎn)品測試項(xiàng)目管理項(xiàng)目整體管理人力資源管理項(xiàng)目溝通管理項(xiàng)目風(fēng)險管理項(xiàng)目采購管理項(xiàng)目范圍管理項(xiàng)目時間管理項(xiàng)目成本管理項(xiàng)目質(zhì)量管理24測試項(xiàng)目管理總體過程確定測試范圍，啟動測試項(xiàng)目設(shè)定測試目標(biāo)（成本/進(jìn)度/質(zhì)量）制定測試策略/定義測試過程制定測試計(jì)劃（進(jìn)度/資源/風(fēng)險。）計(jì)劃監(jiān)控（會議/報(bào)告。）問題和風(fēng)險管理（定量與定性）變更控制（整體聯(lián)動）階段項(xiàng)目總結(jié)產(chǎn)品測試項(xiàng)目管理25產(chǎn)品測試管理質(zhì)量保證TQA一手軟一手硬引導(dǎo)和培訓(xùn) 產(chǎn)品過程審計(jì)26評審：（避免“抓壯丁”、“科普會”、“批斗會”

8、）業(yè)務(wù)決策評審立項(xiàng)/概念/計(jì)劃/技術(shù)評審需求/規(guī)劃/計(jì)劃同行評審正規(guī)檢視走讀產(chǎn)品測試管理27 第三節(jié): 產(chǎn)品測試流程28產(chǎn)品測試流程產(chǎn)品測試全流程分析產(chǎn)品開發(fā)各階段的測試活動產(chǎn)品測試自動化29產(chǎn)品測試全流程分析定義可測試性需求系統(tǒng)需求分析、功能分析、設(shè)計(jì)綜合定義產(chǎn)品包驗(yàn)證主計(jì)劃系統(tǒng)需求分析、功能分析、設(shè)計(jì)綜合系統(tǒng)需求分析、功能分析、設(shè)計(jì)綜合系統(tǒng)需求分析、功能分析、設(shè)計(jì)綜合定義產(chǎn)品測試策略系統(tǒng)需求分析、功能分析、設(shè)計(jì)綜合系統(tǒng)需求分析、功能分析、設(shè)計(jì)綜合系統(tǒng)需求分析、功能分析、設(shè)計(jì)綜合系統(tǒng)需求分析、功能分析、設(shè)計(jì)綜合系統(tǒng)需求分析、功能分析、設(shè)計(jì)綜合系統(tǒng)需求分析、功能分析、設(shè)計(jì)綜合系統(tǒng)需求分析、功能

9、分析、設(shè)計(jì)綜合概念階段計(jì)劃階段開發(fā)階段驗(yàn)證階段30概念階段的測試活動要點(diǎn)參與市場需求分析及驗(yàn)證負(fù)責(zé)收集可測試方面的需求初步制定測試策略參與概念決策評審31計(jì)劃階段的測試活動要點(diǎn)：負(fù)責(zé)制定驗(yàn)證測試計(jì)劃可測試性測試設(shè)計(jì)經(jīng)濟(jì)效益與測試周期的衡量32要點(diǎn)協(xié)助開發(fā)，并監(jiān)督單元測試，集成測試的開展。領(lǐng)導(dǎo)系統(tǒng)設(shè)計(jì)驗(yàn)證（SDV，原型機(jī)）系統(tǒng)集成測試（SIT，初始產(chǎn)品）技術(shù)評審開發(fā)階段的測試活動33SDV主要活動(對原型機(jī)漸增BUILD測試)序號測試活動序號測試活動1測試設(shè)計(jì)更新9EMC2軟件集成測試10安全測試3模塊/子系統(tǒng)硬件/軟件測試11噪聲測試4內(nèi)部接口驗(yàn)證12熱測試5功能測試13環(huán)境測試6性能/指標(biāo)測

10、試14可靠性強(qiáng)化測試7軟件協(xié)議一致性測試15回歸測試8容限/容錯測試16需要的特別測試開發(fā)階段的測試活動34開發(fā)階段的測試活動SIT主要活動(初始產(chǎn)品) 當(dāng)初始產(chǎn)品與原型機(jī)沒有差別時,SIT就沒有必要重復(fù)做一次同樣的漸增測試.序號測試活動序號測試活動1測試設(shè)計(jì)更新9EMC2系統(tǒng)功能測試10環(huán)境測試3系統(tǒng)性能指標(biāo)測試11噪聲測試4軟件協(xié)議一致性測試12熱測試5容限/容錯測試13可靠性鑒定測試6可用性測試14安全測試7組網(wǎng)測試15包裝測試8回歸測試16需要的特別測試35驗(yàn)證階段的測試活動要點(diǎn)(驗(yàn)證制造流程)系統(tǒng)驗(yàn)證測試(SVT)BATA測試測試結(jié)果評估技術(shù)評審主要活動:1、EMC測試2、環(huán)境測試3

11、、安全測試4、回歸測試5、一致性測試6、需要的特別測試36產(chǎn)品測試自動化不適合自動化測試的領(lǐng)域一次性項(xiàng)目項(xiàng)目周期短的項(xiàng)目業(yè)務(wù)規(guī)則復(fù)雜的項(xiàng)目自動化測試誤區(qū)期望自動化測試完全代替手工測試期望自動化測試發(fā)現(xiàn)大量的缺陷遙不可及測試工具開發(fā)失敗的分析缺少組織保證領(lǐng)導(dǎo)不重視過分追求大而全缺少歷史工具的繼承缺少推廣服務(wù)意識37 第四節(jié): 產(chǎn)品測試組織38產(chǎn)品測試組織產(chǎn)品測試在組織中的角色分析 -協(xié)助者? -反對者? -破壞者? -建設(shè)者? -領(lǐng)導(dǎo)者?思考:我們扮演了什么角色? 我們應(yīng)該扮演什么角色?39產(chǎn)品測試組織產(chǎn)品測試組織演化產(chǎn)品測試團(tuán)隊(duì)結(jié)構(gòu)分析產(chǎn)品測試關(guān)鍵角色分析測試人員職業(yè)發(fā)展40產(chǎn)品測試組織演化公

12、司的測試組織屬于哪個階段！混淆階段沒有專職的測試人員缺少完善的測試流程測試手段單一嚴(yán)格區(qū)分階段測試部門獨(dú)立專職測試人員不斷完善的測試流程測試工具技術(shù)開發(fā)專業(yè)協(xié)作階段專職測試人員完備的測試流程人人具備測試意識測試工具技術(shù)開發(fā)運(yùn)營測試41第一步：重點(diǎn)開展系統(tǒng)測試工作控制測試版本的提交頻度和過程，加強(qiáng)基線管理約束系統(tǒng)測試中開發(fā)、測試的責(zé)任重點(diǎn)開展功能測試、業(yè)務(wù)測試開始積累測試用例開始系統(tǒng)測試過程管理開始單元測試的操作，規(guī)定具體的測試量化指標(biāo)開始代碼靜態(tài)檢查工具的引入實(shí)例：公司測試部發(fā)展歷程42第二步：重點(diǎn)開展專項(xiàng)測試、測試工具引入加強(qiáng)市場問題的收集、匯總，補(bǔ)充到測試用例庫加強(qiáng)版本走向市場的控制開展性

13、能、安全性、可靠性等專項(xiàng)測試引入專項(xiàng)測試工具開始系統(tǒng)測試過程度量實(shí)例：公司測試部發(fā)展歷程43第三步：測試小工具開發(fā)、需求可測試分析針對系統(tǒng)測試中的具體需要開始專項(xiàng)小測試工具的開發(fā)在商業(yè)工具的基礎(chǔ)上考慮二次開發(fā)開始產(chǎn)品開發(fā)前端工作，具體參與產(chǎn)品的需求分析、規(guī)格確定，確保需求、規(guī)格的可測試性產(chǎn)品開發(fā)前期就確定后期的測試規(guī)劃實(shí)例：公司測試部發(fā)展歷程44實(shí)例：公司測試部發(fā)展歷程第四步：測試平臺構(gòu)造、集成測試整合歷史測試工具，從而形成更加系統(tǒng)的測試工具開始規(guī)劃測試公共技術(shù)平臺測試工具的開發(fā)產(chǎn)品化運(yùn)作開始集成測試工作開始關(guān)注測試技術(shù)的發(fā)展45實(shí)例：公司測試部發(fā)展歷程第五步：構(gòu)造測試、運(yùn)營測試、測試標(biāo)準(zhǔn)、可

14、測試性設(shè)計(jì)“每日構(gòu)造”測試整網(wǎng)測試、標(biāo)準(zhǔn)測試、規(guī)范測試參與測試標(biāo)準(zhǔn)的制定大量申請測試專利制定可測試性設(shè)計(jì)方面的規(guī)范，并在實(shí)際產(chǎn)品測試中施行46產(chǎn)品測試團(tuán)隊(duì)結(jié)構(gòu)跨部門產(chǎn)品開發(fā)團(tuán)隊(duì)PDTPDT成員分別來自各個功能/職能部門PDT功能/職能部門代表共同對產(chǎn)品負(fù)責(zé)研發(fā) 市場制造 LPDT核心組項(xiàng)目經(jīng)理擴(kuò)展/外圍組47測試部門經(jīng)理角色及義務(wù)管理并發(fā)展測試部人事/財(cái)務(wù)等部門基本運(yùn)作建立優(yōu)異的測試隊(duì)伍領(lǐng)導(dǎo)測試技術(shù)平臺開發(fā)項(xiàng)目執(zhí)行測試部門的預(yù)算提供測試技術(shù)領(lǐng)導(dǎo)定義測試的策略、指導(dǎo)原則、工具和標(biāo)準(zhǔn)協(xié)調(diào)跨項(xiàng)目的測試合作制定并維護(hù)測試流程方針支持產(chǎn)品開發(fā)團(tuán)隊(duì)工作確定項(xiàng)目測試的人員和資源參與相關(guān)測試項(xiàng)目的評審產(chǎn)品測試

15、關(guān)鍵角色分析48測試項(xiàng)目經(jīng)理測試經(jīng)理的素質(zhì)特征及性格特征素質(zhì)特征1、有管理經(jīng)驗(yàn)，是一個精明而講究實(shí)際的管理者2、有個性魅力，使項(xiàng)目組成員快樂而有生氣3、有全流程的豐富的工作經(jīng)驗(yàn)4、具有創(chuàng)造性思維5、具有靈活性，同時具有組織性和紀(jì)律性性格特征1、誠實(shí)、正直、熱情 2、沉著、冷靜、果斷3、善于溝通 4、敏感、反應(yīng)敏捷5、多面手 6、精力充沛、堅(jiān)忍不拔7、自信、有進(jìn)取心 8、善解人意產(chǎn)品測試關(guān)鍵角色分析49產(chǎn)品測試關(guān)鍵角色分析測試工程師測試人員的素質(zhì)要求1、溝通能力量對比 2、技術(shù)能力3、自信心 4、外交能力5、幽默感 6、很強(qiáng)的記憶能力7、耐心 8、懷疑精神9、自我督促 10、洞察力11、敢于“較

16、真”的精神 12、細(xì)心13、責(zé)任心 14、板凳要做十年冷的精神15、逆向思維能力50測試人員職業(yè)發(fā)展1、測式人員的雙重晉升機(jī)制2、測試人員技術(shù)任職資格3、測試人員的工作重點(diǎn)劃分51測試人員的雙重晉升機(jī)制領(lǐng)導(dǎo)者管理者監(jiān)督者資深專家高級專家專家有經(jīng)驗(yàn)者初做者52 6級 5級 4級 3級 2級 1級專家經(jīng)驗(yàn)豐富的骨干業(yè)務(wù)實(shí)施的基層主體每級分為四等:職業(yè)等、普通等、基礎(chǔ)等、預(yù)備等審請、審核考試提供證據(jù)評議評審頒證測試人員技術(shù)任職資格53測試人員技術(shù)任職資格資格等級工作經(jīng)驗(yàn)一級1年以上測試工作經(jīng)驗(yàn)；具有系統(tǒng)測試用例執(zhí)行，單元測試工作經(jīng)驗(yàn)。二級2年以上測試工作經(jīng)驗(yàn)；具有較多系統(tǒng)測試執(zhí)行、測試用例編寫，單元

17、測試設(shè)計(jì)與執(zhí)行工作經(jīng)驗(yàn)。三級3年以上測試工作經(jīng)驗(yàn)；具有測試方案設(shè)計(jì)經(jīng)驗(yàn)，有帶領(lǐng)團(tuán)隊(duì)完成版本測試的經(jīng)驗(yàn)。有領(lǐng)導(dǎo)實(shí)驗(yàn)局開通的工作經(jīng)驗(yàn)，有單元測試/集成測試設(shè)計(jì)的經(jīng)驗(yàn)，以及指導(dǎo)相關(guān)測試驗(yàn)員進(jìn)行測試的經(jīng)驗(yàn)。四級4年以上測試工作經(jīng)驗(yàn)；具備產(chǎn)品測試技術(shù)領(lǐng)域較全面的知識，具有解決產(chǎn)品開發(fā)過程中的重大技術(shù)問題，參與測試技術(shù)發(fā)展的決策工作的經(jīng)驗(yàn)。測試過產(chǎn)品系統(tǒng)可測試性設(shè)計(jì)，參與過測試儀工具的設(shè)計(jì)/開發(fā)工作。五級5年以上測試工作經(jīng)驗(yàn)；具備產(chǎn)品軟件技術(shù)領(lǐng)域、系統(tǒng)領(lǐng)域全面的知識，有解決產(chǎn)品開發(fā)過程中的重大技術(shù)難題的經(jīng)驗(yàn)，有預(yù)見企業(yè)未來產(chǎn)品的測試技術(shù)走向，并組織測試技術(shù)研究的經(jīng)驗(yàn)。具備相關(guān)流程規(guī)范標(biāo)準(zhǔn)的建設(shè)和優(yōu)化經(jīng)驗(yàn)，

18、是公司測試領(lǐng)域的技術(shù)帶頭人。六級6年以上測試工作經(jīng)驗(yàn)；具備產(chǎn)品軟件技術(shù)領(lǐng)域、系統(tǒng)領(lǐng)域廣博精深的知識，有解決產(chǎn)品開發(fā)過程中的重大系統(tǒng)類技術(shù)難題的經(jīng)驗(yàn)，有參與決策企業(yè)未來產(chǎn)品的測試技術(shù)走向的經(jīng)驗(yàn)，是公司測試技術(shù)的權(quán)威。參與過公司級別測度平臺的規(guī)劃工作。54 第五節(jié): 產(chǎn)品測試度量55產(chǎn)品測試度量產(chǎn)品測試度量介紹產(chǎn)品測試核心度量產(chǎn)品測試缺陷分析基礎(chǔ)產(chǎn)品測試缺陷分析方法產(chǎn)品測試度量與績效考核56產(chǎn)品測試度量的介紹為什么要度量？刻畫（系統(tǒng)/產(chǎn)品的成熟程度）評估（是否達(dá)到相應(yīng)的要求）預(yù)測改進(jìn)57產(chǎn)品測試度量的介紹什么是度量？-測量（直接的） 問題數(shù) 測試用例數(shù) 測試工作量-度量（間接的，算出來的） 測試效

19、率 缺陷密度 缺陷移除率58產(chǎn)品測試度量的介紹度量的基本原則業(yè)務(wù)目標(biāo)驅(qū)動不去定義不會收集的度量項(xiàng)/指標(biāo)不去搜集不會分析的度量數(shù)據(jù)不分析不會使用的度量量力而行59產(chǎn)品測試的核心度量四個基本度量項(xiàng)-規(guī)模-工作量-進(jìn)度-缺陷-客戶滿意度產(chǎn)品測試核心度量-測試規(guī)模？-測試工作量？-測試進(jìn)度？-產(chǎn)品缺陷（測試工作質(zhì)量如何度量？）-測試效率60缺陷分析基礎(chǔ)缺陷基本分類需求缺陷：如需求不明確、不合理、不可測、不完整等。設(shè)計(jì)缺陷：如設(shè)計(jì)與需求不符，設(shè)計(jì)錯誤，設(shè)計(jì)不全面等。編碼缺陷：如內(nèi)存泄露、指針未初始化、功能錯誤、邏輯錯誤、接口錯誤等。文檔缺陷：指交付給最終用戶文檔中的錯誤。測試用例缺陷：指測試用例設(shè)計(jì)中所

20、犯缺陷。其他缺陷：指在支持軟件產(chǎn)品開發(fā)或維護(hù)的軟件人工制品中所發(fā)現(xiàn)的缺陷，包括測試工具、編譯器、配置庫、以及其他的計(jì)算機(jī)輔助軟件工程工具。61缺陷分析基礎(chǔ)缺陷其他分類-按嚴(yán)重等級致命問題嚴(yán)重問題一般問題建意問題-按程序錯誤類型注釋/消息語法接口數(shù)據(jù)函數(shù)62缺陷分析方法、正交缺陷分類、Rayleigh曲線、Gompertz模型(可靠性分析)、四象限分析、根源分析63缺陷控制和缺陷預(yù)防統(tǒng)計(jì)過程分析特定問題和共性問題不同階段的缺陷、問題反饋建議的措施已實(shí)施的行動階段開工會根源分析會議行動措施數(shù)據(jù)庫缺陷預(yù)防數(shù)據(jù)庫項(xiàng)目階段64測試度量指標(biāo)（一）度量項(xiàng)含義目的/意義測試生產(chǎn)率單位工作量所測試的代碼量、功能點(diǎn)數(shù)一個團(tuán)隊(duì)的測試能力工作量偏差率實(shí)際花費(fèi)工作量相對于估計(jì)工作量的偏差百分比制定付費(fèi)清單；提高估計(jì)技能；避免過載分配任務(wù)測試進(jìn)度偏差率項(xiàng)目實(shí)際測試進(jìn)度相對于計(jì)劃測試進(jìn)度