軟件測試工具實(shí)用知識及其實(shí)例

軟件測試工具使用知識及其實(shí)例

組員：軟件工程軟件測試概述軟件測試工具基礎(chǔ)測試工具介紹軟件測試實(shí)例1.軟件測試概述簡介軟件測試是軟件工程過程中的關(guān)鍵組件。軟件測試是軟件質(zhì)量保證的要素，可以將其描述為一個運(yùn)行程序以檢測錯誤（如果有）的過程。測試的目的為了發(fā)現(xiàn)盡可能多的缺陷，不是為了說明軟件中沒有缺陷。測試的常識與道理編程大師說：沒有錯誤的程序世間難求。（《編程之道》）你在學(xué)校里學(xué)過測試嗎？（讀到博士可能也不懂測試）你所在的企業(yè)重視測試嗎？（小公司程序員的技能更加全面）臨時抱佛腳行嗎？你以為有文檔模板就會測試了嗎？測試的常識與道理如果不懂得有效地進(jìn)行測試，你不僅得不到功勞，也沒人欣賞你的苦勞，你擁有最多的將只是疲勞。職業(yè)軟件工程師應(yīng)當(dāng)掌握需求開發(fā)、系統(tǒng)設(shè)計、編程、測試、維護(hù)所有技能。軟件測試原則完全測試程序是不可能的輸入量太大輸出結(jié)果太多軟件實(shí)現(xiàn)途徑太多軟件說明書沒有客觀標(biāo)準(zhǔn)。從不同角度看，軟件缺陷的標(biāo)準(zhǔn)不同。軟件測試是有風(fēng)險的行為測試無法顯示潛伏的軟件缺陷找到的軟件缺陷越多，就說明軟件缺陷越多并非所有軟件缺陷都能修復(fù)軟件測試一項(xiàng)講究條理的技術(shù)專業(yè)軟件測試方法－黑盒和白盒白盒測試中（有時候稱為開盒測試），軟件測試員可以訪問程序員的代碼，并通過檢查代碼來協(xié)助測試－可以看到盒子里面。一般在單元測試中采用白盒測試，用于測試模塊中所有可能的路徑、執(zhí)行所有循環(huán)并測試所有邏輯表達(dá)式。

黑盒測試則側(cè)重于軟件的整體功能。它不基于程序的內(nèi)部結(jié)構(gòu)而基于系統(tǒng)功能。猶如一個人站在黑盒子外面，只知道系統(tǒng)輸入一定數(shù)據(jù)，得到一定的輸出，而不必清楚這個黑盒子中進(jìn)行了哪些操作和運(yùn)算。軟件測試方法－靜態(tài)和動態(tài)靜態(tài)檢查確保系統(tǒng)按照組織的標(biāo)準(zhǔn)和過程運(yùn)行，主要依賴于評審和非運(yùn)行的手段來檢查。通常包括需求評審、設(shè)計評審、代碼走查和代碼檢查。動態(tài)檢查在生命周期中進(jìn)行測試（運(yùn)行）。通常包括單元測試、集成測試、系統(tǒng)測試、用戶的驗(yàn)收測試。測試技術(shù)2.軟件測試工具基礎(chǔ)什么是測試工具？輔助測試整個過程的工具軟件整個過程包括：靜態(tài)分析，測試計劃，測試設(shè)計，測試執(zhí)行，測試缺陷跟蹤，測試報告和質(zhì)量度量等單元測試工具的種類靜態(tài)分析工具代碼規(guī)范審核工具內(nèi)存和資源檢查工具測試數(shù)據(jù)生成工具測試框架工具測試結(jié)果比較工具測試度量工具測試文檔生成和管理工具自動測試工具好處

速度和效率準(zhǔn)確度和精確度耐性、不休息、可重復(fù)局限

對軟件變更，尤其是代碼變更比較敏感先期的測試開發(fā)比較費(fèi)時有些測試結(jié)果無法用工具比較和分析有些工具的腳本/代碼會使程序運(yùn)行環(huán)境不純凈使用自動測試工具的目的測試工具提高測試效率，節(jié)省測試成本測試設(shè)計提高測試效果，同時也可以提高測試效率，節(jié)省測試成本有些測試單靠手工很難完成壓力測試，模擬并發(fā)測試等多數(shù)的單元測試有些測試使用測試工具更合適回歸測試大量測試數(shù)據(jù)的生成、部分測試結(jié)果的比較缺陷管理和測試用例管理如何引入自動測試工具-1選擇自動測試工具是一個重要的步驟，所以一定要謹(jǐn)慎因?yàn)闇y試工作經(jīng)常會涉及到管理流程和開發(fā)流程的改變、涉及到人員的考評標(biāo)準(zhǔn)，所以它有時會對整個企業(yè)產(chǎn)生影響。測試工具應(yīng)該能夠管理測試過程和測試文檔，并生成各種測試報告。自動測試工具應(yīng)該允許用戶把自動測試數(shù)據(jù)和流程與手工的測試數(shù)據(jù)和流程結(jié)合到一起。如何引入自動測試工具-2自動測試工具應(yīng)該能夠?qū)I(yè)務(wù)需求與測試計劃、測試設(shè)計和測試結(jié)果相關(guān)聯(lián)，允許最終用戶根據(jù)測試結(jié)果來評估應(yīng)用程序的完成情況。自動測試工具中的各功能模塊應(yīng)該緊密集成到一起，共享和重用測試數(shù)據(jù)，支持回歸測試。工具應(yīng)該可以很容易地利用過去的或者其他人員的測試資料。工具內(nèi)部應(yīng)該使用一致的腳本語言和數(shù)據(jù)格式。如何引入自動測試工具-3自動測試工具的體系結(jié)構(gòu)和文件格式應(yīng)該是開放的，可以很容易地與其他技術(shù)或工具進(jìn)行交互和集成。自動測試工具廠商應(yīng)該有比較完善的科室培訓(xùn)和技術(shù)支持機(jī)制，能夠?yàn)樽詣訙y試工具的實(shí)施提供咨詢和支持。3.測試工具介紹白盒測試工具JtestBoundsCheckerTrueCoverageC++TestCodeWizard黑盒測試工具WinRunnerAstraQuicktestRobotSilkTestLoadRunner集成測試軟件Panorama測試工具PanoramaPanorama是由8個產(chǎn)品和超過20種工具集成組成的一種自動化軟件測試工具。一般用于：新系統(tǒng)開發(fā)過程中的質(zhì)量保證和單元測試；舊系統(tǒng)維護(hù)過程中質(zhì)量保證與測試；在工程中的系統(tǒng)分析。它也用來進(jìn)行QA（QUALITYASSURANCE）或者維護(hù)環(huán)境。Panorama產(chǎn)品背景及功能20OO-Test：測試用例生成和管理：1、記錄和生成測試用例2、最小化測試用例集3、測試覆蓋分析OO-Browser：系統(tǒng)結(jié)構(gòu)分析：1、生成系統(tǒng)中類和函數(shù)的繼承/調(diào)用關(guān)系圖2、實(shí)現(xiàn)代碼與關(guān)系圖的雙向?qū)?yīng)和跳轉(zhuǎn)3、顯示系統(tǒng)結(jié)構(gòu)測試覆蓋結(jié)果OO-Diagrammer：流程結(jié)構(gòu)分析：1、生成控制流程圖、邏輯流程圖、代碼流程圖2、實(shí)現(xiàn)代碼與流程圖的雙向?qū)?yīng)和跳轉(zhuǎn)3、顯示流程結(jié)構(gòu)測試覆蓋結(jié)果OO-SQA：質(zhì)量度量分析：1、設(shè)定質(zhì)量度量標(biāo)準(zhǔn)和指標(biāo)2、生成質(zhì)量度量數(shù)據(jù)3、顯示質(zhì)量度量結(jié)果OO-Analyzer：系統(tǒng)文檔生成：1、生成100多種設(shè)計文檔和質(zhì)量文檔OO-Playback：GUI測試過程回放：1、捕獲并記錄測試過程2、回放測試過程3、比較回放結(jié)果OO-MemoryChecker：內(nèi)存泄漏和非法使用檢測：1、檢測內(nèi)存泄漏和非法使用2、記錄錯誤發(fā)生的語句位置3、生成檢測報告OO-DefectTracer：缺陷定位和追溯：1、檢測并記錄缺陷(包括死機(jī))發(fā)生的路徑和語句位置2、生成缺陷定位報告Panorama產(chǎn)品背景及功能產(chǎn)品功能應(yīng)用：新系統(tǒng)開發(fā)支持舊系統(tǒng)維護(hù)支持系統(tǒng)再工程支持其他1、設(shè)計支持-系統(tǒng)結(jié)構(gòu)/流程結(jié)構(gòu)自動生成與維護(hù)-多重復(fù)雜性度量及分析-生成復(fù)雜性度量報告2、編碼及調(diào)試支持-確定編碼順序-保證編碼和設(shè)計的雙向?qū)?yīng)-生成代碼邏輯結(jié)構(gòu)-顯示測試路徑和頻率-顯示錯誤(尤其是意外中止)的語句位置和執(zhí)行路徑3、測試支持-確定單元測試順序-生成并管理測試用例-執(zhí)行測試用例并顯示結(jié)果-測試分析和度量-支持回歸測試-生成質(zhì)量報告1、復(fù)雜性度量支持-多重復(fù)雜性度量及分析-生成復(fù)雜性度量報告2、代碼修改支持-系統(tǒng)結(jié)構(gòu)/流程結(jié)構(gòu)自動生成與維護(hù)、編碼和設(shè)計的雙向?qū)?yīng)、錯誤定位和追溯-加強(qiáng)代碼理解、避免修改的副作用-幫助代碼靜態(tài)分析技術(shù)的實(shí)施3、測試支持-確定單元測試順序-生成并管理測試用例-執(zhí)行測試用例并顯示結(jié)果-測試分析和度量-支持回歸測試-生成質(zhì)量報告1、系統(tǒng)設(shè)計分析-系統(tǒng)結(jié)構(gòu)/流程結(jié)構(gòu)自動生成與維護(hù)，加強(qiáng)設(shè)計理解-編碼和設(shè)計的雙向?qū)?yīng)，加強(qiáng)代碼理解2、系統(tǒng)復(fù)雜性分析-多重復(fù)雜性度量及分析-生成復(fù)雜性度量報告3、系統(tǒng)性能分析-分析模塊執(zhí)行性能和執(zhí)行瓶頸4、文檔報告生成-生成多種系統(tǒng)分析報告和質(zhì)量報告1、支持工程管理和進(jìn)度估算-代碼文件和設(shè)計文檔的一致性維護(hù)-多種度量分析方法2、訓(xùn)練項(xiàng)目組新進(jìn)人員-理解系統(tǒng)結(jié)構(gòu)和流程結(jié)構(gòu)-方便閱讀和理解代碼3、支持驗(yàn)收評估-自動生成設(shè)計和編碼文檔-自動生成測試分析報告-自動生成質(zhì)量度量報告22產(chǎn)品術(shù)語基礎(chǔ)-1基本概念1、塊，也叫基本段、可視段2、不可視段基本不可視段：if,switch高端循環(huán)邊界(執(zhí)行0次循環(huán)體)低端循環(huán)邊界(執(zhí)行1次循環(huán)體)3、段，也叫標(biāo)準(zhǔn)段包括可視段與基本不可視段4、增強(qiáng)段包括可視段和不可視段23應(yīng)用原理與環(huán)境-1使用流程.mak文件是C/C++編譯文件.hsi文件是Panorama內(nèi)部使用的輸入緩沖區(qū)文件，用于記載C/C++文件結(jié)構(gòu)信息.dbs文件是Panorama內(nèi)部使用的數(shù)據(jù)庫文件，用于記載C/C++文件分析和測試結(jié)果信息，一般與his文件配合使用24應(yīng)用原理與環(huán)境-2應(yīng)用原理25工具的局限性局限性1、中文顯示問題2、使用自己的腳本技術(shù)，但這種腳本技術(shù)與其他的測試工具不兼容3、需要執(zhí)行.mak文件，而不是編譯C程序后生成的.obj文件4、僅能處理C/C++程序5、界面不夠友好4.軟件測試實(shí)例基本測試過程基本測試過程原則：盡早測試、經(jīng)常測試、充分測試。開發(fā)過程與測試過程：分析、測試、設(shè)計、測試、編碼、測試。測試計劃應(yīng)該是按照開發(fā)者的要求并用具體例子來描述一個測試計劃的層次結(jié)構(gòu)以及各個測試計劃相聯(lián)系的標(biāo)準(zhǔn)模版。測試方案設(shè)計良好的測試設(shè)計由以下的若干個方面組成：測試策略測試計劃測試說明書測試規(guī)范這些方案適用于從單元測試到系統(tǒng)測試等各個級別的測試。測試設(shè)計需要根據(jù)軟件說明書來進(jìn)行。單元測試概況定義：檢驗(yàn)程序最小單位有無錯誤。一般在編碼之后，由開發(fā)人員完成。單元：軟件開發(fā)中的最小的獨(dú)立部分C語言中的單元：函數(shù)或者是子過程C++語言中的單元：類單元測試目前狀況：實(shí)施效果非常好，但是實(shí)施阻力比較大(主要是人員和管理因素)，一般只在關(guān)鍵的程序單元中實(shí)施有比較系統(tǒng)的理論和方法，但也依賴于系統(tǒng)的特殊性和開發(fā)人員的經(jīng)驗(yàn)有大量的輔助工具，開發(fā)人員也經(jīng)常自己開發(fā)測試代碼和測試工具主要使用白盒測試和靜態(tài)分析，也使用黑盒測試29單元測試流程測試計劃測試設(shè)計測試執(zhí)行測試記錄分析測試總結(jié)完畢缺陷跟蹤針對測試目標(biāo)，規(guī)定測試任務(wù)、資源分配、人員角色、進(jìn)度安排等。根據(jù)測試計劃，設(shè)計測試用例，包括：測試步驟、測試場景、測試代碼、測試數(shù)據(jù)(包括預(yù)期結(jié)果)。根據(jù)測試計劃，配置測試環(huán)境，并手動或者自動執(zhí)行測試設(shè)計。根據(jù)測試計劃，忠實(shí)地記錄測試執(zhí)行的過程和結(jié)果。分析測試記錄，如果發(fā)現(xiàn)與預(yù)期結(jié)果不同，確定并重現(xiàn)缺陷。檢查測試設(shè)計是否全部執(zhí)行完畢，缺陷是否全部關(guān)閉。記錄、分發(fā)、評估、關(guān)閉缺陷報告。分析測試過程和缺陷報告，評估測試質(zhì)量和測試效果，給出是否通過測試的建議。單元測試說明書——測試計劃編號如：stb-tp0013標(biāo)題如：文字排版功能.字間距.MayCourse版本號如：V1.0執(zhí)行狀態(tài)如：未執(zhí)行修改記錄如：2003年7月28日；××編制/修改；原因測試目標(biāo)如：語句覆蓋測試人員如：××1負(fù)責(zé)執(zhí)行測試用例xxx；××2負(fù)責(zé)執(zhí)行測試用例xxx測試用例編號(多個)如：stb-fg00021/stb-fg00031/stb-fg00035…被測試單元代碼位置如：$tag1/layout/MayCourse.cpp單元測試說明書——測試用例編號如：stb-tp00014標(biāo)題如：測試“文字排版功能.字間距.MayCourse”版本號如：V1.3執(zhí)行狀態(tài)如：已經(jīng)執(zhí)行修改記錄如：2003年7月29日；××編制/修改；原因測試步驟如：配置運(yùn)行環(huán)境；輸入測試數(shù)據(jù)；執(zhí)行X功能/測試代碼；觀察/記錄XX測試場景如：在聯(lián)網(wǎng)的環(huán)境下測試代碼如：stb-tp00021(位置)/stb-tp00035(位置)…測試數(shù)據(jù)如：輸入數(shù)據(jù)(輸入文件、文字描述…)；預(yù)期結(jié)果(性能、圖片、文字描述…)單元測試說明書——測試記錄編號如：stb-tp00015標(biāo)題如：記錄測試“文字排版功能.字間距.MayCourse”結(jié)果填寫記錄如：2003年7月30日；××填寫；原因測試用例編號如：stb-tp0015輸出結(jié)果如：圖片、文字描述測試觀察符合/不符合期望結(jié)果單元測試說明書——缺陷跟蹤報告編號如：stb-tp00016標(biāo)題如：文字排版功能.字間距.MayCourse計算錯誤版本號如：V1.3執(zhí)行狀態(tài)如：空白/草稿/提交/審批/分發(fā)/正在修改/修改完畢/正在確認(rèn)/關(guān)閉…修改記錄如：2003年7月31日；××編制/修改；原因測試環(huán)境和版本號碼、程序編寫人員錯誤嚴(yán)重程度和優(yōu)先級別錯誤詳細(xì)描述重現(xiàn)步驟和方式、