模版_性能測試計劃

1、網(wǎng)通系統(tǒng)壓力測試方案微軟（中國）有限公司編建日期2002年4月9日編制人馮江、謝華芳網(wǎng)通壓力測試方案版本控制版本日期作者備注vl.O2002-4-9馮江、謝華芳第3頁網(wǎng)通壓力測試方案目錄一、 概述41.1項目背景和測試目的 41.2被測系統(tǒng)介紹41.3測試可接收條件 5二、 測試需求5三、 測試方法53.1測試方法53.2測試案例93.3測試流程93.4數(shù)據(jù)文件準備 93.5測試腳本說明 10四、 測試環(huán)境104.1網(wǎng)絡(luò)拓撲圖104.2環(huán)境配置10五、 測試實施115.1試資源與進度 115.2 測試機構(gòu)和人員職責 12六、 試存儲管理規(guī)范 136.1存儲內(nèi)容、地點、命名規(guī)則 136.2存儲目

2、錄結(jié)構(gòu) 146.3備份14附錄 1: Env_Check_list15附錄2:測試工具原理 16第4頁網(wǎng)通壓力測試方案亠、概述1.1項目背景和測試目的為了保障網(wǎng)通即將建設(shè)的綜合營帳系統(tǒng)能夠順利實施， 網(wǎng)通希望在項目正式 實施前了解未來系統(tǒng)是否可以使用目前已經(jīng)選用的技術(shù)進行搭建， 即了解項目技 術(shù)的可行性。另外，網(wǎng)通還希望了解使用不同技術(shù)實現(xiàn)的差異。1.2被測系統(tǒng)介紹本次被測系統(tǒng)是針對網(wǎng)通項目的一個前期實驗系統(tǒng)。系統(tǒng)邏輯結(jié)構(gòu)圖如下:整個系統(tǒng)分為三個主要部分，主要功能包括:1. 系統(tǒng)A系統(tǒng)A是整個系統(tǒng)的數(shù)據(jù)入口，可以將客戶請求傳給Biztalk或者直接傳給系統(tǒng)B。系統(tǒng)A可以通過兩種方法接收客戶請求

3、傳給系統(tǒng)。一種通過Tuexdo(A)接收用戶請求，另一種可以直接通過WebLogic(A)接收用戶請求。2. BiztalkBiztalk是整個系統(tǒng)的中心，負責連接系統(tǒng)A和B，主要目的是同步處理系統(tǒng) 消息。另外，由于測試需要，Biztalk本身可以接收用戶請求（Http）。3. 系統(tǒng)B可以看作系統(tǒng)的服務(wù)端。接收Biztalk的請求，并返回結(jié)果。1.3測試可接收條件1、每次測試交易成功率在90%以上2、用戶每個請求的響應時間低于 2秒每次測試，以上條件必須同時滿足，方視為本次測試通過。1、測試需求本次測試的需求包括：1、Biztalk系統(tǒng)的處理能力2、整個系統(tǒng)能夠支持多少用戶同時訪問3、不同技術(shù)

4、間實現(xiàn)的差異三、測試方法3.1測試方法測試過程采用自動測試工具進行。目前暫時決定使用Mercury In teractive公司的測試產(chǎn)品：LoadRu nner。1、測試Biztalk系統(tǒng)的處理能力：.-BiztalkHttp/XML101AIC/channel、Httpportzx第7頁網(wǎng)通壓力測試方案第#頁網(wǎng)通壓力測試方案圖2、測試Biztalk系統(tǒng)的處理能力模擬多個Web類型的虛擬用戶，同時向 Biztalk系統(tǒng)發(fā)送HTTP請求，之后 記錄每個虛擬用戶的響應時間。2、整個系統(tǒng)能夠支持多少用戶同時訪問方法一：模擬多個Web類型的虛擬用戶，同時向WebLogic(A)發(fā)送HTTP請求，之后

5、 記錄每個虛擬用戶的響應時間。第#頁網(wǎng)通壓力測試方案第#頁網(wǎng)通壓力測試方案圖3、測試整個系統(tǒng)能夠支持多少用戶同時訪問(方法一)第#頁網(wǎng)通壓力測試方案方法二：模擬多個Tuxedo類型的虛擬用戶（即模擬Tuxedo客戶端），同時向Tuxedo（A） 的服務(wù)發(fā)送Tuxedo請求，之后記錄每個虛擬用戶的響應時間。圖4、測試整個系統(tǒng)能夠支持多少用戶同時訪問（方法二）3、不同技術(shù)間實現(xiàn)的差異方法一：模擬多個Tuxedo類型的虛擬用戶（即模擬Tuxedo客戶端），同時向Tuxedo（A） 的服務(wù)發(fā)送Tuxedo請求，并且Tuxedo（A）發(fā)送的請求，不經(jīng)過 Biztalk系 統(tǒng)，之后記錄每個虛擬用戶的響應時

6、間。第8頁網(wǎng)通壓力測試方案Tuxedo(A)AServiceTuxedoHttp/XML圖5、測試不同技術(shù)間實現(xiàn)的差異（方法一）方法二：模擬多個 Web類型的虛擬用戶，同時向WebLogic（A）的發(fā)送HTTP請求，并 且WebLogic（ A）發(fā)送的請求，不經(jīng)過 Biztalk系統(tǒng)，之后記錄每個虛擬用戶的 響應時間。第9頁網(wǎng)通壓力測試方案第#頁網(wǎng)通壓力測試方案Http/XML圖6、測試不同技術(shù)間實現(xiàn)的差異（方法17二Tuxedo(A)WTC> servle.WebLogic(A)第10頁網(wǎng)通壓力測試方案3.2測試案例測試目的虛擬用戶 類型Case No.并發(fā)用戶數(shù)交易循環(huán) 次數(shù)測試Bi

7、ztalk系統(tǒng)的處理能力WEB001002003004整個系統(tǒng)能夠支 持多少用戶同時 訪問WEB005006007008TUXEDO009010011012不同技術(shù)間實現(xiàn) 的差異WEB013014015016TUXEDO0170180190203.3測試流程正式測試過程如下：1確認被測環(huán)境正常(Env_Check_list)2、確認測試環(huán)境設(shè)置(Env_Check_list)3、 開始測試一 一4、存儲測試結(jié)果5、系統(tǒng)調(diào)試6、應用調(diào)試7、環(huán)境維護3.4數(shù)據(jù)文件準備數(shù)據(jù)文件名稱包含內(nèi)容說明數(shù)據(jù)量第12頁網(wǎng)通壓力測試方案3.5測試腳本說明腳本名稱描述（TranNo.:Tran 名稱:解釋）參數(shù)說明

8、（參數(shù)：說明）數(shù)據(jù)（參數(shù):文件：方法）四、測試環(huán)境4.1網(wǎng)絡(luò)拓撲圖被測系統(tǒng)'I網(wǎng)絡(luò)-1控制臺測試系統(tǒng)圖7、測試網(wǎng)絡(luò)拓撲圖4.2環(huán)境配置類型配置軟件被測系統(tǒng)服務(wù)器1服務(wù)器2服務(wù)器3測試系統(tǒng)測試機控制臺網(wǎng)絡(luò)五、測試實施5.1試資源與進度項目 階段任務(wù)分解任務(wù)內(nèi)容完成標準責任人資源與 時間項目 啟動設(shè)立項目項目定義，規(guī)劃項目運作模式， 編制項目計劃，組建項目班子與 實施隊伍輸出項目計劃測試經(jīng)理0.5人天測試 計劃 和測 試設(shè) 計測試需求 調(diào)研明確測試需求、測試目標、界定 測試范圍、任務(wù)和具體內(nèi)容雙方就測試需求達 成共識測試人員 微軟負責人0.5人天制定測試 萬案細化測試方案，定義測試范 圍，

9、并定義各項測試活動和步 驟，具體安排測試實施過程及測 試進度輸出測試方案 （初稿）測試經(jīng)理2人天測試方案 評審對測試方案定義的功能、性能測 試范圍、測試策略、測試組織實 施過程、測試進度等進行評審輸出測試方案 （討論稿），對測試 方案中涉及的各項 內(nèi)容達成共識微軟負責人 測試經(jīng)理1人天測試準備工作搭建應用 運行環(huán)境搭建應用所需的環(huán)境，并建立測 試數(shù)據(jù)庫應用正常運行微軟負責人搭建測試運行環(huán)境搭建測試所需的環(huán)境，包括測試 工具軟件、性能監(jiān)控軟件等各測試軟件正常運 行測試人員1人天準備測試 數(shù)據(jù)準備必要的功能及壓力測試所 需的測試數(shù)據(jù)輸出測試數(shù)據(jù)準 備清單，并準備好 測試數(shù)據(jù)測試人員 微軟開發(fā)人員1

10、人天測試開發(fā)開發(fā)壓力 測試腳本按照壓力測試案例設(shè)計，開發(fā)測 試腳本輸出可執(zhí)行的測試 腳本測試人員1人天第ii頁網(wǎng)通壓力測試方案測試執(zhí)行預測試證明測試腳本可用，證明測試流 程可用證明測試環(huán)境配置合理證明測試數(shù)據(jù)準備充分按照預期可接收條件：運行2x2場景成功運行25x25場景成功微軟負責人 微軟開發(fā)人員 測試經(jīng)理1天系統(tǒng)調(diào)優(yōu)使系統(tǒng)運行在最佳狀態(tài)運行500或1000并發(fā)用戶場景，測試 經(jīng)理和項目經(jīng)理直 到認為測試停止微軟負責人 微軟開發(fā)人員 測試經(jīng)理2天極限測試測試系統(tǒng)究竟能夠承受的業(yè)務(wù) 量按照預期可接收條 件，系統(tǒng)已經(jīng)不能 承受測試人員1天壓力測試 評估按照測試評估策略對性能進行 評估，并對系統(tǒng)性

11、能進行分析輸出性能測試評 估報告測試評估總結(jié)總結(jié)輸出項目報告、相關(guān)文檔歸檔， 安排后續(xù)工作輸出項目報告測試人員5.2測試機構(gòu)和人員職責角色任務(wù)網(wǎng)通項目經(jīng)理測試策略制定，管理協(xié)調(diào)測試項目經(jīng)理：測試組織、管理協(xié)調(diào)測試組測試執(zhí)行并協(xié)助進行結(jié)果分析開發(fā)專豕業(yè)務(wù)指導，調(diào)優(yōu)指導測試專豕測試工具支持，測試方案審核系統(tǒng)專家系統(tǒng)恢復、系統(tǒng)問題顧問網(wǎng)通項目經(jīng)理測試項寸經(jīng)理專家組測試組開發(fā)專家測試專家系統(tǒng)專家圖8測試組織結(jié)構(gòu)圖六、試存儲管理規(guī)范6.1存儲內(nèi)容、地點、命名規(guī)則存儲內(nèi)容：a）測試腳本b）測試場景c）測試結(jié)果d）相關(guān)文檔e）數(shù)據(jù)文件 存儲地點：運行控制臺的主機硬盤上，存儲結(jié)構(gòu)見下面 圖9 命名規(guī)則：a）測

12、試腳本LTscr_App_SubApp_version說明：LTsc： Load Test ScriptApp：業(yè)務(wù)名稱SubApp：子業(yè)務(wù)名稱（可選）Versio n：腳本的版本號b）測試場景LTsce_App_SubAppConCurrUser_lteration說明：LTsce Load Test Seenario App：業(yè)務(wù)名稱SubApp：子業(yè)務(wù)名稱（可選）ConCurrUse：并發(fā)用戶數(shù) Iterati on：每個用戶循環(huán)次數(shù)c）測試結(jié)果LTres_ App_SubAppConCurrUser_lteration _time說明：LTres Load Test ResultApp

13、：業(yè)務(wù)名稱SubApp：子業(yè)務(wù)名稱（可選）ConCurrUse:并發(fā)用戶數(shù) Iterati on：每個用戶循環(huán)次數(shù) Time：第幾次測試6.2存儲目錄結(jié)構(gòu)DF_LoadTestScriptSeen arioPre_TestTestResultDate( MM_DD_YYYY)Doeume ntDataFile圖9、測試存儲結(jié)構(gòu)圖說明：Script：存儲測試腳本 Seenario存儲測試場景Result：存儲測試結(jié)果Doeume nt:存儲相關(guān)文檔DataFile：存儲數(shù)據(jù)文件錄，全部備份到6.3備份測試結(jié)果每天在測試結(jié)束后備份一次，將“ D:LoadTest”磁帶機或 “ AnyPCC: Lo

14、adTest_bak'第17頁網(wǎng)通壓力測試方案附錄 1: Env_Check_list日期：2002年 月 日 時 分測試結(jié)果名稱：檢查內(nèi)容如下:檢查項檢杳人結(jié)論備注被測試系統(tǒng)：Web Server清除Cache和臨時文件Web Server重新啟動Application Server 清除 Cache和臨時文件Application Server 重新啟動DB Server清除新生成的記錄和臨時文件DB Server重新啟動確認應用可以正常運行測試系統(tǒng)：測試機清除臨時文件測試機重新啟動控制臺機器清除臨時文件控制臺機器重新啟動測試機LoadRunner RCL已經(jīng)啟動確認測試機臨時空間

15、大于 1GIteration次數(shù)設(shè)置正確不寫log確認Proxy設(shè)置Simulate browser Cache en ableDownl oad non-HTML resources en ableSimulate a new user each iterati on en able參數(shù)方法正確DNS Cache en ableKeep-Alive en ableCon cure nt conn ecti ons = 4測試監(jiān)督簽字：附錄2:測試工具原理Mercury Interactive公司的客戶機/服務(wù)器系統(tǒng)的壓力測試工具 LoadRunner,其工作原理為：通過一個中心控制點，在一個

16、或幾個主機上同時 模擬成百上千的實際用戶的操作，從而生成一致的、可測量的及可重復的系統(tǒng)負載，并記錄特定交易操作的響應時間。概要地說：首先錄制應用程序的操作過程， 測試工具會自動生成可執(zhí)行的腳本，該腳本運行起來，從服務(wù)器端看，就如同一個實際的用戶在進行操作，我們稱為虛擬用戶。然后，通過中心控制點 (Co ntroller)設(shè)置測試場景，控制許多個虛擬用戶在多臺 Age nt機器上同時運行， 監(jiān)控運行狀態(tài)，收集響應時間等性能數(shù)據(jù)。使用虛擬用戶(Vuset)替代實際用戶每個模擬的用戶即為一個虛擬用戶，其實就是一個運行的測試腳本。LoadRunner在PC上主要有兩種Vuser：非圖形用戶界面 的虛擬

17、用戶 (Non-GUI Vuser)和圖形用戶界面虛擬用戶(GUI Vuser)。Non-GUI Vuser是直接通過 API調(diào)用和 Web/Application/DB服務(wù)器進行交互 的，它的腳本是直接向服務(wù)器提交請求的類C語言程序。多個Non-GUI Vuser可運行于一臺主機上。 Vuser可通過Virtual User Generator來錄制生成，在錄制 腳本中可以標明某一活動(transaction)的開始和結(jié)束點，用于具體度量這一活 動的響應時間及性能，還可以在某一操作之前定義集結(jié)點(rendezvous，用于測試這一操作的多用戶并發(fā)。GUI Vuser模擬實際用戶運行應用程序進

18、行操作的情況，它的腳本記錄了客 戶機上所有的界面操作。GUI Vuser可通過Mercury In teractive公司的功能測試 工具WinRunner來錄制生成。由于本次壓力測試的目的是檢驗服務(wù)器對壓力的承載能力，因此建議通過在一臺主機上運行多個Non-GUI Vuser來模擬多用戶的活動進行壓力測試。測試腳本的參數(shù)化測試腳本反映的是錄制時輸入的數(shù)據(jù)的情況。 但由于錄制操作可能引起原輸 入數(shù)據(jù)狀態(tài)的變化，因此要修改測試腳本中的輸入數(shù)據(jù)及與其相關(guān)的數(shù)據(jù)；而且為了更準確地模擬真實系統(tǒng)的運作，輸入的數(shù)據(jù)及與其相關(guān)的數(shù)據(jù)就必須參數(shù) 化，并且為該參數(shù)建立一個包含所有數(shù)據(jù)的參數(shù)文件。這樣當模擬多用戶

19、進行壓 力測試時，就可控制每個虛擬用戶使用參數(shù)文件中的不同數(shù)據(jù)。通過中心控制點(Controller)管理虛擬用戶在中心控制點，定制測試場景，即將要在測試會話中發(fā)生的事件。定制包括 模擬的用戶個數(shù)、模擬用戶所在的主機、模擬用戶的動作等。在中心控制點控制場景的運行，管理所有虛擬用戶的活動，監(jiān)控虛擬用戶的狀態(tài)，也可以無人照料地運行。場景執(zhí)行完后，可通過Controller的性能分析圖形和報表對結(jié)果數(shù)據(jù)進行分析。代理程序必須安裝在參與測試的每一臺主機上，當場景開始運行，代理程序 負責Controller與主機之間的通訊。C lient使用自動生成的圖表和報表分析測試結(jié)果在每個測試場景運行完后，Con

20、troller自動收集服務(wù)器、網(wǎng)絡(luò)及客戶端的性 能數(shù)據(jù)，并以圖形和報表的形式顯示。其中包括服務(wù)器響應Vuser以及transaction 提交的請求和任務(wù)的時間；在運行期間的基于活動 Vuser數(shù)目的transaction性能時間；服務(wù)器磁盤I/O、CPU使用情況，網(wǎng)絡(luò)延遲等數(shù)據(jù)。測試方法及步驟1、建立虛擬用戶（生成測試腳本）在LoadRunner的Virtual User Generator中錄制測試腳本，建立虛擬用戶，一 般一個業(yè)務(wù)操作錄制成一個測試腳本，步驟如下：1）根據(jù)應用軟件的體系結(jié)構(gòu)、中間件、數(shù)據(jù)庫或客戶端與服務(wù)器之間的協(xié)議，選擇對應的虛擬用戶類型，如：WEB、Oracle、Tux

21、edo、Win Socket2）指定要錄制的可執(zhí)行程序，開始錄制；3）在Vuser init section中記錄登錄應用系統(tǒng)的過程；4）在 Actions section中記錄功能操作過程，適當加入事務(wù)（transaction的開始與結(jié)束點（事務(wù)也可在腳本生成后，直接在腳本中加入）。當需要 記錄壓力測試過程中某一操作的響應時間時，則在執(zhí)行這一操作前定義事務(wù)的開始點，并給這一事務(wù)命名，在操作結(jié)束后定義該事務(wù)的結(jié)束點；5）在Vuser end section記錄退出系統(tǒng)的過程；6）回放測試腳本，檢驗測試腳本執(zhí)行的正確性（有可能要恢復錄制以前的 數(shù)據(jù)狀態(tài)，或進行必要的參數(shù)化）。2、試腳本的參數(shù)化測

22、試腳本反映的是錄制時輸入的數(shù)據(jù)的情況，但為了更準確地模擬真實系統(tǒng) 的運作，如模擬不同用戶的登錄，不同用戶查詢股票行情，不同用戶在做不同的 股票交易等情況，有些輸入的數(shù)據(jù)必須參數(shù)化，并且為該參數(shù)建立一個包含所有 可能的數(shù)據(jù)的參數(shù)文件。這樣當模擬多用戶進行壓力測試時，就可控制每個虛擬 用戶使用參數(shù)文件中的不同數(shù)據(jù)。參數(shù)的選擇、參數(shù)文件的定制具體根據(jù)應用軟件的實際情況而定，但要保證 錄制的腳本能夠順利地執(zhí)行回放，且完成相應的業(yè)務(wù)功能。3、定制壓力測試場景在LoadRunner的Controller中，定制壓力測試場景，也就是模擬一個多用戶 并發(fā)的情況，包括：運行虛擬用戶的測試主機、在測試機上運行的虛

23、擬用戶數(shù)、 虛擬用戶運行的測試腳本、每個虛擬用戶的循環(huán)次數(shù)等等。1）虛擬用戶并發(fā)數(shù)：定義執(zhí)行某一測試腳本的虛擬用戶并發(fā)數(shù)，則虛擬用 戶并發(fā)總數(shù)為各腳本虛擬用戶并發(fā)數(shù)之和；由于在運行測試腳本時，忽 略了 Think Time，因此一個虛擬用戶的操作是非常連貫的，其強度遠遠 大于一個實際用戶的操作強度；另外，為了測試引起系統(tǒng)性能急劇下降 的拐點和引起系統(tǒng)崩潰的崩潰點，并發(fā)的虛擬用戶數(shù)需逐漸增加，每次 增加的數(shù)量可視測試的具體情況而定。2）測試主機：選擇運行某一測試腳本的測試主機。3）虛擬用戶執(zhí)行的腳本：選擇虛擬用戶執(zhí)行的測試腳本，即完成某一業(yè)務(wù) 功能的測試腳本。4）Iteration Count：

24、虛擬用戶運行測試腳本 Actions sectior部分的循環(huán)次 數(shù)，增加循環(huán)次數(shù)是為了保證在某一稍長的時間段內(nèi)有一個穩(wěn)定的負載，這樣統(tǒng)計的結(jié)果才比較準確。需要注意的是，每臺測試機上所支持的虛擬用戶數(shù)，與測試機的配置和錄制 的應用程序的大小有關(guān)。每臺測試機上運行的虛擬用戶數(shù)不能太多，因為如果太 多的話，性能瓶頸將會出現(xiàn)在客戶端，那么測出的結(jié)果將毫無意義。4、運行壓力測試場景在LoadRunner的Controller中，運行壓力測試場景，就可以控制測試機上的 所有虛擬用戶并發(fā)進行相應的操作。步驟為：1）啟動測試機的 Remote Command Launche；2）在Controller中使測

25、試機處于“連接”狀態(tài)3）在Controller中，對所有虛擬用戶發(fā)出初始化（initialize）命令，測試主 機的RCL啟動Age nt，并將虛擬用戶初始化，執(zhí)行測試腳本中Vuser init section部分，使之登錄系統(tǒng)；4）在Controller中，對所有虛擬用戶發(fā)出運行（run）命令，通過測試主機的Age nt運行各虛擬用戶，執(zhí)行測試腳本中的Actions section部分，在Con troller端監(jiān)控虛擬用戶的狀態(tài)及執(zhí)行結(jié)果；5）每個虛擬用戶按指定的循環(huán)次數(shù)執(zhí)行測試腳本中的Actions section部分，然后執(zhí)行Vuser end sectioi部分，退出應用系統(tǒng)；6）當每一個虛擬用戶運行完成后，整個測試場景運行結(jié)束。在壓力測試場景執(zhí)行過程中，Controller會自動收集服務(wù)器、網(wǎng)絡(luò)及客戶端的性能數(shù)據(jù)， 以及各事務(wù)的響應時間等。5、監(jiān)控系統(tǒng)性能在測試場景運行過程中，我們需要監(jiān)控：1）監(jiān)控運行虛擬用戶的客戶端的資源使用情況，使用Windows的性能監(jiān)視 器監(jiān)控客戶端的CPU、Memory等資源使用情況，以防止性能瓶頸出現(xiàn) 在客戶端；另外，可以在進