hw軟件測(cè)試（周）8.ppt

Unit8性能測(cè)試 8 1基本概念 軟件系統(tǒng)的性能包括執(zhí)行效率 資源占用 穩(wěn)定性 安全性 兼容性 可擴(kuò)展性 可靠性等 通常情況下 性能測(cè)試在功能測(cè)試之后進(jìn)行 響應(yīng)時(shí)間 響應(yīng)時(shí)間指的是客戶端發(fā)出請(qǐng)求到得到響應(yīng)的整個(gè)過程所經(jīng)歷的時(shí)間 響應(yīng)時(shí)間 N1 N2 N3 N4 A1 A2 A3 并發(fā)用戶數(shù) 并發(fā)用戶數(shù)是指在某一給定時(shí)間內(nèi) 某個(gè)特定點(diǎn)上進(jìn)行會(huì)話操作的用戶數(shù) 估算并發(fā)用戶數(shù)的公式 n 登錄會(huì)話的數(shù)量L 登錄會(huì)話的平均長(zhǎng)度 T 考察的時(shí)間段長(zhǎng)度 例8 1一個(gè)軟件系統(tǒng)每天大約有400個(gè)用戶訪問 用戶在一天之內(nèi)有8小時(shí)內(nèi)使用該系統(tǒng) 從登錄到退出該系統(tǒng)的平均時(shí)間為4個(gè)小時(shí) 請(qǐng)計(jì)算該系統(tǒng)的并發(fā)用戶數(shù)和并發(fā)用戶數(shù)的峰值是多少 C 400 4 8 200 吞吐量 吞吐量是指單位時(shí)間內(nèi)系統(tǒng)處理的客戶請(qǐng)求的數(shù)量 直接體現(xiàn)軟件系統(tǒng)的性能承載能力 一般來說 吞吐量用請(qǐng)求數(shù) 秒或頁面數(shù) 秒來衡量 從業(yè)務(wù)的角度 吞吐量也可以用訪問人數(shù) 天或處理的業(yè)務(wù)數(shù) 小時(shí)等單位來衡量 從網(wǎng)絡(luò)的角度來說 也可以用字節(jié)數(shù) 天等單位來考察網(wǎng)絡(luò)流量 資源利用率 資源利用率是指系統(tǒng)資源的使用程度 比如服務(wù)器的CPU利用率 內(nèi)存利用率 磁盤利用率 網(wǎng)絡(luò)帶寬利用率等 休眠時(shí)間 休眠時(shí)間又稱為思考時(shí)間 是指用戶請(qǐng)求的間隔時(shí)間 在交互式應(yīng)用中 用戶不大可能持續(xù)不斷地發(fā)出請(qǐng)求 一般模式是用戶發(fā)出一個(gè)請(qǐng)求 等待一段時(shí)間 再發(fā)出下一個(gè)請(qǐng)求 點(diǎn)擊率 點(diǎn)擊率是指每秒鐘用戶向Web服務(wù)器提交的HTTP請(qǐng)求的個(gè)數(shù) 并非鼠標(biāo)的一次單擊操作 8 2性能測(cè)試的分類 負(fù)載測(cè)試概念在這種測(cè)試中 將使測(cè)試對(duì)象承擔(dān)不同的工作量 以評(píng)測(cè)和評(píng)估測(cè)試對(duì)象在不同工作量條件下的性能行為 以及持續(xù)正常運(yùn)行的能力 負(fù)載測(cè)試的目標(biāo)是確定并確保系統(tǒng)在超出最大預(yù)期工作量的情況下仍能正常運(yùn)行 負(fù)載測(cè)試的加載方式 1 一次性加載 2 遞增加載 3 高低突變加載 4 隨機(jī)加載方式 壓力測(cè)試又稱為強(qiáng)度測(cè)試 是在強(qiáng)負(fù)載 大數(shù)據(jù)量 大量并發(fā)用戶等 下的測(cè)試 查看應(yīng)用系統(tǒng)在峰值使用情況下操作行為 從而有效地發(fā)現(xiàn)系統(tǒng)的某項(xiàng)功能隱患 系統(tǒng)是否具有良好的容錯(cuò)能力和可恢復(fù)能力 壓力測(cè)試分為高負(fù)載下的長(zhǎng)時(shí)間 如24小時(shí)以上 的穩(wěn)定性壓力測(cè)試和極限負(fù)載情況下導(dǎo)致系統(tǒng)崩潰的破壞性壓力測(cè)試 負(fù)載測(cè)試和壓力測(cè)試的區(qū)別 負(fù)載測(cè)試是通過不斷加載來觀察不同負(fù)載下系統(tǒng)的響應(yīng)時(shí)間和數(shù)據(jù)吞吐量 系統(tǒng)占用的資源 如CPU 內(nèi)存 等 以檢驗(yàn)系統(tǒng)的行為和特性 以發(fā)現(xiàn)系統(tǒng)可能存在的性能瓶頸 內(nèi)存泄漏 不能實(shí)時(shí)同步等問題 壓力測(cè)試是在強(qiáng)負(fù)載 大數(shù)據(jù)量 大量并發(fā)用戶等 下的測(cè)試 查看應(yīng)用系統(tǒng)在峰值使用情況下操作行為 從而有效地發(fā)現(xiàn)系統(tǒng)的某項(xiàng)功能隱患 系統(tǒng)是否具有良好的容錯(cuò)能力和可恢復(fù)能力 可靠性測(cè)試是為了檢驗(yàn)系統(tǒng)的可靠性是否達(dá)到預(yù)期目標(biāo)而進(jìn)行的測(cè)試 平均失效間隔時(shí)間MTBF MeanTimeBetweenFailures 是否超過規(guī)定時(shí)限 因故障而停機(jī)的時(shí)間MTTR MeanTimeToRepairs 在一年中應(yīng)不超過多少時(shí)間 安全性測(cè)試安全性測(cè)試是要檢驗(yàn)在系統(tǒng)中已經(jīng)存在的系統(tǒng)安全性 保密性措施是否發(fā)揮作用 有無漏洞 以檢查系統(tǒng)對(duì)非法侵入的防范能力 測(cè)試人員扮演非法入侵者 系統(tǒng)安全設(shè)計(jì)的準(zhǔn)則是 使非法侵入的代價(jià)超過被保護(hù)信息的價(jià)值 兼容性 配置測(cè)試目的就是檢驗(yàn)被測(cè)應(yīng)用對(duì)其他應(yīng)用或者系統(tǒng)的兼容性 比如在對(duì)一個(gè)共享資源 數(shù)據(jù) 數(shù)據(jù)文件或者內(nèi)存 進(jìn)行操作時(shí) 檢測(cè)兩個(gè)或多個(gè)系統(tǒng)需求能否正常工作以及相互交互使用 在做兼容性測(cè)試時(shí) 要主要關(guān)注如下幾個(gè)問題 當(dāng)前系統(tǒng)可能運(yùn)行在哪些不同的操作系統(tǒng)環(huán)境下 當(dāng)前系統(tǒng)可能與哪些不同類型的數(shù)據(jù)庫進(jìn)行數(shù)據(jù)交換 當(dāng)前系統(tǒng)可能運(yùn)行在哪些不同的硬件配置的環(huán)境上 當(dāng)前系統(tǒng)可能需要與哪些軟件系統(tǒng)協(xié)同工作 這些軟件系統(tǒng)可能的版本有哪些 是否需要綜合測(cè)試 容錯(cuò)性測(cè)試容錯(cuò)性測(cè)試是檢查軟件在異常條件下自身是否具有防護(hù)性措施或者災(zāi)難恢復(fù)手段 可用性測(cè)試可用性測(cè)試是面向用戶的系統(tǒng)測(cè)試 進(jìn)行可用性測(cè)試時(shí) 測(cè)試人員應(yīng)該關(guān)注如下幾個(gè)方面 系統(tǒng)中是否存在繁瑣的功能以及指令 安裝過程是否復(fù)雜 錯(cuò)誤信息提示內(nèi)容是否詳細(xì) GUI接口是否標(biāo)準(zhǔn) 登錄是否方便 需要用戶記住內(nèi)容的多少 幫助文本是否詳細(xì) 頁面風(fēng)格是否一致 是否會(huì)造成理解上的歧義 執(zhí)行的操作是否與預(yù)期的功能相符 如點(diǎn)擊保存按鈕時(shí)記錄是否存入數(shù)據(jù)庫 文檔測(cè)試文檔測(cè)試是對(duì)系統(tǒng)提交給用戶的文檔進(jìn)行驗(yàn)證 并不是一般性的審查活動(dòng) 通過文檔測(cè)試保證用戶文檔的正確性并使得操作手冊(cè)能夠準(zhǔn)確無誤 8 3Web測(cè)試 眾所周知 因特網(wǎng)網(wǎng)頁是由文字 圖形 聲音 視頻和超級(jí)鏈接等組成的文檔 網(wǎng)絡(luò)客戶端用戶通過在瀏覽器中的操作 搜索瀏覽所需要的信息資源 針對(duì)Web網(wǎng)站這一特定類型軟件的測(cè)試 包含了許多測(cè)試技術(shù) 如功能測(cè)試 性能測(cè)試 可用性測(cè)試 兼容性測(cè)試 安全性測(cè)試等 8 3 1功能測(cè)試 1 鏈接測(cè)試鏈接是Web應(yīng)用系統(tǒng)的一個(gè)主要特征 它是在頁面之間切換和指導(dǎo)用戶去一些不知道地址的頁面的主要手段 鏈接測(cè)試可包括三個(gè)步驟 測(cè)試所有鏈接是否按指示的那樣確實(shí)鏈接到了該鏈接的頁面 測(cè)試所鏈接的頁面是否存在 保證Web應(yīng)用系統(tǒng)上沒有孤立的頁面 所謂孤立頁面是指沒有鏈接指向該頁面 只有知道正確的URL地址才能訪問 2 表單測(cè)試測(cè)試表單能否正常工作當(dāng)用戶給Web應(yīng)用系統(tǒng)管理員提交信息時(shí) 就需要使用表單操作 例如用戶注冊(cè) 登陸 信息提交等 表單測(cè)試主要是模擬表單提交過程 檢測(cè)其準(zhǔn)確性 確保每一個(gè)字段在工作中正確 3 對(duì)數(shù)據(jù)校驗(yàn)的測(cè)試如果Web系統(tǒng)根據(jù)業(yè)務(wù)規(guī)則需要對(duì)用戶的輸入進(jìn)行校驗(yàn) 則需要保證這些校驗(yàn)功能能正常使用 4 Cookies測(cè)試Cookies通常用來存儲(chǔ)用戶信息和用戶在某應(yīng)用系統(tǒng)的操作 當(dāng)一個(gè)用戶使用Cookies訪問了某一個(gè)應(yīng)用系統(tǒng)時(shí) Web服務(wù)器將發(fā)送關(guān)于用戶的信息 把該信息以Cookies的形式存儲(chǔ)在客戶端計(jì)算機(jī)上 這可用來創(chuàng)建動(dòng)態(tài)和自定義頁面或者存儲(chǔ)登陸等信息 Cookies測(cè)試檢查Cookies是否能正常工作 如Cookies是否起作用 是否按預(yù)定的時(shí)間進(jìn)行保存 刷新對(duì)Cookies有什么影響 5 數(shù)據(jù)庫測(cè)試在使用了數(shù)據(jù)庫的Web應(yīng)用系統(tǒng)中 一般可能發(fā)生兩種錯(cuò)誤 分別是數(shù)據(jù)一致性錯(cuò)誤和輸出錯(cuò)誤 數(shù)據(jù)一致性錯(cuò)誤主要是由于用戶提交的表單信息不正確而造成的輸出錯(cuò)誤主要是由于網(wǎng)絡(luò)速度或程序設(shè)計(jì)問題等引起的針對(duì)這兩種情況 可分別進(jìn)行測(cè)試 6 對(duì)應(yīng)用程序特定功能需求的測(cè)試最重要的是 測(cè)試人員需要對(duì)應(yīng)用程序特定的功能需求進(jìn)行驗(yàn)證 嘗試用戶可能進(jìn)行的所有操作 下訂單 更改訂單 取消訂單 核對(duì)訂單狀態(tài) 在貨物發(fā)送之前更改送貨信息 在線支付等等 這是用戶之所以使用網(wǎng)站的原因 一定要確認(rèn)網(wǎng)站能像廣告宣傳的那樣神奇 采取措施 深刻理解需求說明文檔 7 設(shè)計(jì)語言測(cè)試Web設(shè)計(jì)語言版本的差異可以引起客戶端或服務(wù)器端嚴(yán)重的問題 例如使用哪種版本的HTML等 當(dāng)在分布式環(huán)境中開發(fā)時(shí) 開發(fā)人員都不在一起 這個(gè)問題就顯得尤為重要 除了HTML的版本問題外 不同的腳本語言 例如Java JavaScript ActiveX VBScript或Perl等也要進(jìn)行驗(yàn)證 功能測(cè)試用例 8 3 2性能測(cè)試 1 負(fù)載測(cè)試負(fù)載測(cè)試是為了測(cè)量Web系統(tǒng)在某一負(fù)載級(jí)別上的性能 以保證Web系統(tǒng)在需求范圍內(nèi)能正常工作 負(fù)載級(jí)別可以是某個(gè)時(shí)刻同時(shí)訪問Web系統(tǒng)的用戶數(shù)量 也可以是在線數(shù)據(jù)處理的數(shù)量 負(fù)載測(cè)試包括的問題有 Web應(yīng)用系統(tǒng)能允許多少個(gè)用戶同時(shí)在線 如果超過了這個(gè)數(shù)量 會(huì)出現(xiàn)什么現(xiàn)象 Web應(yīng)用系統(tǒng)能否處理大量用戶對(duì)同一個(gè)頁面的請(qǐng)求 負(fù)載測(cè)試的作用是在軟件產(chǎn)品投向市場(chǎng)以前 通過執(zhí)行可重復(fù)的負(fù)載測(cè)試 預(yù)先分析軟件可以承受的并發(fā)用戶的數(shù)量極限和性能極限 以便更好地優(yōu)化軟件 2 壓力測(cè)試系統(tǒng)檢測(cè)不僅要使用戶能夠正常訪問站點(diǎn) 在很多情況下 可能會(huì)有黑客試圖通過發(fā)送大量數(shù)據(jù)包來攻擊服務(wù)器 出于安全的原因 測(cè)試人員應(yīng)該知道當(dāng)系統(tǒng)過載時(shí) 需要采取哪些措施 而不是簡(jiǎn)單地提升系統(tǒng)性能 這就需要進(jìn)行壓力測(cè)試 進(jìn)行壓力測(cè)試是指實(shí)際破壞一個(gè)Web應(yīng)用系統(tǒng) 測(cè)試系統(tǒng)的反映 壓力測(cè)試是測(cè)試系統(tǒng)的限制和故障恢復(fù)能力 也就是測(cè)試Web應(yīng)用系統(tǒng)會(huì)不會(huì)崩潰 在什么情況下會(huì)崩潰 黑客常常提供錯(cuò)誤的數(shù)據(jù)負(fù)載 通過發(fā)送大量數(shù)據(jù)包來攻擊服務(wù)器 直到Web應(yīng)用系統(tǒng)崩潰 接著當(dāng)系統(tǒng)重新啟動(dòng)時(shí)獲得存取權(quán) 壓力測(cè)試的區(qū)域包括表單 登陸和其他信息傳輸頁面等 負(fù)載 壓力測(cè)試應(yīng)該關(guān)注的問題如下 1 瞬間訪問高峰2 每個(gè)用戶傳送大量數(shù)據(jù)3 長(zhǎng)時(shí)間的使用 3 響應(yīng)速度測(cè)試用戶連接到Web應(yīng)用系統(tǒng)的速度根據(jù)上網(wǎng)方式的變化而變化 他們或許是電話撥號(hào) 或是寬帶上網(wǎng) 當(dāng)下載一個(gè)程序時(shí) 用戶可以等較長(zhǎng)的時(shí)間 但如果僅僅訪問一個(gè)頁面就不會(huì)這樣 如果Web系統(tǒng)響應(yīng)時(shí)間太長(zhǎng) 例如超過10秒鐘 用戶就會(huì)因沒有耐心等待而離開 表7 2某銀行項(xiàng)目的性能測(cè)試策略實(shí)例 8 3 3可用性測(cè)試 1 導(dǎo)航測(cè)試導(dǎo)航描述了用戶在一個(gè)頁面內(nèi)操作的方式 在不同的用戶接口控制之間 例如按鈕 對(duì)話框 列表和窗口等在一個(gè)頁面上放太多的信息往往起到與預(yù)期相反的效果導(dǎo)航的另一個(gè)重要方面是Web應(yīng)用系統(tǒng)的頁面結(jié)構(gòu) 導(dǎo)航 菜單 連接的風(fēng)格是否一致 主要測(cè)試目的是檢測(cè)一個(gè)Web應(yīng)用系統(tǒng)是否易于導(dǎo)航 具體內(nèi)容包括 導(dǎo)航是否直觀 Web系統(tǒng)的主要部分是否可通過主頁存取 Web系統(tǒng)是否需要站點(diǎn)地圖 搜索引擎或其他的導(dǎo)航幫助 2 圖形測(cè)試Web應(yīng)用系統(tǒng)的圖形可以包括圖片 動(dòng)畫 邊框 顏色 字體 背景 按鈕等 應(yīng)對(duì)它們進(jìn)行測(cè)試 要確保圖形有明確的用途驗(yàn)證所有頁面字體的風(fēng)格是否一致背景顏色應(yīng)該與字體顏色和前景顏色相搭配圖片的大小和質(zhì)量也是一個(gè)很重要的因素 3 內(nèi)容測(cè)試內(nèi)容測(cè)試用來檢驗(yàn)Web應(yīng)用系統(tǒng)提供信息的正確性 準(zhǔn)確性和相關(guān)性 頁面文本測(cè)試還應(yīng)該包括文字標(biāo)簽 它為網(wǎng)頁上的圖片提供特征描述 圖給出一個(gè)文字標(biāo)簽的例子 當(dāng)用戶把鼠標(biāo)移動(dòng)到網(wǎng)頁的某些圖片時(shí) 就會(huì)立即彈出關(guān)于圖片的說明性語言 4 整體界面測(cè)試整體界面是指整個(gè)Web應(yīng)用系統(tǒng)的頁面結(jié)構(gòu)設(shè)計(jì) 是給用戶的一個(gè)整體感 用戶界面測(cè)試主要包括以下幾個(gè)方面的內(nèi)容 站點(diǎn)地圖和導(dǎo)航條使用說明背景 顏色圖片表格 8 3 4客戶端兼容性測(cè)試 1 平臺(tái)測(cè)試在Web系統(tǒng)發(fā)布之前 需要在各種操作系統(tǒng)下對(duì)Web系統(tǒng)進(jìn)行兼容性測(cè)試 2 瀏覽器測(cè)試測(cè)試瀏覽器兼容性的一個(gè)方法是創(chuàng)建一個(gè)兼容性矩陣 在這個(gè)矩陣中 測(cè)試不同廠商 不同版本的瀏覽器對(duì)某些構(gòu)件和設(shè)置的適應(yīng)性 3 分辨率測(cè)試測(cè)試頁面在不同的分辨率模式下是否顯示正常 字體是否太小或太大 文本和圖片是否對(duì)齊 4 Modem連接速率測(cè)試測(cè)試Web用戶通過不同廠商生產(chǎn)的Modem上網(wǎng)時(shí)的連接速度 5 打印機(jī)測(cè)試驗(yàn)證網(wǎng)頁打印是否正常 6 組合測(cè)試根據(jù)Web系統(tǒng)可能的使用環(huán)境對(duì)各種軟硬件配置進(jìn)行組合測(cè)試 7 接口測(cè)試服務(wù)器接口外部接口錯(cuò)誤處理 8 3 5安全性測(cè)試 1 對(duì)目錄設(shè)置的測(cè)試Web安全的第一步就是正確設(shè)置目錄 每個(gè)目錄下應(yīng)該有index html或main html頁面 這樣就不會(huì)顯示該目錄下的所有內(nèi)容 以確保公司商業(yè)機(jī)密或客戶信息不被泄露 2 對(duì)SSL的測(cè)試SSL是一種加密通訊協(xié)議 使用SSL可以防止傳送的內(nèi)容及用戶密碼等信息被黑客獲取 用戶確定自己進(jìn)入一個(gè)SSL站點(diǎn)是因?yàn)闉g覽器出現(xiàn)了警告消息 而且在地址欄中的HTTP變成HTTPS 如果開發(fā)部門使用了SSL 測(cè)試人員需要確定是否有相應(yīng)的替代頁面 適用于3 0以下版本的瀏覽器 這些瀏覽器不支持SSL 還應(yīng)確認(rèn)是否有連接時(shí)間限制 及超過限制時(shí)間后會(huì)出現(xiàn)什么情況 當(dāng)用戶進(jìn)入或離開安全站點(diǎn)的時(shí)候 應(yīng)確認(rèn)是否有相應(yīng)的提示信息 3 登錄測(cè)試對(duì)用戶登錄進(jìn)行測(cè)試時(shí) 可考慮 系統(tǒng)能否阻止非法的用戶名或口令登錄 用戶登錄在某個(gè)時(shí)段若有次數(shù)限制 該限制是否奏效 若限制從某些IP地址登錄 該機(jī)制是否奏效 如果對(duì)同一用戶登錄有輸入密碼的次數(shù)限制 該機(jī)制是否奏效 對(duì)口令選擇的限制的測(cè)試 是否可以不登錄而直接瀏覽某個(gè)頁面 對(duì)Web應(yīng)用系統(tǒng)的超時(shí)限制的測(cè)試 4 日志文件測(cè)