技術(shù)培訓-手機app測試流程及測試點

技術(shù)培訓

----手機app測試12023/2/1引言引言

移動電話（英文名Mobile）通稱為手機，從開始的大哥大到后來的2G，現(xiàn)在的3G、4G，越來越智能化，面對如此快速的發(fā)展，手機帶來了無限的商機。截止2012年初，全球手機用戶數(shù)量達到60億，全球87%的人口都擁有手機，其中最大的增長來自中國和印度。22%的用戶每月至少上一次網(wǎng)，預計2016年，手機上網(wǎng)用戶將超過電腦。2主流手機操作系統(tǒng)3AndroidAndroid一詞的本義指“機器人”，同時也是Google于2007年11月5日宣布的基于Linux平臺的開源手機操作系統(tǒng)的名稱，該平臺由操作系統(tǒng)、中間件、用戶界面和應用軟件組成。生產(chǎn)Android手機的廠商：--臺灣：HTC--韓國：三星--美國：moto--中國：酷派、華為、小米、中興、魅族等IOSiOS是由蘋果公司開發(fā)的移動操作系統(tǒng)，最初是設計給iPhone使用的，后來陸續(xù)套用到iPoditouch、iPad以及AppleTV等產(chǎn)品上。最新版本：iOS_8手機測試分類4傳統(tǒng)手機測試是指測試手機本身，如抗壓、抗摔、抗疲勞、抗低溫高溫等，也包括手機本身的功能、性能等測試。手機應用軟件測試手機應用軟件是基于手機操作系統(tǒng)之上開發(fā)出來的軟件，做這樣的測試，就叫做手機應用軟件測試。手機測試與傳統(tǒng)測試的區(qū)別5網(wǎng)絡多樣化2G網(wǎng)絡、3G網(wǎng)絡、4G網(wǎng)絡、WIFI支持系統(tǒng)多樣化手機操作系統(tǒng)：Android、iOS、windowsPhone等。分辨率類型多樣化320*480480*800540*960720*1280（720P）等手機軟件測試定義6手機軟件測試就是符合多種網(wǎng)絡，不同系統(tǒng)不同分辨率下發(fā)現(xiàn)軟件缺陷，并保證提高軟件質(zhì)量的過程。什么是手機軟件測試？測試流程7接收版本UI測試：核對rp/效果圖功能測試：核對需求文檔兼容性測試、性能壓力測試

盡快申請到正式環(huán)境下測試

后臺數(shù)據(jù)統(tǒng)計測試

用戶行為統(tǒng)計測試進入正式環(huán)境，即試用行仍然為測試環(huán)境回歸測試發(fā)送上線報告主要測試策略8安裝、卸載測試UI測試功能測試性能測試交叉事件測試兼容測試升級、更新測試用戶體驗測試硬件環(huán)境測試客戶端數(shù)據(jù)庫測試安全測試安裝、卸載測試9安裝測試從不同的渠道獲取安裝程序是否正常安裝。軟件在不同操作系統(tǒng)下安裝是否正常。

軟件安裝后的是否能夠正常運行，安裝后的文件夾及文件是否寫到了指定的目錄里。軟件安裝各個選項的組合是否符合概要設計說明軟件安裝過程是否可以取消，點擊取消后，寫入的文件是否如概要設計說明處理軟件安裝過程中意外情況的處理是否符合需求（如死機，重啟，斷電）安裝空間不足)時是否有相應提示安裝后沒有生成多余的目錄結(jié)構(gòu)和文件對于需要通過網(wǎng)絡驗證之類的安裝，在斷網(wǎng)情況下嘗試一下還需要對安裝手冊進行測試，依照安裝手冊是否能順利安裝卸載測試直接刪除安裝文件夾卸載是否有提示信息。測試系統(tǒng)直接卸載程序是否有提示信息。測試卸載后文件是否全部刪除所有的安裝文件夾。卸載過程中出現(xiàn)的意外情況的測試（如死機、斷電、重啟）。卸載是否支持取消功能，單擊取消后軟件卸載的情況系統(tǒng)直接卸載UI測試，是否有卸載狀態(tài)進度條提示。UI測試10測試用戶界面(如菜單、對話框、窗口和其它可規(guī)控件)布局、風格是否滿足客戶要求、文字是否正確、頁面是否美觀、文字、圖片組合是否完美、操作是否友好等。導航測試按鈕、對話框、列表和窗口等；或在不同的連接頁面之間需要導航是否易于導航，導航是否直觀是否需要搜索引擎導航幫助是否準確直觀導航與頁面結(jié)構(gòu)、菜單、連接頁面的風格是否一致圖形測試橫向比較。各控件操作方式統(tǒng)一自適應界面設計，內(nèi)容根據(jù)窗口大小自適應頁面標簽風格是否統(tǒng)一頁面是否美觀頁面的圖片應有其實際意義而要求整體有序美觀圖片質(zhì)量要高且圖片尺寸在設計符合要求的情況下應盡量小界面整體使用的顏色不宜過多內(nèi)容測試輸入框說明文字的內(nèi)容與系統(tǒng)功能是否一致文字長度是否加以限制文字內(nèi)容是否表意不明是否有錯別字信息是否為中文顯示是否有敏感性詞匯、關(guān)鍵詞是否有敏感性圖片，如：涉及版權(quán)、專利、隱私等圖片功能測試11運行APP應用的前后臺切換免登錄數(shù)據(jù)更新離線瀏覽APP更新定位、照相機服務時間測試PUSH測試App安裝完成后的試運行，可正常打開軟件。App打開測試，是否有加載狀態(tài)進度提示。App打開速度測試，速度是否可觀。App頁面間的切換是否流暢，邏輯是否正確注冊登錄注銷APP切換到后臺，再回到app，檢查是否停留在上一次操作界面。APP切換到后臺，再回到app，檢查功能及應用狀態(tài)是否正常，app切換到后臺，再回到前臺時，注意程序是否崩潰，功能狀態(tài)是否正常。手機鎖屏解屏后進入app注意是否會崩潰，功能狀態(tài)是否正常。

當App使用過程中有電話進來中斷后再切換到app，功能狀態(tài)是否正常當殺掉app進程后，再開啟app，app能否正常啟動。出現(xiàn)必須處理的提示框后，切換到后臺，再切換回來，檢查提示框是否還存在，有時候會出現(xiàn)應用自動跳過提示框的缺陷。對于有數(shù)據(jù)交換的頁面，每個頁面都必需要進行前后臺切換、鎖屏的測試，這種頁面最容易出現(xiàn)崩潰。很多應用提供免登錄功能，當應用開啟時自動以上一次登錄的用戶身份來使用app。

app有免登錄功能時，需要考慮版本差異。

考慮無網(wǎng)絡情況時能否正常進入免登錄狀態(tài)。切換用戶登錄后，要校驗用戶登錄信息及數(shù)據(jù)內(nèi)容是否相應更新，確保原用戶退出。根據(jù)現(xiàn)有規(guī)則，一個帳戶只允許登錄一臺機器。所以，需要檢查一個帳戶登錄多臺手機的情況。原手機里的用戶需要被踢出，給出友好提示。app切換到后臺，再切回前臺的校驗切換到后臺，再切換回前臺的測試

密碼更換后，檢查有數(shù)據(jù)交換時是否進行了有效身份的校驗

支持自動登錄的應用在進行數(shù)據(jù)交換時，檢查系統(tǒng)是否能自動登錄成功并且數(shù)據(jù)操作無誤。檢查用戶主動退出登錄后，下次啟動app，應停留在登錄界面需要確定哪些地方需要提供手動刷新，哪些地方需要自動刷新，哪些地方需要手動+自動刷新。

確定哪些地方從后臺切換回前臺時需要進行數(shù)據(jù)更新。

根據(jù)業(yè)務、速度及流量的合理分配，確定哪些內(nèi)容需要實時更新，哪些需要定時更新。

確定數(shù)據(jù)展示部分的處理邏輯，是每次從服務端請求，還是有緩存到本地，這樣才能有針對性的進行相應測試。

檢查有數(shù)據(jù)交換的地方，均有相應的異常處理很多應用會支持離線瀏覽，即在本地客戶端會緩存一部分數(shù)據(jù)供用戶查看。

在無網(wǎng)絡情況可以瀏覽本地數(shù)據(jù)

退出app再開啟app時能正常瀏覽切換到后臺再切回前臺可以正常瀏覽鎖屏后再解屏回到應用前臺可以正常瀏覽在對服務端的數(shù)據(jù)有更新時會給予離線的相應提示

當客戶端有新版本時，有更新提示。當版本為非強制升級版時，用戶可以取消更新，老版本能正常使用。用戶在下次啟動app時，仍能出現(xiàn)更新提示。當版本為強制升級版時，當給出強制更新后用戶沒有做更新時，退出客戶端。下次啟動app時，仍出現(xiàn)強制升級提示。當客戶端有新版本時，在本地不刪除客戶端的情況下，直接更新檢查是否能正常更新。當客戶端有新版本時，在本地不刪除客戶端的情況下，檢查更新后的客戶端功能是否是新版本。當客戶端有新版本時，在本地不刪除客戶端的情況下，檢查資源同名文件如圖片是否能正常更新成最新版本。如果以上無法更新成功的，也都屬于缺陷

App有用到相機，定位服務時，需要注意系統(tǒng)版本差異

有用到定位服務、照相機服務的地方，需要進行前后臺的切換測試，檢查應用是否正常。

當定位服務沒有開啟時，使用定位服務，會友好性彈出是否允許設置定位提示。當確定允許開啟定位時，能自動跳轉(zhuǎn)到定位設置中開啟定位服務。

測試定位、照相機服務時，需要采用真機進行測試

客戶端可以自行設置手機的時區(qū)、時間，因此需要校驗該設置對app的影響。--中國為東8區(qū)，所以當手機設置的時間非東8區(qū)時，查看需要顯示時間的地方，時間是否展示正確，應用功能是否正常。時間一般需要根據(jù)服務器時間再轉(zhuǎn)換成客戶端對應的時區(qū)來展示，這樣的用戶體驗比較好。比如發(fā)表一篇微博在服務端記錄的是10:00，此時，華盛頓時間為22:00，客戶端去瀏覽時，如果設置的是華盛頓時間,則顯示的發(fā)表時間即為22:00,當時間設回東8區(qū)時間時，再查看則顯示為10:00。

檢查push消息是否按照指定的業(yè)務規(guī)則發(fā)送

檢查不接受推送消息時，檢查用戶不會再接收到push.

如果用戶設置了免打擾的時間段，檢查在免打擾時間段內(nèi)，用戶接收不到PUSH。在非免打擾時間段，用戶能正常收到push。

當push消息是針對登錄用戶的時候，需要檢查收到的push與用戶身份是否相符，沒有錯誤地將其它人的消息推送過來。一般情況下，只對手機上最后一個登錄用戶進行消息推送。

測試push時，需要采用真機進行測試。

性能測試12極限測試在各種邊界壓力情況下，如電池、存儲、網(wǎng)速等，驗證App是否能正確響應--內(nèi)存滿時安裝App

；--運行App時手機斷電；--運行App時斷掉網(wǎng)絡。

響應能力測試測試App中的各類操作是否滿足用戶響應時間要求--App安裝、卸載的響應時間；--App各類功能性操作的影響時間。壓力測試反復長期操作下、系統(tǒng)資源是否占用異常--APP反復進行安裝、卸載，查看系統(tǒng)資源是否正常；--其他功能反復進行操作，查看系統(tǒng)資源是否正常性能評估：評估典型用戶應用場景下，系統(tǒng)資源的使用情況基線測試與競爭產(chǎn)品的Benchmarking,產(chǎn)品演變對比測試等設定性能基準交叉事件測試13交叉測試又叫事件或沖突測試，是指一個功能正在執(zhí)行過程中，同時另外一個事件或操作對該過程進行干擾的測試。

如：App在前/后臺運行狀態(tài)時與來電、文件下載、音樂收聽等關(guān)鍵運用的交互情況測試等。交叉事件測試非常重要，能發(fā)現(xiàn)很多應用中潛在的性能問題。

測試要點1、多個App同時運行是否影響正常功能2、App運行時前/后臺切換是否影響正常功能3、App運行時撥打/接聽電話4、App運行時發(fā)送/接收信息5、App運行時發(fā)送/收取郵件

6、App運行時切換網(wǎng)絡（2G、3G、4G、WIFI）7、App運行時瀏覽網(wǎng)絡

8、App運行時使用藍牙傳送/接收數(shù)據(jù)

9、App運行時使用相機、計算器等手機自帶設備兼容性測試14與本地及主流App兼容不同操作系統(tǒng)兼容不同手機品牌兼容不同屏幕分辨率兼容不同網(wǎng)絡兼容升級、更新測試15新版本發(fā)布后，配合不同網(wǎng)絡環(huán)境的自動更新提示及下載、安裝、更新、啟動、運行的驗證測試升級更新1、測試升級后的功能是否與需求說明一樣2、測試與升級模塊相關(guān)的模塊的功能是否與需求一致3、升級安裝意外情況的測試（升級安裝意外情況的測試（如死機、斷電、重啟））4、升級界面的UI測試5、不同操作系統(tǒng)間的升級測試用戶體驗測試以主觀的普通消費者的角度去感知產(chǎn)品或服務的舒適、有用、易用、友好親切程度。通過不同個體、獨立空間和非經(jīng)驗的統(tǒng)計復用方式去有效評價產(chǎn)品的體驗特性提出修改意見提升產(chǎn)品的潛在客戶滿意度。16是否有空數(shù)據(jù)界面設計，引導用戶去執(zhí)行操作。是否濫用用戶引導。是否有不可點擊的效果。菜單層次是否太深交互流程分支是否太多相關(guān)的選項是否離得很遠一次是否載入太多的數(shù)據(jù)界面中按鈕可點擊范圍是否適中標簽頁是否跟內(nèi)容沒有從屬關(guān)系，當切換標簽的時候，內(nèi)容跟著切換操作應該有主次從屬關(guān)系是否定義Back的邏輯。涉及軟硬件交互時，Back鍵應具體定義是否有橫屏模式的設計，應用一般需要支持橫屏模式，即自適應設計硬件環(huán)境測試17手勢操作測試手機開鎖屏對運行中的App的影響切換網(wǎng)絡對運行中的App的影響運行中的App前后臺切換的影響多個運行中的App的切換App運行時關(guān)機App運行時重啟系統(tǒng)App運行時充電App運行時kill掉進程再打開網(wǎng)絡環(huán)境測試無網(wǎng)絡時，執(zhí)行需要網(wǎng)絡的操作，給予友好提示，確保程序不出現(xiàn)崩潰。內(nèi)網(wǎng)測試時，要注意選擇到外網(wǎng)操作時的異常情況處理。在網(wǎng)絡信號不好時，檢查功能狀態(tài)是否正常，確保不因提交數(shù)據(jù)失敗而造成崩潰。在網(wǎng)絡信號不好時，檢查數(shù)據(jù)是否會一直處于提交中的狀態(tài)，有無超時限制。如遇數(shù)據(jù)交換失敗時要給予提示。在網(wǎng)絡信號不好時，執(zhí)行操作后，在回調(diào)沒有完成的情況下，退出本頁面或者執(zhí)行其他操作的情況，有無異常情況。此問題也會經(jīng)常出現(xiàn)程序。后臺服務牽涉到DNS、空間服務商的情況下會影響其穩(wěn)定性接口測試

服務端一般會提供JSON格式的數(shù)據(jù)給客戶端，所以我們在服務端需要進行接口測試，確保服務端提供的接口并轉(zhuǎn)換的JSON內(nèi)容正確，對分支、異常流有相應的返回值。此塊測試可以采用itest框架進行測試。最方便的是采用httpclient進行接口測試。

進行服務端測試時，需要開發(fā)提供一份接口文檔18(JavaScriptObjectNotation)是一種輕量級的數(shù)據(jù)交換格Itest測試框架是TaoBao測試部門開發(fā)的一套單元測試框架HttpClient是ApacheJakartaCommon下的子項目，可以用來提供高效的、最新的、功能豐富的支持HTTP協(xié)議的客戶端編程工具包，并且它支持HTTP協(xié)議最新的版本和建議?？蛻舳藬?shù)據(jù)庫測試19一般的增、刪、改、查測試。在業(yè)務需要從服務端取回數(shù)據(jù)保存到客戶端的時候，客戶端能否將數(shù)據(jù)保存到本地當表不存在時是否能自動創(chuàng)建，當數(shù)據(jù)庫表被刪除后能否再自建，數(shù)據(jù)是否還能自動從服務端中獲取回來并保存。當業(yè)務對數(shù)據(jù)進行了修改、刪除后，客戶端和服務端是否會有相應的更新。當業(yè)務需要從客戶端取數(shù)據(jù)時，檢查客戶端數(shù)據(jù)存在時，app數(shù)據(jù)是否能自動從客戶端數(shù)據(jù)中取出，還是仍然會從服務器端獲取？檢查客戶端數(shù)據(jù)不存在時，app數(shù)據(jù)能否自動從服務器端獲取到并保存到客戶端

安全測試20安全測試軟件權(quán)限安全性人機接口安全性通訊安全性數(shù)據(jù)安全性安裝與卸載安全性扣費風險：包括發(fā)送短信、撥打電話、連接網(wǎng)絡等隱私泄露風險：包括訪問手機信息、訪問聯(lián)系人信息等對App的輸入有效性校驗、認證、授權(quán)、敏感數(shù)據(jù)存儲、數(shù)據(jù)加密等方面進行檢測限制/允許使用手機功能接入互聯(lián)網(wǎng)允許使用手機發(fā)送接受信息功能

限制/允許應用程序來注冊自動啟動應用程序限制或使用本地連接限制/允許使用手機拍照或錄音限制/允許使用手機讀取用戶數(shù)據(jù)限制/允許使用手機寫人用戶數(shù)據(jù)檢測App的用戶授權(quán)級別、數(shù)據(jù)泄漏、非法授權(quán)訪問等應用程序應能正確安裝到設備驅(qū)動程序上能夠在安裝設備驅(qū)動程序上找到應用程序的相應圖標是否包含數(shù)字簽名信息JAD文件和JAR包中包含的所有托管屬性及其值必需是正確的JAD文件顯示的資料內(nèi)容與應用程序顯示的資料內(nèi)容應一致安裝路徑應能指定沒有用戶的允許,

應用程序不能預先設定自動啟動卸載是否安全,

其安裝進去的文件是