如何出色的完成一次對外測試任務(wù)

1、如何出色的完成一次對外測試任務(wù)內(nèi)部公開產(chǎn)品名稱product name密級confidentiality levelquidway s8500內(nèi)部公開產(chǎn)品版本product versiontotal 11 pages 共11頁v100r002 如何出色的完成一次對外測試任務(wù)擬制:龐寧日期：2007-3-22審核:曹霞、吳冠標(biāo)日期：審核:日期：批準(zhǔn):日期：華為三康技術(shù)有限公司huawei-3com technologies co., ltd.版權(quán)所有 侵權(quán)必究all rights reserved2007-03-22華為三康機(jī)密，未經(jīng)許可不得擴(kuò)散第11頁, 共11頁修訂記錄revision re

2、cord日期修訂版本修改描述作者2007-3-221.00初稿完成龐寧1對外測試的定義和原則42對外測試的前期準(zhǔn)備工作42.1站在客戶的角度上分析客戶的測試意圖42.2充分的做好測試方案的預(yù)測試52.3做好正式測試前的“硬件準(zhǔn)備”52.4對產(chǎn)品的缺陷及規(guī)避方法牢記在心53對外測試過程的技巧使用63.1測試技巧運(yùn)用的兩個(gè)前提條件63.2“陰影理論”73.3測試中使用的技巧73.3.1結(jié)交新友73.3.2聲東擊西83.3.3偷天換日83.3.4反客為主93.3.5以逸待勞94對外測試過程的后期工作104.1幫用戶去完成測試報(bào)告104.2測試問題跟蹤、測試需求反饋104.3測試總結(jié)的寫作104.4對

3、外測試中的其他注意事項(xiàng)115后記：讓對外測試變得更加有意義11 從事對外測試工作兩年多了，期間飽償了許多的酸甜苦辣。下面我就和大家一同分享一下對外測試過程中的經(jīng)驗(yàn)和教訓(xùn)。1 對外測試的定義和原則對外測試的定義：對外測試是為了設(shè)備選型需要，由用戶召集的評測產(chǎn)品功能、性能的測試活動(dòng)?？蛻糸_展對外測試的目的是通過測試驗(yàn)證產(chǎn)品是否能夠滿足其應(yīng)用需求，或通過測試找出各個(gè)廠家產(chǎn)品的差距，為最終選型提供參考。對外測試的原則：我們參加對外測試的原則是向客戶展示產(chǎn)品的優(yōu)點(diǎn)和長處，盡量掩飾產(chǎn)品的問題和缺點(diǎn)。2 對外測試的前期準(zhǔn)備工作2.1 站在客戶的角度上分析客戶的測試意圖如果你是客戶，你希望購買什么樣的設(shè)備呢？

4、對于客戶來說他們當(dāng)然希望所購買的設(shè)備能夠滿足他們的組網(wǎng)應(yīng)用。不同的用戶對設(shè)備的要是不盡相同的。比如同樣是測試路由特性，政府網(wǎng)的用戶可能就注重功能的滿足，運(yùn)營商的用戶就注重路由的規(guī)格，證券公司的用戶就注重路由的收斂時(shí)間，部隊(duì)的用戶就注重認(rèn)證保密性和異常報(bào)文的攻擊。當(dāng)然上述的現(xiàn)象也不是絕對的，總之測試之前我們要通過一切辦法去了解客戶的組網(wǎng)和需求。精確的理解客戶的需求可以讓我們立即切中主題，少走很多彎路。記得在第一次巴西telefornica測試時(shí)，我們沒有仔細(xì)搞清楚客戶的關(guān)注點(diǎn)，因而第一次測試的結(jié)果比較糟糕。第二次測試時(shí)，我們讓市場不斷和客戶交流，把客戶準(zhǔn)備開展的業(yè)務(wù)和客戶關(guān)注點(diǎn)都逐一記錄下來，充

5、分驗(yàn)證準(zhǔn)備，最終我們贏得了測試，從而使85產(chǎn)品打開了國際市場的大門。2.2 充分的做好測試方案的預(yù)測試提前做好測試方案的預(yù)測試主要有以下幾個(gè)目的：a、 盡量找出有問題的測試項(xiàng)，進(jìn)而進(jìn)行開發(fā)定位，修正問題。；b、 盡量找出不支持或不滿足要求的測試項(xiàng)，迅速知會(huì)前方市場引導(dǎo)客戶對測試?yán)M(jìn)行刪減，如不能刪減的，商議對策如何測試通過。c、 對不熟悉的模塊進(jìn)行預(yù)驗(yàn)證，可以快速學(xué)習(xí)相關(guān)內(nèi)容。由于對外測試壓力的存在，測試人員會(huì)在最短時(shí)間內(nèi)掌握不熟悉的模塊的配置及網(wǎng)上應(yīng)用。d、 檢查測試物料測試儀器是否齊全，在測試前提早做出調(diào)整和修正。但是有些大型或者非常正式的測試，為防止廠商提前做準(zhǔn)備，測試方案和用例都是測試

6、前一天或者當(dāng)天才向測試廠家提供的。這種情況就需要和市場人員多溝通，盡量把用戶的關(guān)注點(diǎn)和目前的網(wǎng)絡(luò)模型搞到手。然后搭建一個(gè)典型組網(wǎng)，進(jìn)行重點(diǎn)驗(yàn)證。在最終拿到測試用例后，應(yīng)立即進(jìn)行分析，不能確定的應(yīng)立即找家里人做預(yù)測試。2.3 做好正式測試前的“硬件準(zhǔn)備”“硬件準(zhǔn)備”主要是指一般對外測試中都要用到的工具、測試軟件、配置指導(dǎo)等?！肮破涫?，必先利其器”，我們已經(jīng)把測試中最常用到的工具和典型配置以及注意事項(xiàng)歸檔到如下服務(wù)器，大家可以取用：h3crnd07-fss8500維護(hù)組對外測試4 對外測試測試準(zhǔn)備2.4 對產(chǎn)品的缺陷及規(guī)避方法牢記在心前面提過測試的原則是盡量掩飾產(chǎn)品的問題和缺點(diǎn)。但掩飾的前提，

7、是非常清楚產(chǎn)品規(guī)格、限制以及規(guī)避的方法。例如我們知道gv48db單板qos效果不好，那么在測試時(shí)我們就盡量不要使用這塊單板去測試qos，或者在測試前期就通知市場不要借用這種單板來進(jìn)行測試了。3 對外測試過程的技巧使用對外測試過程是一個(gè)堅(jiān)苦而又充滿挑戰(zhàn)的過程，它要求對外測試人員不但要有堅(jiān)實(shí)的業(yè)務(wù)技能、同時(shí)還要具有靈活的應(yīng)變能力和強(qiáng)大的求勝欲望。但主導(dǎo)這個(gè)過程的中心思想還是一個(gè)原則：盡量掩飾產(chǎn)品的問題和缺點(diǎn)。下面我們來著重介紹一些掩飾問題的方法和技巧。3.1 測試技巧運(yùn)用的兩個(gè)前提條件必需強(qiáng)調(diào)說明的是，在對外測試中需要使用技巧掩飾問題時(shí)，有兩個(gè)前提條件，當(dāng)任何一個(gè)條件不滿足時(shí)，你都得規(guī)規(guī)矩矩的做測

8、試了：1、 問題必須事先跟家里以及市場做好充分溝通，并得到同意。后方溝通，主要是跟家里溝通這個(gè)功能將來用戶是否會(huì)真的使用，如果將來真的使用，那么我們的版本到時(shí)候是否能夠滿足需求。如果不能滿足，就不能測試通過了。我就曾經(jīng)出過這樣的問題，那時(shí)剛參加對外測試不久，總希望把所有的問題全部測試通過。當(dāng)我費(fèi)了九牛二虎之力終于把一個(gè)測試項(xiàng)測通過后，卻被家里潑了盆冷水。因?yàn)槟莻€(gè)功能用戶想馬上應(yīng)用到他們的組網(wǎng)上，而我們是沒有辦法滿足且又沒有其他的規(guī)避方案的。最終我還是硬著頭皮讓用戶把結(jié)果由“通過”改成“不通過”了，當(dāng)用戶問起為什么時(shí)，真是難以解釋呀。記得當(dāng)時(shí)臉都紅到脖子根上了。 市場溝通，主要是將是否通過選擇權(quán)

9、壓在他們身上，避免我們的產(chǎn)品承擔(dān)一些不必要的風(fēng)險(xiǎn)。主要是避免將來用戶真的使用該功能時(shí)，市場人員逼我們產(chǎn)品緊急開發(fā)而帶來的一些麻煩。如果市場一定要求我們測試通過，必須讓他們寫好問題承擔(dān)責(zé)任的保證書，交由產(chǎn)品市場技術(shù)經(jīng)理保管。2、 測試的過程非常嚴(yán)謹(jǐn)，客戶是技術(shù)專家時(shí)，不適宜采用技巧。在測試過程非常嚴(yán)謹(jǐn)且客戶是技術(shù)專家的情況下，最好不要采用什么技巧來規(guī)避問題。因?yàn)橐坏┍豢蛻舭l(fā)現(xiàn)，往往可能會(huì)導(dǎo)致整個(gè)測試失敗。韓國kt測試在業(yè)界是出了名的嚴(yán)格，它就規(guī)定一旦廠商在測試中途更換版本被發(fā)現(xiàn)，將會(huì)立即停止其測試，并且kt將永不會(huì)應(yīng)用該公司產(chǎn)品。我們在kt測試時(shí)也發(fā)現(xiàn)了一些問題，但始終都沒有敢更換版本，就是因?yàn)?/p>

10、他們對測試的要求太嚴(yán)格了。3.2 “陰影理論” 什么是“陰影理論”舉例來說，兩個(gè)相愛的人，相處過程中一旦有一些矛盾和沖突，即便后來兩人能夠和好如初，但是這些矛盾和沖突總會(huì)給兩個(gè)人留下一些陰影。當(dāng)更大的矛盾爆發(fā)時(shí)，這些陳年的“陰影故事”就會(huì)一次次的被翻出來。 對外測試也是一樣，如果你讓用戶發(fā)現(xiàn)一個(gè)問題，那么后續(xù)再通過任何補(bǔ)救方式把結(jié)果測的再漂亮，但還是會(huì)給用戶心中留下陰影，最終的測試結(jié)果都不是最好的。這就要求對外測試中，要爭取一次性行把結(jié)果測到最好。這就要求對外測試人員做好充分的準(zhǔn)備，并運(yùn)用恰當(dāng)?shù)募记蓙韺?shí)現(xiàn)。3.3 測試中使用的技巧3.3.1 結(jié)交新友對外測試說白了就是甲方（客戶）和乙方（廠商）

11、的對決，甲方希望能夠測試出問題和差距以方便他們做對比和選型，而乙方則要想方設(shè)法少暴露問題，并最終能讓甲方選用他們的產(chǎn)品。我們所做的是盡量扭轉(zhuǎn)這種對立的關(guān)系，也就是要和客戶的主測人員搞好關(guān)系，成為朋友。我覺得這一點(diǎn)是非常重要的，通過增進(jìn)關(guān)系，可以更準(zhǔn)確把握客戶關(guān)注的測試點(diǎn)，可以了解到其他友商測試時(shí)發(fā)現(xiàn)的問題，更可以在測試過程中，使他們放松警惕，為成功通過測試創(chuàng)造更多的機(jī)會(huì)。記得在廣研院的一次測試，我利用測試間隙和客戶聊了聊旅游和戶外運(yùn)動(dòng)，沒想到一下子聊的很投機(jī)。后面的許多測試，他明顯沒有以前那么嚴(yán)格了，即使遇到了些問題，他也會(huì)多給我?guī)状螜C(jī)會(huì)。還有蘇州的電信測試，客戶的主測官對華為的認(rèn)證非常感興趣

12、，我通過市場給他搞了一些hcse的培訓(xùn)資料，這讓客戶非常高興，我還趁機(jī)向他宣傳了一下華為的文化。最終蘇州測試成功拿下，還屏蔽了中興、思科等友商的進(jìn)入。后來那個(gè)客戶還會(huì)經(jīng)常來詢問一些認(rèn)證方面的考題。有時(shí)我也在想要是能夠激發(fā)出客戶對華為設(shè)備的興趣，許多對外測試就可以不功而破。 3.3.2 聲東擊西 聲東擊西原意是指在東面造勢吸引敵人注意力，卻出其不意的從西面攻擊敵人。在對外測試當(dāng)中，就是采用一部分人吸引主測人員的注意力，另一部分人乘機(jī)修改底層命令，從而通過測試。這種方法一般至少需要兩個(gè)人通力配合才能實(shí)現(xiàn)。北京cn2測試時(shí)，客戶要求mac地址學(xué)習(xí)速度一定要達(dá)到2000/秒以上，而當(dāng)時(shí)只有通過修改底層

13、命令才能實(shí)現(xiàn)。我當(dāng)時(shí)就負(fù)責(zé)引開主測人員注意力，裝作請教問題，探討方案。另外一名測試人員乘機(jī)修改底層命令。最終，我們通過了該測試項(xiàng)。3.3.3 偷天換日 偷天換日原意是指用偷換的辦法，暗中改換事物的本質(zhì)和內(nèi)容。以達(dá)蒙混過關(guān)的目的。用在對外測試當(dāng)中就是用好的規(guī)避措施去替換無法滿足用戶要求的問題。在北京網(wǎng)通測試時(shí)，用戶在受了其他友商的引導(dǎo)后，硬要測試設(shè)備限速后的sp+wrr調(diào)度，而這個(gè)功能是他們將來根本不會(huì)用到的。我當(dāng)時(shí)做法就在設(shè)備上插兩塊單板，兩塊板插上很多網(wǎng)線(迷惑用戶)，二號槽位板上做了一些假配置，三號槽位板上通過限速實(shí)現(xiàn)所謂的wrr調(diào)度，然后給用戶看二槽位板上的配置（其實(shí)是通過三號板的限速實(shí)

14、現(xiàn)的），最終通過了測試。這里主要利用了一般客戶搞不清楚我們槽位的編號順序，另外一般用戶也不會(huì)在測試過程中去整理測試環(huán)境上的網(wǎng)線。3.3.4 反客為主 在對外測試時(shí)，特別是多個(gè)廠商同時(shí)參加測試項(xiàng)目，此時(shí)一定要反客為主，爭取到有利形勢。多個(gè)廠商同時(shí)測試時(shí)，各個(gè)廠商都會(huì)盡量去將客戶向?qū)ψ约河欣囊环饺ヒ龑?dǎo)。這個(gè)時(shí)候一定要挺身而出，以達(dá)到引導(dǎo)客戶，控制局面的目的。必要時(shí)，需要利用你的學(xué)識和技能去和其他廠家辯論，此時(shí)要表現(xiàn)的強(qiáng)勢一些。在山東網(wǎng)通測試時(shí)，參測的廠家很多。大家伙都在設(shè)法引導(dǎo)客戶，但很多廠家測試人員對組播的轉(zhuǎn)發(fā)流程并不是十分清楚，我趁此機(jī)會(huì)在白板上給大家培訓(xùn)了一下組播的轉(zhuǎn)發(fā)流程，客戶主測人員一

15、下對很多問題恍然大悟。后來，客戶有問題就來向我咨詢，后續(xù)的測試當(dāng)然就游刃有余了，此時(shí)你還可以趁機(jī)對其他廠商不能實(shí)現(xiàn)功能進(jìn)行有力打擊。3.3.5 以逸待勞 以逸待勞原意是指待機(jī)而動(dòng)，拖住敵人待耗盡敵人的耐力和耐心后，突然出擊得以致勝。在對外測試中，當(dāng)客戶對整個(gè)測試盯的非常緊時(shí)，而我方又當(dāng)遇到需要更換版本或下發(fā)底層命令時(shí)，可以故意拖延時(shí)間，侍機(jī)而動(dòng)。另外，測試中一些比較困難的測試項(xiàng)，也可以放在客戶比較忙或比較累的時(shí)候測試，也可以等到中午或晚上下班前進(jìn)行測試，因?yàn)槟菚r(shí)客戶歸心似箭，也正是警惕性比較松懈的時(shí)候。巴西測試時(shí)，曾遇到過一個(gè)問題，如果讓客戶檢查結(jié)果必定會(huì)判測試不過。我佯裝對配置不熟，硬是將測

16、試拖到了中午午飯時(shí)間。我讓市場人員帶著客戶去一個(gè)遠(yuǎn)點(diǎn)的地方吃飯并盡量拖延時(shí)間，然后加緊找開發(fā)人員定位問題。經(jīng)過整整一中午的努力，終于在下午上班前將問題搞定。 當(dāng)然，對外測試中不僅限于上述的技巧，大部分的測試技巧都是在不斷的測試實(shí)踐中總結(jié)出來的。在對外測試中切忌生搬硬套這些技巧，技巧的運(yùn)用能力更多的來源于測試的經(jīng)驗(yàn)。所以對于剛剛從事對外測試的新手來說，不要著急的去運(yùn)用技巧，穩(wěn)妥是第一位的。 4 對外測試過程的后期工作 千萬不要覺得對外測試過程結(jié)束就萬事大吉了。對外測試過程的結(jié)束，其實(shí)只是完成了對外測試的大部分工作，后續(xù)的一些工作也是非常重要的。4.1 幫用戶去完成測試報(bào)告如果有可能，盡量幫用戶完

17、成對外測試報(bào)告。這樣我們可以對所有的測試結(jié)果再做一次細(xì)致的檢查，另外一些不滿足的測試項(xiàng)目，我們可以在測試結(jié)果中修改措辭，盡量去降低它的對整改測試的影響。此外，我們還要拿到最終客戶簽字的測試記錄，歸檔留存。4.2 測試問題跟蹤、測試需求反饋測試中想法設(shè)法掩飾過的問題，回家后一定要迅速提單跟蹤，并協(xié)助開發(fā)將問題復(fù)現(xiàn)解決，防止后續(xù)測試再出現(xiàn)相同的問題。對于已知缺陷，回家后也要認(rèn)真總結(jié)缺陷規(guī)避的方法。對于客戶提出的需求，一定要想辦法跟客戶討論透徹，并生成外部測試需求說明書。再提交需求跟蹤電子流，跟產(chǎn)品系統(tǒng)組仔細(xì)論證該需求是否有廣泛的代表性。畢竟快速生產(chǎn)出客戶喜歡、愿用的產(chǎn)品，才是我們產(chǎn)品的生存之本呀。4.3 測試總結(jié)的寫作測試結(jié)束后，測試人員應(yīng)該將測試中發(fā)現(xiàn)的問題，和友商測試的結(jié)果對比，測試后心得體會(huì)等及時(shí)的總結(jié)下來，并歸檔保存。這對后續(xù)碰到類似的測試將啟到一定的指導(dǎo)意義。4.4 對外測試中的其他注意事項(xiàng)1、 要和版本測試那邊經(jīng)常聯(lián)絡(luò)，把握最新特性的開發(fā)進(jìn)度。同時(shí)不斷學(xué)習(xí)新特性，要跟得上產(chǎn)品開發(fā)得步伐。2、 在對外測試過程中，對于沒有實(shí)現(xiàn)的特性，一定不能向市場和客戶承諾實(shí)現(xiàn)的路標(biāo)，即使你知道這個(gè)特性的實(shí)現(xiàn)時(shí)間。這種問題請他們咨詢產(chǎn)品