T-CIDADS 00003-2020 云計(jì)算軟件產(chǎn)品易用性度量方法

1、ICS 35. 24. 01A 25T/CIDADS中國(guó)工 業(yè)設(shè)計(jì) 協(xié) 會(huì) 團(tuán)體標(biāo) 準(zhǔn)T/CIDADS 000032020云計(jì)算軟件產(chǎn)品易用性度量方法Ease of use metric for Cloud Product2021 -01 - 15 實(shí)施2020- 12-29 2021 -01 - 15 實(shí)施中國(guó)工業(yè)設(shè)計(jì)協(xié)會(huì) 發(fā)布T/CI DADS 000032020T/CI DADS 000032020 圖5任務(wù)象限模型明確核心測(cè)試任務(wù)后，需要進(jìn)行測(cè)試任務(wù)卡的制作。宜從“任務(wù)名”、“任務(wù)背景”、“任務(wù)描述” 和“成功標(biāo)準(zhǔn)”等幾個(gè)方面進(jìn)行制定。測(cè)試任務(wù)卡制作宜遵循以下原則：a）任務(wù)設(shè)計(jì)符合正常

2、操作流程且避免過于簡(jiǎn)單；b）模擬用戶真實(shí)的操作場(chǎng)景，描述清楚背景及期望的結(jié)果；c）任務(wù)描述避免羅列具體操作步驟、避免提供特殊線索；d）需要明確任務(wù)的起點(diǎn)和終點(diǎn)8. 3招募用戶用戶宜采用真實(shí)用戶和專家兩種類型組合，用戶構(gòu)成見表5。對(duì)于不同用戶可采用不同的易用性測(cè) 評(píng)方法。真實(shí)用戶可采用易用性測(cè)試法和問卷調(diào)查法，專家可采用專家評(píng)審法（啟發(fā)式評(píng)估）和易用性 測(cè)試法。參與易用性測(cè)試的人數(shù)宜在59人，參與易用性量表評(píng)分的用戶宜在14人以上。專家測(cè)試可作 為正式用戶測(cè)試前的試煉，需要重點(diǎn)關(guān)注：任務(wù)設(shè)計(jì)是否合理，描述是否能準(zhǔn)確傳達(dá)信息，測(cè)試環(huán)境是 否通暢等。表5測(cè)評(píng)用戶構(gòu)成測(cè)評(píng)用戶類型數(shù)量測(cè)評(píng)方法真實(shí)用戶4

3、+名易用性測(cè)試法/問卷調(diào)查法專家3至6名易用性測(cè)試法/專家評(píng)審（啟發(fā)式評(píng)估）8. 4實(shí)施測(cè)評(píng)8. 4.1易用性測(cè)試易用性測(cè)試具體實(shí)施按表6進(jìn)行，還需要配合所指定任務(wù)準(zhǔn)備所需的測(cè)試環(huán)境或測(cè)試原型，涉及競(jìng) 品對(duì)比測(cè)試需要提供競(jìng)品相關(guān)賬號(hào)。表6易用性測(cè)試實(shí)施流程階段要點(diǎn)內(nèi)容寒暄暖場(chǎng)與用戶互相介紹，認(rèn)識(shí)彼此， 消除陌生感。測(cè)試工程師簡(jiǎn)單 介紹測(cè)試目的基本流程。常用話術(shù)：您好，我是XX產(chǎn)品的易用性性工程師，很高興見到您。今 天由我來(lái)和您做這次測(cè)試，這次測(cè)試的目的是測(cè)試我們的產(chǎn)品是否便 于用戶使用，接下來(lái)會(huì)拜托您通過控制臺(tái)執(zhí)行幾個(gè)任務(wù)，執(zhí)行任務(wù)的 過程我們需要通過攝像頭記錄下來(lái)，以便于我們的重復(fù)觀察與分析

4、。測(cè)前訪談了解用戶使用產(chǎn)品的基本情 況，如使用經(jīng)驗(yàn)、頻率、競(jìng)品 使用情況、使用基本反饋等。常用話術(shù)：你多久會(huì)登錄使用XX產(chǎn)品？使用的主要目的和場(chǎng)景是什 么？感覺優(yōu)點(diǎn)/缺點(diǎn)有哪些？（這里需要提前準(zhǔn)備訪談問題。）測(cè)試說(shuō)明說(shuō)明測(cè)試內(nèi)容與用戶應(yīng)遵循的相關(guān)規(guī)則常用話術(shù)：在操作過程中，希望您能一邊操作一邊告訴我您要進(jìn)行什 么操作？您為什么要這么操作？您是怎么想的？這對(duì)我將非常有幫 助。最后，您在操作過程中最好不要向我提問，因?yàn)槿绻腋嬖V了您 如何操作，我可能就無(wú)法找到產(chǎn)品中的問題了，所以如果您問我問題， 我沒有答復(fù)您，還請(qǐng)見諒。觀察測(cè)試觀察并記錄用戶在執(zhí)行任務(wù)中遇到的問題操作過程中，盡量不做干預(yù)、只做觀察

5、，記錄用戶遲疑、反復(fù)或停留 較長(zhǎng)時(shí)間的頁(yè)面和功能點(diǎn)。記憶采用錄屏軟件記錄用戶整個(gè)操作過程， 便于后續(xù)分析和展示。測(cè)后訪談通過回顧法詢問用戶在執(zhí)行任務(wù)中遇到的問題能談?wù)勀母邢雴?？比如，覺得哪里比較好，哪里比較差？剛才在做XX的時(shí)候有一點(diǎn)遲疑，是怎么回事？您覺得我們有哪些需要改進(jìn)的地 方呢？ XX功能，你是怎么理解的？結(jié)束語(yǔ)對(duì)用戶表示感謝，并準(zhǔn)備測(cè)試環(huán)境測(cè)試下一位用戶常用話術(shù)：今天的測(cè)試到此為止啦，感謝您的配合，這次測(cè)試的數(shù)據(jù) 對(duì)我們非常有用，我們?yōu)槟鷾?zhǔn)備一張代金券以表謝意，請(qǐng)笑納哈在易用性測(cè)試過程中宜遵循以下原則：a）邀請(qǐng)核心干系人觀察測(cè)試：建議邀請(qǐng)產(chǎn)品的核心研發(fā)、設(shè)計(jì)師、項(xiàng)目經(jīng)理等來(lái)觀察測(cè)試

6、；b）不要干擾用戶執(zhí)行任務(wù)：當(dāng)用戶提出問題時(shí)，不要直接回答用戶如何操作，而是回復(fù)“你覺得 應(yīng)該是怎樣？你認(rèn)為這個(gè)是什么？ ”把問題回給用戶。只負(fù)責(zé)告訴用戶要做什么，不能直接回 答“怎么做”。觀察用戶的操作反饋。在用戶正式提出求助后，幫助用戶解答一次問題，并記 錄求助次數(shù)；c）鼓勵(lì)用戶發(fā)聲思考：一一用戶測(cè)試中最常用的方法就是發(fā)聲思考法，它要求用戶在進(jìn)行操作的同時(shí)將所思所想大聲說(shuō)出 來(lái)，以便測(cè)試人員了解用戶的心理活動(dòng)，以及用戶在每個(gè)操作流程中關(guān)注了哪些元素，如何看 待這些元素，知道了這些才能更好的根據(jù)用戶心智模型來(lái)改進(jìn)產(chǎn)品；一一當(dāng)用戶不主動(dòng)發(fā)聲思考時(shí)，可以引導(dǎo)和鼓勵(lì)用戶說(shuō)出自己的想法；一一切忌幫助

7、用戶進(jìn)行預(yù)判斷和給予用戶提示，比如“這個(gè)按鈕可能設(shè)計(jì)的不太合理”。測(cè)試人 員只負(fù)責(zé)記錄用戶的行為，不能引導(dǎo)用戶判斷；d）重點(diǎn)觀察和記錄用戶在什么界面說(shuō)了什么做了什么：記錄客觀事實(shí)。不要帶自己的觀點(diǎn)去觀察， 比如為了證明某個(gè)設(shè)計(jì)的對(duì)錯(cuò)，帶著尋找證據(jù)的心態(tài)去觀察，因?yàn)槿藗冎豢吹阶约合胍吹降?；e）重點(diǎn)觀察和記錄用戶在什么界面說(shuō)了什么做了什么使用回顧法進(jìn)行提問。8. 4.2專家評(píng)審（啟發(fā)式評(píng)估）適用的專家包括易用性專家和云計(jì)算領(lǐng)域?qū)＜?，依賴專家利用自身的易用性知識(shí)和相關(guān)經(jīng)驗(yàn)，圍繞 8. 2中制定出的產(chǎn)品核心任務(wù)流程對(duì)產(chǎn)品進(jìn)行啟發(fā)式評(píng)估。8. 4.3易用性量表評(píng)分在易用性測(cè)試和專家評(píng)審結(jié)束后，讓用戶進(jìn)

8、行易用性量表的打分，具體可參考GBT 29836. 3-2013 9. 7。 需要注意的是：a）提醒用戶打分是針對(duì)整個(gè)產(chǎn)品的使用體驗(yàn)進(jìn)行打分，而不只局限于本次測(cè)試的任務(wù)；b）要對(duì)用戶打的較低的分?jǐn)?shù)指標(biāo)進(jìn)一步追問原因，了解背后的問題是什么；c）可線上投放易用性度量表作為樣本的補(bǔ)充。但宜定向投放給篩選出的核心用戶，這種方式易進(jìn) 一步觸達(dá)、跟進(jìn)所調(diào)研用戶，保證獲得進(jìn)一步的有效反饋；d）建議每期易用性度量的樣本來(lái)源保持一致，保證小樣本下統(tǒng)一且穩(wěn)定的衡量標(biāo)準(zhǔn)。下一次度量 可拿出上次用戶的評(píng)分作為基線參考。8. 5統(tǒng)計(jì)分析8. 5. 1易用性度量評(píng)分統(tǒng)計(jì)整理真實(shí)用戶與專家的全部度量表評(píng)分，統(tǒng)計(jì)出整體易用性

9、、易操作性、易學(xué)性、清晰性分?jǐn)?shù)，按 6. 2評(píng)分。8.5.2易用性測(cè)試情況匯總統(tǒng)計(jì)測(cè)試過程中表7的基本信息并匯總。表7易用性測(cè)試實(shí)情況匯總?cè)蝿?wù)名稱測(cè)試人數(shù)完成人數(shù)任務(wù)完成度平均耗時(shí)總求助次數(shù)易用性問題8.5.3易用性測(cè)試問題統(tǒng)計(jì)測(cè)試發(fā)現(xiàn)的易用性問題，綜合考慮“嚴(yán)重程度”、“出現(xiàn)頻率”和“修復(fù)成本”三個(gè)維度以量化的 方式排列出問題的優(yōu)先級(jí)別。三個(gè)維度按照不同程度賦予評(píng)估系數(shù)進(jìn)行打分，具體見表8。表8易用性問題評(píng)判維度評(píng)估維度評(píng)估系數(shù)說(shuō)明3分嚴(yán)重：影響任務(wù)完成嚴(yán)重程度2分中等：影響使用效率1分低：影響感知體驗(yàn)3分高頻：70%的人問題出現(xiàn)頻率2分中頻：30%70%的人1分低頻：30%的人1.5分高：

10、涉及功能開發(fā)，工作量10人曰問題修復(fù)成本1分中：復(fù)雜前端開發(fā)，工作量rio人曰0.5分低：簡(jiǎn)單前端調(diào)整，工作量1人曰三個(gè)評(píng)估維度量化打分后，嚴(yán)重程度系數(shù)X出現(xiàn)頻率系數(shù)X修復(fù)成本系數(shù)即可計(jì)算出整體優(yōu)先級(jí)評(píng) 估系數(shù)。得出的優(yōu)先級(jí)評(píng)估系數(shù)按照表9標(biāo)準(zhǔn)分為“緊急”、“高優(yōu)”、“中優(yōu)”和“低優(yōu)”四個(gè)優(yōu)先 等級(jí)。表9易用性問題改進(jìn)優(yōu)先等級(jí)低優(yōu)中優(yōu)高優(yōu)緊急0.5, 3)3, 6)6, 10)10, 13. 58.6易用性報(bào)告完成以上度量分?jǐn)?shù)統(tǒng)計(jì)和問題分析后，整理出產(chǎn)品易用性報(bào)告發(fā)布給產(chǎn)品相關(guān)干系人，保證此次易 用性度量結(jié)果的透明和傳達(dá)。易用性報(bào)告宜包括“易用性度量背景”、“易用性度量評(píng)級(jí)評(píng)分”、“核 心易用性問題總結(jié)”、“易用性測(cè)試情況概述”、“產(chǎn)品改進(jìn)清單及優(yōu)化計(jì)劃”、“優(yōu)化方案”及“易 用性度量反饋等”。8.7問題持續(xù)改進(jìn)所有