2020-11-6 濤濤
本文將針對(duì)酷家樂(lè)旗下云端建模工具——酷大師所做的可用性測(cè)試，說(shuō)明工具型產(chǎn)品如何去做可用性測(cè)試。
打造一款產(chǎn)品的過(guò)程中，我們需要時(shí)刻保持警惕：功能是否滿足用戶核心需求？交互流程能否做到簡(jiǎn)單流暢？是否還有未知領(lǐng)域可以由用戶帶來(lái)啟發(fā)？進(jìn)行一次準(zhǔn)備充分的可用性測(cè)試，無(wú)疑是解答上述問(wèn)題快捷有效的方式。
下面我將結(jié)合本次針對(duì)酷家樂(lè)旗下云端建模工具——酷大師所做的可用性測(cè)試，說(shuō)明工具型產(chǎn)品如何去做可用性測(cè)試。
測(cè)試目的不同，安排的測(cè)試任務(wù)就不同，進(jìn)而就會(huì)影響最終得到的結(jié)果。所以測(cè)試之初需要考慮清楚測(cè)試目的。國(guó)際標(biāo)準(zhǔn)化組織在人體工程學(xué)設(shè)計(jì)的人機(jī)交互部分（ ISO9241） 把b2可用性c 規(guī)定為 3 個(gè)指標(biāo)：
結(jié)合這3個(gè)指標(biāo)，我將本次測(cè)試目的設(shè)定為：
測(cè)試時(shí)間：
測(cè)試環(huán)境：
Nielsen在理論中認(rèn)為5-8位用戶可以測(cè)試出85%的可用性問(wèn)題，實(shí)踐下來(lái)確實(shí)如此，樣本數(shù)量建議控制在這個(gè)范圍。
在同一個(gè)產(chǎn)品的用戶中，新手用戶、永久的的中間用戶、專家用戶這三類角色通常是共存的。我們需要讓新手用戶快速和無(wú)痛苦地成為中間用戶；避免為那些想成為專家的用戶設(shè)置障礙；最為重要的是，讓永久的中間用戶感到愉快，因?yàn)樗麄兊募寄軐⒎€(wěn)定地處于中間層。
本次測(cè)試中，我盡量使樣本中包含這3類用戶，比例為2：3：3。測(cè)試之后，就可以大概知道對(duì)于不同類型用戶來(lái)說(shuō)，產(chǎn)品可用性和
易用性情況，也可以得到多維度差異化的反饋。
測(cè)試中需要使用一些管理用戶信息或記錄用戶反饋的表格，在準(zhǔn)備階段就要做好表格設(shè)計(jì)和打印工作。下面是具體的表格，可根據(jù)具體需求做相應(yīng)調(diào)整。
《用戶信息&排期表》
在這張表中管理測(cè)試用戶信息b2姓名、職業(yè)c 、測(cè)試安排「時(shí)間、地點(diǎn)」、測(cè)試工作人員「主持人、觀察員」。一場(chǎng)測(cè)試盡量安排一位主持人和一位觀察員作為工作人員相互配合。
主持人負(fù)責(zé)與用戶溝通互動(dòng)，推進(jìn)測(cè)試進(jìn)程；觀察員負(fù)責(zé)設(shè)備和資料保障，以及測(cè)試過(guò)程中的行為觀察和記錄。一個(gè)人獨(dú)自承擔(dān)主持人+觀察員角色的話，在用戶反饋密集而現(xiàn)場(chǎng)又出現(xiàn)臨時(shí)狀況時(shí)就會(huì)手忙腳亂，所以建議兩個(gè)角色分工協(xié)作。
《用戶基本信息問(wèn)卷》
在這張問(wèn)卷中可以設(shè)計(jì)與產(chǎn)品相關(guān)的用戶基本信息問(wèn)題，問(wèn)卷設(shè)計(jì)原則為：
這張問(wèn)卷使用在線工具呈現(xiàn)，比如騰訊問(wèn)卷；也可現(xiàn)場(chǎng)打印紙質(zhì)問(wèn)卷進(jìn)行詢問(wèn)填寫(xiě)。大多數(shù)用戶比較喜歡現(xiàn)場(chǎng)填寫(xiě)。
《單任務(wù)滿意度問(wèn)卷》
測(cè)試過(guò)程中，我們需要讓用戶完成一個(gè)完整任務(wù)，該任務(wù)需要拆解成若干單任務(wù)。在每個(gè)單任務(wù)結(jié)束后，立刻對(duì)用戶進(jìn)行該單任務(wù)的滿意度詢問(wèn)。
《SUS系統(tǒng)可用性量表》
用戶結(jié)束完整任務(wù)后，填寫(xiě)該量表。該量表由10個(gè)題目組成，包括奇數(shù)項(xiàng)的正面陳述和偶數(shù)項(xiàng)的反面陳述。在結(jié)果整理階段，我們?cè)賹?duì)該量表進(jìn)行分值計(jì)算。
從開(kāi)始到結(jié)束，需要主持人將整場(chǎng)測(cè)試的各個(gè)環(huán)節(jié)串聯(lián)起來(lái)，引導(dǎo)用戶操作，推動(dòng)測(cè)試進(jìn)程向前發(fā)展。為防止意外狀況出現(xiàn)，可以預(yù)設(shè)測(cè)試腳本，規(guī)劃情境和話術(shù)，并在預(yù)測(cè)試環(huán)節(jié)驗(yàn)證及優(yōu)化該話術(shù)。
比如可以這樣開(kāi)場(chǎng)：“首先非常感謝您今天能來(lái)參加我們的可用性測(cè)試，我是主持人XXX，這位是觀察員XXX。我們這次是對(duì)酷大師建模工具進(jìn)行可用性測(cè)試，想了解您使用時(shí)的體驗(yàn)和感受。
在這里需要強(qiáng)調(diào)的是：我們測(cè)試的對(duì)象是工具，而不是您，所以您不必感到緊張……當(dāng)您使用工具時(shí)，我們會(huì)觀察和記錄。今天的測(cè)試大概需要一個(gè)小時(shí)，測(cè)試過(guò)程中會(huì)有休息時(shí)間。測(cè)試過(guò)程中，請(qǐng)您將手機(jī)保持靜音狀態(tài)……“
比如可以這樣進(jìn)行兩個(gè)單任務(wù)環(huán)節(jié)串場(chǎng)：“好的，我們已經(jīng)完成了第一個(gè)單任務(wù)。現(xiàn)在有一份簡(jiǎn)單的問(wèn)卷，填完后可以稍微休息一下。
「出示問(wèn)卷，并作簡(jiǎn)要填寫(xiě)說(shuō)明」「問(wèn)卷完成后進(jìn)行簡(jiǎn)單訪談，用戶也稍稍休息后繼續(xù)」現(xiàn)在，我們開(kāi)始進(jìn)行第二個(gè)單任務(wù)「要清晰且大聲地說(shuō)出這句話，以“鼓勵(lì)”測(cè)試參加者和提示記錄人員」……”
具體話術(shù)依據(jù)需要測(cè)試的內(nèi)容和情境展開(kāi)，盡量做到專業(yè)、友好。
可用性測(cè)試往往帶有一定目的性，而這些目的能不能達(dá)成，取決于任務(wù)與目的的關(guān)聯(lián)性以及用戶是否能夠給到對(duì)應(yīng)反饋。通常，測(cè)試用戶是愿意給予反饋的，那么測(cè)試任務(wù)的設(shè)計(jì)就成為整個(gè)準(zhǔn)備階段最重要的環(huán)節(jié)。
做好測(cè)試任務(wù)的設(shè)計(jì)和拆解：需要具備從全局高度理解產(chǎn)品的能力；需要知道產(chǎn)品全鏈路的過(guò)去起源、現(xiàn)狀細(xì)節(jié)、未來(lái)走向；需要把控重點(diǎn)，拎出骨架；需要去繁就簡(jiǎn)，以較少的任務(wù)成本測(cè)出最有價(jià)值的信息。
本次測(cè)試中，我設(shè)計(jì)的主流程是：模型創(chuàng)建——材質(zhì)鋪貼——模型渲染——模型發(fā)布——模型分享，并且我還希望測(cè)到拉伸、陣列、組編輯、移動(dòng)、旋轉(zhuǎn)這樣的主功能。所以我將這兩塊有機(jī)結(jié)合，給到用戶創(chuàng)建一個(gè)「樓梯踏步模型」的任務(wù)。
我將任務(wù)按照主流程拆解為5個(gè)單任務(wù)，主功能分布到其中幾個(gè)單任務(wù)中，且盡量做到兩個(gè)單任務(wù)中不重復(fù)使用同一個(gè)主功能。
大多數(shù)產(chǎn)品都存在一些限制因素導(dǎo)致的尚未解決的已知問(wèn)題。這些問(wèn)題在測(cè)試中出現(xiàn)的話，會(huì)轉(zhuǎn)移用戶注意力，削弱本次測(cè)試的價(jià)值，偏移本次測(cè)試的目的。
另外，我們準(zhǔn)備階段進(jìn)行的種種規(guī)劃也需要得到驗(yàn)證。結(jié)合這兩個(gè)原因，正式測(cè)試之前建議進(jìn)行內(nèi)部的用戶預(yù)測(cè)試。找出并修復(fù)測(cè)試環(huán)節(jié)中的漏洞，準(zhǔn)備好各類突發(fā)狀況下的planB，以及修復(fù)影響正式測(cè)試的已知問(wèn)題，提高正式測(cè)試的執(zhí)行效率。
第一步.測(cè)試開(kāi)場(chǎng)，填寫(xiě)《用戶基本信息問(wèn)卷》
本次測(cè)試是在工作日穿插進(jìn)行8場(chǎng)一對(duì)一用戶測(cè)試。這樣可以放緩測(cè)試節(jié)奏，在兩場(chǎng)測(cè)試間隙有充足時(shí)間簡(jiǎn)單整理上一場(chǎng)收集的信息，與下一場(chǎng)用戶確認(rèn)測(cè)試安排，以及對(duì)突發(fā)狀況及時(shí)處理。
正式開(kāi)始前半小時(shí)，觀察員需確認(rèn)設(shè)備都已調(diào)試妥當(dāng)，資料都已打印完成。主持人可與用戶進(jìn)行聯(lián)系，帶領(lǐng)用戶進(jìn)入測(cè)試場(chǎng)所。主持人可以通過(guò)填寫(xiě)《用戶基本信息問(wèn)卷》了解用戶基本信息，幫助用戶消除在陌生環(huán)境下的溝通障礙。也可以使用戶以放松狀態(tài)完成測(cè)試任務(wù)，以開(kāi)放心態(tài)為后續(xù)拓展性話題的展開(kāi)做好準(zhǔn)備。
無(wú)論是填寫(xiě)《用戶基本信息問(wèn)卷》還是后續(xù)的問(wèn)卷，建議采用主持人提問(wèn)、用戶回答的方式收集信息。用戶的注意力集中于思考和溝通，就能夠提供更多有價(jià)值的信息，而不是忙于撰寫(xiě)問(wèn)卷。
第二步.完成單任務(wù)，填寫(xiě)《單任務(wù)滿意度問(wèn)卷》
主持人按照順序分步解說(shuō)單任務(wù)。單任務(wù)測(cè)試過(guò)程中，工作人員不要去打擾用戶，也不要給用戶任何提示，所有的問(wèn)題都等到測(cè)試結(jié)束再進(jìn)行解答。
觀察員需仔細(xì)觀察用戶操作，記錄用戶是否很容易判斷出如何操作，完成某個(gè)重要功能點(diǎn)時(shí)是否順暢；需隨時(shí)關(guān)注用戶表情，記錄下明顯表情相關(guān)聯(lián)的流程或功能點(diǎn)等等細(xì)節(jié)。
一個(gè)單任務(wù)完成后，提示用戶稍事休息，然后提問(wèn)《單任務(wù)滿意度問(wèn)卷》中的問(wèn)題。此時(shí)可以回答用戶操作過(guò)程中的疑問(wèn)，也可以藉由操作中的細(xì)節(jié)做延展發(fā)散，詢問(wèn)用戶操作感受。通常可以獲得很多針對(duì)該單任務(wù)的意見(jiàn)和建議。這些意見(jiàn)和建議后續(xù)就需要記錄整理，作為優(yōu)化任務(wù)幫助提升產(chǎn)品可用性和易用性。
第三步.填寫(xiě)《SUS系統(tǒng)可用性量表》，了解整體評(píng)估
整個(gè)任務(wù)完成后，可以藉由填寫(xiě)《SUS系統(tǒng)可用性量表》，了解用戶對(duì)整體的評(píng)估。由于量表的10個(gè)題目中，包括奇數(shù)項(xiàng)的正面陳述和偶數(shù)項(xiàng)的反面陳述，所以在提問(wèn)過(guò)程中一定要陳述清楚題目。如果用戶認(rèn)為有些問(wèn)題無(wú)法回答，則視為其選擇中間值。在后續(xù)的結(jié)果整理階段，再對(duì)量表總分進(jìn)行計(jì)算。
在問(wèn)題詢問(wèn)過(guò)程中，可以有針對(duì)性地詢問(wèn)原因。比如針對(duì)第2個(gè)問(wèn)題“我認(rèn)為酷大師建模工具的操作較為復(fù)雜，其實(shí)沒(méi)必要這么復(fù)雜”。
如果用戶認(rèn)為不復(fù)雜，則可以詢問(wèn)哪些點(diǎn)非常簡(jiǎn)單易用；如果用戶覺(jué)得復(fù)雜，則可以詢問(wèn)哪些點(diǎn)覺(jué)得復(fù)雜。用戶告知原因的同時(shí)，常常會(huì)說(shuō)出他認(rèn)為比較簡(jiǎn)單的解決方案。這些解決方案或者來(lái)自于競(jìng)品，或者來(lái)自于實(shí)踐，或者來(lái)自于創(chuàng)新，常常可以幫助我們開(kāi)拓思路，走出認(rèn)知盲區(qū)。
第四步.拓展性訪談，測(cè)試收尾
在這個(gè)環(huán)節(jié)可以不必拘泥于原定的測(cè)試任務(wù)。建議預(yù)留一定時(shí)間，大到行業(yè)發(fā)展，小到產(chǎn)品細(xì)節(jié)，與用戶進(jìn)行一番深度探討。這些來(lái)自于一線的用戶常常會(huì)帶來(lái)一些新鮮的靈感，為產(chǎn)品未來(lái)的拓展提供一些線索，解決產(chǎn)品當(dāng)下的一些困惑。
由于我們一開(kāi)始就對(duì)測(cè)試樣本進(jìn)行了分類，所以也可以結(jié)合前面幾個(gè)環(huán)節(jié)的信息，對(duì)各分類下的用戶訴求和行為習(xí)慣進(jìn)一步驗(yàn)證、區(qū)分、歸納。
第一步.SUS量表分值計(jì)算
首先，我們需要計(jì)算SUS量表總分。奇數(shù)項(xiàng)計(jì)分采用“原始得分-1”，偶數(shù)項(xiàng)計(jì)分采用“5-原始得分”。由于是5點(diǎn)量表，每個(gè)題目的得分范圍記為0~4（最大值為40），而SUS的范圍在0~100，故需要把所有項(xiàng)的轉(zhuǎn)換分相加，最終再乘以2.5，即可獲得SUS分?jǐn)?shù)。
其次，我們可以獲得分量表得分。SUS量表中，第4和第10項(xiàng)構(gòu)成的子量表為“易學(xué)性”（Learnability），其他8項(xiàng)構(gòu)成的子量表為“可用性”（Usability）。
為了使易學(xué)性和可用性分?jǐn)?shù)能夠與整體SUS分?jǐn)?shù)兼容，范圍也是0~100，需要對(duì)原始分?jǐn)?shù)進(jìn)行轉(zhuǎn)換：易學(xué)性量表轉(zhuǎn)換分?jǐn)?shù)的總和乘以12.5，可用性量表乘以3.125。
最后，我們可以將SUS量表分?jǐn)?shù)換算成百分等級(jí)來(lái)解釋，找到對(duì)應(yīng)評(píng)級(jí)。百分等級(jí)的意思是指測(cè)量的產(chǎn)品或系統(tǒng)相對(duì)于總數(shù)據(jù)庫(kù)里其他產(chǎn)品或系統(tǒng)的可用性程度。比如SUS得分是73分，其百分等級(jí)大約為67，意味著比大約66%的產(chǎn)品可用性更好。
第二步.整理問(wèn)題列表，推進(jìn)迭代優(yōu)化
做完所有用戶的測(cè)試之后，我們一定會(huì)收集到很多涉及具體功能點(diǎn)的反饋。對(duì)于正向反饋，我們可以謙虛地接受，并且思考這些打動(dòng)用戶的點(diǎn)如何復(fù)用；對(duì)于非正向反饋，我們應(yīng)該冷靜地思考，它們將是本次可用性測(cè)試中最直接而有效的收獲！
對(duì)這些反饋可以進(jìn)行分類歸納，將其中能夠立即應(yīng)用于產(chǎn)品的內(nèi)容整理出來(lái)，按照優(yōu)先級(jí)，放入產(chǎn)品迭代優(yōu)化任務(wù)中。這些任務(wù)將提高產(chǎn)品可用性，在數(shù)據(jù)層面能夠幫助提升留存率。我們這次可用性測(cè)試中總共獲取97個(gè)有效反饋，其中62個(gè)整理進(jìn)產(chǎn)品迭代任務(wù)，并且取得了用戶使用數(shù)據(jù)上的相應(yīng)提升。
第三步.撰寫(xiě)測(cè)試報(bào)告
整個(gè)測(cè)試環(huán)節(jié)通常只有2-3位工作人員，如果希望能和團(tuán)隊(duì)一起分享測(cè)試的收獲，建議整理一份總結(jié)報(bào)告。可以使用word或者ppt形式，說(shuō)明測(cè)試背景、測(cè)試用戶信息、主要結(jié)論、發(fā)現(xiàn)的問(wèn)題、以及解決問(wèn)題的行動(dòng)項(xiàng)。
經(jīng)過(guò)幾場(chǎng)頗具收獲的工具型產(chǎn)品的可用性測(cè)試之后，我做了一些總結(jié)，希望能夠形成適應(yīng)于工具型產(chǎn)品的可用性測(cè)試體系：
1. 目的性
工具型產(chǎn)品的可用性測(cè)試目的比較統(tǒng)一：幫助團(tuán)隊(duì)優(yōu)化體驗(yàn)路徑；幫助團(tuán)隊(duì)明確用戶使用產(chǎn)品時(shí)的體驗(yàn)感受；幫助設(shè)計(jì)師驗(yàn)證設(shè)計(jì)指標(biāo)。
2. 專業(yè)性
完整的可用性測(cè)試全程都需要專業(yè)支撐，從籌備到進(jìn)行，從任務(wù)到結(jié)果，每一個(gè)細(xì)節(jié)都需要考慮到位。在這過(guò)程中我們要盡量保證：流程規(guī)劃清晰；文檔整理完整；分工明確到位。
3. 參與性
大多數(shù)可用性測(cè)試是用戶體驗(yàn)相關(guān)崗位人員發(fā)起，但是用戶對(duì)于產(chǎn)品的反饋與團(tuán)隊(duì)每位成員息息相關(guān)，所以建議團(tuán)隊(duì)共同參與。比如在這次可用性測(cè)試中，就邀請(qǐng)了產(chǎn)品經(jīng)理和研發(fā)人員擔(dān)當(dāng)觀察員或主持人；邀請(qǐng)用研人員給予專業(yè)指導(dǎo)培訓(xùn)；在對(duì)測(cè)試反饋的問(wèn)題進(jìn)行優(yōu)化過(guò)程中，也是團(tuán)隊(duì)通力合作，推進(jìn)迭代快速進(jìn)行。
4. 周期性
可用性測(cè)試不是進(jìn)行一次就結(jié)束的一場(chǎng)表演。而是結(jié)合產(chǎn)品進(jìn)展情況，可持續(xù)實(shí)施的一種有效的快速驗(yàn)證方式。
可以在新產(chǎn)品上線后進(jìn)行，可以在重要功能上線前進(jìn)行，也可以在迭代優(yōu)化后進(jìn)行。建議周期性進(jìn)行可用性測(cè)試，取得一些結(jié)果后立即應(yīng)用于產(chǎn)品，隔段時(shí)間再次驗(yàn)證，形成良性循環(huán)。亦趨近于精益用戶體驗(yàn)中倡導(dǎo)的基本MVP理念。
當(dāng)然，每次可用性測(cè)試都需要工作人員投入大量時(shí)間和精力，所以專業(yè)賦能可以成為很好的解決方案。即團(tuán)隊(duì)成員可以學(xué)習(xí)使用該方法，輪流進(jìn)行周期性操作。
我們?nèi)粘Ｆ鋵?shí)接觸并積累了大量專業(yè)方法，可用性測(cè)試只是其中一種。在不斷實(shí)踐的過(guò)程中才能真正體會(huì)到這些方法的魅力之處，在不斷落地的過(guò)程中才能打磨自身的方法論體系，形成屬于自己的一套打法，給產(chǎn)品設(shè)計(jì)帶來(lái)新穎的專業(yè)思路。
文章來(lái)源：優(yōu)設(shè) 作者：酷家樂(lè)UED
藍(lán)藍(lán)設(shè)計(jì)( www.73404.com.cn )是一家專注而深入的界面設(shè)計(jì)公司，為期望卓越的國(guó)內(nèi)外企業(yè)提供卓越的UI界面設(shè)計(jì)、BS界面設(shè)計(jì) 、 cs界面設(shè)計(jì) 、 ipad界面設(shè)計(jì) 、 包裝設(shè)計(jì) 、 圖標(biāo)定制 、 用戶體驗(yàn) 、交互設(shè)計(jì)、 網(wǎng)站建設(shè) 、平面設(shè)計(jì)服務(wù)
藍(lán)藍(lán)設(shè)計(jì)的小編 http://www.73404.com.cn