在可用性測(cè)試中，如何做好義務(wù)評(píng)估模型與計(jì)量體例？

金蝶云之家用戶(hù)研究員-鄭少娜：在可用性測(cè)試中，如何去評(píng)估測(cè)試的場(chǎng)景或流程呢？應(yīng)該包含哪些維度？每個(gè)維度要如何測(cè)量？怎樣在不同的義務(wù)間做橫向?qū)Ρ?？本文就此逐一講述。

公司的產(chǎn)品最近發(fā)布了一個(gè)版本，上線了比較多的新功能。所以必要針對(duì)這些新功能做一輪可用性測(cè)試。

可用性測(cè)試算是用研的一個(gè)入門(mén)級(jí)技能，即使是從業(yè)年限不多的我也已經(jīng)做過(guò)多次，基本的方法和流程都比較認(rèn)識(shí)了。但是之前做過(guò)的可用性測(cè)試有個(gè)缺陷：沒(méi)有建立一個(gè)嚴(yán)謹(jǐn)、科學(xué)的義務(wù)評(píng)估模型。在可用性測(cè)試中如何去評(píng)估測(cè)試的場(chǎng)景或流程呢？應(yīng)該包含哪些維度？每個(gè)維度要如何測(cè)量？怎樣在不同的義務(wù)間做橫向?qū)Ρ龋?/p>

評(píng)估模型

iSO9241中對(duì)「可用性」的定義是：特定用戶(hù)在特定的使用場(chǎng)景中，為了達(dá)到特定目標(biāo)而使用某產(chǎn)品時(shí)，所感受到的有用性、服從和寫(xiě)意度。

也就是說(shuō)，在定義好了用戶(hù)、場(chǎng)景和目標(biāo)的前提下，可用性包含了下面三個(gè)維度：

• 有用性（Effectiveness）：用戶(hù)完成特定目標(biāo)的精確和完備程度。
• 服從（Efficiency）：用戶(hù)完成特定目標(biāo)的服從，與消費(fèi)的資源（如時(shí)間）成反比。
• 寫(xiě)意度（Satisfaction）：用戶(hù)使用產(chǎn)品時(shí)感受到的主觀寫(xiě)意程度。

優(yōu)秀的可用性必須能夠同時(shí)知足有用性、服從和寫(xiě)意度三個(gè)條件，但是這三個(gè)維度也有條理之分，一樣平常來(lái)說(shuō)，有用性題目>服從題目>寫(xiě)意度題目。

在可用性測(cè)試中，僅僅了解每個(gè)功能的可用性水平還不夠。即使兩個(gè)功能的可用性水平一樣，若一個(gè)是產(chǎn)品的基本功能、一個(gè)是價(jià)值不大的邊緣功能，我們照舊必要優(yōu)先去優(yōu)化價(jià)值更高的功能。也就是說(shuō)，在評(píng)估一個(gè)義務(wù)時(shí)，除了可用性之外我們還必要考慮功能自己的價(jià)值。尤其是在上線了新功能，或者我們對(duì)待測(cè)功能的價(jià)值還不太確信的時(shí)候。

功能的價(jià)值可以簡(jiǎn)單分為兩部分：用戶(hù)價(jià)值和商業(yè)價(jià)值。盡管偶然候必要在商業(yè)價(jià)值和用戶(hù)價(jià)值之間權(quán)衡，但是作為一個(gè)體驗(yàn)導(dǎo)向的產(chǎn)品，照舊應(yīng)該將用戶(hù)價(jià)值放在第一位。在用戶(hù)價(jià)值之上，若能夠知足商業(yè)價(jià)值，則是更令人寫(xiě)意的效果。

所以，在可用性測(cè)試中可以用下面這個(gè)模型來(lái)對(duì)測(cè)試的義務(wù)進(jìn)行評(píng)估：

測(cè)量方法

在上述模型中，有用性、服從、寫(xiě)意度都是常見(jiàn)的評(píng)估維度，有一些經(jīng)驗(yàn)方法可以參考，用戶(hù)價(jià)值也可以通過(guò)用戶(hù)評(píng)價(jià)獲得。而商業(yè)價(jià)值則必要根據(jù)產(chǎn)品的現(xiàn)實(shí)情況進(jìn)行評(píng)估，并且這一樣平常是既有的知識(shí)，不必要在可用性測(cè)試過(guò)程中收集這個(gè)數(shù)據(jù)。因此在可用性測(cè)試中我們必要收集的數(shù)據(jù)就只包含四個(gè)維度：有用性、服從、寫(xiě)意度和用戶(hù)價(jià)值。

1.有用性

可以用義務(wù)的完成情況來(lái)評(píng)估有用性，這個(gè)數(shù)據(jù)通過(guò)觀察用戶(hù)的操作過(guò)程即可獲得。

義務(wù)完成情況的測(cè)量重要參考NNG的建議，將每個(gè)用戶(hù)的操作效果標(biāo)記為失敗、部分完成或悉數(shù)完成。

失敗：假如用戶(hù)認(rèn)為本身完成不了而摒棄了義務(wù)，或者超過(guò)了限制時(shí)間仍然無(wú)法完成義務(wù)，則標(biāo)記為失敗。

必要對(duì)每個(gè)義務(wù)都設(shè)置一個(gè)限制時(shí)間。要求對(duì)功能特別很是認(rèn)識(shí)的人（相干的產(chǎn)品、設(shè)計(jì)師都可以）按照義務(wù)提醒進(jìn)行操作，記錄完成操作所需的時(shí)間，稱(chēng)為諳練用時(shí)。假如想要進(jìn)步諳練用時(shí)的測(cè)量正確度，可以多找?guī)讉€(gè)熟手操作然后取其用時(shí)平均值。義務(wù)的限制時(shí)間根據(jù)諳練用時(shí)確定，一樣平常是諳練用時(shí)的3-10倍，但是最高也不要超過(guò)10分鐘（沒(méi)有效戶(hù)會(huì)有耐心花10分鐘完成一個(gè)義務(wù)，假如真的必要這么久，說(shuō)明義務(wù)設(shè)計(jì)得太復(fù)雜了）。

可以根據(jù)義務(wù)的難度確定倍數(shù)，假如義務(wù)對(duì)于小白用戶(hù)來(lái)說(shuō)確實(shí)很有難度，那么可以適當(dāng)延伸義務(wù)限時(shí)；假如義務(wù)很簡(jiǎn)單，或者其中包含一些輸入的操作，那么可以適當(dāng)削減義務(wù)限時(shí)（由于打字每每比較費(fèi)時(shí)，而且對(duì)功能認(rèn)識(shí)的人打字未必比用戶(hù)快）。

部分完成：用戶(hù)只完成了一部分的義務(wù)，沒(méi)有完成義務(wù)卡上的所有要求。比如，你盼望用戶(hù)創(chuàng)建一個(gè)日程并約請(qǐng)小王加入，用戶(hù)成功創(chuàng)建了日程但是卻不知道如何（或者忘了）約請(qǐng)小王，這就是部分完成。之所以要區(qū)分「部分完成」這個(gè)類(lèi)別，是由于它跟100%完成有差距，但是又不能與失敗混為一談。

完成：這個(gè)很容易理解，就是在限制時(shí)間內(nèi)完成了義務(wù)卡上的所有要求。

最后，我們必要根據(jù)這些數(shù)據(jù)計(jì)算每個(gè)義務(wù)的成功率。NNG的建議算法是：義務(wù)成功率=(完全完成的用戶(hù)數(shù)+部分完成的用戶(hù)數(shù)*0.5)/用戶(hù)總數(shù)，即完全完成率+部分完成率的一半。

除了用完成、部分完成和失敗來(lái)評(píng)價(jià)義務(wù)完成情況外，還可以考慮另一種體例：順利完成、碰到停滯后完成、失敗。這是我之前使用的計(jì)分體例。這種體例下，以上所述的部分完成會(huì)被歸于失敗的類(lèi)別（但假如用戶(hù)犯的是無(wú)傷大雅的錯(cuò)誤，比如輸入錯(cuò)誤，可以視為完成）。而成功完成的用戶(hù)會(huì)被細(xì)分為順利完成的和碰到停滯后完成的。之所以如許區(qū)分是由于這兩種情況揭示了不同的可用水平——能讓用戶(hù)輕松地完成的功能可以說(shuō)是相稱(chēng)易用的。

2.服從

服從可以用時(shí)間測(cè)量，對(duì)用戶(hù)的操作過(guò)程計(jì)時(shí)。

可以從用戶(hù)拿到義務(wù)卡開(kāi)始計(jì)時(shí)，在用戶(hù)公布本身已經(jīng)完成、或者限制時(shí)間到了的時(shí)候即結(jié)束計(jì)時(shí)。不要等到用戶(hù)讀完義務(wù)卡、開(kāi)始操作時(shí)才計(jì)時(shí)，由于有的用戶(hù)風(fēng)俗讀完再操作，有的卻喜好一邊讀一邊做。也不要在看到用戶(hù)完成了就結(jié)束計(jì)時(shí)，而要等用戶(hù)本身認(rèn)為他已經(jīng)完成了，由于用戶(hù)偶然候會(huì)在做完操作之后去檢查本身的操作是否成功了，這也應(yīng)該算作義務(wù)用時(shí)的一部分。

計(jì)時(shí)不必要太正確。手動(dòng)計(jì)時(shí)存在幾秒鐘的偏差都算是正常的，而且用戶(hù)在操作過(guò)程中多說(shuō)了句話、或者應(yīng)用相應(yīng)速度慢了些，這些都會(huì)影響義務(wù)的完成時(shí)間（并且許多影響因素跟可用性并沒(méi)有關(guān)系）。所以計(jì)時(shí)只要正確到秒就好了，進(jìn)步記錄的正確度也沒(méi)故意義。

在計(jì)算每個(gè)義務(wù)的服從水平的時(shí)候，可以用用戶(hù)的平均用時(shí)除以諳練用時(shí)所得的倍數(shù)透露表現(xiàn)（數(shù)值越大透露表現(xiàn)服從越低）。

這是為了便于義務(wù)間的橫向比較，由于不同義務(wù)的復(fù)雜度不同，A義務(wù)平均用時(shí)1分鐘、B義務(wù)平均用時(shí)4分鐘，也不能說(shuō)明A的操作服從比B高。通過(guò)平均用時(shí)/諳練用時(shí)的比值，可以知道新手與熟手之間的差距，從而了解由于體系的可用性及學(xué)習(xí)成本給用戶(hù)帶來(lái)的操作時(shí)間損耗。

3.寫(xiě)意度

寫(xiě)意度涉及到用戶(hù)的主觀評(píng)價(jià)，因此必要通過(guò)用戶(hù)自評(píng)量表來(lái)收集。

這里參考的是Jakob Nielsen使用的一個(gè)單題項(xiàng)七點(diǎn)量表，并根據(jù)必要對(duì)標(biāo)題進(jìn)行了修正：

4.用戶(hù)價(jià)值

用戶(hù)價(jià)值是指用戶(hù)感知到的功能價(jià)值，也必要通過(guò)用戶(hù)的評(píng)價(jià)獲得。

由于我們做的是一款辦公軟件，所以通過(guò)扣問(wèn)功能對(duì)工作的幫助來(lái)了解用戶(hù)價(jià)值：

寫(xiě)意度和用戶(hù)價(jià)值都必要用戶(hù)評(píng)分，因此用戶(hù)在完成每個(gè)義務(wù)之后都會(huì)拿到同樣的兩個(gè)標(biāo)題，要求對(duì)該義務(wù)做出評(píng)價(jià)。我會(huì)把不同義務(wù)的標(biāo)題打印在統(tǒng)一張紙上，如許用戶(hù)在評(píng)價(jià)時(shí)可以參考本身對(duì)前面的義務(wù)的評(píng)價(jià)來(lái)調(diào)整分?jǐn)?shù)。

義務(wù)橫向?qū)Ρ?/strong>