可用性測試報告

如何進行可用性評估和研究報告框架什么是可用性評估？一一理解可用性為什么要做評估？一一探明評估目標(biāo)評估哪些方面？一一確定評估指標(biāo)選擇哪類評估？一一選擇評估方法評估前需要哪些準(zhǔn)備？——評估準(zhǔn)備如何實施評估？——評估實施如何撰寫評估報告？——評估報告什么是可用性評估？一一理解可用性可用性定義(ISO9241-11):產(chǎn)品在特定環(huán)境下特定用戶用于特定用途時所具有的效果、效率和用戶主觀滿意度。如何開展可用性評估和研究”/>500){this.width=500;}"/images/picError.gif"/>為什么要做評估？——探明評估目標(biāo)研究導(dǎo)向：證實與證偽產(chǎn)品導(dǎo)向：發(fā)現(xiàn)問題，改善設(shè)計為什么要做評估？——研究導(dǎo)向我發(fā)明了一個全新的技術(shù)，我想知道用戶對這個創(chuàng)新技術(shù)的反應(yīng)，以確認(rèn)它是否有價值?！炞C性評估我發(fā)明了一個可替代現(xiàn)有技術(shù)的新技術(shù)，我想知道它是否比現(xiàn)有技術(shù)更有價值（對比）?！獙Ρ刃栽u估為什么要做評估？——產(chǎn)品導(dǎo)向（1）戰(zhàn)略上的目標(biāo)使我的產(chǎn)品所提供的功能用戶真正“想要”和“想用”，建立起清晰的產(chǎn)品定位。使我的產(chǎn)品在同類產(chǎn)品中更具核心競爭力。功能是產(chǎn)品的核心價值，當(dāng)同類競爭產(chǎn)品之間的功能相差不大時，可用性和用戶體驗就升格為核心價值。Idea:可用性/用戶體驗是產(chǎn)品競爭的最后一座“堡壘”。使我的用戶滿意我的產(chǎn)品——〉信賴我的產(chǎn)品的品牌——〉成為我的產(chǎn)品的“骨灰級粉絲”為什么要做評估？——產(chǎn)品導(dǎo)向（2）具體目標(biāo)（1）建立可用性標(biāo)準(zhǔn)對當(dāng)前版本進行可用性評估，為下一版本的產(chǎn)品提供可用性標(biāo)準(zhǔn)。（2）控制開發(fā)成本在開發(fā)周期的早期就能夠發(fā)現(xiàn)設(shè)計上的問題（原型測試）VSCoding的成本非常高（3）降低開發(fā)風(fēng)險等待產(chǎn)品發(fā)布后再獲得用戶的反饋，風(fēng)險太高（4）降低技術(shù)支持和維護成本用戶容易學(xué)習(xí)和使用產(chǎn)品，自然就很少打技術(shù)支持的“熱線電話”，也無需太多的時間去維護產(chǎn)品

(5)提高銷售額好用的產(chǎn)品自然就會有良好的口碑，良好的口碑成就更高的銷售額要評估哪些方面？一一確定評估指標(biāo)自變量:可以棚究者黝的變量反映因變量的.川啲刪或動作航

動作辭!..、亠噸±s二反映因變量的.川啲刪或動作航

動作辭!..、亠噸±s二土懇表=500;}/images/picError.gif'/>何開展可用性評估和研究=500;}/images/picError.gif'/>選擇哪類評估？一一選擇評估方法1、用戶參與(1)對比實驗：用戶數(shù)：多組設(shè)計的可用性比較；用戶數(shù)：每組12人以上。（2）可用性觀察測試：通過觀察找出界面可用性問題，提出設(shè)計改進建議；可以是正式的實驗室觀察，也可以是非正式的觀察。用戶數(shù)：2人以上，一般6——12人。2、用戶不參與（1）啟發(fā)式評估可用性專業(yè)人員根據(jù)已有的可用性原則，對界面進行逐一評估（2）認(rèn)知走查法可用性專業(yè)人員將自己“扮演”成為用戶，通過一定的任務(wù)對界面進行檢查評估。（3）GOMS模型預(yù)測（4）擊鍵層模型預(yù)測選擇哪類評估？——選擇評估方法評估方法的選擇，取決于：我的評估目標(biāo)——如前面所述研究導(dǎo)向：驗證我的設(shè)計Idea是否有利于用戶（觀察測試等）；比較兩個或多個設(shè)計Ideas（對比實驗）產(chǎn)品導(dǎo)向：發(fā)現(xiàn)問題，改善設(shè)計（觀察測試、啟發(fā)式評估、認(rèn)知走查等）；證實我的產(chǎn)品達到可用性目標(biāo)（觀察測試、對比實驗等）我希望獲取的數(shù)據(jù)的類型量化數(shù)據(jù)（對比實驗）質(zhì)性數(shù)據(jù)（其他評估方法）我關(guān)于評估和與用戶打交道的價值觀念用戶參與的評估評估前需要哪些準(zhǔn)備？——評估準(zhǔn)備、人員組成二、人員培訓(xùn)三、觀察者安排四、測試計劃五、測試任務(wù)設(shè)計六、招募測試用戶評估前需要哪些準(zhǔn)備？——評估準(zhǔn)備用戶參與的評估一、人員組成一個可用性評估組中至少要有兩位實施人員.雖然一個人也可能完成可用性測試，但他/她必須是經(jīng)過嚴(yán)格訓(xùn)練的可用性專家，必須能夠即時處理所有的任務(wù)。他/她需要：照看好測試測試用戶（使所有測試用戶都感覺良好并完成得比較順利）觀察測試中發(fā)生的事情，安排管理測試場景（作為測試的促進者），并提出問題（如果需要）觀察時要做好筆記如果你用了錄音設(shè)備，還要照看好它們。所有這些，一個人難以辦到兩人組成小組，有如下好處：測試結(jié)束時，會有兩種視角來看待測試結(jié)果其中一人可以照看測試用戶并坐在測試用戶的旁邊，另外一個人可以做記錄，并照看好記錄設(shè)備兩個人必須都可以觀察測試用戶并聽到測試用戶說話如果空間和人員足夠，還可以用更多的人加入可用性測試小組（如項目經(jīng)理、開發(fā)人員等）。小組中的成員都應(yīng)該觀察、聆聽并作筆記。二、人員培訓(xùn)評估小組中至少有一個成員是可用性專業(yè)人員。所有的其他成員必須知道如何:在可用性測試期間如何與用戶進行溝通客觀觀察的方法聆聽用戶真實意圖的方法將觀察（所看到的和所聽到的）與推論（對觀察做出假設(shè)和結(jié)論）區(qū)別開來有效地作筆記的方法詢問時，不引導(dǎo)或責(zé)備用戶三、觀察者安排觀察者：想親眼目睹整個觀察過程的任何相關(guān)人員還有哪些人需要對可用性測試進行觀察？很多人。努力為這些觀察者安排位置。負(fù)責(zé)產(chǎn)品設(shè)計的團隊?wèi)?yīng)該過來，進行觀察和聆聽。負(fù)責(zé)產(chǎn)品內(nèi)容編輯的人員應(yīng)該過來，進行觀察和聆聽。那些對可用性工程表示過懷疑或?qū)δ愕挠脩糁R技能分析表示過懷疑的經(jīng)理和管理者們應(yīng)該過來，進行觀察和聆聽?？捎眯詼y試是許多設(shè)計者、開發(fā)者、編輯和經(jīng)理第一次看到真正的用戶使用產(chǎn)品。這些人需要看到可用性測試這一真實過程。在典型的可用性測試中，你不想將超過一個以上的觀察者與用戶一起待在一個房間。因此，你需要為其他觀察者安排另外的空間?？捎眯詫嶒炇抑型ǔ＞哂幸粋€獨立的房間，在這個房間里，觀察著可以通過單向玻璃或監(jiān)視器來觀察可用性測試過程。如果你把測試安排在一個會議室，你可以在隔壁為觀察者搭建一個房間。你可以在觀察室里放置影音設(shè)備，將將錄像投到一個大監(jiān)視器上。四、測試計劃評估范圍：我需要評估什么內(nèi)容?評估指標(biāo)：我關(guān)注想評估產(chǎn)品的哪些方面？測試用戶：我應(yīng)該請什么用戶來參加測試？評估環(huán)境：在什么地方實施評估？在固定的實驗室？會議室？或其他擁有可移動實驗室的地方？在會議室或其他沒有任何錄音設(shè)備的地方？遠程？評估預(yù)算：這次評估我大概要花多少錢？五、測試任務(wù)設(shè)計選擇用戶將要嘗試的相關(guān)任務(wù)準(zhǔn)備、試驗并精煉為這些任務(wù)所設(shè)計的任務(wù)場景。注意：確保這些任務(wù)場景寫得很清晰，在測試時間分配上比較合理。如果是對比實驗，還需要考慮你的實驗設(shè)計測試內(nèi)設(shè)計、測試間設(shè)計、混合設(shè)計無關(guān)變量的消除與平衡順序效應(yīng)的平衡練習(xí)效應(yīng)的消除滿意度問卷六、招募測試用戶招募那些當(dāng)前的或潛在的用戶來參加測試考慮請一個專門招募可用性測試的測試用戶的公司來幫助招測試用戶如果自己招募，可以建立一個用戶庫以便將來的測試之用。如何實施評估？——評估實施預(yù)測試找找親近的人、與測試用戶背景相似的人或其他部門的人（如人力資源部、會計部等）過來，請他們幫忙過來做預(yù)測試預(yù)測試用戶一般2個人左右預(yù)測試能夠幫助我們對評估的過程進行預(yù)演，從而找出我們在評估設(shè)計可能存在的問題或沒有考慮到的情況，盡量減少在正式的評估中出現(xiàn)不愉快的或影響評估的客觀性的或不可預(yù)知的問題。檢查軟硬件是否有沖突任務(wù)描述是否有問題實驗者的口頭說明是否清晰實驗者先自己測試，將任務(wù)完整過一遍。測試實施一、評估人員介紹測試的目的自我介紹（姓名，稱呼：**公司的研究人員）所在機構(gòu)和他的主要目標(biāo)（公司主要是做手機可用性測試方面的）介紹這次研究的目的（該系統(tǒng)是否符合用戶的使用方面的要求）聲明這個測試的對象是手機/手機軟件，而不是用戶本人聲明他們的參與是完全自愿的，他們可以在任何時候要求停止提供知情同意書，請他們閱讀，并要求他們簽名，同時可收集用戶的人口學(xué)、知識等信息讓用戶參觀測試設(shè)備，并解釋每部分的功能，告訴他們將使用什么設(shè)備讓用戶了解將要對他們的聲音和行為進行記錄。保密聲明，征求同意。二、出聲思維訓(xùn)練在做什么？看到了什么？怎么想的？有什么疑問？三、任務(wù)介紹用戶使用系統(tǒng)之前盡可能告訴用戶有關(guān)系統(tǒng)的信息告知用戶任務(wù)。一次告知一個任務(wù)。任務(wù)描述頁，同時口頭上向他們表述。詢問用戶是否有關(guān)于研究目標(biāo)、過程或任務(wù)的問題?；卮疬@些問題，但是不能回答類似于“我該怎樣做這項任務(wù)？”的問題，如有用戶問到，可以跟他們說：“那正是我需要觀察的情況，我想看看系統(tǒng)是怎樣幫助你完成這個任務(wù)的?！彼?、開始測試用戶采用出聲思維法完成任務(wù)。如果用戶沉默5-10秒，告訴他“請一直說”。如果用戶開始解釋他們的步驟而不是報告工作記憶區(qū)的內(nèi)容，先讓其停止，然后說：“請不要向我解釋你正在做什么。表現(xiàn)得就好像你一個人在解決問題時一樣自言自語?！边m時讓用戶休息

五、結(jié)束測試詢問用戶是否還有更多的關(guān)于系統(tǒng)或研究的問題?；卮鹉切┈F(xiàn)在就可以回答的問題，或讓用戶和可以回答這些問題的人聯(lián)系。詢問用戶關(guān)于所測試產(chǎn)品的意見和改進建議。感謝用戶的參與，重申他們的參與將幫助我們確定系統(tǒng)的問題，從而可以改進系統(tǒng)。用戶不參與的評估：啟發(fā)式評估評估準(zhǔn)備人員組成人員培訓(xùn)評估過程一、人員組成要考慮用3――5個可用性專業(yè)人員OO

d—如何開展可用性評估和研究”/>500){this.width=500;}"/images/picError.gif"/>、人員培訓(xùn)評估小組中所有成員均為可用性專業(yè)人員。所有的成員必須:對可用性評估原則有一致的理解能夠在一個顯而易見的可用性范例中取得一致的評估（檢查到的問題、對問題的解釋；設(shè)計建議可以不一致）了解評估實施過程共同形成評估任務(wù)能夠形成可用性專業(yè)人員評估的報告規(guī)范和呈現(xiàn)方式JakobNielsen的啟發(fā)式原則1.0—約1990簡單而自然的對話采用用戶的語言使用戶的記憶負(fù)擔(dān)減至最低一致性提供反饋提供清晰的退出標(biāo)志提供快捷方式提供良好的出錯消息預(yù)防錯誤幫助和文檔2.0—約1994美觀和最小化設(shè)計系統(tǒng)和現(xiàn)實世界相匹配運用再認(rèn)而不是回憶一致性和標(biāo)準(zhǔn)化系統(tǒng)狀態(tài)可視化用戶控制和自由度使用的靈活性和效率幫助用戶識別、診斷、恢復(fù)錯誤錯誤預(yù)防幫助和文檔評估過程評估小組(最好3-5人)評估一個用戶界面每個評估者根據(jù)啟發(fā)式原則獨立地、依次地進行檢查評估不同的評估者可能會發(fā)現(xiàn)不同的問題評估者聚在一起，合并他們的發(fā)現(xiàn)共同估計問題的嚴(yán)重性任務(wù)報告/頭腦風(fēng)暴如何修正該問題，指出哪種設(shè)計建議/解決方案比較好如何撰寫評估報告？——評估報告評估報告的風(fēng)格因不同的目標(biāo)、不同的閱讀對象而不同。通用工業(yè)規(guī)范可用性測試報告標(biāo)準(zhǔn)(CIF,ANSI/NCITS354,2001)標(biāo)題頁實施概要簡