可用性測試報告

1、如何進行可用性評估和研究報告框架什么是可用性評估？一一理解可用性 為什么要做評估？ 一一探明評估目標 評估哪些方面？一一確定評估指標 選擇哪類評估？ 一一選擇評估方法 評估前需要哪些準備？ 一 一評估準備 如何實施評估？一一評估實施 如何撰寫評估報告？ 一一評估報告什么是可用性評估？一一理解可用性 可用性定義(ISO9241-11 ):產(chǎn)品在特定環(huán)境下特定用戶用于特定用途時所具有的效果、效 率和用戶主觀滿意度.如何開展可用性評估和研究"/> 500)this.width = 500;" /images/picError.gif" />為什么要做評估?探

2、明評估目標研究導向：證實與證偽產(chǎn)品導向：發(fā)現(xiàn)問題,改善設計為什么要做評估？ 一一研究導向我創(chuàng)造了一個全新的技術,我想知道用戶對這個創(chuàng)新技術的反響,以確認它是否有價值.驗證性評估我創(chuàng)造了一個可替代現(xiàn)有技術的新技術,我想知道它是否比現(xiàn)有技術更有價值(比照).比照性評估為什么要做評估？ 產(chǎn)品導向(1)戰(zhàn)略上的目標1使我的產(chǎn)品所提供的功能用戶真正想要和 想用,建立起清楚的產(chǎn)品定位.2使我的產(chǎn)品在同類產(chǎn)品中更具核心競爭力.功能是產(chǎn)品的核心價值, 當同類競爭產(chǎn)品之間的功能相差不大時,可用性和用戶體驗就升格為核心價值.Idea：可用性/用戶體驗是產(chǎn)品競爭的最后一座堡壘.3使我的用戶滿意我的產(chǎn)品 一一信賴我的

3、產(chǎn)品的品牌 一一成為我的產(chǎn)品的 骨灰級粉絲為什么要做評估？ 產(chǎn)品導向(2)具體目標(1)建立可用性標準對當前版本進行可用性評估,為下一版本的產(chǎn)品提供可用性標準.(2)限制開發(fā)本錢在開發(fā)周期的早期就能夠發(fā)現(xiàn)設方t上的問題(原型測試)VS Coding的本錢非常高(3)降低開發(fā)風險等待產(chǎn)品發(fā)布后再獲得用戶的反響,風險太高(4)降低技術支持和維護本錢用戶容易學習和使用產(chǎn)品,自然就很少打技術支持的熱線 ,也無需太多的時間去維護產(chǎn)品(5)提升銷售額好用的產(chǎn)品自然就會有良好的口碑,良好的口碑成就更高的銷售額要評估哪些方面？ 一一確定評估指標自姆 可以蝴究 者操縱的變 量因謔：用戶反響評牖林 反映因變鼬 用

4、戶秘訛或 量化的教據(jù)學習朋 加遢費 翎出舔度 任務是否完成丸9 cijr£4 匕一日一 僚 口或 .T-間率裴 時頻賞 作作錯 珈而鴛總體肺效率珊弦果說才 對照局部的戳大?¥二忌衣 5清昏LLF學詞隨著自變醐 變化而姚的 用戶行為何開展可用性評估和研究"/> 500)this.width = 500;" /images/picError.gif" />選擇哪類評估？一一選擇評估方法1、用戶參與(1)比照實驗：用戶數(shù)：多組設計的可用性比擬；用戶數(shù)：每組12人以上.2可用性觀察測試：通過觀察找出界面可用性問題,提出設計改良建議；可以是正

5、式的實驗室觀察,也可以是非正式的觀察.用戶數(shù)：2人以上,一般612人.2、用戶不參與1啟發(fā)式評估可用性專業(yè)人員根據(jù)已有的可用性原那么,對界面進行逐一評估2認知走查法可用性專業(yè)人員將自己 扮演成為用戶,通過一定的任務對界面進行檢查評估.3 GOMS模型預測4擊鍵層模型預測選擇哪類評估？一一選擇評估方法評估方法的選擇,取決于：1我的評估目標一一如前面所述研究導向：驗證我的設計 Idea是否有利于用戶觀察測試等；比擬兩個或多個設計Ideas比照實驗產(chǎn)品導向：發(fā)現(xiàn)問題,改善設計觀察測試、啟發(fā)式評估、認知走查等；證實我的產(chǎn)品到達可用性目標觀察測試、比照實驗等2我希望獲取的數(shù)據(jù)的類型量化數(shù)據(jù)比照實驗質性數(shù)

6、據(jù)其他評估方法3我關于評估和與用戶打交道的價值觀念用戶參與的評估評估前需要哪些準備？ 一 一評估準備、人員組成二、人員培訓三、觀察者安排四、測試方案五、測試任務設計六、招募測試用戶評估前需要哪些準備？ 一一評估準備用戶參與的評估一、人員組成一個可用性評估組中至少要有兩位實施人員雖然一個人也可能完成可用性測試,但他/她必須是經(jīng)過嚴格練習的可用性專家,必須能夠即時處理所有的任務.他 /她需要：1照看好測試測試用戶使所有測試用戶都感覺良好并完成得比擬順利觀察測試中發(fā)生的事情,安排治理測試場景作為測試的促進者,并提出問題如果需要2觀察時要做好筆記3如果你用了錄音設備,還要照看好它們.所有這些,一個人難

7、以辦到兩人組成小組,有如下好處：1測試結束時,會有兩種視角來看待測試結果2其中一人可以照看測試用戶并坐在測試用戶的旁邊,另外一個人可以做記錄,并照看好記錄設備3兩個人必須都可以觀察測試用戶并聽到測試用戶說話如果空間和人員足夠, 還可以用更多的人參加可用性測試小組如工程經(jīng)理、開發(fā)人員等小組中的成員都應該觀察、聆聽并作筆記.二、人員培訓評估小組中至少有一個成員是可用性專業(yè)人員.所有的其他成員必須知道如何 ：1在可用性測試期間如何與用戶進行溝通 2客觀觀察的方法3聆聽用戶真實意圖的方法4將觀察所看到的和所聽到的與推論對觀察做出假設和結論區(qū)別開來5有效地作筆記的方法6詢問時,不引導或責備用戶三、觀察者

8、安排觀察者：想親眼目睹整個觀察過程的任何相關人員還有哪些人需要對可用性測試進行觀察？很多人.努力為這些觀察者安排位置.1負責產(chǎn)品設計的團隊應該過來,進行觀察和聆聽.2負責產(chǎn)品內容編輯的人員應該過來,進行觀察和聆聽.3那些對可用性工程表示過疑心或對你的用戶知識技能分析表示過疑心的經(jīng)理和治理者們應該過來,進行觀察和聆聽.4可用性測試是許多設計者、開發(fā)者、編輯和經(jīng)理第一次看到真正的用戶使用產(chǎn)品.這些人需要看到可用性測試這一真實過程.在典型的可用性測試中,你不想將超過一個以上的觀察者與用戶一起待在一個房間.因此,你需要為其他觀察者安排另外的空間.可用性實驗室中通常具有一個獨立的房間,在這個房間里,觀察

9、著可以通過單向玻璃或監(jiān)視器來觀察可用性測試過程.如果你把測試安排在一個會議室,你可以在隔壁為觀察者搭建一個房間.你可以在觀察室里放置影音設備,將將錄像投到一個大監(jiān)視器上.四、測試方案評估范圍：我需要評估什么內容 ？評估指標：我關注想評估產(chǎn)品的哪些方面？測試用戶：我應該請什么用戶來參加測試？評估環(huán)境：在什么地方實施評估？在固定的實驗室？會議室？或其他擁有可移動實驗室的地方？在會議室或其他沒有任何錄音設備的地方？遠程？評估預算：這次評估我大概要花多少錢？五、測試任務設計選擇用戶將要嘗試的相關任務準備、試驗并精煉為這些任務所設計的任務場景.注意：保證這些任務場景寫得很清楚,在測試時間分配上比擬合理.

10、如果是比照實驗,還需要考慮你的實驗設計測試內設計、測試間設計、混合設計無關變量的消除與平衡順序效應的平衡練習效應的消除滿意度問卷六、招募測試用戶招募那些當前的或潛在的用戶來參加測試考慮請一個專門招募可用性測試的測試用戶的公司來幫助招測試用戶如果自己招募,可以建立一個用戶庫以便將來的測試之用.如何實施評估？一一評估實施預測試找找親近的人、與測試用戶背景相似的人或其他部門的人如人力資源部、會計部等過來,請他們幫助過來做預測試預測試用戶一般2個人左右預測試能夠幫助我們對評估的過程進行預演,從而找出我們在評估設計可能存在的問題或沒有考慮到的情況,盡量減少在正式的評估中出現(xiàn)不愉快的或影響評估的客觀性的或

11、不可預知的問題.檢查軟硬件是否有沖突任務描述是否有問題實驗者的口頭說明是否清楚實驗者先自己測試,將任務完整過一遍.測試實施一、評估人員介紹測試的目的自我介紹姓名,稱呼：*公司的研究人員所在機構和他的主要目標公司主要是做 可用性測試方面的介紹這次研究的目的該系統(tǒng)是否符合用戶的使用方面的要求聲明這個測試的對象是 / 軟件,而不是用戶本人聲明他們的參與是完全自愿的,他們可以在任何時候要求停止提供知情同意書,請他們閱讀,并要求他們簽名,同時可收集用戶的人口學、知識等信息.讓用戶參觀測試設備,并解釋每局部的功能,告訴他們將使用什么設備讓用戶了解將要對他們的聲音和行為進行記錄.保密聲明,征求同意.二、出聲

12、思維練習在做什么？看到了什么？怎么想的？有什么疑問？三、任務介紹用戶使用系統(tǒng)之前盡可能告訴用戶有關系統(tǒng)的信息告知用戶任務.一次告知一個任務.任務描述頁,同時口頭上向他們表述.詢問用戶是否有關于研究目標、過程或任務的問題.答復這些問題,但是不能答復類似于 我該怎樣做這項任務？ 的問題,如有用戶問到,可以跟他們說：那正是我需要觀察的情況,我想看看系統(tǒng)是怎樣幫助你完成這個任務的.四、開始測試用戶采用出聲思維法完成任務.如果用戶沉默5-10秒,告訴他 請一直說如果用戶開始解釋他們的步驟而不是報告工作記憶區(qū)的內容,先讓其停止,然后說：靖不要向我解釋你正在做什么.表現(xiàn)得就好似你一個人在解決問題時一樣自言自

13、語.適時讓用戶休息五、結束測試答復那些現(xiàn)在就可以答復的問題,或讓用詢問用戶是否還有更多的關于系統(tǒng)或研究的問題.戶和可以答復這些問題的人聯(lián)系.詢問用戶關于所測試產(chǎn)品的意見和改良建議.感謝用戶的參與,重申他們的參與將幫助我們確定系統(tǒng)的問題,從而可以改良系統(tǒng).用戶不參與的評估：啟發(fā)式評估評估準備人員組成人員培訓評估過程一、人員組成要考慮用35個可用性專業(yè)人員如何開展可用性評估和研究"/>500)this.width = 500;" /images/picError.gif" />、人員培訓 評估小組中所有成員均為可用性專業(yè)人員.所有的成員必須對可用性評估原那

14、么有一致的理解能夠在一個顯而易見的可用性范例中取得一致的評估檢查到的問題、對問題的解釋；設計建議可以不一致了解評估實施過程共同形成評估任務能夠形成可用性專業(yè)人員評估的報告標準和呈現(xiàn)方式Jakob Nielsen的啟發(fā)式原那么1.0 -約 1990簡單而自然的對話采用用戶的語言使用戶的記憶負擔減至最低一致性提供反響提供清楚的退出標志提供快捷方式提供良好的出錯消息預防錯誤幫助和文檔2.0 -約 1994美觀和最小化設計系統(tǒng)和現(xiàn)實世界相匹配運用再認而不是回憶一致性和標準化系統(tǒng)狀態(tài)可視化用戶限制和自由度使用的靈活性和效率幫助用戶識別、診斷、恢復錯誤 錯誤預防幫助和文檔評估過程評估小組(最好3-5人)評估一個用戶界面每個評估者根據(jù)啟發(fā)式原那么獨立地、依次地進行檢查評估不同的評估者可能會發(fā)現(xiàn)不同的問題評估者聚在一起,合并他們的發(fā)現(xiàn)共同估計問題的嚴重性任務報告/頭腦風暴如何修正該問題,指出哪種設計建議/解決方案比擬好如何撰寫評估報告？一一評估報告評估報告的風格因不同的目標、不同的閱讀對象而不同.通用工業(yè)標準可用性測試報告標準(CIF, ANSI/NCITS 354, 2001)標題頁實施