球球大作戰(zhàn)用戶測(cè)試文檔

1、球球大作戰(zhàn)用戶測(cè)試文檔自制可用球球大作戰(zhàn)用戶測(cè)試文檔目錄標(biāo)與問1.定義目題22.者2選擇參與3.應(yīng)用的技術(shù)34.測(cè)試任務(wù)35.測(cè)試步驟4準(zhǔn)67.可用性題71:定義目標(biāo)與問題這次實(shí)驗(yàn)的目的是檢查第四次作業(yè)中iPh one端完成的關(guān)鍵界面原型是否存在可用性問 題。具體的說，想通過參與者來實(shí)際操作已經(jīng)完 成的原型，使評(píng)估人員知道，用戶是否能在 目標(biāo)時(shí)間內(nèi)完成功能隱藏、找朋友、打開聊天界 面、查看好友及粉絲、打開團(tuán)戰(zhàn)模式、打開生存 模式等操作。在iPhone設(shè)備中，較小的屏幕使 軟件界面只能放置很少的組件，容易使用戶跳轉(zhuǎn)太多才能達(dá)到目標(biāo)界面，因此，檢查球球大作戰(zhàn) 能否在盡可能少的操作步驟情況下完成用戶

2、指 定的操作。2. 選擇參與者評(píng)估人員總共選取了 6人進(jìn)行了用戶測(cè)試， 這6人的職業(yè)分別是學(xué)生、白領(lǐng)、攝影師。這6 人全部是使用智能手機(jī)或pc互聯(lián)網(wǎng)的人士。在 測(cè)試之前，評(píng)估人員只告訴參與者這只是一個(gè) iPhone端應(yīng)用，但沒有告訴他們具體的名稱， 以防止他們提前去使用這款客戶端。6人中有3 位男性，3位女性，我們做到盡可能的平均男女 比例，防止在性別不同上對(duì)客戶端的界面有不同 的喜好，但是更重要的一點(diǎn)是，這6位參與者全 部在日常生活中經(jīng)?；蚺紶柺褂弥悄苁謾C(jī)和pc互聯(lián)網(wǎng)。參與者的數(shù)目符合可用性專家建議的 6 至12位。下面是這6位參與者的具體情況（因 為要保護(hù)參與者的隱私，我們對(duì)參與者的姓名做

3、 了處理）：編 號(hào)姓 名性 別職 業(yè)年 齡教 育 程 度特點(diǎn)1銘男學(xué)生19本科使用智能手機(jī)上網(wǎng)的頻率 為每天至少一次，使用pc 上網(wǎng)的頻率為每半天至少 一次。2雪女學(xué) 生20初 中不使用智能手機(jī)，熱愛學(xué) 習(xí)，偶爾使用手機(jī)上網(wǎng)， 使用pc上網(wǎng)的頻率為每 半天至少一次。3凡男白 領(lǐng)28本科使用iPhone，工作認(rèn)真負(fù) 責(zé)，使用手機(jī)上網(wǎng)的頻率 為每天至少一次，頻繁使 用PC上網(wǎng)進(jìn)行工作。4梅:女白 領(lǐng)30本科使用索愛LT26i，工作認(rèn) 真負(fù)責(zé)，使用手機(jī)上網(wǎng)的 頻率為每天至少一次，頻 繁使用PC上網(wǎng)進(jìn)行工 作。5圓女?dāng)z影師26高 中使用OPPO每天都使用手 機(jī)上網(wǎng)。偶爾用PC上網(wǎng)6江男攝 影33本科使

4、用iPhone,使用手機(jī)上 網(wǎng)頻率為每天至少6次，師偶爾使用PC上網(wǎng)3. 應(yīng)用的技術(shù)(1) 觀察用戶在用戶使用產(chǎn)品iPhone端原型時(shí)，評(píng)測(cè)人員 在一旁觀察用戶的使用情況，同時(shí)評(píng)測(cè)人員不能 干擾用戶執(zhí)行任務(wù)的過程。評(píng)測(cè)人員通過筆記的 方式對(duì)觀察的用戶的反映進(jìn)行記錄，在結(jié)果總結(jié) 時(shí)對(duì)筆記進(jìn)行整理來對(duì)評(píng)估的結(jié)果進(jìn)行統(tǒng)計(jì)和 分析。(2) 征求用戶意見在用戶使用完產(chǎn)品完成評(píng)測(cè)人員指定的任務(wù)后， 評(píng)測(cè)人員通過訪談的方式來對(duì)用戶的意見進(jìn)行 詢問。設(shè)計(jì)的問題如下：球球大作戰(zhàn)的iPhone客戶端已有的功能是 否能溝滿足用戶需求？用戶是否喜歡球球大作戰(zhàn)的iPhone客戶端？用戶是否覺得球球大作戰(zhàn)的iPhone客

5、戶端 的界面設(shè)計(jì)賞心悅目？用戶在哪些任務(wù)執(zhí)行時(shí)比較困難？用戶覺得哪些功能沒有價(jià)值？用戶覺得缺少哪些功能？（3 ）測(cè)試用戶的執(zhí)行情況用戶執(zhí)行評(píng)測(cè)人員安排的任務(wù)，評(píng)測(cè)人員對(duì)用戶 執(zhí)行任務(wù)的結(jié)果進(jìn)行整理和總結(jié)，包括完成任務(wù) 的時(shí)間、出錯(cuò)的次數(shù)和操作步驟數(shù)。評(píng)測(cè)人員將 測(cè)試結(jié)果表示為統(tǒng)計(jì)值（均值，方差）。（4）分析用戶執(zhí)行任務(wù)的情況，預(yù)測(cè)用戶 界面的有 效性對(duì)用戶執(zhí)行任務(wù)的結(jié)果進(jìn)行分 析，對(duì)錯(cuò)誤率、任務(wù)平均步驟數(shù)等進(jìn)行總結(jié)，來 預(yù)測(cè)用戶界面的有效性是否達(dá)到了目標(biāo)的標(biāo)準(zhǔn)。4. 測(cè)試任務(wù)評(píng)測(cè)人員設(shè)計(jì)了 4項(xiàng)任務(wù)，用來檢查球球大 作戰(zhàn)的iPhone客戶端基本功能。這些是球球大 作戰(zhàn)的關(guān)鍵任務(wù)。任如下：（1

6、）打開球球大作戰(zhàn)。（2 ）將“觀戰(zhàn)頻道，獲取棒棒糖，賬號(hào) & 設(shè)置，攻略”等圖標(biāo)隱藏。（3 ）在網(wǎng)絡(luò)狀況良好的情況下，在找朋友 界面輸入一個(gè)給定id，關(guān)注為好友。（4 ）在網(wǎng)絡(luò)狀況良好的情況下，給好友發(fā) 送“ hello! ”（5 ）在網(wǎng)絡(luò)狀況良好的情況下，觀戰(zhàn)自己 的一個(gè)粉絲，并點(diǎn)喜歡（個(gè)數(shù)為 3）.（6 ）在網(wǎng)絡(luò)狀況良好的情況下，打開團(tuán)戰(zhàn) 模式，并邀請(qǐng)一個(gè)好友。（7 ）在網(wǎng)絡(luò)狀況良好的情況下，打開生存 模式，查看生存入場(chǎng)券個(gè)數(shù)。（8 ）在網(wǎng)絡(luò)狀況良好的情況下，開始一場(chǎng) 個(gè)人比賽。5. 測(cè)試步驟在評(píng)估之前，評(píng)估小組準(zhǔn)備了統(tǒng)一的說明稿， 共分為3個(gè)部分。目的是保證每一位參與者都得 到相同的信息

7、和相同的對(duì)待。測(cè)試在現(xiàn)場(chǎng)進(jìn)行。參與者抵達(dá)后，評(píng)估人員 用表5.1的說明稿向他表示問候并說明情況。感謝你參與這項(xiàng)研究。這項(xiàng)研究的目的是評(píng)估球球大作戰(zhàn)的 iPhone客戶端的可用性。我們將總結(jié)評(píng)估結(jié)果， 并對(duì)結(jié)果進(jìn)行分析，來為球球大作戰(zhàn)的使用者提 供更好的用戶體驗(yàn)。我們將要求你用球球大作戰(zhàn)執(zhí)行一些主要功 能的操作。執(zhí)行這些功能時(shí)，說出你的想法。我們將使用攝像機(jī)拍攝 iPh one屏幕的情 況，同時(shí)我們也會(huì)進(jìn)行錄音，記錄你在執(zhí)行功能 時(shí)所說的話， 我們的工作人員也會(huì)在實(shí)驗(yàn)過程 中使用筆記來就對(duì)你行為的觀察。我們會(huì)對(duì)你的 身份保密。請(qǐng)閱讀并簽署一份協(xié)議書。若有問題請(qǐng)隨時(shí) 提出（協(xié)議書見下文）。表5.1

8、說明稿1表5.1中的協(xié)議書如表5.2所示，評(píng)估人員安 排參與者仔細(xì)看完協(xié)議書，達(dá)成一致意見后在協(xié) 議書上面簽字。本人再次申明：本人已年滿18歲（未滿18歲 的參與者由監(jiān)護(hù)人代簽署），并且愿意參加球球 大作戰(zhàn)可用性評(píng)估研究項(xiàng)目。該研究項(xiàng)目目的是評(píng)估球球大作戰(zhàn)系統(tǒng)原型的 可用性。球球大作戰(zhàn)系統(tǒng)是一種手游。測(cè)試方法是使用該系統(tǒng)并接受觀察。本人將使用 球球大作戰(zhàn)系統(tǒng)執(zhí)行特定任務(wù)，也將回答球球大 作戰(zhàn)系統(tǒng)以及個(gè)人使用體驗(yàn)相關(guān)的各種問題。 這項(xiàng)研究所搜集到的所有信息屬于機(jī)密， 任何時(shí) 候都不能公開本人的身份。本人有權(quán)利隨時(shí)提出任何問題，或者隨時(shí)退出測(cè) 試，而不必承擔(dān)任何形式的賠償。參 與 者 簽 名 ：

9、日期：表5.2實(shí)驗(yàn)協(xié)議接著，評(píng)估人員安排參與者就坐，解釋測(cè)試目的 和測(cè)試步驟。表5.3展示出了這個(gè)過程中使用 的說明稿。本次實(shí)驗(yàn)中，對(duì)所有用戶使用了統(tǒng)一 的說明，有助于確保參與者不會(huì)因?yàn)檎f明上的差 異而有不同的測(cè)試表現(xiàn)。我們先簡要介紹球球大作戰(zhàn)的 iPhone客戶 端。這是球球大作戰(zhàn)的iPhone客戶端的原型， 其目的是豐富用戶生活，滿足玩家需求。這項(xiàng)研究的目的是檢查球球大作戰(zhàn)的iPh one客戶端的界面，找出在執(zhí)行我們給定的關(guān)鍵任 務(wù)過程中有待改進(jìn)的特征。實(shí)驗(yàn)過程中，如果 發(fā)現(xiàn)了非關(guān)鍵任務(wù)的可改進(jìn)特征，我們也會(huì)將 其記錄下來以改善我們的用戶體驗(yàn)。 同時(shí)，我 們也希望了解我們的球球大作戰(zhàn)的哪些

10、特征 對(duì)用戶特別有用。幾分鐘之后，我們會(huì)安排給你 4項(xiàng)任務(wù)。每 項(xiàng)任務(wù)都是使用球球大作戰(zhàn)來完成一個(gè)關(guān)鍵人物的執(zhí)行。需要指出的是，當(dāng)你使用球球大作戰(zhàn)來完成任務(wù)時(shí)，我們的目標(biāo)是球球大作 戰(zhàn)iPhone客戶端的用戶體驗(yàn)，而不是你本 身。你可以以正常、舒適的速度執(zhí)行每項(xiàng)任務(wù)。我 們將記錄你完成每項(xiàng)任務(wù)的時(shí)間，但不必感到 有壓力，請(qǐng)使用正常的操作速度。如果某項(xiàng)任 務(wù)的時(shí)間操作20分鐘，那么請(qǐng)繼續(xù)下一項(xiàng)任務(wù)?？蛻舳说拇蜷_界面默認(rèn)為游戲主界面界面，只 需點(diǎn)擊圖標(biāo)打開客戶端即可。在執(zhí)行每項(xiàng)任務(wù) 時(shí)，請(qǐng)?jiān)O(shè)想這些功能是否可以滿足你的需求。所有的任務(wù)都可以在客戶端內(nèi)執(zhí)行完成。如果你在某項(xiàng)任務(wù)的執(zhí)行中遇到了無法克服的

11、 困難并且想終止這項(xiàng)任務(wù)時(shí)，請(qǐng)告訴我們，然 后進(jìn)行下一項(xiàng)任務(wù)。開始之前，還有什么問題嗎？表 5.3說明稿2在執(zhí)行主要測(cè)試任務(wù)之前，參與者使用10分鐘 時(shí)間熟悉該iPhone客戶端。在這個(gè)過程中，參 與者需要使用自言自語式的思考方式。圖 5.4給出了這項(xiàng)任務(wù)的說明在開始執(zhí)行任務(wù)之前，請(qǐng)先用 10分鐘時(shí)間 熟悉球球大作戰(zhàn)的iPhone客戶端。在熟悉 客戶端的過程中，請(qǐng)說出你的想法，即，當(dāng) 你遇到球球大作戰(zhàn)iPhone客戶端的不同特 征時(shí)，你在想什么。你可以自由探索任何感興趣的問題。如果你 提前完成了這個(gè)過程，請(qǐng)告訴我們，我們將 立即進(jìn)行測(cè)試任務(wù)。再次說明，當(dāng)你在探索 球球大作戰(zhàn)時(shí)，請(qǐng)告訴我們你的實(shí)

12、時(shí)想法。表5.4前置任務(wù)說明之后，參與者逐一執(zhí)行了 4項(xiàng)測(cè)試任務(wù)。每項(xiàng) 任務(wù)不能操作20分鐘，若到20分鐘還未完 成，那么必須停止，如果20分鐘內(nèi)完成任務(wù)， 也及時(shí)停止計(jì)時(shí)。如果參與者忘了說出想法或者 不知所措時(shí)，評(píng)估人員請(qǐng)給出提示。表5.5展示出來這一過程的說明。在開始使用球球大作戰(zhàn)的iPhone客戶端 之前，請(qǐng)讀出這項(xiàng)任務(wù)。完成每項(xiàng)任務(wù)之后，請(qǐng)返回任務(wù)開始的界 面。提示：“你在想什么？” “你是否不知道該 怎么辦？” “請(qǐng)告訴我們你在想什么?！薄救绻^20分鐘：“請(qǐng)?zhí)^這項(xiàng)任務(wù)， 繼續(xù)下一項(xiàng)任務(wù)?！薄?5.5過程說明在完成所有任務(wù)之后，參與者需要回答一份調(diào)查 問卷。該問卷是根據(jù)QUIS用

13、戶滿意度問卷設(shè)計(jì) 的。結(jié)束問卷調(diào)查之后，評(píng)估人員詢問參與者對(duì) 某些問題的看法（表5.6 ）。你對(duì)自己執(zhí)行這些任務(wù)的表現(xiàn)有何看法？ 請(qǐng)說明為什么執(zhí)行這項(xiàng)任務(wù)時(shí)會(huì)失??？ 你覺得球球大作戰(zhàn)是否能滿足你在工作記 錄和規(guī)劃上的需求？你覺得使用球球大作戰(zhàn)時(shí)，你的好友提供的 工作分享信息能溝滿足你的需求嗎？ 你覺得球球大作戰(zhàn)的界面最好的方面是什 么？你覺得球球大作戰(zhàn)的界面最差的方面是什么？你覺得在我們所能提供的功能中，哪項(xiàng)功能 最實(shí)用？你覺得在我們所能提供的功能中，哪項(xiàng)功能沒有價(jià)值？你覺得球球大作戰(zhàn)是否還要添加哪項(xiàng)功能？表5.66.評(píng)價(jià)標(biāo)準(zhǔn)在下列的表中列舉了所有任務(wù)所有參與者的執(zhí) 行情況，包括任務(wù)執(zhí)行的時(shí)間

14、、結(jié)束任務(wù)的原因、 訪問的界面數(shù)，訪問的無關(guān)界面數(shù)，反饋意見。 評(píng)價(jià)標(biāo)準(zhǔn)評(píng)價(jià)標(biāo)準(zhǔn)描述執(zhí)行時(shí)間是否能在指定時(shí)間 內(nèi)完成任務(wù)訪問的界面數(shù)訪問的界面數(shù)是否 在正常范圍內(nèi)訪問的無關(guān) 界面數(shù)訪問的多余界面是否在2個(gè)以內(nèi)完成任務(wù)是否能夠正常完成 任務(wù)7.可用性問題在這個(gè)部分中，我們對(duì)用戶的反饋進(jìn)行了總結(jié), 并且對(duì)用戶執(zhí)行我們所指定的任務(wù)的時(shí)間數(shù)據(jù)進(jìn)行分析，然后將得到的結(jié)果數(shù)據(jù)與我們的期望 數(shù)據(jù)進(jìn)行了對(duì)比，此外，我們總結(jié)了對(duì)用戶訪談 的內(nèi)容，并且自己對(duì)已有的系統(tǒng)進(jìn)行了自我評(píng) 估，總結(jié)出以下幾點(diǎn)可用性問題。編 號(hào)級(jí) 別問題描述解決方案11打開軟件默認(rèn)到 主界面，太突兀， 用戶感覺不好新增歡迎界面，讓用 戶從打開軟件到