球球大作戰(zhàn)用戶測試文檔

球球大作戰(zhàn)用戶測試文檔目錄TOC\o"1-5"\h\z定義目標(biāo)與問題 2\o"CurrentDocument"選擇參與者 2應(yīng)用的技術(shù) 3\o"CurrentDocument"測試任務(wù) 3\o"CurrentDocument"測試步驟 4\o"CurrentDocument"評價標(biāo)準(zhǔn) 6可用性問題 71：定義目標(biāo)與問題這次實驗的目的是檢查第四次作業(yè)中iPhone端完成的關(guān)鍵界面原型是否存在可用性問題。具體的說，想通過參與者來實際操作已經(jīng)完成的原型，使評估人員知道，用戶是否能在目標(biāo)時間完成功能隱藏、找朋友、打開聊天界面、查看好友與粉絲、打開團(tuán)戰(zhàn)模式、打開生存模式等操作。在iPhone設(shè)備中，較小的屏幕使軟件界面只能放置很少的組件，容易使用戶跳轉(zhuǎn)太多才能達(dá)到目標(biāo)界面，因此，檢查球球大作戰(zhàn)能否在盡可能少的操作步驟情況下完成用戶指定的操作。選擇參與者評估人員總共選取了6人進(jìn)展了用戶測試，這6人的職業(yè)分別是學(xué)生、白領(lǐng)、攝影師。這6人全部是使用智能手機(jī)或pc互聯(lián)網(wǎng)的人士。在測試之前，評估人員只告訴參與者這只是一個iPhone端應(yīng)用，但沒有告訴他們具體的名稱，以防止他們提前去使用這款客戶端。6人中有3位男性，3位女性，我們做到盡可能的平均男女比例，防止在性別不同上對客戶端的界面有不同的喜好，但是更重要的一點是，這6位參與者全部在日常生活中經(jīng)?；蚺紶柺褂弥悄苁謾C(jī)和pc互聯(lián)網(wǎng)。參與者的數(shù)目符合可用性專家建議的6至12位。下面是這6位參與者的具體情況〔因為要保護(hù)參與者的隱私，我們對參與者的做了處理〕：編號性別職業(yè)年齡教育程度特點1銘男學(xué)生19本科使用智能手機(jī)上網(wǎng)的頻率為每天至少一次，使用pc上網(wǎng)的頻率為每半天至少一次。2雪女學(xué)生20初中不使用智能手機(jī)，熱愛學(xué)習(xí)，偶爾使用手機(jī)上網(wǎng)，使用pc上網(wǎng)的頻率為每半天至少一次。3凡男白領(lǐng)28本科使用iPhone，工作認(rèn)真負(fù)責(zé)，使用手機(jī)上網(wǎng)的頻率為每天至少一次，頻繁使用PC上網(wǎng)進(jìn)展工作。4梅女白領(lǐng)30本科使用索愛LT26i，工作認(rèn)真負(fù)責(zé)，使用手機(jī)上網(wǎng)的頻率為每天至少一次，頻繁使用PC上網(wǎng)進(jìn)展工作。5圓女?dāng)z影師26高中使用OPPO,每天都使用手機(jī)上網(wǎng)。偶爾用PC上網(wǎng)6江男攝影師33本科使用iPhone，使用手機(jī)上網(wǎng)頻率為每天至少6次，偶爾使用PC上網(wǎng)應(yīng)用的技術(shù)〔1〕觀察用戶在用戶使用產(chǎn)品iPhone端原型時，評測人員在一旁觀察用戶的使用情況，同時評測人員不能干擾用戶執(zhí)行任務(wù)的過程。評測人員通過筆記的方式對觀察的用戶的反映進(jìn)展記錄，在結(jié)果總結(jié)時對筆記進(jìn)展整理來對評估的結(jié)果進(jìn)展統(tǒng)計和分析?！?〕征求用戶意見在用戶使用完產(chǎn)品完成評測人員指定的任務(wù)后，評測人員通過訪談的方式來對用戶的意見進(jìn)展詢問。設(shè)計的問題如下：球球大作戰(zhàn)的iPhone客戶端已有的功能是否能溝滿足用戶需求？用戶是否喜歡球球大作戰(zhàn)的iPhone客戶端？用戶是否覺得球球大作戰(zhàn)的iPhone客戶端的界面設(shè)計賞心悅目？用戶在哪些任務(wù)執(zhí)行時比擬困難？用戶覺得哪些功能沒有價值？用戶覺得缺少哪些功能？〔3〕測試用戶的執(zhí)行情況用戶執(zhí)行評測人員安排的任務(wù)，評測人員對用戶執(zhí)行任務(wù)的結(jié)果進(jìn)展整理和總結(jié)，包括完成任務(wù)的時間、出錯的次數(shù)和操作步驟數(shù)。評測人員將測試結(jié)果表示為統(tǒng)計值〔均值，方差〕?！?〕分析用戶執(zhí)行任務(wù)的情況，預(yù)測用戶界面的有效性對用戶執(zhí)行任務(wù)的結(jié)果進(jìn)展分析，對錯誤率、任務(wù)平均步驟數(shù)等進(jìn)展總結(jié)，來預(yù)測用戶界面的有效性是否達(dá)到了目標(biāo)的標(biāo)準(zhǔn)。測試任務(wù)評測人員設(shè)計了4項任務(wù)，用來檢查球球大作戰(zhàn)的iPhone客戶端根本功能。這些是球球大作戰(zhàn)的關(guān)鍵任務(wù)。任如下：〔1〕打開球球大作戰(zhàn)。〔2〕將“觀戰(zhàn)頻道，獲取棒棒糖，賬號&設(shè)置，攻略〃等圖標(biāo)隱藏。〔3〕在網(wǎng)絡(luò)狀況良好的情況下，在找朋友界面輸入一個給定id，關(guān)注為好友?！?〕在網(wǎng)絡(luò)狀況良好的情況下，給好友發(fā)送“hello!〃〔5〕在網(wǎng)絡(luò)狀況良好的情況下，觀戰(zhàn)自己的一個粉絲，并點喜歡〔個數(shù)為3〕.〔6〕在網(wǎng)絡(luò)狀況良好的情況下，打開團(tuán)戰(zhàn)模式，并邀請一個好友。〔7〕在網(wǎng)絡(luò)狀況良好的情況下，打開生存模式，查看生存入場券個數(shù)?！?〕在網(wǎng)絡(luò)狀況良好的情況下，開始一場個人比賽。測試步驟在評估之前，評估小組準(zhǔn)備了統(tǒng)一的說明稿，共分為3個局部。目的是保證每一位參與者都得到一樣的信息和一樣的對待。測試在現(xiàn)場進(jìn)展。參與者抵達(dá)后，評估人員用表5.1的說明稿向他表示問候并說明情況。感你參與這項研究。這項研究的目的是評估球球大作戰(zhàn)的iPhone客戶端的可用性。我們將總結(jié)評估結(jié)果，并對結(jié)果進(jìn)展分析，來為球球大作戰(zhàn)的使用者提供更好的用戶體驗。我們將要求你用球球大作戰(zhàn)執(zhí)行一些主要功能的操作。執(zhí)行這些功能時，說出你的想法。我們將使用攝像機(jī)拍攝iPhone屏幕的情況，同時我們也會進(jìn)展錄音，記錄你在執(zhí)行功能時所說的話，我們的工作人員也會在實驗過程中使用筆記來就對你行為的觀察。我們會對你的身份。請閱讀并簽署一份協(xié)議書。假設(shè)有問題請隨時提出〔協(xié)議書見下文〕。表5.1說明稿1表5.1中的協(xié)議書如表5.2所示，評估人員安排參與者仔細(xì)看完協(xié)議書，達(dá)成一致意見后在協(xié)議書上面簽字。本人再次申明：本人已年滿18歲〔未滿18歲的參與者由監(jiān)護(hù)人代簽署〕，并且愿意參加球球大作戰(zhàn)可用性評估研究項目。該研究項目目的是評估球球大作戰(zhàn)系統(tǒng)原型的可用性。球球大作戰(zhàn)系統(tǒng)是一種手游。測試方法是使用該系統(tǒng)并承受觀察。本人將使用球球大作戰(zhàn)系統(tǒng)執(zhí)行特定任務(wù)，也將回答球球大作戰(zhàn)系統(tǒng)以與個人使用體驗相關(guān)的各種問題。這項研究所搜集到的所有信息屬于，任何時候都不能公開本人的身份。本人有權(quán)利隨時提出任何問題，或者隨時退出測試，而不必承當(dāng)任何形式的賠償。參與者簽名： 日期：表5.2實驗協(xié)議接著，評估人員安排參與者就坐，解釋測試目的和測試步驟。表5.3展示出了這個過程中使用的說明稿。本次實驗中，對所有用戶使用了統(tǒng)一的說明，有助于確保參與者不會因為說明上的差異而有不同的測試表現(xiàn)。我們先簡要介紹球球大作戰(zhàn)的iPhone客戶端。這是球球大作戰(zhàn)的iPhone客戶端的原型，其目的是豐富用戶生活，滿足玩家需求。這項研究的目的是檢查球球大作戰(zhàn)的iPhone客戶端的界面，找出在執(zhí)行我們給定的關(guān)鍵任務(wù)過程中有待改良的特征。實驗過程中，如果發(fā)現(xiàn)了非關(guān)鍵任務(wù)的可改良特征，我們也會將其記錄下來以改善我們的用戶體驗。同時，我們也希望了解我們的球球大作戰(zhàn)的哪些特征對用戶特別有用。幾分鐘之后，我們會安排給你4項任務(wù)。每項任務(wù)都是使用球球大作戰(zhàn)來完成一個關(guān)鍵人物的執(zhí)行。需要指出的是，當(dāng)你使用球球大作戰(zhàn)來完成任務(wù)時，我們的目標(biāo)是球球大作戰(zhàn)iPhone客戶端的用戶體驗，而不是你本身。你可以以正常、舒適的速度執(zhí)行每項任務(wù)。我們將記錄你完成每項任務(wù)的時間，但不必感到有壓力，請使用正常的操作速度。如果某項任務(wù)的時間操作20分鐘，那么請繼續(xù)下一項任務(wù)。客戶端的打開界面默認(rèn)為游戲主界面界面，只需點擊圖標(biāo)打開客戶端即可。在執(zhí)行每項任務(wù)時，請設(shè)想這些功能是否可以滿足你的需求。所有的任務(wù)都可以在客戶端執(zhí)行完成。如果你在某項任務(wù)的執(zhí)行中遇到了無法克制的困難并且想終止這項任務(wù)時，請告訴我們，然后進(jìn)展下一項任務(wù)。開始之前，還有什么問題嗎？表5.3說明稿2在執(zhí)行主要測試任務(wù)之前，參與者使用10分鐘時間熟悉該iPhone客戶端。在這個過程中，參與者需要使用自言自語式的思考方式。圖5.4給出了這項任務(wù)的說明。在開始執(zhí)行任務(wù)之前，請先用10分鐘時間熟悉球球大作戰(zhàn)的iPhone客戶端。在熟悉客戶端的過程中，請說出你的想法，即，當(dāng)你遇到球球大作戰(zhàn)iPhone客戶端的不同特征時，你在想什么。你可以自由探索任何感興趣的問題。如果你提前完成了這個過程，請告訴我們，我們將立即進(jìn)展測試任務(wù)。再次說明，當(dāng)你在探索球球大作戰(zhàn)時，請告訴我們你的實時想法。表5.4前置任務(wù)說明之后，參與者逐一執(zhí)行了4項測試任務(wù)。每項任務(wù)不能操作20分鐘，假設(shè)到20分鐘還未完成，那么必須停止，如果20分鐘完成任務(wù)，也與時停止計時。如果參與者忘了說出想法或者不知所措時，評估人員請給出提示。表5.5展示出來這一過程的說明。在開始使用球球大作戰(zhàn)的iPhone客戶端之前，請讀出這項任務(wù)。完成每項任務(wù)之后，請返回任務(wù)開始的界面。提示：“你在想什么？〃“你是否不知道該怎么辦？〃“請告訴我們你在想什么?！ā救绻^20分鐘：“請?zhí)^這項任務(wù)，繼續(xù)下一項任務(wù)?！ā?.5過程說明在完成所有任務(wù)之后，參與者需要回答一份調(diào)查問卷。該問卷是根據(jù)QUIS用戶滿意度問卷設(shè)計的。完畢問卷調(diào)查之后，評估人員詢問參與者對某些問題的看法〔表5.6〕。你對自己執(zhí)行這些任務(wù)的表現(xiàn)有何看法？請說明為什么執(zhí)行這項任務(wù)時會失敗？你覺得球球大作戰(zhàn)是否能滿足你在工作記錄和規(guī)劃上的需求？你覺得使用球球大作戰(zhàn)時，你的好友提供的工作分享信息能溝滿足你的需求嗎？你覺得球球大作戰(zhàn)的界面最好的方面是什么？你覺得球球大作戰(zhàn)的界面最差的方面是什么？你覺得在我們所能提供的功能中，哪項功能最實用？你覺得在我們所能提供的功能中，哪項功能沒有價值？你覺得球球大作戰(zhàn)是否還要添加哪項功能？表5.6評價標(biāo)準(zhǔn)在以下的表中列舉了所有任務(wù)所有參與者的執(zhí)行情況，包括任務(wù)執(zhí)行的時間、完畢任務(wù)的原因、訪問的界面數(shù)，訪問的無關(guān)界面數(shù)，反應(yīng)意見。評價標(biāo)準(zhǔn)評價標(biāo)準(zhǔn)描述執(zhí)行時間是否能在指定時間完成任務(wù)訪問的界面數(shù)訪問的界面數(shù)是否在正常圍訪問的無關(guān)界面數(shù)訪問的多余界面是否在2個以完成任務(wù)是否能夠正常完成任務(wù)可用性問題

在這個局部中，我們對用戶的反應(yīng)進(jìn)展了總結(jié)，并且對用戶執(zhí)行我們所指定的任務(wù)的時間數(shù)據(jù)進(jìn)展分析，然后將得到的結(jié)果數(shù)據(jù)與我們的期望數(shù)據(jù)進(jìn)展了比照，此外，我們總結(jié)了對用戶訪談的容，并且自己對已有的系統(tǒng)進(jìn)展了自我評估，總結(jié)出以下幾點可用性問題。編號級別問題描述解決方案11打開軟件默認(rèn)到主界面，太突兀，用戶感覺不好新增歡迎界面，讓用戶從打開軟