2024年教學設計結果的形成性評價

教學設計成果的形成性評價無論是教學設計方案還是學習材料，這些設計成果一般在推廣使用之前，要在小范圍內(nèi)使用，測定它的可行性、合用性和有效性以及其他狀況，來檢查方案并不停修改、完善方案，使教學設計過程及其成果更趨有效。教學設計成果的評價一般也包括形成性評價和總結性評價兩種形式，但它不一樣于其他評價的重要特點在于教學設計成果的評價重要以形成性評價為主，也就是說，教學設計成果要在其形成的同步對其加以評價。一、教學設計成果的形成性評價形成性評價是教學設計人員用來獲取數(shù)據(jù)，并通過這些數(shù)據(jù)修正他們的教學，提高教學效率效果的過程。形成性評價的重點是搜集數(shù)據(jù)，分析數(shù)據(jù)，改善教學設計。形成性評價開始于分析階段，持續(xù)于選擇和設計階段，假如計劃中尚有試用階段，那么還將持續(xù)到實行過程的前期。1．教學設計形成性評價的措施形成性評價一般包括六個階段：自我評價、專家評議、一對一評價、小組評價、實地試驗、進行中的評價。需要闡明的是，在這裏用“階段”這個詞是為了協(xié)助設計人員明確：在實行上述形成性評價的時候，要注意前後的關系。一般狀況下，這些措施是依次實行的，當然，在設計實踐中，也許不會實行所有的形成性評價措施，如一般的課堂教學設計的形成性評價很少進行一對一評價、小組評價，專家評議、實地試驗等措施常常被用于某些公開課、研討活動；而在企業(yè)環(huán)境中，形成性的實行相對完整某些。（1）自評（DesignReview，初始排錯）設計者、開發(fā)者或設計團體中的某些組員在將方案展現(xiàn)給專家或使用者評價之前對其進行評價。這一過程一般被稱作“內(nèi)部評議”，一般是在外部評價之前進行。為使自評更有效，設計開發(fā)者應完畢如下任務：

制定一套評價原則。這套原則可以和針對專家、使用者評議的同樣，也可存在差異，但應盡量涵蓋所有教學過程中教師和學生會關注的所有項目，以及設計團體需要處理的所有設計和開發(fā)問題。

將所有設計成果先擱置幾天以便于形成成果與意圖的距離。

成為準執(zhí)行者并試行這套方案。

記錄多種積極和消極的反饋。（2）專家評議（ExpertReview）重要指邀請某些內(nèi)容專家、教學設計專家或者有關領域的專家，針對教學設計各要素的選擇或設計提供信息，并（或者）在方案實行之前對其中的各個草擬要素進行評議：

方案中所波及的教學內(nèi)容與否是對的的、最新的？

方案中的所有觀點與否是一致的？

提供的案例、實踐練習、反饋與否是真實而精確的？

教學措施與否符合并反應現(xiàn)代教育觀念和教育理論？

教學的內(nèi)容、措施以及所用的教學資源與否合用于教學對象？對于課堂教學這一層次的設計成果專家評議，往往采用說課的方式；對產(chǎn)品或系統(tǒng)這兩個層次的專家評議，一般采用專家評議會的方式。教學設計人員要認真記錄每個專家的詳細意見，并對這些評議結論進行“再檢查”，從中找出仍然存在的問題，對方案和學習材料進行修改。（3）一對一評價（One-to-OneReview）一對一評價有時也被稱為對教學設計成果的診斷性評價階段。在這個階段中，設計人員往往需要和三名或者三名以上具有代表性的學習者一起工作，從單個的學習者身上采集數(shù)據(jù)并修正教學材料，其目的是確定并改正教學中存在的明顯錯誤，并從學習者那裏獲得對教學內(nèi)容的最初使用數(shù)據(jù)和反饋。這是設計者初次從學習者的角度出發(fā)，對他們在設計和開發(fā)過程中所做的決策進行審閱，來驗證設計師和開發(fā)者的預感與否對的，與否存在對目的人群的誤解。這個階段的評價可以從如下幾種方面進行（WalterODick,LouCarey,JamesO.Carey，）：

明晰度：對于學習者個體而言，信息或者展現(xiàn)給他們的教學內(nèi)容與否明了、清晰？

影響力：教學對于學習者個體的態(tài)度和到達教學目的有無影響？在態(tài)度方面，需要確定學習者與否意識到學習和自身是親密有關的、自已可以通過合適的努力就可以到達目的、對學習經(jīng)歷感到有趣并滿意；在學習成就感方面，可以通過後測理解學習者與否能回憶起學習的信息、與否能完畢任務，詳細的措施可以是書面練習、口頭回答教師的提問或者是完畢一件事、一種作品。

可行性：假如得到所需的資源（如時間、教學情境），教學的可行性有多大？可行性重要考慮學習者的能力水平、教學媒體和教學環(huán)境，如學習者的成熟度、獨立性和動機水平怎樣影響完畢教學所需的時間，學習者能否或者輕易地學會所規(guī)定的專業(yè)設備操作或技能，學習環(huán)境與否令學習者感到舒適，在規(guī)定期間內(nèi)傳遞教學的成本與否合理等等。一對一評價的過程關鍵在于它是一種交互的過程。設計人員要參與學習者的學習過程，觀測學習者的參與狀況，并在預先設定好的時機，和學習者討論材料中展現(xiàn)的內(nèi)容。因此，在每次進行一對一試驗之前，設計師都應當制定一種方略，決定交互該怎樣進行，怎樣向學習者進行闡明，怎樣讓學習者懂得什么時候可以和評估人員討論，怎樣鼓勵學習者放松地談論設計方案和學習材料。這就規(guī)定設計師有比較強的交流能力，可以在自已和學習者之間建立友好信任的關系，并進行有效的交流。一對一評價搜集數(shù)據(jù)的途徑有觀測記錄、和學習者討論中的記錄、教學完畢後的問卷和測驗。在交流和記錄的過程中，設計人員不僅要懂得問題所在，并且還要理解問題的詳細內(nèi)容、學習者為何會出現(xiàn)這種反應以及評估人員對此作出的解釋，由于後者往往更能提供改善教學清晰度的有用信息。很明顯，每次一對一試驗都只有一種學習者參與。學習者無需從大量學習者中隨機抽取樣本，只要挑選幾種可以代表目的人群的學習者。在實際評價中，可以從高于平均水平、處在平均水平和低于平均水平各一種，假如有必要，也可以在完畢了對這三個學習者的初步評價後再多挑選幾種學習者進行一對一評價。在選擇學習者的時候，既要考慮其知識和能力的水平，也要關懷其他與學習者的成績親密有關的特性，如學習者的態(tài)度、先前的經(jīng)驗、學習的風格等。通過一對一評價，教學中的嚴重錯誤都會暴露出來，有些可以立即進行修改。但由于選擇的學習者是有差異的，從每個人身上得來的數(shù)據(jù)都也許是不一樣樣的，因此有些問題也許不會立即修改，需要等到其他學習者重新試驗後或者小組評價後才會作出改動。（4）小組評價（Small-GroupEvaluation）小組評價階段往往是由8～20個目的人群的經(jīng)典代表構成學習小組，運用教學材料自行學習，然後通過對他們的測試來采集所需要的數(shù)據(jù)。小組評價有兩個重要目的，一種是確定在一對一評價後所做的改動與否有效；另一種是確定教學中還存在哪些問題，與否能合用真實的目的群。小組評價往往需要搜集兩個方面的數(shù)據(jù)（WalterODick,LouCarey,JamesO.Carey，）：

教學有效性：教學有效性重要包括學習者在前測和後測的成績以及對教學的態(tài)度。前測一般包括入門技術和教學目的，後測測定學習者在教學目的上的體現(xiàn)，可以通過測試或練習獲得；對教學的態(tài)度信息重要是通過態(tài)度問卷和後續(xù)訪談來獲取。

教學可行性：一般包括學習者完畢教學和所規(guī)定的績效評測所需的時間以及在特定條件下實行教學的成本及可行性；實行或管理教學者的態(tài)度。小組評價的基本過程和一對一評價中所采用的截然不一樣。在一對一評價中，評價人員一直和學習者處在互動的狀態(tài)；而在小組評價中，評價人員（或者教師）在向學習者作出必要的闡明和解釋後（假如有前測就先進行前測），就按照方案中規(guī)定的實際教學措施、過程組織教學過程，在各個過程中，評估人員要盡量少地干預。只有當教學環(huán)境出現(xiàn)問題以至于使教學過程無法按照方案繼續(xù)下去的時候，評估人員才進行一定的干預，并且將出現(xiàn)的問題和處理措施如實記錄。正是由于如此，在教學實行後的態(tài)度問卷中要盡量詳盡地包括教學方案的各個部分，包括教學設計的各個要素、教學實行中的問題以及他們對教學的改善提議，如：

你清晰應當學什么嗎？

學習材料直接和教學目的有關嗎？

在學習過程中，你感到壓力很大嗎？哪些地方令你學習很困難？

教學有趣嗎？你比較喜歡參與哪些活動？

有足夠的練習嗎？這些練習和教學目的有關嗎？

測驗能真正地考察你對教學目的的知識嗎？

在學習的過程中，你得到了足夠的支持嗎？反饋信息令你滿意嗎？

當考試答題時，你感到自信嗎？為何？

你對教學過程和學習材料尚有哪些好的提議？假如有也許，在學習者完畢問卷後，就學習者的見解進行更深入的討論，并從中分析教學設計方案和學習材料中的問題，然後再進行修改。從上述小組評價的過程和措施可以看出，學習者的挑選和信息的分析對小組評價來說至關重要。迪克、凱裏等認為（WalterODick,LouCarey,JamesO.Carey，），小組評價以8~20個學習者為合適，假如學習者人數(shù)少于8，所得到的數(shù)據(jù)也許不具有代表性；假如從多于20個學習者處獲得數(shù)據(jù)，所獲得的信息又也許超過了需要，并且增長的學習者并不能帶來額外的有價值的信息。小組評價的學習者不能像一對一評價那樣有一定的隨意性，應當盡量地代表目的人群，在理想的研究環(huán)境下應當隨機挑選學習者，由于這樣才能把經(jīng)驗推廣到整個目的人群。不過在經(jīng)典的學校、業(yè)界和成人教育環(huán)境下，純粹的隨機常常是不也許的，甚至也也許是不但愿的。因此他們提議，在無法隨機挑選小組評價的學習者時，仍要盡量保證從目的人群的每種類型中至少選用一種代表，并提供了幾種劃分目的人群類別的措施：

學業(yè)水平分別為高、中、低的學習者

不一樣母語的學習者

熟悉和不熟悉某種學習方式（如網(wǎng)絡教學）的學習者

年輕、沒有什么經(jīng)驗的學習者，相對更成熟的學習者我們認為，除了上述幾類之外，選擇學習者時還要考慮到他們的動機水平，由于動機水平較高的學習者往往會獲得較高的學業(yè)成績。假如無法實現(xiàn)這一點，則需要在成果解釋的時候闡明這一點，并提供對應的實行提議。一對一評價比較強調(diào)評估人員的交流能力，而小組評價則比較強調(diào)對數(shù)據(jù)信息的分析，首先要判斷問卷調(diào)查時哪些問題還需要深入深入訪談，另首先要將問卷、測試中所得的數(shù)據(jù)信息和描述性信息加以匯總，并分析這些信息所代表的含義，以便形成更有效的修改匯報。小組評價後的修改既包括一對一評價後的深入完善，也也許會教學方略作較大的調(diào)整。（5）實地試驗（FieldTrial）實地試驗是教學設計成果實行前形成性評價的最終一種階段，執(zhí)行人員（一般是指教師）要在一種與教學材料最終使用環(huán)境盡量相像的學習環(huán)境中進行評價。實地試驗的目的是確定在小組評價之後所做出的改動是不是有效，并要確認教學方案在預設的使用環(huán)境下與否可以使用。實地試驗的重要目的是要找出并消除教學中尚存的問題。實地試驗和小組試驗有許多相似之處，兩類評價的過程中都要決定學習者的體現(xiàn)與否合適，教學的傳遞方式與否可行；另一種相似之處是，兩者都是采集學習者的成績和態(tài)度信息、教師的教學過程和態(tài)度，以及諸如時間、費用、空間和設備等資源信息。兩者的最重要差異在于教學材料、學習者、過程、教師和環(huán)境的真實程度不一樣。實地試驗更強調(diào)與實際教學的靠近程度，因此在實地試驗前，往往教學方案已盡量得到修改和完畢。實地試驗的關鍵是創(chuàng)設一種與“真實世界”盡量靠近的教學情境（WalterODick,LouCarey,JamesO.Carey，），因此，實地試驗不僅要討教學環(huán)境、條件都要與最終的使用環(huán)境、條件盡量相像，并且執(zhí)行教學的人員也要盡量是教師，而不是教學設計人員，在教學實行過程中，設計人員也許不在場，雖然在場，設計人員往往只需在旁觀測并做記錄，并不對教學過程進行干預，哪怕是教學過程中出現(xiàn)意外的事件。當然，在一般的課堂教學中，教學設計人員往往就是任課教師。實地試驗對學習者的規(guī)定也比較高，由于要保證這些學習者可以代表教學方案的目的人群。而這一點在現(xiàn)實情境中是很難做到的，變通的做法就是選擇不一樣的小組來進行實地試驗，并且盡量搜集所有目的環(huán)境下的數(shù)據(jù)，如老式教室、多媒體教室、多媒體網(wǎng)絡教室等。在實地試驗階段，數(shù)據(jù)搜集、分析的過程和措施都和小組評價類似，只是問題會根據(jù)小組評價的經(jīng)驗，愈加集中于教學在預期學習環(huán)境下的可行性，重點理解也許影響教學成功的多種原因。并且在搜集數(shù)據(jù)的時候，除了搜集學習者的意見外，還要與教師訪談，理解他們的態(tài)度和感受。（6）進行中的評價（OngoingEvaluation）所謂進行中的評價是指在教學實行之後，就教學對學習者的學習、工作和應用知識處理問題的效果所進行的評價。在前面的五個階段，重要都是處理教學方案的實行問題，包括怎樣完畢教學目的、更有效地實行教學等，沒有波及到知識和技能在其他應用環(huán)境甚至生活中的實際問題中的問題，而這是教學的主線目的。無論是知識、技能，還是措施，教學的最終目的并不只是為了學生可以掌握或者在學習過程中的應用，而是在最終需要運用這些知識、技能和措施的環(huán)境中進行發(fā)明性地運用。因此，教學設計人員不能忽視這一點，應當在合適而可行的時候，對學生的應用狀況進行評價，以確定學生的知識、技能和措施與否可以保持，與否在其他應用環(huán)境中使用所學的。“進行中的評價”可以協(xié)助設計人員明確如下幾點：學習者與否意識到可以在實際生活或工作中應用他們所學到的新知識、技能？并且是不是已經(jīng)做了？學生應用的效果怎樣？對後續(xù)的學習、生活、工作產(chǎn)生哪些影響？假如是系統(tǒng)層次的教學設計成果，還要考慮對組織產(chǎn)生了什么影響。學習者對改善教學、教學設計成果有什么提議？對于產(chǎn)品層次的教學設計成果，要跟蹤產(chǎn)品在教學實行後持續(xù)使用的狀況，以獲取修改產(chǎn)品的信息。要獲取這些信息，可以采用現(xiàn)場觀測、記錄和反思匯報、訪談、問卷調(diào)查等方式，既可以直接從學習者處獲得，對于一般在校生還可以通過教師、同學、家長等間接得到，而對于在職人員則可以通過企業(yè)記錄、同事、客戶等間接獲得，表6-4-1則匯集了某些基本的問題、也許的數(shù)據(jù)來源以及數(shù)據(jù)采集的措施（WalterODick,LouCarey,JamesO.Carey，），教學設計人員可以根據(jù)實際狀況形成你自已的問題。表6-4-1

應用環(huán)境形成性評價要問的問題、數(shù)據(jù)來源和數(shù)據(jù)采集措施問題數(shù)據(jù)來源數(shù)據(jù)采集措施技能與否得到了遷移？怎樣使用技能的（頻度、環(huán)境）？有哪些物理環(huán)境、社會環(huán)境和管理方面的原因增進了技能的遷移和使用？有哪些物理環(huán)境、社會環(huán)境和管理方面的原因阻礙了技能的遷移和使用？應用所學技能與否有助于處理最初問題？怎樣處理？有何證據(jù)？培訓還可以怎樣改善提高？學習者同事/伙伴學習者的下屬上司客戶企業(yè)記錄訪談問卷觀測記錄分析

一般狀況下，這種“進行中的評價”往往被認為只合用于培訓、產(chǎn)品等教學設計成果，其實并非如此，雖然在這些環(huán)境中這種評價強調(diào)的比較多，然而在課堂教學中這種評價也越來越受到重視，課堂教學設計不僅要對學生的學習過程、學習成果進行評價，在選擇教學方略時更重視知識、技能的遷移運用，重視學生問題處理能力的培養(yǎng)以及學生在生活中的應用能力。實際上，此類評價在課堂教學是很常見的，諸多教師都會在教學中自覺地運用，只是并不是以一種很明顯的評價行為體現(xiàn)出來，如數(shù)學學科的計算能力、語文學科的朗誦能力和寫作能力等，盡管沒有進行專門的評價，教師會在其後的有關內(nèi)容教學中觀測學生應用已學知識的狀況，假如學生掌握得不夠好，教師就會采用某些補救措施，甚至重新實行教學。假如條件許可，可以規(guī)定所有的學習者參與進行中的評價，但假如在教學之前有比較充足的小組評價或實地試驗，也可以只從所有學習中挑選部分樣本學習者進行評價。在選擇學習者樣本的時候，可以根據(jù)他們的後測成績和態(tài)度問卷，挑選一部分水平高的、一部分水平低的，以及某些設計人員比較感愛好的特殊環(huán)境的學習者。并且還要用同樣的問題征詢，從而獲得間接的評價信息。在理想的狀況下，為獲得豐富的評價信息，設計人員需要深入到應用的實際環(huán)境，但實際上此類評價的最大障礙是時間，以及也許無法再對所有學習者一一進行面對面的訪談，電話、網(wǎng)絡則為此提供了一定的便利條件。進行中評價的成果往往是由設計人員完畢一份評價匯報，其中包括教學的優(yōu)缺陷、教學可以更好地支持新技能遷移和運用的地方、有關消除影響新技能遷移運用的教學障礙的改善教學提議。2．教學設計形成性評價的一般過程無論是上述哪一種形成性評價措施，一般都包括制定計劃、選擇評價措施、試用設計成果和搜集資料、歸納和分析資料、匯報成果等幾項工作。（1）制定評價計劃這是教學設計成果評價的準備階段。在該階段重要是確定評價活動的目的、評價對象、評價的指標體系在何種狀況下從事評價和實行評價後所必須做出的決策程度，以及在什么時候、什么地方實行測量，獲取信息以及怎樣組織等工作。一份完整的評價計劃重要包括：

確定評價對象和評價目的

設計要評價內(nèi)容的評價指標體系，如評價的是教學材料，一般可以從教育性、科學性、技術性、藝術性和經(jīng)濟性等角度建立詳細的指標體系。

確定搜集信息的類型和措施，以及處理記錄數(shù)據(jù)的技術手段。形成性評價需要搜集的信息重要包括教學目的的到達狀況（一般采用學生的學習成績）、學習者和教師的態(tài)度以及教學過程的實行狀況，搜集這些信息的措施有測驗、問卷調(diào)查、訪談、觀測、師生的反思匯報等。

選擇被試并闡明成果的背景條件。闡明選擇被試的條件、人數(shù)等，并解釋教學設計成果的試用是在什么背景下進行的，需要什么條件支持等。（2）實行評價計劃教學設計成果評價的實行階段，重要包括如下工作：搜集評價信息：這是一項基礎工作，也是評價中工作量最大的工作。評價者要根據(jù)評價指標體系，逐項搜集信息，全面、客觀、真實地掌握評價對象的狀況。在一對一評價、小組評價和實地試驗等評價中，還要組織教學過程。整頓評價信息整頓評價信息也就是對搜集的信息進行匯總整頓。通過采用觀測、測驗、訪談和問卷等措施，評價者搜集到一系列所需的資料。為了便于分析，可以根據(jù)需要，將測量的數(shù)據(jù)資料進行記錄處理，制成圖表。制成圖表後，評價者應對資料做深入初次分析，拿各類數(shù)據(jù)與評價原則做比較，考察多種現(xiàn)象的互相關系。通過度析，也許會發(fā)現(xiàn)某些重要問題，隨即應對它們加以解釋，并通過恰當?shù)耐緩阶C明自已的解釋。例如，當幾種評價工具提供的數(shù)據(jù)對設計成果的某些方面顯示出共同的趨勢，而這種趨勢與預期的教學目的相悖時，將予以尤其關注。設計者可就這些問題征詢、訪問教育學家、心理學家、學科專家和有經(jīng)驗的教師，或與被試（師生）進行個別面談或集體座談。這些訪談的目的是讓各方人士對初步分析成果和改善意見加以證明。為此，設計者應持有虛心、誠懇、坦率和求實的態(tài)度，而當該成果遭到劇烈批評時，還應保持冷靜，以使所有被訪者都能毫無保留的談出意見。最終可將訪談成果與初步分析成果綜合起來，對評價資料做深入的深入分析，并在此基礎上醞釀修改設計成果的方案。處理評價成果——進行評價成果匯報由于修改設計成果的工作不一定立即就進行，也不一定由原設計者來做，因此需要把設計和評價的有關狀況和結論形成書面匯報。在這裏，評價者需根據(jù)評價匯報的性質(zhì)和匯報的讀者對象來確定匯報的內(nèi)容、形式。匯報可以是正式的，也可以是非正式的；可以是描述性的，也可以是數(shù)據(jù)分析的。在向有關部門通報評價成果時，評價者所要做的不僅僅只是提出匯報、表明成果，還應當展示他們是怎樣對資料做出解釋，是怎樣從分析中得出結論以及他們對處理問題的提議。評價匯報的內(nèi)容一般包括：設計成果的名稱和宗旨、使用的范圍和對象、試用的規(guī)定和過程、評價的項目和成果及成果的分析、修改的提議和措施、參評者的名單和職務，以及評價的時間等等。評價匯報以簡要扼要為宜，詳細資料如：多種數(shù)據(jù)、訪談記錄、分析闡明等可以作為附件。上面提出的某些評價的要素和環(huán)節(jié)，但這只是對教學過程的一種靜態(tài)分析。在實際教學活動過程，各要素之間并不是獨立的、互不聯(lián)絡的。以往人們對教學過程的研究，習慣于采用以分析思維為主導的研究措施，只重視對教學的各部分分別進行細致的研究，而忽視對各個部分互相關系的研究。因此，對各部分互相關系的研究即教學構造的研究和設計可以協(xié)助我們從整體上去綜合的認識和探討教學設計模式中多種原因之間的關系及其多樣化的體現(xiàn)形態(tài)，有助于我們從動態(tài)的角度去把握教學設計過程的本質(zhì)和規(guī)律，無論是在指導實踐還是在理論研究上都具有拾分重要的意義。3．影響形成性評價的某些原因教學設計過程的形成性評價部分會由于教學理論措施和哲學觀的不一樣而不一樣。但不管怎樣，你都不能靠推測來闡明你的教學材料具有有效性，而必須要用學習者來測試這些材料。因此，你要盡量搜集最真實反應材料有效性的數(shù)據(jù)。在計劃和實行數(shù)據(jù)搜集過程時，設計師還要對形成性評價的環(huán)境和參與評價的學習者做如下幾方面的考慮。（1）環(huán)境方面的原因環(huán)境方面的原因不僅要