基于多媒體學習理論的教學資源自適應(yīng)研究

基于多媒體學習理論的教學資源自適應(yīng)研究摘要：多媒體學習理論原則基于認知理論、雙重編碼理論等構(gòu)建起來，我們認為它是距離學習者最近的學習理論；深度學習計算思維來源于人的神經(jīng)網(wǎng)絡(luò)，學習者學習與神經(jīng)網(wǎng)絡(luò)關(guān)系密切，基于深度學習等計算“反哺”服務(wù)學習者學習、按照學習者學習心理模型設(shè)計教學資源、縮短學習者到學習資源的心理距離。對多媒體學習理論原則、深度學習相關(guān)方法以及他們之間的適切性等進行了研究，提出并論證了基于多媒體學習理論原則的教學資源自適應(yīng)模型和算法設(shè)計過程。關(guān)鍵詞：多媒體學習理論；深度學習；教學資源自適應(yīng)1前言多媒體學習理論為教學資源的評價提供了一定的遵循，規(guī)范了教學資源設(shè)計者的具體行為，現(xiàn)有的研究中主要是實證研究，即通過一定的教學資源使用的過程中的評價、問卷反饋來證明多媒體學習理論原則的正確性，或者判定教學資源與原則的偏差等，同時，隨著計算機技術(shù)的不斷發(fā)展，對圖文聲像教學資源的計算和評價方法越來越具有可行性，尤其是深度學習機計算理論來源于人的神經(jīng)網(wǎng)絡(luò)啟發(fā)，使用計算機代替人工完成教學資源的多媒體學習理論原則評價；多媒體學習理論眾多原則是否需要同時使用，能否實現(xiàn)學生個性化學習資源自適應(yīng)推送等問題值得研究。2多媒體學習理論原則及其適應(yīng)性、邏輯（1）多媒體學習理論原則文章[[]江豐光,王丹,林群,曾繁博.多媒體學習理論視角下英語多媒體學習資源設(shè)計框架——基于學齡前兒童英語聽說APP的實證研究[J].中國電化教育,2015(12):12-17+25.]從梅耶的多媒體學習原則中挑選出13種原則[[]RichardE.Mayer.[]江豐光,王丹,林群,曾繁博.多媒體學習理論視角下英語多媒體學習資源設(shè)計框架——基于學齡前兒童英語聽說APP的實證研究[J].中國電化教育,2015(12):12-17+25.[]RichardE.Mayer.?The?Cambridge?Handbook?of?MultimediaLearning[M].?New?York:?Cambridge?University?Press,?2014.基于多媒體學習認知理論，梅耶一共提出了10條多媒體教學設(shè)計原則，目的在于充分利用人類有限的認知容量，幫助學習者積極進行認知加工——主動選擇信息、組織信息和整合信息，最終實現(xiàn)意義學習。[[]毛偉,盛群力.梅耶多媒體教學設(shè)計10條原則:依托媒體技術(shù)實現(xiàn)意義學習[J].現(xiàn)代遠程教育研究,2017(01):26-35.]截至目前，我和我的研究團隊在一百多個實驗研究的基礎(chǔ)上總結(jié)出了十二條多媒體教學設(shè)計原則。[[]王雪,王志軍,韓美琪.技術(shù)環(huán)境下學習科學與教學設(shè)計的新發(fā)展——[]毛偉,盛群力.梅耶多媒體教學設(shè)計10條原則:依托媒體技術(shù)實現(xiàn)意義學習[J].現(xiàn)代遠程教育研究,2017(01):26-35.[]王雪,王志軍,韓美琪.技術(shù)環(huán)境下學習科學與教學設(shè)計的新發(fā)展——訪多媒體學習研究創(chuàng)始人RichardMayer教授[J].中國電化教育,2019(10):8-13+31.（2）多媒體學習理論原則適應(yīng)性及邏輯關(guān)系為了解決實際問題，研究將多媒體學習理論（連貫性、信號、冗余、鄰接等）和修辭應(yīng)用到了海報設(shè)計中。[[]RhiannaK.Pedwell,JamesA.Hardy,SusanL.Rowland.Effectivevisualdesignandcommunicationpracticesforresearchposters:Exemplarsbasedonthetheoryandpracticeofmultimedialearningandrhetoric[J].BiochemistryandMolecularBiologyEducation,2017,45(3):]鄧國民等認為需要綜合考慮跨媒體教學信息呈現(xiàn)的特點以及認知理論的最新研究成果，對多媒體學習理論進一步發(fā)展，在原有視聽覺雙通道的基礎(chǔ)上，引入第三條通道———跨媒體信息處理的情境認知通道，并提出跨媒體學習理論框架。[[]鄧國民,閻婷.面向智能時代的跨媒體學習方式、理論與資源環(huán)境——基于國際多媒體學習研究的啟示[J].遠程教育雜志,2019,37(03):61-69.]文東等[[]文東,王玉琴,吳秀園.基于認知神經(jīng)科學視角的多媒體學習認知理論創(chuàng)新[J].現(xiàn)代遠程教育研究,2013(03):40-49.[]RhiannaK.Pedwell,JamesA.Hardy,SusanL.Rowland.Effectivevisualdesignandcommunicationpracticesforresearchposters:Exemplarsbasedonthetheoryandpracticeofmultimedialearningandrhetoric[J].BiochemistryandMolecularBiologyEducation,2017,45(3):[]鄧國民,閻婷.面向智能時代的跨媒體學習方式、理論與資源環(huán)境——基于國際多媒體學習研究的啟示[J].遠程教育雜志,2019,37(03):61-69.[]文東,王玉琴,吳秀園.基于認知神經(jīng)科學視角的多媒體學習認知理論創(chuàng)新[J].現(xiàn)代遠程教育研究,2013(03):40-49.[]Schnotz,W.(2005).AnIntegratedModelofTextandPictureComprehension[A].MayerR.(Ed.).TheCambridgeHandbookofMultimediaLearning[M].NewYork:CambridgeUniversityPress:49-69.雖然多媒體學習理論原則在實踐中遇到了一些問題，但是很多問題還少有研究文獻，如這些原則之間的邏輯關(guān)系是什么？是否需要整體進行理解和實踐？需要使用多少個？是不是原則多樣性即代表學習者個性化選擇性？文章[[]楊南昌,羅毛羽.“腳手架”如何變成了“絆腳石”——小學數(shù)學中的圖示障礙研究[J].電化教育研究,2021,42(07):114-121.]認為圖示障礙發(fā)生在多媒體學習理論中詞語和畫面兩個加工通道的不同階段，因此，在編寫圖示例題時，要將“圖文匹配”原則放到首先考慮的重要位置，確保數(shù)學圖示題中的圖畫與文字形成內(nèi)部理解的一致性。其次，再考慮圖文兩大要素在“選擇—組織—整合”過程中的作用機制，合理編排圖像內(nèi)容，準確呈現(xiàn)題目信息，控制無關(guān)信息，減少冗余信息[[]王文智.基于認知負荷理論的多媒體教學呈現(xiàn)原則探討[J].遠程教育雜志,2009,17(02):33-37.]，杜絕“帶有答案指向”（過簡）和“含糊不清”（過難）的兩個極端設(shè)計。從上面一些研究看出來，多媒體學習理論原則解釋不了實際情況中遇到的一些問題，是否是沒有充分應(yīng)用原則的先后關(guān)系[NOTEREF_Ref16046\h6]、系統(tǒng)性還是其本身缺陷滿足不了新的教學形式和問題之間的矛盾，但是可以明確的一點是，基于這些原則特征的多樣性與學習者個性化資源需求的多樣性息息相關(guān)，如同原則本身之間沒有給出來因果邏輯、先后關(guān)系一樣，這些與學習息息相關(guān)的深層次特性有待深度挖掘。我的多媒體教學設(shè)計十二條原則也是有時適用，有時也不適用，是有邊界條件的。例如，這十二條原則主要針對低知識經(jīng)驗的學習者，對高知識經(jīng)驗的學習者不適用，這是一個非?；镜倪吔鐥l件，當然還有很多其他類似的邊界條件；我一直鉆研多媒體教學設(shè)計的個性化原則(Personalization)以促進學習者積極主動地參與學習過程。[NOTEREF_Ref21929\h3]

在多媒體環(huán)境中信息呈現(xiàn)方式的不同對學習者的影響也不盡相同。[[]康誠，周愛保．信息呈現(xiàn)方式與認知風格對多媒體環(huán)境下學習效果的影響［J］．心理科學2010(6):1397－1400．]、[[]趙翠霞．多媒體學習中幫助的呈現(xiàn)方式對學習績效的影響［J］.電化教育研究．2013(9)．]、[[]丁道群，羅揚眉．認知風格和信息呈現(xiàn)方式對學習者認知負荷的影響［J］.心理學探新．2009(3):37－40．]、[[[]楊南昌,羅毛羽.“腳手架”如何變成了“絆腳石”——小學數(shù)學中的圖示障礙研究[J].電化教育研究,2021,42(07):114-121.[]王文智.基于認知負荷理論的多媒體教學呈現(xiàn)原則探討[J].遠程教育雜志,2009,17(02):33-37.[]康誠，周愛保．信息呈現(xiàn)方式與認知風格對多媒體環(huán)境下學習效果的影響［J］．心理科學2010(6):1397－1400．[]趙翠霞．多媒體學習中幫助的呈現(xiàn)方式對學習績效的影響［J］.電化教育研究．2013(9)．[]丁道群，羅揚眉．認知風格和信息呈現(xiàn)方式對學習者認知負荷的影響［J］.心理學探新．2009(3):37－40．[]蘭國帥，張一春．合理利用超媒體注釋技術(shù)促進英語閱讀理解及詞匯習得———梅耶多媒體信息設(shè)計“臨近原則”的實驗驗證［J］．中國遠程教育，2013(9):40－45．[]王宇熙,蘭國帥,張一春.媒體類型不同組合方式對大學生多媒體學習效果的影響[J].現(xiàn)代遠距離教育,2015(02):48-53.（3）多媒體學習理論研究實踐現(xiàn)狀不按照一定的標準和原則設(shè)計教學資源會產(chǎn)生一些不好的影響。有研究者對北師大版小學數(shù)學教材內(nèi)的圖像表征進行了細致研究，指出如果圖像表征運用不當，就會轉(zhuǎn)移學生的視線，偏離學習目標，增加學習難度，與要達到的學習效果背道而馳。[[]聶莉.小學數(shù)學教材的圖像表征設(shè)計研究[D].桂林：廣西師范大學，2014.]有研究者表明，不少數(shù)學插圖確實存在“負效應(yīng)”，體現(xiàn)為插圖內(nèi)含信息過多、圖文間不相匹配、相似插圖引發(fā)思維定式等等。[[]劉明.數(shù)學插圖“負效應(yīng)”的分析及應(yīng)對策略[J].教學與管理，2012（11）：46-47.]從分析來看，現(xiàn)有圖示障礙研究更多聚焦于學習材料中圖示的圖文組合方面，忽略對閱讀對象本身的關(guān)注。[[]宋振韶.教科書插圖的認知心理學研究[J].北京師范大學學報（社會科學版），2005（6）：24-28.]文章[[]ThomasK.F.Chiu,DanielChurchill.Exploringthecharacteristicsofanoptimaldesignofdigitalmaterialsforconceptlearninginmathematics:Multimedialearningandvariationtheory[J].Computers&Education,2015,82:]基于多媒體學習理論和變異理論在數(shù)學教學資源設(shè)計中進行研究，得出了材料應(yīng)該在主題領(lǐng)域呈現(xiàn)有意義的學習信息、不同學習信息之間的關(guān)系應(yīng)該建立、材料的呈現(xiàn)應(yīng)設(shè)計為最大限度地提高可用的認知能力指Mayer外在認知處理）、外觀應(yīng)該具有吸引力等原則。在多媒體教學過程中，多媒體學習理論各種原則表現(xiàn)出了普遍適應(yīng)性和標準依據(jù)。有研究將多媒體學習理論（連貫性、信號、冗余、鄰接等）和修辭應(yīng)用到了海報設(shè)計中。文章[[]RhiannaK.Pedwell,JamesA.Hardy,SusanL.Rowland.Effectivevisualdesignandcommunicationpracticesforresearchposters:Exemplarsbasedonthetheoryandpracticeofmultimedialearningandrhetoric[J].BiochemistryandMolecularBiologyEducation,2017,45(3):]首次基于多媒體學習原則對公開可用的醫(yī)學動畫進行審查，發(fā)現(xiàn)多余的視覺和聽覺元素以及學習者互動的機會很少，許多動畫沒有遵循推薦的多媒體學習原則。[[]CaroleYue,JessieKim,RikkeOgawa,ElenaStark,SaraKim.Applyingthecognitivetheoryofmultimedialearning:ananalysisofmedicalanimations[J].MedicalEducation,2013,47(4):]研究從梅耶的多媒體學習理論出發(fā)，對目前市場上的學齡前兒童英語聽說APP進行分析，評測其是否符合多媒體學習原則。[]聶莉.小學數(shù)學教材的圖像表征設(shè)計研究[D].桂林：廣西師范大學，2014.[]劉明.數(shù)學插圖“負效應(yīng)”的分析及應(yīng)對策略[J].教學與管理，2012（11）：46-47.[]宋振韶.教科書插圖的認知心理學研究[J].北京師范大學學報（社會科學版），2005（6）：24-28.[]ThomasK.F.Chiu,DanielChurchill.Exploringthecharacteristicsofanoptimaldesignofdigitalmaterialsforconceptlearninginmathematics:Multimedialearningandvariationtheory[J].Computers&Education,2015,82:[]RhiannaK.Pedwell,JamesA.Hardy,SusanL.Rowland.Effectivevisualdesignandcommunicationpracticesforresearchposters:Exemplarsbasedonthetheoryandpracticeofmultimedialearningandrhetoric[J].BiochemistryandMolecularBiologyEducation,2017,45(3):[]CaroleYue,JessieKim,RikkeOgawa,ElenaStark,SaraKim.Applyingthecognitivetheoryofmultimedialearning:ananalysisofmedicalanimations[J].MedicalEducation,2013,47(4):[]郭炯,王晶晶.面向1:1數(shù)字化學習的電子教材設(shè)計與開發(fā)研究[J].中國電化教育,2015(03):90-96.現(xiàn)有研究很好的利用了多媒體學習理論的成果進行實踐，同時，從以上研究的過程可知：具有人為因素影響大、數(shù)據(jù)量相對較小、歷時較短等特點，從不同角度、不同學科等進行研究，對本質(zhì)性研究缺乏系統(tǒng)性（如教學資源是否滿足學習者的學習、遷移、理解全過程連貫、適應(yīng)）和理論指導，計算機技術(shù)實現(xiàn)并強化這些過程的研究沒有。3多媒體學習理論原則結(jié)合共享子空間學習方法在教學資源評價中的適切性為了評估教學資源的質(zhì)量，結(jié)合多媒體學習理論原則，基于梅耶的多媒體學習原則自動根據(jù)計算機程序給學習資源打分，如給每一個ppt打總分，給每一頁ppt打單分，計算該教學資源PPT符合多媒體學習理論原則的程度。為了解決類似這里提到的問題，我們首先需要對計算機可以識別的文件如單頁PPT內(nèi)部的一致性、冗余性等進行檢測。這是一個共享子空間學習獲得多個模態(tài)間共享的潛在子空間[[]張磊,趙耀,朱振峰.跨媒體語義共享子空間學習研究進展[J].計算機學報,2017,40(06):1394-1421.][]張磊,趙耀,朱振峰.跨媒體語義共享子空間學習研究進展[J].計算機學報,2017,40(06):1394-1421.圖1多媒體學習理論原則、共享子空間學習方法協(xié)同機制“公用數(shù)據(jù)集”是“先驗知識”（預(yù)訓練模型），表示了圖片和文字的一一對應(yīng)關(guān)系，為共享子空間投影后的計算提供標準；該機制將多媒體學習理論原則、共享子空間學習方法充分融合，對依托技術(shù)實現(xiàn)解決教學資源設(shè)計問題提供有力支持。我們提出來基于多模態(tài)視角的多媒體資源學習選擇、組織、整合信息處理模型如下圖2。圖2多模態(tài)資源學習選擇、組織、整合信息處理模型雖然Mayer教授的一些研究對計算機技術(shù)強化學習認同上有不同觀點，如虛擬現(xiàn)實學習沒有表現(xiàn)出來更好地學習效果，但我們認為的神經(jīng)科學、學習科學、教學科學和教育實踐之間的相互關(guān)系圖如1中B。A[[]MayerRE.[]MayerRE.Educationalpsychology’spastandfuturecontributionstothescienceoflearning,scienceofinstruction,andscienceofassessment[J].JournalofEducationalPsychology,2018,110(2):174-179.圖3神經(jīng)科學、學習科學、教學科學和教育實踐之間的相互關(guān)系圖從圖1、圖2、圖3中的內(nèi)容和涉及到的各種關(guān)系，可以看出來科學計算的方式越來越更多的強化了學習者學習和學習模式構(gòu)建，可以看出來多媒體學習理論原則多樣性可以實現(xiàn)學習者個性化適應(yīng)，提供了學習理論基礎(chǔ)；共享子空間學習方法（深度學習）對識別原則多樣性提供計算標準，對實現(xiàn)精準個性化適應(yīng)提供計算基礎(chǔ)，兩者結(jié)合利用在學習資源設(shè)計標準計算上具有一定的適切性。4基于多媒體學習理論原則的自適應(yīng)教學資源服務(wù)模式（1）多媒體學習理論原則計算基礎(chǔ)我希望新的多媒體教學設(shè)計原則仍是基于實證研究產(chǎn)生的；人們會發(fā)現(xiàn)技術(shù)只是活躍在表面，它遠沒有達到預(yù)期的效用；我認為最重要的是要研究“學習”，基于“人是如何學習的”開展以學習者為中心的教學設(shè)計，而不是基于技術(shù)能做什么。[NOTEREF_Ref21929\h4]應(yīng)采用定性研究與定量研究相結(jié)合的方式，探索多媒體學習環(huán)境下基于過程的學習、基于學習者認知規(guī)律的教學、基于體驗的個性化學習，同時借助語言學、符號學、藝術(shù)設(shè)計等跨學科領(lǐng)域的理論，豐富多媒體學習研究的理論和方法，提高多媒體學習研究的深度和影響力。[[]王志軍,馮小燕.近年來我國多媒體學習研究的熱點與發(fā)展趨勢——基于CNKI(2000-2016年)文獻的知識圖譜分析[J].現(xiàn)代教育管理,2017(09):57-63.][]王志軍,馮小燕.近年來我國多媒體學習研究的熱點與發(fā)展趨勢——基于CNKI(2000-2016年)文獻的知識圖譜分析[J].現(xiàn)代教育管理,2017(09):57-63.多媒體學習指用語詞和畫面共同呈現(xiàn)信息以促進學習者的學習，其中語詞是指以打印文本或講話等言語形式呈現(xiàn)的材料，畫面是指用圖像形式呈現(xiàn)的材料，主要包括靜態(tài)圖形或者動態(tài)圖畫。[[]\o"MayerRE.MultimediaLearning:MultimediaLearning[M].CambridgeUniversityPress,2001."MayerRE.MultimediaLearning:MultimediaLearning[M].CambridgeUniversityPress,2001.]研究認為教學視頻是指旨在幫助人們學習特定知識和技能的視頻課程，它可以獨立的，也可以是一門課程的一部分；其本質(zhì)是由一組連續(xù)的包括靜態(tài)圖形或動態(tài)圖畫的視覺材料和語音或屏幕文本等言語材料組成的多媒體學習信息，是多媒體學習資源的一種形式；因此，多媒體學習的認知理論以及多媒體學習資源設(shè)計的相關(guān)原則均適用于教學視頻設(shè)計。[[]卜彩麗,曹婉迎,靳宇,郭佳佳,沈霞娟.教學視頻設(shè)計的原則、理論基礎(chǔ)與評價工具研究——[]\o"MayerRE.MultimediaLearning:MultimediaLearning[M].CambridgeUniversityPress,2001."MayerRE.MultimediaLearning:MultimediaLearning[M].CambridgeUniversityPress,2001.[]卜彩麗,曹婉迎,靳宇,郭佳佳,沈霞娟.教學視頻設(shè)計的原則、理論基礎(chǔ)與評價工具研究——基于國外72篇實證研究的系統(tǒng)綜述[J].現(xiàn)代遠距離教育,2021(02):35-44.[]王志軍,曹曉靜.數(shù)字化學習資源畫面色彩表征影響學習注意的研究[J].遠程教育雜志,2020,38(03):65-75.無論教學資源是二維還是三維，視頻、色彩等無論它們是如何從外觀的設(shè)計（出于所有促進學習的目的）“走進去”學習者的心理，它們都是基本元素在不同維度下的組織與整合，要實現(xiàn)基于多媒體學習理論原則的計算，需要基于原則中提到的基本元素構(gòu)建模型即可。多媒體畫面數(shù)據(jù)的獲取，往往需要各種相關(guān)軟件的搭配使用。[[]王志軍,吳向文,馮小燕,溫小勇.基于大數(shù)據(jù)的多媒體畫面語言研究[J].電化教育研究,2017,38(04):59-65.]有研究實現(xiàn)了跨媒體聯(lián)合注意機制，充分利用了多級自適應(yīng)對齊，包括整體圖像和句子之間的全局級、細粒度補丁之間的局部級以及視覺和文本上下文之間的關(guān)系級。[[]PengY,QiJ,ZhuoY.MAVA:Multi-LevelAdaptiveVisual-TextualAlignmentbyCross-MediaBi-AttentionMechanism[J].IEEETransactionsonImageProcessing,2019,PP(99):1-1.]為我們提供了多模態(tài)資源融合語義識別、多媒體學習理論原則的實現(xiàn)奠定了算法基礎(chǔ)。[]王志軍,吳向文,馮小燕,溫小勇.基于大數(shù)據(jù)的多媒體畫面語言研究[J].電化教育研究,2017,38(04):59-65.[]PengY,QiJ,ZhuoY.MAVA:Multi-LevelAdaptiveVisual-TextualAlignmentbyCross-MediaBi-AttentionMechanism[J].IEEETransactionsonImageProcessing,2019,PP(99):1-1.（2）教學資源自適應(yīng)服務(wù)模式通過實證研究多媒體多圖學習的自我解釋效應(yīng)，發(fā)現(xiàn)即使是現(xiàn)代高科技的線上學習、多媒體學習，仍然要不忘教育教學目標與原則，表現(xiàn)出教學適合性，表明多媒體學習不僅是呈現(xiàn)不同學習資源，具有多樣化特點，更重要的是其個性化特點，未來的多媒體學習有必要多多設(shè)計有助于每位學生的個性化學習資源與學習策略。[[]楊翠蓉,蔣安琪,陳衛(wèi)東.尋證多媒體學習的自我解釋效應(yīng)[J].蘇州大學學報(教育科學[]楊翠蓉,蔣安琪,陳衛(wèi)東.尋證多媒體學習的自我解釋效應(yīng)[J].蘇州大學學報(教育科學版),2021,9(02):58-67.現(xiàn)有的實證研究得到的結(jié)果往往是普遍性適應(yīng)性問題，很少考慮原則個性化問題，同時不難考慮到多媒體學習理論各原則之間的邏輯關(guān)系可以歸結(jié)為學習者個性化學習問題，我們試圖以個性化為主要目的，來討論原則之間的邏輯關(guān)系的個性化問題：學習者需要掌握的知識來源于知識圖譜，知識圖譜決定了學習者需要具備的先驗知識，自適應(yīng)來源于學習者偏好“輸入”和“學習”以及對資源的細化為最小單元（切塊呈現(xiàn)原則），冗余根據(jù)學習者自適應(yīng)調(diào)整，資源（文本、視頻、聲音、虛擬學習空間）自適應(yīng)組裝，學習者學習、理解、遷移等不同過程資源冗余設(shè)計自適應(yīng)。我們認為，一蹴而就實現(xiàn)學習目標有一定的不可預(yù)見性，學習資源在“學習、理解、遷移”各種不同的階段，學習方式應(yīng)該不一樣，即多媒體學習理論使用的原則也會有所不同，“上下文”學習環(huán)境中，學習者根據(jù)學習習慣使用教學資源。圖4基于多媒體學習理論原則的學習者教學資源自適應(yīng)（個性化）服務(wù)模式其中，“自適應(yīng)教學資源集合”：以知識圖譜的形式涵蓋了學習元素、知識點、學習進度（已學、未學、到未學之間需要的知識點），學習者以自身認知負荷（自適應(yīng)“輸入”）匹配相應(yīng)的學習資源。（3）基于多媒體學習理論原則的教學資源自適應(yīng)算法設(shè)計在多媒體畫面語言研究中，通過不同畫面要素的可量化屬性組成的數(shù)據(jù)組，可以基本表達出大多數(shù)多媒體畫面的構(gòu)成情況，有利于對研究內(nèi)容進行量化，也有利于畫面數(shù)據(jù)與學習者學習行為數(shù)據(jù)之間的準確關(guān)聯(lián)與匹配。[NOTEREF_Ref20968\h22]認清和準確把握多媒體學習過程中的瀏覽、檢索、閱讀三種學習行為及其相互關(guān)系，對豐富多媒體學習的基礎(chǔ)理論，特別是刻畫多媒體學習過程和指導多媒體教與學的活動具有重要意義。[[]李智曄.多媒體學習過程的學習行為辨析[J].教育研究,2014,35(11):126-130.]上面研究中，多媒體學習理論原則、共享子空間學習方法為我們計算出來了教學資源的符合標準情況，接下來基于計算結(jié)果與學習者歷史學習記錄資源的相應(yīng)結(jié)果進行比較。[]李智曄.多媒體學習過程的學習行為辨析[J].教育研究,2014,35(11):126-130.研究[[]WeiXu,YuhanZhou.Coursevideorecommendationwithmultimodalinformationinonlinelearningplatforms:Adeeplearningframework[J].BritishJournalofEducationalTechnology,2020,51(5):]認為文本特征和視頻特征的研究用于課程推薦很少，并實現(xiàn)視頻課程推薦，提出了一個新的基于多模態(tài)數(shù)據(jù)的深度學習框架。該研究能夠代表多模態(tài)學習資源最新的