唇動對視聽語言知覺的影響ppt課件

1、LOGO報告人：張青格，鄧雅菱，雷寰宇唇動景象對嬰兒視聽言語知覺的唇動景象對嬰兒視聽言語知覺的影響影響;LOGO構(gòu)造引言與實驗設(shè)計實驗方法與結(jié)果討論與實驗結(jié)論;LOGO引言v嬰兒視覺聽覺通道很早建立銜接。v行為研討：嬰兒凝視說話者的時間長于傾聽者。(Kuhl & Meltzoff, 1982, 1984; Kuhl, Williams, & Meltzoff, 1991; MacKain, Studdert-Kennedy, Spieker, & Stern, 1983; Patterson & Werker, 1999, 2003).v電生理研討：當(dāng)視覺聽覺相

2、匹配時，大腦出現(xiàn)獨特 的電生理電位。(Bristow et al., 2021) ;LOGO引言v視聽通道銜接的作用機制是什么呢？v一種假設(shè)以為視覺聽覺通道經(jīng)過口齒明晰發(fā)音構(gòu)建言語信息。 (Kent & Vorperian, 2007; Kuhl & Meltzoff, 1984, 1988)v嬰兒在視覺聽覺言語環(huán)境下出現(xiàn)一致的口型。(Kuhl & Meltzoff, 1982, 1984, 1996; Legerstee, 1990; Patterson & Werker, 1999)v嬰兒階段唇動能否與言語知覺有關(guān)呢？;LOGO引言v對成人的研討是雙向的。v

3、只呈現(xiàn)視覺或聽覺言語會影響言語的輸(Galantucci, Fowler, & Goldstein, 2021; Kerzel & Bekkering, 2000)； 動作口型反過來也能影響視覺或聽覺的言語知覺(Sams, Mttnen, & Sihvonen, 2005)。v對嬰兒的研討是單向的。v母語聲音方式影響新生兒的哭泣 (Mampe, Friederici, Christophe, & Wermke, 2021)或嬰兒的發(fā)音(Ruzza, Rocca, Boero, & Lenti, 2006)。v本研討是一種以往單項研討的缺乏。;LOGO引言

4、v成人研討中嘴型和言語知覺的對應(yīng)關(guān)系是明確的，但是在嬰兒階段能否有同樣的言語機制存在是有待研討的。v對于視聽通道銜接的作用，前人提出視覺-聽覺匹配的研討方法(Baier, Idsardi, & Lidz, 2007; Kuhl & Meltzoff, 1982, 1984; Kuhl et al., 1991; Patterson & Werker, 1999, 2003)。v詳細研討問題：嬰兒不同嘴型會不會影響對于視覺聽覺相匹配義務(wù)的凝視。;LOGO引言v嬰兒時期的言語運動動作還不成熟。不能發(fā)出明晰語音。唇動是非言語口型。v如何利用非言語口型的知覺動作進展測查。v嬰兒

5、咀嚼與吮吸的動作，是與成人的圓唇、扁唇類似性很高的。利用含著東西的方法，模擬不同的口型。;LOGO實驗設(shè)計v實驗假設(shè)v發(fā)音同化效應(yīng)v 唇音匹配時，激活與所聽到元音相一致的嘴型，抑制不一致的嘴型。v 唇動扁唇，聽到i，凝視視覺/i/的時間增長。v發(fā)音對比效應(yīng)v 導(dǎo)致相反的知覺偏向，凝視新異刺激。v 嘴唇扁唇，聽到i，凝視視覺/u/的時間增長。;LOGO實驗設(shè)計v自變量：v 唇動與聲音匹配v 唇動與聲音匹配v 嬰兒唇動口型：扁唇/i/，圓唇/u/。v 聽覺聲音刺激：元音/i/，元音/u/。v因變量：v 兒童凝視時間，利用眼動設(shè)備丈量。被試間變量;LOGO;被試v96v4個月-5個月，平均4個月18

6、天v三個組：v基線組32：嘴里什么也沒有，無嘴型v唇音匹配組32：嬰兒嘴型與聽到的發(fā)音一致v唇音不匹配組32：嬰兒嘴型與聽到的發(fā)音不一致LOGO;實驗設(shè)計v實驗流程v口型“u9s，左v口型“i9s，右v一同v無聲v3秒黑屏v2分鐘有聲v其中一個匹配v嬰兒間平衡LOGO;實驗設(shè)計v小嬰兒：3232LOGO;結(jié)果v比較兩張面孔的凝視點時間v3組別：基線、匹配、不匹配2性別：男、女2聽到的發(fā)音：i、u2匹配方向：左、右方差分析v2分鐘內(nèi)，平均81.03秒凝視了面孔LOGO;結(jié)果v看每張面孔的比例描畫統(tǒng)計結(jié)果LOGO;結(jié)果v方差分析結(jié)果：只需組別效應(yīng)v看與聲音匹配的面孔的比例LOGO;實驗一討論pat

7、tern1基線組：看嘴型與發(fā)音匹配的比例更大contrast effectpattern2不匹配組：同基線組，看嘴型不匹配組：同基線組，看嘴型與發(fā)音匹配的比例更大與發(fā)音匹配的比例更大no facilitation effectLOGO;實驗二v目的：什么導(dǎo)致了對比效應(yīng)？v同樣的程序，不同的嬰兒，32v把音頻換成了“a 2AV-motor interaction：不同實驗一：不同實驗一 1facial-expression matching：結(jié)果同實驗一LOGO;實驗二結(jié)果v把實驗一有嘴型組嬰兒的結(jié)果一同比較v因變量：嬰兒看與本人嘴型一樣的面孔的時間v實驗的主效應(yīng)顯著v實驗一中很少看與本人嘴型匹

8、配的面孔，實驗二相反LOGO;討論Text in here 沒有表現(xiàn)出對不匹配嘴型的面孔的偏向 闡明：實驗1的結(jié)果不是面孔表情匹配的結(jié)果，是存在交互作用的LOGO;討論討論覺得信息在嬰兒早期就與視聽言語加工有著直接的關(guān)系覺得信息在嬰兒早期就與視聽言語加工有著直接的關(guān)系 實驗實驗1闡明在匹配組存在選擇闡明在匹配組存在選擇性偏向，在不匹配組退回到基線性偏向，在不匹配組退回到基線程度程度 實驗實驗2闡明這些結(jié)果可以反響闡明這些結(jié)果可以反響一種視聽覺與動作技藝的交互效一種視聽覺與動作技藝的交互效應(yīng)應(yīng)LOGO;v本研討察看到的對比效應(yīng)不同于成人：成人的言語信息是由于他們發(fā)音明晰才會有所偏向性v本研討與之前文獻相一致：在視覺感知和身體動作上都有對比效應(yīng)。v圓唇或者扁唇對于視聽言語都有類似的影響，會使覺得信息偏向于相對的元音LOGO;討論v不同的義務(wù)要求能夠會選擇性地誘發(fā)對比效應(yīng)和同化效應(yīng)v這些凝視方式能夠作為開展程度的函數(shù)而變化：當(dāng)嬰兒掌握很多技藝，對比效應(yīng)就不穩(wěn)定了，能夠在某年消逝，然后作為同化效應(yīng)再出現(xiàn)LOGO結(jié)論v視聽言語技藝與動作技藝是有交互作用的。v發(fā)音器官的粗略覺