第2章 2 教育測量與評價的質(zhì)量特性-效度課件_第1頁
第2章 2 教育測量與評價的質(zhì)量特性-效度課件_第2頁
第2章 2 教育測量與評價的質(zhì)量特性-效度課件_第3頁
第2章 2 教育測量與評價的質(zhì)量特性-效度課件_第4頁
第2章 2 教育測量與評價的質(zhì)量特性-效度課件_第5頁
已閱讀5頁,還剩117頁未讀, 繼續(xù)免費閱讀

下載本文檔

版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進行舉報或認領(lǐng)

文檔簡介

教育測量與評價廣西師范大學教育科學學院秦娟qinjuan2003@126.com18教學周/36學時1教育測量與評價廣西師范大學教育科學學院秦娟18教學周第二章教育與心理測量的質(zhì)量指標

2第二章教育與心理測量的質(zhì)量指標2本章內(nèi)容提要:教育測量與評價的信度教育測量與評價的效度教育測量與評價的難度教育測量與評價的區(qū)分度3本章內(nèi)容提要:教育測量與評價的信度3第二節(jié)教育與心理測量的效度效度的理論意義效度的統(tǒng)計學意義效度與信度的關(guān)系效標關(guān)聯(lián)效度及其估算方法內(nèi)容效度及其分析方法結(jié)構(gòu)效度及其分析方法4第二節(jié)教育與心理測量的效度效度的理論意義4一、效度的理論意義效度指一次測量的有效程度。效度指一次測驗對其所欲測量的屬性能夠測量到的程度,即測量的正確性。效度是指測驗所測量到的結(jié)果與測驗編制者想要測量的心理特性之間的一致性程度。5一、效度的理論意義效度指一次測量的有效程度。5說明:效度始終是針對一定測量目的而言的。效度只是程度上的差異。效度是針對測量結(jié)果而言的。評價效度需要多角度、多方面的收集證據(jù)。6說明:效度始終是針對一定測量目的而言的。6二、效度的統(tǒng)計學意義測驗總方差由所欲測量的屬性所引起的方差與所欲測量的無關(guān)屬性所引起的方差由誤差引起的方差7二、效度的統(tǒng)計學意義測驗由所欲測量的屬性所引起的方差與所欲公式推導:8公式推導:8公式推導:9公式推導:9效度的統(tǒng)計學意義為:☆即表示所欲測量的屬性引起的方差在測驗分數(shù)總方差中所占的比率。10效度的統(tǒng)計學意義為:☆即表示所欲測量的屬性引起的方三、信度與效度之間的關(guān)系信度高是效度高的必要而非充分條件信度系數(shù)與效度系數(shù)之間的關(guān)系11三、信度與效度之間的關(guān)系信度高是效度高的必要而非充分條件1四、效標關(guān)聯(lián)效度及其估算方法效標?12四、效標關(guān)聯(lián)效度及其估算方法效標?12何為效標?所謂效標,是檢驗測驗效度的參照標準,效標實際上是本測驗說想測量或要預測的特性或功能,這些特性和功能通常以另一獨立測驗結(jié)果來表示。13何為效標?所謂效標,是檢驗測驗效度的參照標準,效標實際上是本優(yōu)良效標的標準可靠性有效性客觀性實用性14優(yōu)良效標的標準可靠性14(一)定義:以測驗分數(shù)與其效標分數(shù)之間的相關(guān)來表示測驗的效度。又稱之為統(tǒng)計效度或?qū)嵶C效度,二者之間的相關(guān)系數(shù)就是效標關(guān)聯(lián)效度系數(shù)?!罡鶕?jù)測驗分數(shù)與效標分數(shù)二者所獲得的時間關(guān)系,可以將效標關(guān)聯(lián)效度分為同時效度和預測效度。15(一)定義:以測驗分數(shù)與其效標分數(shù)之間的相關(guān)來表示測驗的效度(二)估算方法積差相關(guān)法二列相關(guān)法點二列相關(guān)法等級相關(guān)法四分相關(guān)法及相關(guān)法列聯(lián)相關(guān)法命中率法顯著差異法16(二)估算方法積差相關(guān)法16積差相關(guān)法

☆當測驗分數(shù)和效標分數(shù)均為正態(tài)連續(xù)變量時,可以用二者的積差相關(guān)系數(shù)來表示測驗的效標關(guān)聯(lián)效度系數(shù)。17積差相關(guān)法☆當測驗分數(shù)和效標分數(shù)均為正二列相關(guān)法☆當測驗分數(shù)和效標分數(shù)兩個均為正態(tài)連續(xù)變量,而其中一個變量被人為地分為二分變量時,測驗的效標關(guān)聯(lián)系數(shù)可以用二列相關(guān)系數(shù)來表示。正態(tài)分布表:教材P34718二列相關(guān)法☆當測驗分數(shù)和效標分數(shù)兩個均為正態(tài)連續(xù)點二列相關(guān)法☆當測驗分數(shù)和效標分數(shù)其中一個變量為連續(xù)變量,而另外一個為真正的二分變量時,測驗的效標關(guān)聯(lián)效度系數(shù)可以用點二列相關(guān)系數(shù)來表示。19點二列相關(guān)法☆當測驗分數(shù)和效標分數(shù)其中一個變量為等級相關(guān)法(斯皮爾曼等級相關(guān))☆當測驗成績和效標成績兩個變量(或其中一個變量)以等級次序排列或以等級次序表示時,測驗的效標關(guān)聯(lián)系數(shù)可以用等級相關(guān)系數(shù)來表示。20等級相關(guān)法(斯皮爾曼等級相關(guān))☆當測驗成績和效標四分相關(guān)法及相關(guān)法☆當測驗成績和效標成績都是二分變量或以二分變量表示時,測驗的效標關(guān)聯(lián)效度系數(shù)可以用四分相關(guān)系數(shù)或相關(guān)系數(shù)來表示。21四分相關(guān)法及相關(guān)法☆當測驗成績和效標成績都【舉例說明】42名學生大學考試數(shù)學成績(優(yōu)和良)與修業(yè)四年后,研究生入學考試數(shù)學成績(通過和未通過)如下表所示,試估計研究生入學考試數(shù)學試卷的效標關(guān)聯(lián)效度系數(shù)。22【舉例說明】42名學生大學考試數(shù)學成績(優(yōu)和良)與修表42名大學生及研究生入學考試數(shù)學成績23表42名大學生及研究生入學考試數(shù)學成績23列聯(lián)相關(guān)法☆當測驗和效標成績其中一個變量不止分為兩個類別時,測驗的效標關(guān)聯(lián)效度系數(shù)可以用列聯(lián)相關(guān)系數(shù)來表示。24列聯(lián)相關(guān)法☆當測驗和效標成績其中一個變量不止分為兩【舉例說明】初三137名學生性向測驗及高一物理學科成績?nèi)缦卤硭?,試估計學生性向測驗的預測性效標關(guān)聯(lián)效度。25【舉例說明】初三137名學生性向測驗及高一物理學表初三學生性向測驗與高一物理學科成績26表初三學生性向測驗與高一物理學科成績26命中率法總命中率正命中率負命中率27命中率法總命中率27顯著差異法根據(jù)效標將被試分為兩個極端組(如:好與差、成功與失敗),然后檢驗兩組測驗分數(shù)是否具有統(tǒng)計學上的顯著性差異。28顯著差異法根據(jù)效標將被試分為兩個極端組(如:好與使用相關(guān)系數(shù)表示效度時,可以采用以下參照標準來解釋效度:29使用相關(guān)系數(shù)表示效度時,可以采用以下參照標準來解釋效度:2五、內(nèi)容效度及其分析方法30五、內(nèi)容效度及其分析方法30(一)定義內(nèi)容效度就是指測驗內(nèi)容對所要測量的內(nèi)容的代表性程度,也指測驗內(nèi)容與要測內(nèi)容之間的一致性程度。一個測驗要具有較高的內(nèi)容效度必須具備兩個條件:一是測驗內(nèi)容范圍明確;二是取樣具有代表性。31(一)定義內(nèi)容效度就是指測驗內(nèi)容對所要測量的內(nèi)容的代表性程度說明:這種代表性程度表現(xiàn)為測驗的內(nèi)容范圍、材料與所要測量的內(nèi)容范圍、教育目標是否相等,測量試題所引起的行為是不是所要測量屬性的明確反應,測量結(jié)果是不是一個具有代表性的行為樣本,等等。內(nèi)容效度一般用于考查學生學業(yè)成績測驗的有效性,而不適合應用于心理測驗。

32說明:這種代表性程度表現(xiàn)為測驗的內(nèi)容范圍、材料與所要測量的內(nèi)說明:內(nèi)容效度的確定方法與效標關(guān)聯(lián)效度不同,它一般不能用數(shù)量化的指標來反映測驗內(nèi)容的有效性程度,而是在某種依據(jù)的基礎(chǔ)上作出邏輯判斷。對于測驗內(nèi)容效度的分析,要以對所要測量的內(nèi)容范圍和教育目標系統(tǒng)的邏輯分析為基礎(chǔ),要以這些內(nèi)容范圍和教育目標層次所占的比重為依據(jù)來考察測驗是否按比重覆蓋了目標內(nèi)容。33說明:內(nèi)容效度的確定方法與效標關(guān)聯(lián)效度不同,它一般不能用數(shù)量(二)內(nèi)容效度的建立過程定義測量屬性,界定測量內(nèi)容、范圍對教學內(nèi)容和教學目標進行邏輯分析將各部分內(nèi)容和教學目標進行分類。設(shè)計題型和試題34(二)內(nèi)容效度的建立過程定義測量屬性,界定測量內(nèi)容、范圍對教(三)內(nèi)容效度的分析方法邏輯分析法量化分析法比較差異法35(三)內(nèi)容效度的分析方法邏輯分析法35邏輯分析法將實際測驗題目分析所得的“題目雙向分類表”與事先制定的“命題雙向細目表”進行比較分析,由專家對考試內(nèi)容的一致性和有效性作出評價。36邏輯分析法將實際測驗題目分析所得的“題目雙向分類表某初中化學測驗命題雙向細目表37某初中化學測驗命題雙向細目表37量化分析法表兩名專家量化評價表38量化分析法表兩名專家量化評價表38比較差異法對同一組被試用一個測驗的兩個復本在某一學科(內(nèi)容)教學訓練前后分別進行測驗,若兩次測驗成績差異顯著,且教學訓練后優(yōu)于教學訓練前,則表明所測驗內(nèi)容與教學內(nèi)容或訓練內(nèi)容相符,具有較好的內(nèi)容效度;否則,則可說明內(nèi)容效度較低。39比較差異法對同一組被試用一個測驗的兩個復本在某一學科六、結(jié)構(gòu)效度及其分析方法40六、結(jié)構(gòu)效度及其分析方法40(一)定義結(jié)構(gòu)效度是指測驗成績能夠解釋心理學理論上的某種結(jié)構(gòu)或特質(zhì)的程度?!罱Y(jié)構(gòu)實質(zhì)指對測量屬性的一種理論假設(shè)。結(jié)構(gòu)效度主要適用于心理測驗效度的確定。41(一)定義結(jié)構(gòu)效度是指測驗成績能夠解釋心理學理論上的某種結(jié)構(gòu)圖初中生自主學習能力結(jié)構(gòu)——學習動機性信念42圖初中生自主學習能力結(jié)構(gòu)——學習動機性信念42圖初中生自主學習能力結(jié)構(gòu)——自主學習策略43圖初中生自主學習能力結(jié)構(gòu)——自主學習策略43【實例】少年道德品質(zhì)形成原因,

提出幾點理論假設(shè):少年道德品質(zhì)傾向與家庭因素有密切關(guān)系;少年道德品質(zhì)傾向與居住地區(qū)和環(huán)境有關(guān)系;少年道德品質(zhì)傾向與學校教育有關(guān)系;少年道德品質(zhì)傾向與他們在校內(nèi)外結(jié)交朋友有關(guān)系。44【實例】少年道德品質(zhì)形成原因,

提出(二)確定結(jié)構(gòu)效度的步驟和方法首先根據(jù)一定的心理學理論建立某種心理品質(zhì)的理論結(jié)構(gòu);然后根據(jù)這一理論結(jié)構(gòu)提出有關(guān)測驗成績的假設(shè);最后用邏輯和實證的研究由果求因來驗證最初提出的假設(shè)。45(二)確定結(jié)構(gòu)效度的步驟和方法首先根據(jù)一定的心理學理論建立舉例說明:某智力測驗首先根據(jù)有關(guān)智力理論建立一套理論結(jié)構(gòu),如智力的定義、智力的結(jié)構(gòu)、智力與遺傳環(huán)境的關(guān)系、智力與年齡的關(guān)系等;然后根據(jù)這些理論,提出有關(guān)智力測驗的假設(shè),如:①測驗分數(shù)在16歲以前隨年齡的增加而增加;②智力測驗受教學測直接影響不大;③一種智力測驗的分數(shù)與其他智力測驗的分數(shù)有正相關(guān);④智商是相對穩(wěn)定的等等。最后通過搜集材料(這里主要指通過智力測驗獲得)來驗證假設(shè),如果假設(shè)獲得支持,即如果測驗分數(shù)在16歲以前隨著年齡的增加而增加,智力測驗受教學的直接影響不大,兩個智力分數(shù)之間有正相關(guān),智商在一段時間內(nèi)保持相對的穩(wěn)定性,這些假設(shè)都得到一一證實,那么就認為該測驗具有較好的構(gòu)想效度。如果上述假設(shè)沒有得到完全驗證,比如智商在一段時間內(nèi)不保持相對穩(wěn)定性,則說明測驗的構(gòu)想效度不高,不能有效的測量智力。46舉例說明:某智力測驗首先根據(jù)有關(guān)智力理論建立一套理論結(jié)構(gòu),如(三)結(jié)構(gòu)效度的驗證方法邏輯思辨法統(tǒng)計分析法測驗的同質(zhì)性與異質(zhì)性相容效度、聚合效度、區(qū)分效度綜合分析法顯著差異法因素分析法47(三)結(jié)構(gòu)效度的驗證方法邏輯思辨法47邏輯思辨法內(nèi)容效度結(jié)構(gòu)效度理論支持48邏輯思辨法內(nèi)容效度結(jié)構(gòu)效度理論支持48測驗的同質(zhì)性與異質(zhì)性☆如果測驗所測的是單一特質(zhì),則測驗各題目之間的相關(guān)應該高,即測驗的同質(zhì)性信度高;☆如果測驗所測的是一個由多種特質(zhì)構(gòu)成的復合體,則測量同一特質(zhì)的題目之間的相關(guān)應高于測量不同特質(zhì)題目之間的相關(guān)。同質(zhì)性異質(zhì)性49測驗的同質(zhì)性與異質(zhì)性☆如果測驗所測的是單一特質(zhì),則相容效度、聚合效度、區(qū)分效度

等指標綜合分析法一個新編的有待確定其結(jié)構(gòu)的測驗與另一個已知其結(jié)構(gòu)的測驗,二者共同測量相同結(jié)構(gòu)的程度。一個未經(jīng)過結(jié)構(gòu)效度檢定的測驗和一個已經(jīng)經(jīng)過結(jié)構(gòu)效度檢定的測驗,二者共同測量相同結(jié)構(gòu)的程度。方法:基于兩個等價結(jié)構(gòu)測試下兩組分數(shù)之間的相關(guān)相容效度①50相容效度、聚合效度、區(qū)分效度

等指標綜合分析法一個新編

使用不同方法對同一特質(zhì)進行測量,其結(jié)果之間的相關(guān)。聚合效度②聚合效度(幅合效度/求同效度)51使用不同方法對同一特質(zhì)進行測量,其結(jié)果之間的相關(guān)。聚合效度

使用相同的方法對不同特質(zhì)進行測量,其結(jié)果之間的相關(guān)。區(qū)分效度③區(qū)分效度(辨別效度/求異效度)52使用相同的方法對不同特質(zhì)進行測量,其結(jié)果之間的相關(guān)。區(qū)分效

使用相同方法對同一特質(zhì)進行測量,其結(jié)果之間的相關(guān)。信度④信度53使用相同方法對同一特質(zhì)進行測量,其結(jié)果之間的相關(guān)。信度④綜合分析法的內(nèi)在邏輯使用相同方法測量相同特質(zhì)使用不同方法測量相同特質(zhì)使用相同方法測量不同特質(zhì)使用不同方法測量不同特質(zhì)聚合效度信度區(qū)分效度54綜合分析法的內(nèi)在邏輯使用相同方法測量相同特質(zhì)使用不同方法測量【實例】教材P67特質(zhì)A(支配性)特質(zhì)B(社會性)特質(zhì)C(成就動機)方法1(自陳法)方法2(投射法)方法3(同伴評價法)55【實例】教材P67特質(zhì)A(支配性)方法1(自陳法)55顯著差異法差異被試比較法先后測試分析法56顯著差異法差異被試比較法56因素分析法圖初中生自主學習能力結(jié)構(gòu)——學習動機性信念57因素分析法圖初中生自主學習能力結(jié)構(gòu)——學習動機性信念57表學習動機性信念分量表因素負荷表58表學習動機性信念分量表因素負荷表58小結(jié)效標關(guān)聯(lián)效度既適用于學業(yè)成就測試也適用于心理測試效度計算,關(guān)鍵是要尋找優(yōu)良的效標;內(nèi)容效度適用于學業(yè)成就測試效度計算,同時也適用于分析心理測試效度,關(guān)鍵是對測試內(nèi)容要有較為深刻、全面的解讀;結(jié)構(gòu)效度一般適用于心理測試的效度計算,而不適用于學業(yè)成就測試。59小結(jié)效標關(guān)聯(lián)效度既適用于學業(yè)成就測試也適用于心理測試效度計算補充效度的計算有時可采用平均區(qū)分度的方法代替,即:60補充效度的計算有時可采用平均區(qū)分度的方法代替,即:60Thankyou!61Thankyou!61教育測量與評價廣西師范大學教育科學學院秦娟qinjuan2003@126.com18教學周/36學時62教育測量與評價廣西師范大學教育科學學院秦娟18教學周第二章教育與心理測量的質(zhì)量指標

63第二章教育與心理測量的質(zhì)量指標2本章內(nèi)容提要:教育測量與評價的信度教育測量與評價的效度教育測量與評價的難度教育測量與評價的區(qū)分度64本章內(nèi)容提要:教育測量與評價的信度3第二節(jié)教育與心理測量的效度效度的理論意義效度的統(tǒng)計學意義效度與信度的關(guān)系效標關(guān)聯(lián)效度及其估算方法內(nèi)容效度及其分析方法結(jié)構(gòu)效度及其分析方法65第二節(jié)教育與心理測量的效度效度的理論意義4一、效度的理論意義效度指一次測量的有效程度。效度指一次測驗對其所欲測量的屬性能夠測量到的程度,即測量的正確性。效度是指測驗所測量到的結(jié)果與測驗編制者想要測量的心理特性之間的一致性程度。66一、效度的理論意義效度指一次測量的有效程度。5說明:效度始終是針對一定測量目的而言的。效度只是程度上的差異。效度是針對測量結(jié)果而言的。評價效度需要多角度、多方面的收集證據(jù)。67說明:效度始終是針對一定測量目的而言的。6二、效度的統(tǒng)計學意義測驗總方差由所欲測量的屬性所引起的方差與所欲測量的無關(guān)屬性所引起的方差由誤差引起的方差68二、效度的統(tǒng)計學意義測驗由所欲測量的屬性所引起的方差與所欲公式推導:69公式推導:8公式推導:70公式推導:9效度的統(tǒng)計學意義為:☆即表示所欲測量的屬性引起的方差在測驗分數(shù)總方差中所占的比率。71效度的統(tǒng)計學意義為:☆即表示所欲測量的屬性引起的方三、信度與效度之間的關(guān)系信度高是效度高的必要而非充分條件信度系數(shù)與效度系數(shù)之間的關(guān)系72三、信度與效度之間的關(guān)系信度高是效度高的必要而非充分條件1四、效標關(guān)聯(lián)效度及其估算方法效標?73四、效標關(guān)聯(lián)效度及其估算方法效標?12何為效標?所謂效標,是檢驗測驗效度的參照標準,效標實際上是本測驗說想測量或要預測的特性或功能,這些特性和功能通常以另一獨立測驗結(jié)果來表示。74何為效標?所謂效標,是檢驗測驗效度的參照標準,效標實際上是本優(yōu)良效標的標準可靠性有效性客觀性實用性75優(yōu)良效標的標準可靠性14(一)定義:以測驗分數(shù)與其效標分數(shù)之間的相關(guān)來表示測驗的效度。又稱之為統(tǒng)計效度或?qū)嵶C效度,二者之間的相關(guān)系數(shù)就是效標關(guān)聯(lián)效度系數(shù)?!罡鶕?jù)測驗分數(shù)與效標分數(shù)二者所獲得的時間關(guān)系,可以將效標關(guān)聯(lián)效度分為同時效度和預測效度。76(一)定義:以測驗分數(shù)與其效標分數(shù)之間的相關(guān)來表示測驗的效度(二)估算方法積差相關(guān)法二列相關(guān)法點二列相關(guān)法等級相關(guān)法四分相關(guān)法及相關(guān)法列聯(lián)相關(guān)法命中率法顯著差異法77(二)估算方法積差相關(guān)法16積差相關(guān)法

☆當測驗分數(shù)和效標分數(shù)均為正態(tài)連續(xù)變量時,可以用二者的積差相關(guān)系數(shù)來表示測驗的效標關(guān)聯(lián)效度系數(shù)。78積差相關(guān)法☆當測驗分數(shù)和效標分數(shù)均為正二列相關(guān)法☆當測驗分數(shù)和效標分數(shù)兩個均為正態(tài)連續(xù)變量,而其中一個變量被人為地分為二分變量時,測驗的效標關(guān)聯(lián)系數(shù)可以用二列相關(guān)系數(shù)來表示。正態(tài)分布表:教材P34779二列相關(guān)法☆當測驗分數(shù)和效標分數(shù)兩個均為正態(tài)連續(xù)點二列相關(guān)法☆當測驗分數(shù)和效標分數(shù)其中一個變量為連續(xù)變量,而另外一個為真正的二分變量時,測驗的效標關(guān)聯(lián)效度系數(shù)可以用點二列相關(guān)系數(shù)來表示。80點二列相關(guān)法☆當測驗分數(shù)和效標分數(shù)其中一個變量為等級相關(guān)法(斯皮爾曼等級相關(guān))☆當測驗成績和效標成績兩個變量(或其中一個變量)以等級次序排列或以等級次序表示時,測驗的效標關(guān)聯(lián)系數(shù)可以用等級相關(guān)系數(shù)來表示。81等級相關(guān)法(斯皮爾曼等級相關(guān))☆當測驗成績和效標四分相關(guān)法及相關(guān)法☆當測驗成績和效標成績都是二分變量或以二分變量表示時,測驗的效標關(guān)聯(lián)效度系數(shù)可以用四分相關(guān)系數(shù)或相關(guān)系數(shù)來表示。82四分相關(guān)法及相關(guān)法☆當測驗成績和效標成績都【舉例說明】42名學生大學考試數(shù)學成績(優(yōu)和良)與修業(yè)四年后,研究生入學考試數(shù)學成績(通過和未通過)如下表所示,試估計研究生入學考試數(shù)學試卷的效標關(guān)聯(lián)效度系數(shù)。83【舉例說明】42名學生大學考試數(shù)學成績(優(yōu)和良)與修表42名大學生及研究生入學考試數(shù)學成績84表42名大學生及研究生入學考試數(shù)學成績23列聯(lián)相關(guān)法☆當測驗和效標成績其中一個變量不止分為兩個類別時,測驗的效標關(guān)聯(lián)效度系數(shù)可以用列聯(lián)相關(guān)系數(shù)來表示。85列聯(lián)相關(guān)法☆當測驗和效標成績其中一個變量不止分為兩【舉例說明】初三137名學生性向測驗及高一物理學科成績?nèi)缦卤硭?,試估計學生性向測驗的預測性效標關(guān)聯(lián)效度。86【舉例說明】初三137名學生性向測驗及高一物理學表初三學生性向測驗與高一物理學科成績87表初三學生性向測驗與高一物理學科成績26命中率法總命中率正命中率負命中率88命中率法總命中率27顯著差異法根據(jù)效標將被試分為兩個極端組(如:好與差、成功與失敗),然后檢驗兩組測驗分數(shù)是否具有統(tǒng)計學上的顯著性差異。89顯著差異法根據(jù)效標將被試分為兩個極端組(如:好與使用相關(guān)系數(shù)表示效度時,可以采用以下參照標準來解釋效度:90使用相關(guān)系數(shù)表示效度時,可以采用以下參照標準來解釋效度:2五、內(nèi)容效度及其分析方法91五、內(nèi)容效度及其分析方法30(一)定義內(nèi)容效度就是指測驗內(nèi)容對所要測量的內(nèi)容的代表性程度,也指測驗內(nèi)容與要測內(nèi)容之間的一致性程度。一個測驗要具有較高的內(nèi)容效度必須具備兩個條件:一是測驗內(nèi)容范圍明確;二是取樣具有代表性。92(一)定義內(nèi)容效度就是指測驗內(nèi)容對所要測量的內(nèi)容的代表性程度說明:這種代表性程度表現(xiàn)為測驗的內(nèi)容范圍、材料與所要測量的內(nèi)容范圍、教育目標是否相等,測量試題所引起的行為是不是所要測量屬性的明確反應,測量結(jié)果是不是一個具有代表性的行為樣本,等等。內(nèi)容效度一般用于考查學生學業(yè)成績測驗的有效性,而不適合應用于心理測驗。

93說明:這種代表性程度表現(xiàn)為測驗的內(nèi)容范圍、材料與所要測量的內(nèi)說明:內(nèi)容效度的確定方法與效標關(guān)聯(lián)效度不同,它一般不能用數(shù)量化的指標來反映測驗內(nèi)容的有效性程度,而是在某種依據(jù)的基礎(chǔ)上作出邏輯判斷。對于測驗內(nèi)容效度的分析,要以對所要測量的內(nèi)容范圍和教育目標系統(tǒng)的邏輯分析為基礎(chǔ),要以這些內(nèi)容范圍和教育目標層次所占的比重為依據(jù)來考察測驗是否按比重覆蓋了目標內(nèi)容。94說明:內(nèi)容效度的確定方法與效標關(guān)聯(lián)效度不同,它一般不能用數(shù)量(二)內(nèi)容效度的建立過程定義測量屬性,界定測量內(nèi)容、范圍對教學內(nèi)容和教學目標進行邏輯分析將各部分內(nèi)容和教學目標進行分類。設(shè)計題型和試題95(二)內(nèi)容效度的建立過程定義測量屬性,界定測量內(nèi)容、范圍對教(三)內(nèi)容效度的分析方法邏輯分析法量化分析法比較差異法96(三)內(nèi)容效度的分析方法邏輯分析法35邏輯分析法將實際測驗題目分析所得的“題目雙向分類表”與事先制定的“命題雙向細目表”進行比較分析,由專家對考試內(nèi)容的一致性和有效性作出評價。97邏輯分析法將實際測驗題目分析所得的“題目雙向分類表某初中化學測驗命題雙向細目表98某初中化學測驗命題雙向細目表37量化分析法表兩名專家量化評價表99量化分析法表兩名專家量化評價表38比較差異法對同一組被試用一個測驗的兩個復本在某一學科(內(nèi)容)教學訓練前后分別進行測驗,若兩次測驗成績差異顯著,且教學訓練后優(yōu)于教學訓練前,則表明所測驗內(nèi)容與教學內(nèi)容或訓練內(nèi)容相符,具有較好的內(nèi)容效度;否則,則可說明內(nèi)容效度較低。100比較差異法對同一組被試用一個測驗的兩個復本在某一學科六、結(jié)構(gòu)效度及其分析方法101六、結(jié)構(gòu)效度及其分析方法40(一)定義結(jié)構(gòu)效度是指測驗成績能夠解釋心理學理論上的某種結(jié)構(gòu)或特質(zhì)的程度?!罱Y(jié)構(gòu)實質(zhì)指對測量屬性的一種理論假設(shè)。結(jié)構(gòu)效度主要適用于心理測驗效度的確定。102(一)定義結(jié)構(gòu)效度是指測驗成績能夠解釋心理學理論上的某種結(jié)構(gòu)圖初中生自主學習能力結(jié)構(gòu)——學習動機性信念103圖初中生自主學習能力結(jié)構(gòu)——學習動機性信念42圖初中生自主學習能力結(jié)構(gòu)——自主學習策略104圖初中生自主學習能力結(jié)構(gòu)——自主學習策略43【實例】少年道德品質(zhì)形成原因,

提出幾點理論假設(shè):少年道德品質(zhì)傾向與家庭因素有密切關(guān)系;少年道德品質(zhì)傾向與居住地區(qū)和環(huán)境有關(guān)系;少年道德品質(zhì)傾向與學校教育有關(guān)系;少年道德品質(zhì)傾向與他們在校內(nèi)外結(jié)交朋友有關(guān)系。105【實例】少年道德品質(zhì)形成原因,

提出(二)確定結(jié)構(gòu)效度的步驟和方法首先根據(jù)一定的心理學理論建立某種心理品質(zhì)的理論結(jié)構(gòu);然后根據(jù)這一理論結(jié)構(gòu)提出有關(guān)測驗成績的假設(shè);最后用邏輯和實證的研究由果求因來驗證最初提出的假設(shè)。106(二)確定結(jié)構(gòu)效度的步驟和方法首先根據(jù)一定的心理學理論建立舉例說明:某智力測驗首先根據(jù)有關(guān)智力理論建立一套理論結(jié)構(gòu),如智力的定義、智力的結(jié)構(gòu)、智力與遺傳環(huán)境的關(guān)系、智力與年齡的關(guān)系等;然后根據(jù)這些理論,提出有關(guān)智力測驗的假設(shè),如:①測驗分數(shù)在16歲以前隨年齡的增加而增加;②智力測驗受教學測直接影響不大;③一種智力測驗的分數(shù)與其他智力測驗的分數(shù)有正相關(guān);④智商是相對穩(wěn)定的等等。最后通過搜集材料(這里主要指通過智力測驗獲得)來驗證假設(shè),如果假設(shè)獲得支持,即如果測驗分數(shù)在16歲以前隨著年齡的增加而增加,智力測驗受教學的直接影響不大,兩個智力分數(shù)之間有正相關(guān),智商在一段時間內(nèi)保持相對的穩(wěn)定性,這些假設(shè)都得到一一證實,那么就認為該測驗具有較好的構(gòu)想效度。如果上述假設(shè)沒有得到完全驗證,比如智商在一段時間內(nèi)不保持相對穩(wěn)定性,則說明測驗的構(gòu)想效度不高,不能有效的測量智力。107舉例說明:某智力測驗首先根據(jù)有關(guān)智力理論建立一套理論結(jié)構(gòu),如(三)結(jié)構(gòu)效度的驗證方法邏輯思辨法統(tǒng)計分析法測驗的同質(zhì)性與異質(zhì)性相容效度、聚合效度、區(qū)分效度綜合分析法顯著差異法因素分析法108(三)結(jié)構(gòu)效度的驗證方法邏輯思辨法47邏輯思辨法內(nèi)容效度結(jié)構(gòu)效度理論支持109邏輯思辨法內(nèi)容效度結(jié)構(gòu)效度理論支持48測驗的同質(zhì)性與異質(zhì)性☆如果測驗所測的是單一特質(zhì),則測驗各題目之間的相關(guān)

溫馨提示

  • 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預覽,若沒有圖紙預覽就沒有圖紙。
  • 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
  • 5. 人人文庫網(wǎng)僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負責。
  • 6. 下載文件中如有侵權(quán)或不適當內(nèi)容,請與我們聯(lián)系,我們立即糾正。
  • 7. 本站不保證下載資源的準確性、安全性和完整性, 同時也不承擔用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。

評論

0/150

提交評論