第四章 教育測(cè)量的質(zhì)量指標(biāo)-效度

1、一、效度的意義一、效度的意義 效度（效度（ValidityValidity）測(cè)量結(jié)果測(cè)量結(jié)果的的準(zhǔn)確性準(zhǔn)確性和和有效性有效性的的程度程度 一個(gè)測(cè)驗(yàn)或量表實(shí)際能測(cè)出其所要測(cè)量的特性的程度 記為：r rxyxy一、效度的意義一、效度的意義 第一，效度始終是針對(duì)一定的測(cè)量目的而言的。第一，效度始終是針對(duì)一定的測(cè)量目的而言的。 第二，效度是針對(duì)測(cè)量結(jié)果而言的。第二，效度是針對(duì)測(cè)量結(jié)果而言的。 第三，效度只有高或低的程度上的差異。第三，效度只有高或低的程度上的差異。 第四，評(píng)價(jià)一個(gè)測(cè)量是否有效要多角度、多方第四，評(píng)價(jià)一個(gè)測(cè)量是否有效要多角度、多方面地收集證據(jù)。面地收集證據(jù)。 第五，教育測(cè)量中，效度問題比

2、在其他領(lǐng)域的第五，教育測(cè)量中，效度問題比在其他領(lǐng)域的測(cè)量中更為重要。測(cè)量中更為重要。一、效度的概念一、效度的概念 這是因?yàn)椋哼@是因?yàn)椋?教育測(cè)量的對(duì)象大多是精神現(xiàn)象，只能通過對(duì)其教育測(cè)量的對(duì)象大多是精神現(xiàn)象，只能通過對(duì)其具有可測(cè)性的外部表現(xiàn)（如語(yǔ)言或動(dòng)作等）的測(cè)量，具有可測(cè)性的外部表現(xiàn)（如語(yǔ)言或動(dòng)作等）的測(cè)量，以間接認(rèn)識(shí)其心理活動(dòng)、心理特征或知識(shí)水平等。以間接認(rèn)識(shí)其心理活動(dòng)、心理特征或知識(shí)水平等。 學(xué)生的心理活動(dòng)、心理特征與其外部表現(xiàn)之間，學(xué)生的心理活動(dòng)、心理特征與其外部表現(xiàn)之間，一般僅具有相關(guān)關(guān)系而無(wú)函數(shù)關(guān)系，外部行為并不一般僅具有相關(guān)關(guān)系而無(wú)函數(shù)關(guān)系，外部行為并不能準(zhǔn)確無(wú)誤地反映某種心理狀

3、態(tài)。能準(zhǔn)確無(wú)誤地反映某種心理狀態(tài)。 教育測(cè)量的對(duì)象不是物而是有主觀能動(dòng)性的人。教育測(cè)量的對(duì)象不是物而是有主觀能動(dòng)性的人。人能有意識(shí)地調(diào)節(jié)自己的外部行為，掩蓋自己的內(nèi)人能有意識(shí)地調(diào)節(jié)自己的外部行為，掩蓋自己的內(nèi)心活動(dòng)，這就增加了認(rèn)識(shí)其精神現(xiàn)象的難度。心活動(dòng)，這就增加了認(rèn)識(shí)其精神現(xiàn)象的難度。二、效度的統(tǒng)計(jì)定義及其與信度的關(guān)系二、效度的統(tǒng)計(jì)定義及其與信度的關(guān)系1 1、效度的統(tǒng)計(jì)學(xué)原理、效度的統(tǒng)計(jì)學(xué)原理w在實(shí)際測(cè)量中，影響效度的主要因素是系統(tǒng)誤差。在實(shí)際測(cè)量中，影響效度的主要因素是系統(tǒng)誤差。因而在討論效度時(shí)，還必須把真分?jǐn)?shù)方差分解為兩因而在討論效度時(shí)，還必須把真分?jǐn)?shù)方差分解為兩個(gè)部分，一是潛在真分?jǐn)?shù)方

4、差（個(gè)部分，一是潛在真分?jǐn)?shù)方差（V V2 2），另一部分），另一部分是系統(tǒng)誤差分?jǐn)?shù)方差（是系統(tǒng)誤差分?jǐn)?shù)方差（I I2 2） ，它與由隨機(jī)誤差引，它與由隨機(jī)誤差引起的變異（起的變異（E E2 2）不同。）不同。) 22() 12(2222222公式因而，公式EIVxIVT公式即：）之比，）實(shí)得分?jǐn)?shù)方差（潛在真分?jǐn)?shù)方差（定義為所以可以將效度222222222222x2V) 32(1)(xIxxxEIxEIxxVxyxyrrr2 2、效度與信度的關(guān)系、效度與信度的關(guān)系V2I2E2V2I2E2V2I2E2根據(jù)公式（根據(jù)公式（2-22-2）和（）和（2-32-3），可將效度與信度的關(guān)），可將效度與信度的

5、關(guān)系圖解于后：系圖解于后：根據(jù)分析，可得結(jié)論如下根據(jù)分析，可得結(jié)論如下:1)1)高信度是高效度的必要條高信度是高效度的必要條件，而非充分條件。件，而非充分條件。2)2)效度系數(shù)不會(huì)大于信度系數(shù)的效度系數(shù)不會(huì)大于信度系數(shù)的平方根。平方根。可以用下式表示：可以用下式表示：）公式（42xxxyrr高效度、高信度高效度、高信度低效度、高信度低效度、高信度低效度、低信度低效度、低信度三、效度的類別與分析驗(yàn)證法三、效度的類別與分析驗(yàn)證法 19741974年美國(guó)心理學(xué)會(huì)發(fā)行的年美國(guó)心理學(xué)會(huì)發(fā)行的教育和心教育和心理測(cè)量的標(biāo)準(zhǔn)理測(cè)量的標(biāo)準(zhǔn)一書將效度分為三大類：一書將效度分為三大類： 內(nèi)容效度：側(cè)重于測(cè)驗(yàn)題目取樣

6、的代表性，內(nèi)容效度：側(cè)重于測(cè)驗(yàn)題目取樣的代表性，考查這些題目對(duì)所欲測(cè)量的內(nèi)容和行為反應(yīng)考查這些題目對(duì)所欲測(cè)量的內(nèi)容和行為反應(yīng)測(cè)量的有效程度。測(cè)量的有效程度。 結(jié)構(gòu)效度：側(cè)重于一個(gè)測(cè)驗(yàn)的能夠測(cè)量到心結(jié)構(gòu)效度：側(cè)重于一個(gè)測(cè)驗(yàn)的能夠測(cè)量到心理學(xué)和教學(xué)理論上的抽象概念和特質(zhì)的程度。理學(xué)和教學(xué)理論上的抽象概念和特質(zhì)的程度。 效標(biāo)效度：側(cè)重于測(cè)驗(yàn)分?jǐn)?shù)預(yù)測(cè)我們所關(guān)心效標(biāo)效度：側(cè)重于測(cè)驗(yàn)分?jǐn)?shù)預(yù)測(cè)我們所關(guān)心的外在行為的準(zhǔn)確程度。的外在行為的準(zhǔn)確程度。三、效度的類別與分析驗(yàn)證法三、效度的類別與分析驗(yàn)證法 琳恩和格朗蘭德提出效度的四個(gè)向度，琳恩和格朗蘭德提出效度的四個(gè)向度，即內(nèi)容即內(nèi)容內(nèi)容效度、效標(biāo)關(guān)聯(lián)效度、構(gòu)想內(nèi)

7、容效度、效標(biāo)關(guān)聯(lián)效度、構(gòu)想效度和效度和結(jié)果效度結(jié)果效度。（一）內(nèi)容效度及其分析方法（一）內(nèi)容效度及其分析方法 內(nèi)容效度內(nèi)容效度（Content validityContent validity）又稱合理效度或邏輯程度，是指測(cè)驗(yàn)內(nèi)容或行又稱合理效度或邏輯程度，是指測(cè)驗(yàn)內(nèi)容或行為取樣的代表性和適當(dāng)程度；即實(shí)測(cè)內(nèi)容和預(yù)為取樣的代表性和適當(dāng)程度；即實(shí)測(cè)內(nèi)容和預(yù)定測(cè)驗(yàn)內(nèi)容之間的一致性程度。定測(cè)驗(yàn)內(nèi)容之間的一致性程度。 估計(jì)內(nèi)容效度的方法：估計(jì)內(nèi)容效度的方法： 邏輯分析法（定性的方法）邏輯分析法（定性的方法） 統(tǒng)計(jì)分析法（定量的方法）統(tǒng)計(jì)分析法（定量的方法）（一）內(nèi)容效度及其分析方法（一）內(nèi)容效度及其分析

8、方法 邏輯分析法（定性的方法）邏輯分析法（定性的方法） 依據(jù)教材內(nèi)容、教學(xué)大綱的范圍以及教學(xué)目標(biāo)分析測(cè)驗(yàn)內(nèi)容，依據(jù)教材內(nèi)容、教學(xué)大綱的范圍以及教學(xué)目標(biāo)分析測(cè)驗(yàn)內(nèi)容，檢查測(cè)驗(yàn)內(nèi)容究竟在體現(xiàn)教材內(nèi)容和教學(xué)目標(biāo)方面達(dá)到多大程檢查測(cè)驗(yàn)內(nèi)容究竟在體現(xiàn)教材內(nèi)容和教學(xué)目標(biāo)方面達(dá)到多大程度度 對(duì)每一道題目逐一進(jìn)行審查，以此形成對(duì)每一道題目逐一進(jìn)行審查，以此形成“題目雙向細(xì)目表題目雙向細(xì)目表” 與與“命題雙向細(xì)目表命題雙向細(xì)目表”加以對(duì)照，以確定試卷的效度加以對(duì)照，以確定試卷的效度 統(tǒng)計(jì)分析法（定量的方法）統(tǒng)計(jì)分析法（定量的方法） 克龍巴赫法（兩套測(cè)驗(yàn)試題，對(duì)相同被試實(shí)施測(cè)試后，計(jì)算得克龍巴赫法（兩套測(cè)驗(yàn)試題，

9、對(duì)相同被試實(shí)施測(cè)試后，計(jì)算得分的相關(guān)系數(shù)）分的相關(guān)系數(shù)） 評(píng)分一致性考查法（不同評(píng)分者之間評(píng)分的一致性程度，即考評(píng)分一致性考查法（不同評(píng)分者之間評(píng)分的一致性程度，即考查評(píng)分者信度）查評(píng)分者信度） 前后測(cè)對(duì)比法（根據(jù)前后兩次測(cè)驗(yàn)的差異顯著性，確定測(cè)驗(yàn)的前后測(cè)對(duì)比法（根據(jù)前后兩次測(cè)驗(yàn)的差異顯著性，確定測(cè)驗(yàn)的內(nèi)容效度）內(nèi)容效度）（二）結(jié)構(gòu)效度的驗(yàn)證方法（二）結(jié)構(gòu)效度的驗(yàn)證方法 結(jié)構(gòu)效度結(jié)構(gòu)效度是指一個(gè)測(cè)量能實(shí)際測(cè)量出理論上的是指一個(gè)測(cè)量能實(shí)際測(cè)量出理論上的構(gòu)想或心理特性的程度。它的目的在于用心理構(gòu)想或心理特性的程度。它的目的在于用心理學(xué)的概念來(lái)說明分析測(cè)驗(yàn)分?jǐn)?shù)的意義，也就是學(xué)的概念來(lái)說明分析測(cè)驗(yàn)分?jǐn)?shù)

10、的意義，也就是說從心理學(xué)的理論觀點(diǎn)就測(cè)驗(yàn)的結(jié)果加以解釋說從心理學(xué)的理論觀點(diǎn)就測(cè)驗(yàn)的結(jié)果加以解釋和探討。和探討。 這里的這里的結(jié)構(gòu)結(jié)構(gòu)的含義是心理學(xué)理論所涉及的抽象的含義是心理學(xué)理論所涉及的抽象而屬假設(shè)性的概念、構(gòu)想、特性或變量，如智而屬假設(shè)性的概念、構(gòu)想、特性或變量，如智力、焦慮、機(jī)械能力傾向、成就、動(dòng)機(jī)等。力、焦慮、機(jī)械能力傾向、成就、動(dòng)機(jī)等。（二）結(jié)構(gòu)效度的驗(yàn)證方法（二）結(jié)構(gòu)效度的驗(yàn)證方法 建立理論框架建立理論框架 從理論框架出發(fā)，提出各種假設(shè)從理論框架出發(fā)，提出各種假設(shè) 根據(jù)假設(shè)編制測(cè)驗(yàn)根據(jù)假設(shè)編制測(cè)驗(yàn) 以邏輯及實(shí)證的方法，檢驗(yàn)結(jié)果是否符合心理學(xué)的理以邏輯及實(shí)證的方法，檢驗(yàn)結(jié)果是否符合心

11、理學(xué)的理論框架及其假設(shè)論框架及其假設(shè) 比如：中學(xué)生數(shù)學(xué)能力的研究比如：中學(xué)生數(shù)學(xué)能力的研究 數(shù)學(xué)能力由分析能力、綜合能力、歸納和演繹能力、數(shù)學(xué)能力由分析能力、綜合能力、歸納和演繹能力、運(yùn)算能力、空間想象能力構(gòu)成；數(shù)學(xué)能力與早期教運(yùn)算能力、空間想象能力構(gòu)成；數(shù)學(xué)能力與早期教育有關(guān)；數(shù)學(xué)能力與智力正相關(guān)。育有關(guān)；數(shù)學(xué)能力與智力正相關(guān)。 編制測(cè)驗(yàn)，施測(cè)并收集測(cè)驗(yàn)結(jié)果編制測(cè)驗(yàn)，施測(cè)并收集測(cè)驗(yàn)結(jié)果 分析測(cè)驗(yàn)結(jié)果，考查測(cè)試的結(jié)構(gòu)效度，考查測(cè)驗(yàn)結(jié)分析測(cè)驗(yàn)結(jié)果，考查測(cè)試的結(jié)構(gòu)效度，考查測(cè)驗(yàn)結(jié)果是否支持理論構(gòu)想果是否支持理論構(gòu)想（三）效標(biāo)關(guān)聯(lián)效度的估計(jì)方法（三）效標(biāo)關(guān)聯(lián)效度的估計(jì)方法 效標(biāo)：檢驗(yàn)測(cè)驗(yàn)效度的外在的

12、、客觀的標(biāo)準(zhǔn)，效標(biāo)：檢驗(yàn)測(cè)驗(yàn)效度的外在的、客觀的標(biāo)準(zhǔn)，即效度的標(biāo)準(zhǔn)即效度的標(biāo)準(zhǔn) 效標(biāo)效度，也稱為效標(biāo)關(guān)聯(lián)效度，也稱為實(shí)證效標(biāo)效度，也稱為效標(biāo)關(guān)聯(lián)效度，也稱為實(shí)證效度效度 驗(yàn)證方法是指一個(gè)測(cè)驗(yàn)對(duì)處于特定情境中的個(gè)驗(yàn)證方法是指一個(gè)測(cè)驗(yàn)對(duì)處于特定情境中的個(gè)體行為進(jìn)行預(yù)測(cè)時(shí)的有效性體行為進(jìn)行預(yù)測(cè)時(shí)的有效性 例：例： 高考成績(jī)預(yù)測(cè)大學(xué)學(xué)習(xí)成績(jī)高考成績(jī)預(yù)測(cè)大學(xué)學(xué)習(xí)成績(jī) 能力傾向測(cè)驗(yàn)預(yù)測(cè)工作成效能力傾向測(cè)驗(yàn)預(yù)測(cè)工作成效（三）效標(biāo)關(guān)聯(lián)效度的估計(jì)方法（三）效標(biāo)關(guān)聯(lián)效度的估計(jì)方法 分類：分類： 同時(shí)效度：測(cè)驗(yàn)分?jǐn)?shù)與效標(biāo)資料的取得約在同一時(shí)同時(shí)效度：測(cè)驗(yàn)分?jǐn)?shù)與效標(biāo)資料的取得約在同一時(shí)間內(nèi)連續(xù)完成，這兩種資料的相關(guān)系

13、數(shù)即為同時(shí)效間內(nèi)連續(xù)完成，這兩種資料的相關(guān)系數(shù)即為同時(shí)效度度 目的：診斷現(xiàn)狀目的：診斷現(xiàn)狀用全國(guó)高考的成績(jī)作為效標(biāo)來(lái)檢驗(yàn)高中畢業(yè)生會(huì)考的成績(jī)，計(jì)用全國(guó)高考的成績(jī)作為效標(biāo)來(lái)檢驗(yàn)高中畢業(yè)生會(huì)考的成績(jī)，計(jì)算兩者之間的相關(guān)系數(shù)就是會(huì)考的同時(shí)效度算兩者之間的相關(guān)系數(shù)就是會(huì)考的同時(shí)效度 預(yù)測(cè)效度：測(cè)驗(yàn)分?jǐn)?shù)取得一段時(shí)間后才獲得效標(biāo)資預(yù)測(cè)效度：測(cè)驗(yàn)分?jǐn)?shù)取得一段時(shí)間后才獲得效標(biāo)資料，計(jì)算這兩種資料間的相關(guān)系數(shù)料，計(jì)算這兩種資料間的相關(guān)系數(shù) 目的：預(yù)測(cè)某個(gè)個(gè)體將來(lái)的行為目的：預(yù)測(cè)某個(gè)個(gè)體將來(lái)的行為而用大學(xué)一年級(jí)的成績(jī)作為效標(biāo)來(lái)檢驗(yàn)高考的成績(jī)，計(jì)算兩者而用大學(xué)一年級(jí)的成績(jī)作為效標(biāo)來(lái)檢驗(yàn)高考的成績(jī)，計(jì)算兩者的相關(guān)系數(shù)

14、就是高考的預(yù)測(cè)效度。的相關(guān)系數(shù)就是高考的預(yù)測(cè)效度。效標(biāo)效度的估計(jì)方法 相關(guān)法相關(guān)法直接計(jì)算測(cè)驗(yàn)分?jǐn)?shù)與效標(biāo)分?jǐn)?shù)的相關(guān)系數(shù)直接計(jì)算測(cè)驗(yàn)分?jǐn)?shù)與效標(biāo)分?jǐn)?shù)的相關(guān)系數(shù) 積差相關(guān)、等級(jí)相關(guān)、二列相關(guān)等積差相關(guān)、等級(jí)相關(guān)、二列相關(guān)等 顯著差異法顯著差異法根據(jù)效標(biāo)測(cè)量將被試分為兩個(gè)極端組，檢驗(yàn)這兩個(gè)組測(cè)驗(yàn)分?jǐn)?shù)是根據(jù)效標(biāo)測(cè)量將被試分為兩個(gè)極端組，檢驗(yàn)這兩個(gè)組測(cè)驗(yàn)分?jǐn)?shù)是否具有統(tǒng)計(jì)學(xué)上的差異顯著性否具有統(tǒng)計(jì)學(xué)上的差異顯著性 命中率命中率當(dāng)測(cè)驗(yàn)用作取舍決策時(shí)，常使用命中率當(dāng)測(cè)驗(yàn)用作取舍決策時(shí)，常使用命中率相關(guān)概念：總命中率、正命中率、負(fù)命中率相關(guān)概念：總命中率、正命中率、負(fù)命中率總命中率高，則測(cè)試的效度高總命中率高，則

15、測(cè)試的效度高例：例： 7070人參加的考試，通過測(cè)驗(yàn)選取了人參加的考試，通過測(cè)驗(yàn)選取了5050人，淘汰了人，淘汰了2020人；選出的人中有人；選出的人中有4040人合格，淘汰的人中有人合格，淘汰的人中有8 8人不合格。該測(cè)驗(yàn)的總命中率、正命中率人不合格。該測(cè)驗(yàn)的總命中率、正命中率和負(fù)命中率分別是多少？和負(fù)命中率分別是多少？1 1、用積差相關(guān)系數(shù)的方法估計(jì)效度、用積差相關(guān)系數(shù)的方法估計(jì)效度 積差相關(guān)積差相關(guān)，是計(jì)算兩個(gè)變量線性相關(guān)的一種方法，由英國(guó)統(tǒng)計(jì)，是計(jì)算兩個(gè)變量線性相關(guān)的一種方法，由英國(guó)統(tǒng)計(jì)學(xué)家學(xué)家皮爾遜皮爾遜提出，因此也稱為皮爾遜提出，因此也稱為皮爾遜(Pearson)(Pearson)

16、相關(guān)。要使用相關(guān)。要使用積差相關(guān)必須同時(shí)積差相關(guān)必須同時(shí)具備如下幾個(gè)條件具備如下幾個(gè)條件： 兩個(gè)變量都是由測(cè)量獲得的連續(xù)性數(shù)據(jù)，即等距或等比數(shù)據(jù)。兩個(gè)變量都是由測(cè)量獲得的連續(xù)性數(shù)據(jù)，即等距或等比數(shù)據(jù)。 兩個(gè)變量的總體都呈正態(tài)分布，或接近正態(tài)分布，至少是單兩個(gè)變量的總體都呈正態(tài)分布，或接近正態(tài)分布，至少是單峰對(duì)稱分布，當(dāng)然樣本并不一定要正態(tài)。峰對(duì)稱分布，當(dāng)然樣本并不一定要正態(tài)。 必須是成對(duì)的數(shù)據(jù)，而且每對(duì)數(shù)據(jù)之間是相互獨(dú)立的，即各必須是成對(duì)的數(shù)據(jù)，而且每對(duì)數(shù)據(jù)之間是相互獨(dú)立的，即各自互不影響，本條件是難以檢驗(yàn)的。自互不影響，本條件是難以檢驗(yàn)的。 兩個(gè)變量之間呈線性關(guān)系。一般用描繪散點(diǎn)圖的方式來(lái)觀

17、察，兩個(gè)變量之間呈線性關(guān)系。一般用描繪散點(diǎn)圖的方式來(lái)觀察，最好是先各自轉(zhuǎn)化為最好是先各自轉(zhuǎn)化為Z Z分?jǐn)?shù)，單位會(huì)統(tǒng)一些。分?jǐn)?shù)，單位會(huì)統(tǒng)一些。例：例： 某中學(xué)數(shù)學(xué)教研組的教師積多年的教學(xué)法經(jīng)驗(yàn)，認(rèn)為剛?cè)肽持袑W(xué)數(shù)學(xué)教研組的教師積多年的教學(xué)法經(jīng)驗(yàn)，認(rèn)為剛?cè)敫咧械膶W(xué)生學(xué)習(xí)立體幾何感到困難的主要原因是空間想像力高中的學(xué)生學(xué)習(xí)立體幾何感到困難的主要原因是空間想像力弱。弱。 為了證明這個(gè)論點(diǎn)，他們讓剛?cè)敫咧械臑榱俗C明這個(gè)論點(diǎn)，他們讓剛?cè)敫咧械?03103名學(xué)生作名學(xué)生作1010道道題，測(cè)量其空間想像力。為避免知道了某些學(xué)生的剛?cè)敫咧蓄}，測(cè)量其空間想像力。為避免知道了某些學(xué)生的剛?cè)敫咧袝r(shí)的成績(jī)影響以后考試的評(píng)

18、分，試卷暫不評(píng)閱。立體幾何學(xué)時(shí)的成績(jī)影響以后考試的評(píng)分，試卷暫不評(píng)閱。立體幾何學(xué)完后，進(jìn)行考試，按得分多少把成績(jī)分為五等（完后，進(jìn)行考試，按得分多少把成績(jī)分為五等（A A、B B、C C、D D、E E）分別得）分別得5 5、4 4、3 3、2 2、1 1分。這時(shí)才評(píng)閱入學(xué)時(shí)的試卷，統(tǒng)分。這時(shí)才評(píng)閱入學(xué)時(shí)的試卷，統(tǒng)計(jì)出期末得計(jì)出期末得5 5、4 4、3 3、2 2、1 1分者在入學(xué)測(cè)驗(yàn)中分別答對(duì)分者在入學(xué)測(cè)驗(yàn)中分別答對(duì)1 1道題道題至至1010道題的人數(shù)（見表道題的人數(shù)（見表2-12-1）。）。 就現(xiàn)有資料，用什么方法可以判斷教師們的意見是否正確？就現(xiàn)有資料，用什么方法可以判斷教師們的意見是否

19、正確？表2-1：（答對(duì)的題數(shù)）1 2 3 4 5 6 7 8 9 10 所評(píng)的等級(jí)ABCDE54321 1 3 10 5 4 2 1 6 8 8 4 3 1 2 4 5 9 8 3 1w1 3 2 1 11 1 2 1 1解：（1）設(shè)期末考試的等第為y，空間想像力測(cè)驗(yàn)答對(duì)的題數(shù)為x，列出二重交叉次數(shù)分布表：X（答對(duì)的題數(shù)）1 2 3 4 5 6 7 8 9 10 Y所評(píng)的等級(jí)ABCDE54321 1 3 10 5 4 2 1 6 8 8 4 3 1 2 4 5 9 8 3 1w1 3 2 1 11 1 2 1 125313296合計(jì)2 4 10 14 20 20 17 9 5 2103（2）用

20、積差相關(guān)系數(shù)公式計(jì)算效度系數(shù)：驗(yàn)的得分和的題數(shù)與期末測(cè)是指剛?cè)雽W(xué)測(cè)驗(yàn)中答對(duì)標(biāo)準(zhǔn)差。是期末測(cè)驗(yàn)各人得分的對(duì)題數(shù)的標(biāo)準(zhǔn)差，是剛?cè)雽W(xué)的測(cè)驗(yàn)各題答人得分平均數(shù)，是期末測(cè)驗(yàn)中的人數(shù)的平均數(shù)，道題道題到是剛?cè)雽W(xué)的測(cè)驗(yàn)中答對(duì)式中公式fxySSyxssyxNfxyryxyx103101)42(/12. 1/)(58. 3103619232331425510394. 1103/ )55. 510(2)55. 52(4)55. 51 (255. 5103210591034221101/)(22222 NyyfSSyySxxNxxfSSyyxxx標(biāo)準(zhǔn)差。是期末測(cè)驗(yàn)各人得分的）（人得分平均數(shù)，是期末測(cè)驗(yàn)中）（道題的人

21、數(shù)的平均數(shù)，道題到是剛?cè)雽W(xué)的測(cè)驗(yàn)中答對(duì)對(duì)題數(shù)的標(biāo)準(zhǔn)差，是剛?cè)雽W(xué)的測(cè)驗(yàn)各題答式中預(yù)測(cè)效度，前者對(duì)后者有一定的學(xué)習(xí)成績(jī)有較高的相關(guān)體幾何間想像力測(cè)驗(yàn)成績(jī)與立相關(guān)系數(shù)較大，表明空) 3(699. 012. 194. 158. 355. 5103/22032203) 15( 1) 510(2) 59(4) 58 ( 5) 57(10) 56( 3) 55( 1 xyrfxy二列相關(guān)二列相關(guān) 適用于兩個(gè)變量就其實(shí)際含義而言是適用于兩個(gè)變量就其實(shí)際含義而言是等距或等比數(shù)據(jù)，它們服從正態(tài)分布，等距或等比數(shù)據(jù)，它們服從正態(tài)分布，其中一列人為地劃分為兩類。其中一列人為地劃分為兩類。時(shí)的縱高。中從左到右概率值為指

22、的是在整個(gè)正態(tài)曲線。比，的次數(shù)占總次數(shù)的百分是二分稱名量表中一種量值的標(biāo)準(zhǔn)差。是該例連續(xù)變量全部變平均數(shù)?！毕鄬?duì)應(yīng)的連續(xù)變量的”或“是二分名稱變量中“或公式pypqpSXXypqSXXrtqptqpb1015)-(2 點(diǎn)二列相關(guān)點(diǎn)二列相關(guān) 適用于一列數(shù)據(jù)為等距或等比且總體服從正態(tài)分布（實(shí)適用于一列數(shù)據(jù)為等距或等比且總體服從正態(tài)分布（實(shí)際上只需要單峰對(duì)稱分布，如分布），另一列變量是際上只需要單峰對(duì)稱分布，如分布），另一列變量是按事物的性質(zhì)劃分為兩類的變量，也可以是一個(gè)雙峰分按事物的性質(zhì)劃分為兩類的變量，也可以是一個(gè)雙峰分布，人為劃分為兩類，如文盲與非文盲。這種相關(guān)系數(shù)布，人為劃分為兩類，如文盲與

23、非文盲。這種相關(guān)系數(shù)多用于測(cè)驗(yàn)中評(píng)價(jià)題目的區(qū)分度。對(duì)選擇題、判斷題在多用于測(cè)驗(yàn)中評(píng)價(jià)題目的區(qū)分度。對(duì)選擇題、判斷題在整個(gè)測(cè)量中作用作出判斷。整個(gè)測(cè)量中作用作出判斷。 基本計(jì)算公式：基本計(jì)算公式：。比，的次數(shù)占總次數(shù)的百分是二分稱名量表中一種量值的標(biāo)準(zhǔn)差。是該例連續(xù)變量全部變平均數(shù)?！毕鄬?duì)應(yīng)的連續(xù)變量的”或“是二分名稱變量中“或公式pqpSXXpqSXXrtqptqppb1016)-(2 例：有一位教師自編了一套測(cè)驗(yàn)題，用來(lái)預(yù)測(cè)學(xué)生例：有一位教師自編了一套測(cè)驗(yàn)題，用來(lái)預(yù)測(cè)學(xué)生一年后的某科成績(jī)，自編測(cè)驗(yàn)按百分制評(píng)分，一年一年后的某科成績(jī)，自編測(cè)驗(yàn)按百分制評(píng)分，一年后考試評(píng)分只把學(xué)生分為及格者和不及

24、格者。試就后考試評(píng)分只把學(xué)生分為及格者和不及格者。試就所獲資料估計(jì)自編測(cè)驗(yàn)的預(yù)測(cè)效度。所獲資料估計(jì)自編測(cè)驗(yàn)的預(yù)測(cè)效度。 解：解：1)1)把兩次測(cè)驗(yàn)成績(jī)成對(duì)排列：把兩次測(cè)驗(yàn)成績(jī)成對(duì)排列：被試者被試者1 12 23 34 45 56 67 78 89 91010 1111121213131414自編測(cè)驗(yàn)自編測(cè)驗(yàn)的成績(jī)（的成績(jī)（X X）6767 1010 20 44 60 43 61 10 26 23 30 18 35 2320 44 60 43 61 10 26 23 30 18 35 23一年后考一年后考試成績(jī)（試成績(jī)（Y Y）1 1 1 0 0 1 1 0 1 0 0 1 1 11 1 1 0

25、 0 1 1 0 1 0 0 1 1 12)計(jì)算出二列相關(guān)公式所需統(tǒng)計(jì)量計(jì)算出二列相關(guān)公式所需統(tǒng)計(jì)量：績(jī)。不能用來(lái)預(yù)測(cè)學(xué)生的成極低，個(gè)測(cè)驗(yàn)結(jié)果的預(yù)測(cè)效度相關(guān)系數(shù)極小，說明這）代入公式計(jì)算得：。比，的次數(shù)占總次數(shù)的百分是二分稱名量表中一種量值的標(biāo)準(zhǔn)差。是該例連續(xù)變量全部變平均數(shù)。”相對(duì)應(yīng)的連續(xù)變量的”或“是二分名稱變量中“或公式0.007 36. 064. 0125.1840.3367.33336. 01,64. 01491125.1840.335302310604467.33923351067016)-(2 pbttqpqptqppbrpqppqpSSXXXXpqSXXr四、提高效度的方法四、

26、提高效度的方法 （一）各種效度系數(shù)的要求（一）各種效度系數(shù)的要求 （二）影響效度的因素（二）影響效度的因素 （三）提高效度的方法：（三）提高效度的方法： 1、控制系統(tǒng)誤差、控制系統(tǒng)誤差 2、精心編制量表、精心編制量表 3、妥善組織測(cè)驗(yàn)、妥善組織測(cè)驗(yàn) 4、擴(kuò)充樣本的容量和代表性、擴(kuò)充樣本的容量和代表性 5、合理處理效度和信度的關(guān)系、合理處理效度和信度的關(guān)系 6、適當(dāng)增加測(cè)驗(yàn)的長(zhǎng)度適當(dāng)增加測(cè)驗(yàn)的長(zhǎng)度表表2.1 測(cè)驗(yàn)長(zhǎng)度與信度和效度的關(guān)系測(cè)驗(yàn)長(zhǎng)度與信度和效度的關(guān)系題數(shù)題數(shù)與原測(cè)驗(yàn)題數(shù)之比與原測(cè)驗(yàn)題數(shù)之比信度系數(shù)信度系數(shù)效度系數(shù)效度系數(shù)1020306012014048012361214480.3000

27、.4620.5620.7200.8370.9110.9540.4000.4960.5480.6190.6680.6790.713第三節(jié) 難度及其計(jì)算 一、難度的概念一、難度的概念 1 1、難度是指測(cè)量試題的難易程度。、難度是指測(cè)量試題的難易程度。 在教育測(cè)量中，客觀題的難度一般用正確回在教育測(cè)量中，客觀題的難度一般用正確回答試題的人數(shù)與參加測(cè)驗(yàn)的總?cè)藬?shù)的比值來(lái)答試題的人數(shù)與參加測(cè)驗(yàn)的總?cè)藬?shù)的比值來(lái)表示。其公式為：表示。其公式為： 例如：在例如：在100100個(gè)學(xué)生中，答對(duì)第一題的個(gè)學(xué)生中，答對(duì)第一題的3030人，人，答對(duì)第二題的答對(duì)第二題的6060人，這兩道題的難度分別是人，這兩道題的難度分別

28、是多少？多少？NRp 2 2、難度對(duì)測(cè)驗(yàn)的影響、難度對(duì)測(cè)驗(yàn)的影響 1）測(cè)驗(yàn)難度影響分?jǐn)?shù)的分布形態(tài)。 難度值越接近0，測(cè)驗(yàn)的難度就越大，測(cè)驗(yàn)分?jǐn)?shù)就越是集中在低分端，其分?jǐn)?shù)分布越呈現(xiàn)正偏態(tài)；反之，難度值越接近1.00，其難度就越小，測(cè)驗(yàn)分?jǐn)?shù)越集中在高分端，分?jǐn)?shù)分布呈負(fù)偏態(tài)。 2）測(cè)驗(yàn)難度影響測(cè)驗(yàn)分?jǐn)?shù)的離散程度 測(cè)驗(yàn)難度過大過小，都會(huì)造成測(cè)驗(yàn)分?jǐn)?shù)偏離正態(tài)分布，從而使分?jǐn)?shù)的全距縮小，使測(cè)驗(yàn)分?jǐn)?shù)的離散程度變小。 3）測(cè)驗(yàn)難度影響測(cè)驗(yàn)的鑒別能力 在測(cè)驗(yàn)中，考生之間相互配對(duì)比較的可能性越多，就越有利于準(zhǔn)確地鑒別考生的不同能力。3 3、測(cè)驗(yàn)的適宜難度、測(cè)驗(yàn)的適宜難度 難度在難度在0.500.50左右的試題能組

29、成考生之間最多的左右的試題能組成考生之間最多的配對(duì)比較次數(shù)，能使測(cè)驗(yàn)分?jǐn)?shù)的離散指數(shù)達(dá)到配對(duì)比較次數(shù)，能使測(cè)驗(yàn)分?jǐn)?shù)的離散指數(shù)達(dá)到最大值，并能有效地造成測(cè)驗(yàn)分?jǐn)?shù)的正態(tài)性。最大值，并能有效地造成測(cè)驗(yàn)分?jǐn)?shù)的正態(tài)性。這有兩層意思：這有兩層意思： 一是測(cè)驗(yàn)中的各試題的難度，均應(yīng)在一是測(cè)驗(yàn)中的各試題的難度，均應(yīng)在0.500.50左右；左右； 二是測(cè)驗(yàn)中的試題的難度在二是測(cè)驗(yàn)中的試題的難度在0.2-0.80.2-0.8之間，平之間，平均難度應(yīng)在均難度應(yīng)在0.500.50左右。左右。二、難度的計(jì)算 （一）計(jì)算難度的基本公式（一）計(jì)算難度的基本公式 3 3、整個(gè)試卷的難度計(jì)算、整個(gè)試卷的難度計(jì)算 試卷的難度是指一

30、份試卷的總體難易程度，其試卷的難度是指一份試卷的總體難易程度，其由試卷中每道題的難度決定。由試卷中每道題的難度決定。 其計(jì)算辦法為：將每道題目的難度與滿分值相其計(jì)算辦法為：將每道題目的難度與滿分值相乘的積相加，然后將其總和除以試卷的滿分值，乘的積相加，然后將其總和除以試卷的滿分值，所得的商即為整個(gè)試卷的難度。所得的商即為整個(gè)試卷的難度。二、難度的計(jì)算 （一）計(jì)算難度的基本公式（一）計(jì)算難度的基本公式 1 1、客觀題難度的計(jì)算、客觀題難度的計(jì)算 NRp 2 2、主觀題難度的計(jì)算、主觀題難度的計(jì)算表示此題的滿分。）題上的平均得分，表示所有考生在某一道（KKXXp P表示難度指標(biāo)，N表示參加考試的總

31、人數(shù)，R表示答對(duì)某道客觀題的人數(shù)。（二）用極端分組法計(jì)算試題的難度（二）用極端分組法計(jì)算試題的難度 1 1、用極端分組法計(jì)算客觀題的難度、用極端分組法計(jì)算客觀題的難度 具體步驟如下：具體步驟如下： 1 1）先按測(cè)驗(yàn)總分的高低，按由高到低的順序依次排）先按測(cè)驗(yàn)總分的高低，按由高到低的順序依次排列試卷。列試卷。 2 2）從得分最高的一份試卷開始依次向下選出全部試）從得分最高的一份試卷開始依次向下選出全部試卷的卷的27%27%作為高分組；從得分最低的一份試卷開始依作為高分組；從得分最低的一份試卷開始依次向上選出全部試卷的次向上選出全部試卷的27%27%作為低分組。作為低分組。 3 3）按計(jì)算公式計(jì)算

32、難度）按計(jì)算公式計(jì)算難度為低分組的難度）為高分組的難度，（L2pppppHLH例題例題：在在100100名學(xué)生中，高分組與低分組名學(xué)生中，高分組與低分組各有各有2727人。其中高分組答對(duì)第一題的有人。其中高分組答對(duì)第一題的有2020人，低分組答對(duì)第一題的有人，低分組答對(duì)第一題的有1010人。這人。這道題的難度為多少？道題的難度為多少？計(jì)算計(jì)算 解：依據(jù)客觀題極端分組法計(jì)算公式解：依據(jù)客觀題極端分組法計(jì)算公式0.56 227102720 2LHppp2 2、用極端分組法計(jì)算論文試題難度、用極端分組法計(jì)算論文試題難度步驟如下：步驟如下：1 1）按測(cè)驗(yàn)得分排列試卷，確定高分組與低分組，）按測(cè)驗(yàn)得分排

33、列試卷，確定高分組與低分組，各占總?cè)藬?shù)的各占總?cè)藬?shù)的25%25%（方法同前）。（方法同前）。2 2）分別為高分組、低分組編制每道試題的分析表。）分別為高分組、低分組編制每道試題的分析表。3 3）按下列公式計(jì)算難度，）按下列公式計(jì)算難度，為最低分。是這道題的最高分，表示總?cè)藬?shù)的為低分組得分總和，為高分組得分總和，LH%25X)(22LnXLHnnLXXpHLH例：某道論文題，高分組得分總某道論文題，高分組得分總和為和為4040分，低分組得分總和為分，低分組得分總和為1515分，有分，有4040人參加考試，這道題最人參加考試，這道題最高得分為高得分為8 8分，最低得分為分，最低得分為2 2分，分，

34、則此題的難度為多少？則此題的難度為多少？（0.125）計(jì)算計(jì)算 解：依據(jù)主觀題極端分組法計(jì)算公式解：依據(jù)主觀題極端分組法計(jì)算公式 =0.125 28%254022%254021540 )(22LHnnLXXpLH第四節(jié)區(qū)分度及其計(jì)算 一、區(qū)分度的意義一、區(qū)分度的意義 （一）區(qū)分度（一）區(qū)分度（Discrimination）是指測(cè)驗(yàn)對(duì)考）是指測(cè)驗(yàn)對(duì)考生實(shí)際水平的區(qū)分程度，用符號(hào)生實(shí)際水平的區(qū)分程度，用符號(hào)D表示。又叫鑒表示。又叫鑒別力，它是評(píng)價(jià)試題質(zhì)量，篩選試題的主要指標(biāo)別力，它是評(píng)價(jià)試題質(zhì)量，篩選試題的主要指標(biāo)與依據(jù)。與依據(jù)。 區(qū)分又分為正（或積極）區(qū)分（區(qū)分又分為正（或積極）區(qū)分（D0），零

35、區(qū)分），零區(qū)分（D0）和負(fù)（或消極）區(qū)分（）和負(fù)（或消極）區(qū)分（D0）。）。 區(qū)分度的高低直接影響到測(cè)驗(yàn)的信度和效度。區(qū)分度的高低直接影響到測(cè)驗(yàn)的信度和效度。（二）區(qū)分度與測(cè)驗(yàn)信度、難度的關(guān)系 1 1、區(qū)分度與信度的關(guān)系（見下表、區(qū)分度與信度的關(guān)系（見下表2.22.2） 這里是假定全部試題的難度均為這里是假定全部試題的難度均為0.500.50時(shí)所預(yù)測(cè)的信度系數(shù)。時(shí)所預(yù)測(cè)的信度系數(shù)。 區(qū)分度指的是平均值。區(qū)分度指的是平均值。 可見，要想達(dá)到理想的測(cè)驗(yàn)信度，提高區(qū)分度是一可見，要想達(dá)到理想的測(cè)驗(yàn)信度，提高區(qū)分度是一 個(gè)好辦法。個(gè)好辦法。區(qū)分度區(qū)分度信度信度0.12250.12250.160.160

36、.200.200.300.300.400.400.500.500.000.000.420.420.630.630.840.840.9150.9150.9490.949（二）區(qū)分度與難度的關(guān)系 表表2.32.3D D的最大值與試題難度的關(guān)系的最大值與試題難度的關(guān)系 由上表可知，難度適中，可使區(qū)分度達(dá)到最大值。由上表可知，難度適中，可使區(qū)分度達(dá)到最大值。難度難度區(qū)分度的最大值區(qū)分度的最大值1.001.00.90.90.70.70.50.50.30.30.10.10.00.00.00.00.20.20.60.601.001.00.60.60.20.200000二、區(qū)分度的計(jì)算 （一）用極端分組法計(jì)算

37、區(qū)分度（一）用極端分組法計(jì)算區(qū)分度 1、客觀題區(qū)分度的計(jì)算：、客觀題區(qū)分度的計(jì)算： DPH PL注：將被試依照總分從高到低排列，然后將總分最高的27%和最低的27%的被試分別定為高分組和低分組。） 2、主觀題區(qū)分度的計(jì)算：、主觀題區(qū)分度的計(jì)算：為最低分。是這道題的最高分，表示總?cè)藬?shù)的為低分組得分總和，為高分組得分總和，LH%25X)(LnXLHnXXDHLH二、區(qū)分度的計(jì)算 （一）用極端分組法計(jì)算區(qū)分度（一）用極端分組法計(jì)算區(qū)分度 1 1、客觀題區(qū)分度的計(jì)算：、客觀題區(qū)分度的計(jì)算： DPH PL（D D為區(qū)分度，為區(qū)分度，PhPh為高分組通過率，為高分組通過率，PlPl為低分組為低分組通過率。

38、）通過率。）（注：將被試依照總分從高到低排列，然后將總（注：將被試依照總分從高到低排列，然后將總分最高的分最高的27%27%和最低的和最低的27%27%的被試分別定為高分的被試分別定為高分組和低分組。）組和低分組。）二、區(qū)分度的計(jì)算二、區(qū)分度的計(jì)算 （一）用極端分組法計(jì)算區(qū)分度（一）用極端分組法計(jì)算區(qū)分度 3、整個(gè)試卷的區(qū)分度計(jì)算 試卷的區(qū)分度是指一份試卷總體對(duì)學(xué)生的區(qū)分程度。 其計(jì)算辦法為：將每道題目的區(qū)分度與滿分值相乘的積相加，然后將其總和除以試卷的滿分值，所得的商即為整個(gè)試卷的區(qū)分度。（二）用內(nèi)部一致性系數(shù)計(jì)算區(qū)分度（二）用內(nèi)部一致性系數(shù)計(jì)算區(qū)分度 極端分組法分析通常只在教師編制的課堂測(cè)

39、繪極端分組法分析通常只在教師編制的課堂測(cè)繪中使用。在標(biāo)準(zhǔn)化的或大規(guī)模的測(cè)驗(yàn)中，多采中使用。在標(biāo)準(zhǔn)化的或大規(guī)模的測(cè)驗(yàn)中，多采用相關(guān)法分析試題的內(nèi)部一致性。用相關(guān)法分析試題的內(nèi)部一致性。 由于測(cè)驗(yàn)總分屬于連續(xù)變量，測(cè)驗(yàn)項(xiàng)目（試題）由于測(cè)驗(yàn)總分屬于連續(xù)變量，測(cè)驗(yàn)項(xiàng)目（試題）多屬二分稱名變量（對(duì)、錯(cuò)或通過、不通過），多屬二分稱名變量（對(duì)、錯(cuò)或通過、不通過），所以，用相關(guān)法計(jì)算區(qū)分度時(shí)，多采用點(diǎn)二列所以，用相關(guān)法計(jì)算區(qū)分度時(shí)，多采用點(diǎn)二列相關(guān)、二列相關(guān)、相關(guān)、二列相關(guān)、系數(shù)等方法計(jì)算相關(guān)系數(shù)。系數(shù)等方法計(jì)算相關(guān)系數(shù)。P80P80頁(yè)第頁(yè)第1414題題某學(xué)科測(cè)驗(yàn)，某學(xué)科測(cè)驗(yàn)，1010名被試得分情況如表名被試

40、得分情況如表3-203-20所示：所示： 被試被試題目題目01 02 03 04 05 06 07 08 09 10123456782 2 0 2 0 0 2 0 2 20 2 2 0 2 0 0 2 0 20 0 2 2 2 0 2 0 0 00 2 0 0 2 0 0 2 2 05 7 4 6 6 2 4 5 3 46 5 5 4 7 1 6 2 4 511 14 9 10 16 5 12 8 10 1310 16 8 12 15 6 15 11 9 8P80P80頁(yè)第頁(yè)第1414題題某學(xué)科測(cè)驗(yàn)，某學(xué)科測(cè)驗(yàn)，1010名被試得分情況如表名被試得分情況如表3-203-20所示：所示： 1 1、

41、計(jì)算第、計(jì)算第1 1、5 5題的難度與區(qū)分度；題的難度與區(qū)分度； 2 2、用高低分組法計(jì)算第、用高低分組法計(jì)算第2 2、6 6的難度與的難度與區(qū)分度。區(qū)分度。 3 3、計(jì)算該測(cè)驗(yàn)的信度。、計(jì)算該測(cè)驗(yàn)的信度。P80P80頁(yè)第頁(yè)第1414題題某學(xué)科測(cè)驗(yàn)，某學(xué)科測(cè)驗(yàn)，1010名被試得分情況如表名被試得分情況如表3-203-20所示：所示： 被試被試題目題目01 02 03 04 05 06 07 08 09 10123456782 2 0 2 0 0 2 0 2 20 2 2 0 2 0 0 2 0 20 0 2 2 2 0 2 0 0 00 2 0 0 2 0 0 2 2 05 7 4 6 6 2

42、 4 5 3 46 5 5 4 7 1 6 2 4 511 14 9 10 16 5 12 8 10 1310 16 8 12 15 6 15 11 9 8總分總分34 48 30 36 50 14 41 30 30 34P80P80頁(yè)第頁(yè)第1414題題某學(xué)科測(cè)驗(yàn)，某學(xué)科測(cè)驗(yàn)，1010名被試得分情況如表名被試得分情況如表3-203-20所示：所示： 被試被試題目題目01 02 03 04 05 06 07 08 09 10152 2 0 2 0 0 2 0 2 25 7 4 6 6 2 4 5 3 4總分總分34 48 30 36 50 14 41 30 30 341、計(jì)算第、計(jì)算第1、5題的難度與區(qū)分度；題的難度與區(qū)分度； P1=R/N=6/10=0.6；P5=4.6/7=(假定這道題的滿分為7分) 被試被試題目題目01 02 03 04 05 06 07 08 09 10152 2 0 2 0 0 2 0 2 25 7 4 6 6 2 4 5 3 4總分總分34 48 30 36 50 14 41 30 30 345 . 08 . 981.9410/ )3 . 67 .203 .153 . 137 . 43 .1327 . 0(5