測(cè)驗(yàn)信度與效度分析 全國(guó)獲獎(jiǎng)

特殊兒童檢測(cè)測(cè)驗(yàn)的信度與效度分析——測(cè)驗(yàn)的效度現(xiàn)在我們復(fù)習(xí)！我的測(cè)驗(yàn)應(yīng)該做到既準(zhǔn)確也精確。復(fù)習(xí)：怎樣才能做到測(cè)驗(yàn)的準(zhǔn)確性與精確性？信度保證了測(cè)驗(yàn)結(jié)果的穩(wěn)定，但不能保證測(cè)驗(yàn)的精確。復(fù)習(xí)：準(zhǔn)確與精確怎樣用信度和效度來(lái)表示？信度保證了測(cè)驗(yàn)結(jié)果的穩(wěn)定，但不能保證測(cè)驗(yàn)的精確。復(fù)習(xí)：信度與效度的組合類(lèi)型真實(shí)的能力測(cè)驗(yàn)分?jǐn)?shù)的能力測(cè)量的精度有效測(cè)到的能力測(cè)量的缺陷（沒(méi)有沒(méi)到的能力）測(cè)量的污染（虛假的測(cè)量）雖然有三個(gè)概念，但是是從不同的方面來(lái)說(shuō)明效度的內(nèi)涵。一.

效度的概念指所測(cè)量的與所要測(cè)量的心理特點(diǎn)之間符合的程度。指一個(gè)心理測(cè)驗(yàn)的準(zhǔn)確性。指一個(gè)測(cè)驗(yàn)或量表實(shí)際能測(cè)出其所要測(cè)的心理特質(zhì)的程度。效度是一個(gè)復(fù)雜的概念，要想把它理解好得多思考。一.效度的概念--對(duì)效度概念的正確理解效度是一個(gè)相對(duì)的概念。這種相對(duì)性表現(xiàn)在：效度是相對(duì)于一定的測(cè)量目的而言的。心理特質(zhì)是較隱蔽的特性，只能通過(guò)他的行為表現(xiàn)來(lái)進(jìn)行推測(cè)。測(cè)量只能達(dá)到某種程度的準(zhǔn)確。效度是測(cè)量的隨機(jī)誤差和系統(tǒng)誤差的綜合反映。任一誤差的存在，測(cè)量的效度都會(huì)受到影響判斷一個(gè)測(cè)量是否有效要從多方面收集證據(jù)Sv表示真實(shí)方差，Sx表示總方差。一.效度的概念—效度的操作定義在一組測(cè)量中，與測(cè)量目標(biāo)有關(guān)的真實(shí)方差（或稱有效方差，由所要測(cè)量的變因引起的有效變異）與總方差(實(shí)得變異數(shù))的比率，即你理解信度和效度的關(guān)系了嗎？二、效度和信度的關(guān)系信度是效度的必要而非充分條件效度是受信度制約的

效度高必然信度高，而信度高并不一定保證效度高，說(shuō)明信度高只是效度高的必然條件，并不是效度高的充分條件。

信度系數(shù)的平方根是效度系數(shù)的最高限度，一個(gè)測(cè)驗(yàn)的效度總是受它的信度所制約。效度信度這是效度的三個(gè)類(lèi)別。三.效度的類(lèi)型及評(píng)估方法內(nèi)容效度構(gòu)想效度效標(biāo)效度核心概念是適用與代表。三.效度的類(lèi)型及評(píng)估方法—內(nèi)容效度的概念指的是項(xiàng)目對(duì)欲測(cè)的內(nèi)容或行為范圍的取樣的適當(dāng)程度。測(cè)驗(yàn)題目對(duì)有關(guān)內(nèi)容或行為取樣的適用性，從而確定測(cè)驗(yàn)是否是所欲測(cè)量的行為領(lǐng)域的代表性取樣。定義：并不是所有測(cè)驗(yàn)都具備這些特征。三.效度的類(lèi)型及評(píng)估方法—內(nèi)容效度的條件所謂內(nèi)容范圍可以是具體知識(shí)或技能，也可以是復(fù)雜的行為。要對(duì)所測(cè)量的心理特性有個(gè)明確的概念，并劃定出哪些行為與這心理特性有關(guān)。測(cè)驗(yàn)題目必須要有典型性，是測(cè)驗(yàn)內(nèi)容的核心部分和重要部分。要確定好內(nèi)容范圍，并使測(cè)驗(yàn)的全部項(xiàng)目均在此范圍內(nèi)測(cè)驗(yàn)題目應(yīng)是所界定的內(nèi)容范圍的代表性取樣測(cè)驗(yàn)要具備較好的內(nèi)容效度必須滿足兩個(gè)條件：這三種方法可以有選擇地使用或一起使用。三.效度的類(lèi)型及評(píng)估方法—內(nèi)容效度的評(píng)估專家判斷法定義好內(nèi)容總體，并描繪出有關(guān)知識(shí)與技能的輪廓；劃分細(xì)綱目，并根據(jù)重要性規(guī)劃好各個(gè)綱目的加權(quán)比例，作出盡可能詳細(xì)的描述；確定每道題所測(cè)的知識(shí)和技能，將自己的分類(lèi)與測(cè)驗(yàn)編制的綱目作比較；制訂評(píng)定量表，從各方面對(duì)測(cè)驗(yàn)作出評(píng)定。統(tǒng)計(jì)分析法復(fù)本法出了描述性語(yǔ)言外，內(nèi)容效度的確定也可采用一些統(tǒng)計(jì)分析方法，符合程度越高越能反映測(cè)驗(yàn)的內(nèi)容效度。內(nèi)容效度可由一組被試在獨(dú)立取得自同樣內(nèi)容范圍的兩個(gè)測(cè)驗(yàn)復(fù)本上得分相關(guān)來(lái)作數(shù)量的估計(jì)。再測(cè)法也可用于內(nèi)容效度的評(píng)估，被試學(xué)習(xí)某種知識(shí)之前作一次測(cè)驗(yàn)，在學(xué)過(guò)該知識(shí)后再作同樣的測(cè)驗(yàn)。若成績(jī)顯著提高，則說(shuō)明所測(cè)內(nèi)容正是被試新近所學(xué)的內(nèi)容，進(jìn)而證明該測(cè)驗(yàn)對(duì)這部分內(nèi)容而言具有較高的內(nèi)容效度。經(jīng)驗(yàn)推測(cè)法通過(guò)實(shí)踐來(lái)檢驗(yàn)效度。如果通過(guò)率是隨著年齡的增加而增加，就可以推測(cè)該測(cè)驗(yàn)有內(nèi)容效度。內(nèi)容效度應(yīng)用廣泛，但也有許多局限性。三.效度的類(lèi)型及評(píng)估方法—內(nèi)容效度的應(yīng)用表面效度內(nèi)容效度測(cè)驗(yàn)要求表面效度是由外行對(duì)測(cè)驗(yàn)作表面上的檢查確定，它不反映測(cè)驗(yàn)實(shí)際測(cè)量的東西，只是指測(cè)驗(yàn)表面上看來(lái)好像是所要測(cè)的東西。內(nèi)容效度則考慮到題目與測(cè)量目的和內(nèi)容總體之間邏輯的微妙關(guān)系表面效度是一個(gè)必須考慮的特性，最高作為的測(cè)驗(yàn)通常要求有較高的表面效度；典型行為測(cè)驗(yàn)要求有較低的表面效度編制測(cè)驗(yàn)考慮的基本方面對(duì)標(biāo)準(zhǔn)參照測(cè)驗(yàn)更為重要評(píng)價(jià)教育成就測(cè)驗(yàn)和職業(yè)選拔測(cè)驗(yàn)考察內(nèi)容效度與表面效度的關(guān)系缺乏可靠的數(shù)量指標(biāo)妨礙測(cè)驗(yàn)間的相互比較內(nèi)容效度的應(yīng)用核心概念是結(jié)構(gòu)與解釋。三.效度的類(lèi)型及評(píng)估方法—構(gòu)想效度的概念指測(cè)驗(yàn)?zāi)軌驕y(cè)量到理論上的構(gòu)想和特質(zhì)的程度。測(cè)驗(yàn)的結(jié)果是否能證實(shí)或解釋某一理論的假設(shè)、術(shù)語(yǔ)或構(gòu)想，解釋的程度如何。定義：想確定一個(gè)測(cè)驗(yàn)有構(gòu)想效度是很難的。三.效度的類(lèi)型及評(píng)估方法—構(gòu)想效度的特點(diǎn)數(shù)值大小證實(shí)性指標(biāo)復(fù)雜其大小首先取決于事先假定的心理特質(zhì)理論當(dāng)實(shí)際測(cè)量的資料無(wú)法證實(shí)我們的理論假設(shè)時(shí)，并不一定就表明該測(cè)驗(yàn)結(jié)構(gòu)效不高，因?yàn)檫€有可能是理論假設(shè)不成立，或者該實(shí)驗(yàn)設(shè)計(jì)不能對(duì)該假設(shè)作適當(dāng)?shù)臋z驗(yàn)等情況，當(dāng)然這就使得結(jié)構(gòu)效度的獲取更為困難。結(jié)構(gòu)效度通過(guò)測(cè)量什么、不測(cè)量什么的證據(jù)累積起來(lái)給以確定，因而不可能有單一的數(shù)量指標(biāo)來(lái)描述結(jié)構(gòu)效度。結(jié)構(gòu)效度主要應(yīng)用于智力測(cè)驗(yàn)、人格測(cè)驗(yàn)等一些心理測(cè)驗(yàn)方面。都是一種假設(shè)和驗(yàn)證的方法。三.效度的類(lèi)型及評(píng)估方法—構(gòu)想效度的確定方法提出理論假設(shè)，并把這一假設(shè)分解成一些細(xì)小的綱目，以解釋被試在測(cè)驗(yàn)上的表現(xiàn)。依據(jù)理論框架，推演出有關(guān)測(cè)驗(yàn)成績(jī)的假設(shè)。用邏輯和實(shí)證的方法來(lái)驗(yàn)證假設(shè)。這個(gè)關(guān)系圖你看明白了嗎？三.效度的類(lèi)型及評(píng)估方法—構(gòu)想效度的估計(jì)方法構(gòu)想效度的估計(jì)方法測(cè)驗(yàn)內(nèi)法測(cè)驗(yàn)間的相互比較相容效度區(qū)分效度因素效度效標(biāo)關(guān)聯(lián)法實(shí)驗(yàn)法和觀察法證實(shí)測(cè)驗(yàn)內(nèi)法就是對(duì)測(cè)驗(yàn)本身的分析。三.效度的類(lèi)型及評(píng)估方法 —構(gòu)想效度的估計(jì)方法

—測(cè)驗(yàn)內(nèi)法測(cè)驗(yàn)的內(nèi)容效度可以作為構(gòu)思效度的證據(jù)；測(cè)驗(yàn)的同質(zhì)性指標(biāo)可以推斷測(cè)驗(yàn)是測(cè)量單一特質(zhì)還是測(cè)量多種特質(zhì)，從而為評(píng)估測(cè)驗(yàn)構(gòu)思效度提供證據(jù)；分析被試對(duì)題目的反應(yīng)特點(diǎn)也可以作為構(gòu)思效度的證據(jù)。測(cè)驗(yàn)間法就是對(duì)測(cè)驗(yàn)之間進(jìn)行分析。三.效度的類(lèi)型及評(píng)估方法 —構(gòu)想效度的估計(jì)方法

—測(cè)驗(yàn)間法相容效度通過(guò)分析幾個(gè)測(cè)驗(yàn)間的相互關(guān)系，找出其共同之處，進(jìn)而推斷這些測(cè)驗(yàn)測(cè)量的特質(zhì)是什么，也可以確定這些測(cè)驗(yàn)的構(gòu)思效度。相容效度是構(gòu)思效度的一個(gè)證據(jù)。區(qū)分效度在一項(xiàng)測(cè)驗(yàn)中，如果你可以在統(tǒng)計(jì)上證明那些理應(yīng)與你的建構(gòu)不存在相關(guān)性的指標(biāo)確實(shí)同建構(gòu)沒(méi)有相關(guān)，那么這項(xiàng)測(cè)驗(yàn)便具有區(qū)分效度。因素效度通過(guò)對(duì)一組測(cè)驗(yàn)進(jìn)行因素分析，找到影響測(cè)驗(yàn)分?jǐn)?shù)的共同因素，每個(gè)測(cè)驗(yàn)在共同因素上負(fù)荷量即每個(gè)測(cè)驗(yàn)與共同因素的相關(guān)，稱作測(cè)驗(yàn)的因素效度。效標(biāo)關(guān)聯(lián)法就是把測(cè)驗(yàn)各外在特質(zhì)進(jìn)行分析。三.效度的類(lèi)型及評(píng)估方法 —構(gòu)想效度的估計(jì)方法

—效標(biāo)關(guān)聯(lián)法一個(gè)測(cè)驗(yàn)若效標(biāo)度理想，那么該測(cè)驗(yàn)所預(yù)測(cè)的效標(biāo)的性質(zhì)和種類(lèi)就可以作為分析測(cè)驗(yàn)構(gòu)思效度的指標(biāo)。另一種證實(shí)構(gòu)思效度的方法是心理特質(zhì)的發(fā)展變化。測(cè)驗(yàn)內(nèi)法就是對(duì)測(cè)驗(yàn)本身的分析。三.效度的類(lèi)型及評(píng)估方法 —構(gòu)想效度的估計(jì)方法

—實(shí)驗(yàn)法和觀察法證實(shí)觀察實(shí)驗(yàn)前和實(shí)驗(yàn)后分?jǐn)?shù)的差異是驗(yàn)證構(gòu)思效度的方法。這是我們選擇測(cè)驗(yàn)的依據(jù)。三.效度的類(lèi)型及評(píng)估方法—構(gòu)想效度的評(píng)價(jià)優(yōu)點(diǎn)構(gòu)想效度促使研究者把著眼點(diǎn)放在提出假設(shè)上、檢驗(yàn)假設(shè)上，使得測(cè)驗(yàn)成為理論研究的重要工具，而不再只是實(shí)際決策的輔助工具，從而使測(cè)驗(yàn)有了更廣闊的發(fā)展情景。缺點(diǎn)有些構(gòu)想概論模糊，沒(méi)有一致的定義，確定效度時(shí)沒(méi)有明確的操作步驟，沒(méi)有單一的數(shù)量指標(biāo)來(lái)描述有效程度。效標(biāo)效度有兩個(gè)名稱：效標(biāo)效度、實(shí)證效度。三.效度的類(lèi)型及評(píng)估方法—效標(biāo)效度的概念測(cè)驗(yàn)預(yù)測(cè)個(gè)體在某種情境下行為表現(xiàn)的有效性程度。被預(yù)測(cè)的行為是檢驗(yàn)效度的標(biāo)準(zhǔn)，簡(jiǎn)稱效標(biāo)。由于這種效度是看測(cè)驗(yàn)對(duì)效標(biāo)預(yù)測(cè)如何，所以叫效標(biāo)效度。這種效度需在實(shí)踐中檢驗(yàn)，所以又稱為實(shí)證效標(biāo)。定義：一個(gè)好的測(cè)驗(yàn)確定的效標(biāo)必需具備這四個(gè)條件。三.效度的類(lèi)型及評(píng)估方法—效標(biāo)效度的條件（1）必須能最有效地反映測(cè)驗(yàn)的目標(biāo)，即效標(biāo)測(cè)量本身必須有效；（2）效標(biāo)必須具有較高的信度，穩(wěn)定可靠，不隨時(shí)間等因素變化；（3）效標(biāo)可以客觀地加以測(cè)量，可用數(shù)據(jù)或等級(jí)來(lái)表示；（4）效標(biāo)的測(cè)量的方法很簡(jiǎn)單，省時(shí)省力，經(jīng)濟(jì)實(shí)用。詳細(xì)的效標(biāo)分析請(qǐng)看下一頁(yè)分析。三.效度的類(lèi)型及評(píng)估方法—常用的效標(biāo)常用效標(biāo)學(xué)業(yè)成就實(shí)際工作表現(xiàn)特殊訓(xùn)練成績(jī)精神病診斷等級(jí)評(píng)定效標(biāo)團(tuán)體的比較先前有效的測(cè)驗(yàn)這些常用的效標(biāo)你一定要記住了。三.效度的類(lèi)型及評(píng)估方法—常用的效標(biāo)學(xué)業(yè)成就實(shí)際工作表現(xiàn)是最滿意的效標(biāo)測(cè)量，為一般智力測(cè)驗(yàn)、人格測(cè)驗(yàn)和一些能力傾向測(cè)驗(yàn)的效標(biāo)特殊訓(xùn)練成績(jī)是能力傾向測(cè)驗(yàn)常用的效標(biāo)，其中也包括中間效標(biāo)和最后效標(biāo)的問(wèn)題精神病診斷等級(jí)評(píng)定是觀察者根據(jù)測(cè)驗(yàn)欲測(cè)量的心理特質(zhì)在被試身上的表現(xiàn)而作出的一種個(gè)人判斷效標(biāo)團(tuán)體的比較即找出兩個(gè)在效標(biāo)表現(xiàn)上有差別的團(tuán)體，比較他們?cè)跍y(cè)驗(yàn)分?jǐn)?shù)上的差別先前有效的測(cè)驗(yàn)一個(gè)新測(cè)驗(yàn)與先前有效的測(cè)驗(yàn)的相關(guān)也經(jīng)常作為效度檢驗(yàn)的證據(jù)詳細(xì)的效標(biāo)分析請(qǐng)看下一頁(yè)分析。三.效度的類(lèi)型及評(píng)估方法—效標(biāo)效度的表示方法相關(guān)法區(qū)分法命中率法預(yù)期表法功利率法不同測(cè)驗(yàn)使用不同的方法進(jìn)行分析。三.效度的類(lèi)型及評(píng)估方法—效標(biāo)效度的表示方法相關(guān)法以皮爾遜積差相關(guān)系數(shù)來(lái)表示的，主要反映測(cè)驗(yàn)分?jǐn)?shù)與效標(biāo)測(cè)量的相關(guān)。區(qū)分法檢驗(yàn)測(cè)驗(yàn)分?jǐn)?shù)能否有效地區(qū)分由效標(biāo)所定義的團(tuán)體的一種方法。命中率法當(dāng)測(cè)驗(yàn)用來(lái)做取舍的依據(jù)時(shí)，用其正確決定的比例作為效度指標(biāo)的一種方法。預(yù)期表法一種雙向表格，預(yù)測(cè)分?jǐn)?shù)排在表的左邊，效標(biāo)排在表的頂端。用對(duì)角線分?jǐn)?shù)區(qū)分。功利率法使用測(cè)驗(yàn)所花掉的費(fèi)用與得到的利益進(jìn)行比較，此種效度指標(biāo)叫功利率。詳細(xì)的效標(biāo)分析請(qǐng)看下一頁(yè)分析。四.影響效度的因素測(cè)驗(yàn)本身測(cè)驗(yàn)實(shí)施中的干擾樣本團(tuán)體的性質(zhì)效標(biāo)的性質(zhì)詳細(xì)的效標(biāo)分析請(qǐng)看