信效度分析課件

信度信度主要是指測量結(jié)果的可靠性、一致性和穩(wěn)定性，即測驗(yàn)結(jié)果是否反映了被測者的穩(wěn)定的、一貫性的真實(shí)特征。信度系數(shù)大部分信度指標(biāo)都以相關(guān)系數(shù)（r）表示，即用同一樣本所得到的兩組資料的相關(guān)系數(shù)作為測量一致性的指標(biāo)，成為信度系數(shù)。信度系數(shù)高表明測量的一致性程度高，測量誤差少。理想的狀態(tài)是：r=1。一般來說，信度系大于等于0.8，即可認(rèn)為該測量是達(dá)到了足夠的信度。信度信度主要是指測量結(jié)果的可靠性、一致性和穩(wěn)定性，即測驗(yàn)結(jié)果1一.重測信度同一種試驗(yàn)，對同一群受試者，前后測試兩次，再根據(jù)受試者兩次測驗(yàn)分?jǐn)?shù)計(jì)算其相關(guān)系數(shù)，即得出再測信度。重測信度所考察的誤差來源是時間的變化所帶來的隨機(jī)影響。在評估重測信度時，必須注意重測間隔的時間。對于人格測驗(yàn)，重測間隔在兩周到6個月之間比較合適。在進(jìn)行重測信度的評估時，還應(yīng)注意以下兩個重要問題：⑴重測信度一般只反映由隨機(jī)因素導(dǎo)致的變化，而不反映被試行為的長久變化。⑵不同的行為受隨機(jī)誤差影響不同。一.重測信度同一種試驗(yàn)，對同一群受試者，前后測試兩次，再根據(jù)2案例某空間性向測驗(yàn)有20題單選題，分別在十月與第二年四月施測同一組10名學(xué)生，以下是測驗(yàn)結(jié)果：PersonABCDEFGHIJOct18165131516125810Apr18186161716145711

案例某空間性向測驗(yàn)有20題單選題，分別在十月與第二年四月施測3Spss操作

1.將數(shù)據(jù)導(dǎo)入spss先將數(shù)據(jù)輸入excel，打開spss，【文件】→【打開文本數(shù)據(jù)】Spss操作1.將數(shù)據(jù)導(dǎo)入spss42.

按【Analyze】→【Correlate】→【Bivariate…】2.

按【Analyze】→【Correlate】→【Bi53.將左邊兩變項(xiàng)選入右邊「Variables」內(nèi)，在「CorrelationCoefficients」方盒內(nèi)選取「□Pearson」；在「TestofSignificance」方盒內(nèi)選取「□Two-tailed」；勾選最下面的「□Flagsignificantcorrelations」3.將左邊兩變項(xiàng)選入右邊「Variables」內(nèi)，在「Co64.輸出結(jié)果從表格可以看出，信度系數(shù)為0.972，遠(yuǎn)大于0.8，說明該量表信度高4.輸出結(jié)果從表格可以看出，信度系數(shù)為0.972，遠(yuǎn)大于0.7二、復(fù)本信度如果一套測驗(yàn)有兩種以上的復(fù)本，則可交替使用，根據(jù)一個受試者接受兩種復(fù)本測驗(yàn)的得分計(jì)算其相關(guān)系數(shù)，即可得復(fù)本信度。復(fù)本類似于考試中得A、B卷，如果一個人在A卷和B卷的得分相同，就說明考題具有信度；如果兩者差異很大，則缺乏信度。復(fù)本信度的主要優(yōu)點(diǎn)在于：⑴能夠避免重測信度的一些問題，如記憶效果、練習(xí)效應(yīng)等；⑵適用于進(jìn)行長期追蹤研究或調(diào)查某些干涉變量對測驗(yàn)成績影響；⑶減少了輔導(dǎo)或作弊的可能性?！顝?fù)本信度的局限性在于：⑴如果測量的行為易受練習(xí)的影響，則復(fù)本信度只能減少而不能消除這種影響；⑵有些測驗(yàn)的性質(zhì)會由于重復(fù)而發(fā)生改變；⑶有些測驗(yàn)很難找到合適的復(fù)本。二、復(fù)本信度如果一套測驗(yàn)有兩種以上的復(fù)本，則可交替使用，根據(jù)8案例某自我概念量表，有20題是非題，題本A與B分別施測同一組10個人，分?jǐn)?shù)愈高表示愈具有正向自我概念，以下是施測結(jié)果：PersonABCDEFGHIJFormA161214109111391612FormB1512151010121491613

案例某自我概念量表，有20題是非題，題本A與B分別施測同一9Spss操作（與重測信度操作相同）1.

將數(shù)據(jù)導(dǎo)入spss2.

按【分析】→【相關(guān)】→【雙變量】3.將左邊兩變項(xiàng)選入右邊「變量」內(nèi)，在「相關(guān)系數(shù)」方盒內(nèi)選取「□Pearson」；在「顯著性檢驗(yàn)」方盒內(nèi)選取「□雙尾檢驗(yàn)」；勾選最下面的「□標(biāo)記顯著性相關(guān)」4.輸出結(jié)果Spss操作（與重測信度操作相同）1.將數(shù)據(jù)導(dǎo)入spss10從表格可以看出，信度系數(shù)為0.963，遠(yuǎn)大于0.8，反映了這兩個測驗(yàn)復(fù)本A、B在內(nèi)容上的等值性程度高。從表格可以看出，信度系數(shù)為0.963，遠(yuǎn)大于0.8，反映了這11三、折半信度折半信度法是將調(diào)查項(xiàng)目分為兩半，計(jì)算兩半得分的相關(guān)系數(shù)，進(jìn)而估計(jì)整個量表的信度。折半信度屬于內(nèi)在一致性系數(shù)，測量的是兩半題項(xiàng)得分間的一致性。這種方法一般不適用于事實(shí)式問卷（如年齡與性別無法相比），常用于態(tài)度、意見式問卷的信度分析。在問卷調(diào)查中，態(tài)度測量最常見的形式是5級李克特（Likert）量表。進(jìn)行折半信度分析時，如果量表中含有反意題項(xiàng)，應(yīng)先將反意題項(xiàng)的得分作逆向處理，以保證各題項(xiàng)得分方向的一致性，然后將全部題項(xiàng)按奇偶或前后分為盡可能相等的兩半，計(jì)算二者的相關(guān)系數(shù)。三、折半信度折半信度法是將調(diào)查項(xiàng)目分為兩半，計(jì)算兩半得分的相12案例6題的隨堂測驗(yàn)施測5位學(xué)生，Y表示答對，N表示答錯，以下是測驗(yàn)結(jié)果：PersonItem1Item2Item3Item4Item5Item6JoeYYYYNYSamYNNYNYSueYYNYYYPegNYNNYNGilNYNNYY案例6題的隨堂測驗(yàn)施測5位學(xué)生，Y表示答對，N表示答錯，以13Spss操作1.輸入數(shù)據(jù)將Y用1替換，N用0替換。Spss操作1.輸入數(shù)據(jù)142.計(jì)算奇數(shù)題與偶數(shù)題的和

按【轉(zhuǎn)換】→【計(jì)算變量】圖為奇數(shù)和，偶數(shù)和亦然2.計(jì)算奇數(shù)題與偶數(shù)題的和

按【轉(zhuǎn)換】→【計(jì)算變15結(jié)束后便會在spssDataEditor對話框中出現(xiàn)奇數(shù)題和偶數(shù)題的和。結(jié)束后便會在spssDataEditor對話框中出現(xiàn)奇16

3.按【分析】→【相關(guān)】→【雙變量】

3.按【分析】→【相關(guān)】→【雙變量】

174.輸出結(jié)果4.輸出結(jié)果18

或是在輸入數(shù)據(jù)后，

按【分析】→【度量】→【可靠性分析】

或是在輸入數(shù)據(jù)后，

按【分析】→【度量】→【可靠性分析】

19輸出結(jié)果輸出結(jié)果20四、一致性信度四、一致性信度21案例數(shù)據(jù)案例數(shù)據(jù)22Spss操作過程1.計(jì)算α系數(shù)【分析】

【度量】

【可靠性分析】Spss操作過程1.計(jì)算α系數(shù)23輸出結(jié)果結(jié)果

該案例的α值為0.731，嚴(yán)格說來α值要在0.8以上，那么就需要進(jìn)行調(diào)試，試著讓問卷的信度更高。輸出結(jié)果結(jié)果

該案例的α值為0.731，24分析度量可靠性分析分析度量可靠性分析25

結(jié)果

。在第二個表格的最后一列，數(shù)值代表如果刪除這個問題，剩余問題的α值。當(dāng)該值不降反增，就意味著這個問題是沒有信度的，可以上去，從而增加問卷的信度。

可以從表中看出第1、8、10項(xiàng)對應(yīng)的值不降反增，即大于0.731，所以可以刪去這三項(xiàng)

結(jié)果

。在第二個表格的最后一列，數(shù)值代表如果刪除這個問題，26刪除無信度的1

、8、10項(xiàng)后，再次計(jì)算α值刪除無信度的1、8、10項(xiàng)后，再次計(jì)算α值27

結(jié)果

當(dāng)刪除了第1、8、10這3項(xiàng)后，α系數(shù)已經(jīng)達(dá)到0.8了，這說明該問卷的信度已經(jīng)足夠高了。

雖然從第二個表格的最后一列數(shù)據(jù)來看，還有改進(jìn)的空間，但是已不需要再刪除項(xiàng)了

結(jié)果

28效度效度即有效性，它是指測量工具或手段能夠準(zhǔn)確測出所需測量的事物的程度。測量結(jié)果與要考察的內(nèi)容越吻合，則效度越高;反之，則效度越低。效度分為三種類型:內(nèi)容效度、準(zhǔn)則效度和結(jié)構(gòu)效度。效度效度即有效性，它是指測量工具或手段能夠準(zhǔn)確測出所需測量的29一、內(nèi)容效度內(nèi)容效度又稱表面效度或邏輯效度，它是指所設(shè)計(jì)的題項(xiàng)能否代表所要測量的內(nèi)容或主題。對內(nèi)容效度常采用邏輯分析與統(tǒng)計(jì)分析相結(jié)合的方法進(jìn)行評價(jià)。邏輯分析一般由研究者或?qū)＜以u判所選題項(xiàng)是否“看上去”符合測量的目的和要求。統(tǒng)計(jì)分析主要采用單項(xiàng)與總和相關(guān)分析法獲得評價(jià)結(jié)果，即計(jì)算每個題項(xiàng)得分與題項(xiàng)總分的相關(guān)系數(shù)，根據(jù)相關(guān)是否顯著判斷是否有效。若量表中有反意題項(xiàng)，應(yīng)將其逆向處理后再計(jì)算總分。一、內(nèi)容效度內(nèi)容效度又稱表面效度或邏輯效度，它是指所設(shè)計(jì)的題30二、準(zhǔn)則效度

準(zhǔn)則效度又稱為效標(biāo)效度或預(yù)測效度。準(zhǔn)則效度分析是根據(jù)已經(jīng)得到確定的某種理論，選擇一種指標(biāo)或測量工具作為準(zhǔn)則（效標(biāo)），分析問卷題項(xiàng)與準(zhǔn)則的聯(lián)系。若二者相關(guān)顯著，或者問卷題項(xiàng)對準(zhǔn)則的不同取值、特性表現(xiàn)出顯著差異，則為有效的題項(xiàng)。評價(jià)準(zhǔn)則效度的方法是相關(guān)分析或差異顯著性檢驗(yàn)。在調(diào)查問卷的效度分析中，選擇一個合適的準(zhǔn)則往往十分困難，使這種方法的應(yīng)用受到一定限制。二、準(zhǔn)則效度準(zhǔn)則效度又稱為效標(biāo)效度或預(yù)測31

三、結(jié)構(gòu)效度

結(jié)構(gòu)效度是指測量結(jié)果體現(xiàn)出來的某種結(jié)構(gòu)與測值之間的對應(yīng)程度。結(jié)構(gòu)效度分析所采用的方法是因子分析。有的學(xué)者認(rèn)為，效度分析最理想的方法是利用因子分析測量量表或整個問卷的結(jié)構(gòu)效度。因子分析的主要功能是從量表全部變量（題項(xiàng)）中提取一些公因子，各公因子分別與某一群特定變量高度關(guān)聯(lián)，這些公因子即代表了量表的基本結(jié)構(gòu)。通過因子分析可以考察問卷是否能夠測量出研究者設(shè)計(jì)問卷時假設(shè)的某種結(jié)構(gòu)。在因子分析的結(jié)果中，用于評價(jià)結(jié)構(gòu)效度的主要指標(biāo)有累積貢獻(xiàn)率、共同度和因子負(fù)荷。累積貢獻(xiàn)率反映公因子對量表或問卷的累積有效程度，共同度反映由公因子解釋原變量的有效程度，因子載荷反映原變量與某個公因子的相關(guān)程度

三、結(jié)構(gòu)效度

結(jié)構(gòu)效度是指測量結(jié)果體現(xiàn)出來的某種結(jié)構(gòu)與測32Spss操作1.沿用一致性信度分析里的數(shù)據(jù)，將沒有信度的Q1、Q8、Q10三個變量刪去2.按【分析】→【降維】→【因子分析】

Spss操作1.沿用一致性信度分析里的數(shù)據(jù)，將沒有信度的Q133因子分析因子分析34因子分析因子分析353.結(jié)果因子分析之前，首先對原始數(shù)據(jù)進(jìn)行KMO檢驗(yàn)和barlett球形檢驗(yàn)，KMO值>0.5，（barlett球形檢驗(yàn)的統(tǒng)計(jì)量的顯著性概率）p值<0.05，問卷才有結(jié)構(gòu)效度，才能進(jìn)行因子分析。

從表中數(shù)據(jù)可以看出，p值=0.02<0.05，KMO值=0.672>0.5，通過了檢驗(yàn)。3.結(jié)果因子分析之前，首先對原始數(shù)據(jù)進(jìn)行36結(jié)果我們原始的數(shù)據(jù)有7個指標(biāo)，因?yàn)橹笜?biāo)畢竟不是完全相同的，我們把不完全相同的指標(biāo)強(qiáng)行歸為一類，必然會造成一些信息損失。在對數(shù)據(jù)的7個指標(biāo)歸類之后，對于Q2這個指標(biāo)的提取度，由原來的100%變?yōu)?0.1%，意味著損失了49.9%的信息。

一般認(rèn)為所有指標(biāo)的信息損失在40%以下，因子分析的效果才較好。結(jié)果我們原始的數(shù)據(jù)有7個指標(biāo)，因?yàn)橹笜?biāo)畢37結(jié)果理論上所有主成分的累積方差貢獻(xiàn)率要達(dá)到85%以上，意味著主成分就包含了原始數(shù)據(jù)85%以上的信息，信息損失少。在這個案例中，按照特征值大于1的原則，我們可以提取出兩個主成分