心理測量學：第二章 測量信度與隨機誤差控制

1、第二章第二章 測量信度與隨機誤差控制測量信度與隨機誤差控制 學習目標：學習目標：1.什么是信度什么是信度?信度與測量隨機誤差的關系？信度與測量隨機誤差的關系？2.信度的統計定義？信度的統計定義？3.描述信度的指標有哪些？描述信度的指標有哪些？4.分析測驗信度應注意哪些問題？分析測驗信度應注意哪些問題？5.信度的標準與作用？信度的標準與作用？6.經典測量理論信度系數的估計方法。經典測量理論信度系數的估計方法。7.提高測量信度的主要方法有哪些？提高測量信度的主要方法有哪些？第一節(jié)第一節(jié) 信度概述信度概述一、信度與測量誤差一、信度與測量誤差1.經典測量理論的假設經典測量理論的假設ETXTVIXVIE

2、 上上式中，式中，X為觀察分數，為觀察分數，T為一般真分數，為一般真分數，E為隨機為隨機誤差分數，誤差分數，V為目標真分數，為目標真分數，I為非目標真分數（系為非目標真分數（系統誤差）。統誤差）。 第一節(jié)第一節(jié) 信度的概述信度的概述一、信度與測量誤差一、信度與測量誤差2.信度的定義信度的定義測量追求的初步目標：測量追求的初步目標：T占占X的比例越大越好。的比例越大越好。測量追求的終極目標：測量追求的終極目標：V占占X的比例越大越好。的比例越大越好。第一節(jié)第一節(jié) 信度的概述信度的概述TXVIE 當當T占占X的比例很大時，那么測值就會是穩(wěn)定的。的比例很大時，那么測值就會是穩(wěn)定的。一般來說，穩(wěn)定的測

3、值是可靠的、可信的，因此，信一般來說，穩(wěn)定的測值是可靠的、可信的，因此，信度可被認為是測量結果的度可被認為是測量結果的穩(wěn)定性程度穩(wěn)定性程度。一、信度與測量誤差一、信度與測量誤差2.信度的定義信度的定義第一節(jié)第一節(jié) 信度的概述信度的概述信度（信度（reliability）是指在不同時間，使用同一測驗，）是指在不同時間，使用同一測驗，或者使用兩個不同項目的等值測驗，抑或在其他不同或者使用兩個不同項目的等值測驗，抑或在其他不同的測試條件下，對同一組被試實施兩次或多次測試所的測試條件下，對同一組被試實施兩次或多次測試所得分數的一致性。得分數的一致性。測驗信度表示測驗分數中個體差異可歸因于所測特測驗信度

4、表示測驗分數中個體差異可歸因于所測特質中質中“真實真實”差異的程度，以及可歸因于隨機誤差的差異的程度，以及可歸因于隨機誤差的程度。程度。二、信度的統計定義二、信度的統計定義1.經典測量理論假設的推論經典測量理論假設的推論ETXIVTEIVX222ETX222IVT2222EIVX2T第一節(jié)第一節(jié) 信度的概述信度的概述2.信度的統計定義信度的統計定義定義定義1：信度是被試團體真分數方差與實得分數方差之比：信度是被試團體真分數方差與實得分數方差之比2T2E2X2T2E2X22TXXXr定義定義2：信度是被試團體真分數與實得分數相關系數的平方：信度是被試團體真分數與實得分數相關系數的平方定義定義3：

5、信度是一個測驗：信度是一個測驗X（A卷）與它的任意一個平行測驗卷）與它的任意一個平行測驗（B卷）的相關系數卷）的相關系數2TXXXrXXXXr第一節(jié)第一節(jié) 信度的概述信度的概述三、描述信度的指標三、描述信度的指標1.經典測量理論的信度系數經典測量理論的信度系數信度系數是表示測量結果的穩(wěn)定性程度的指標。信度系數是表示測量結果的穩(wěn)定性程度的指標。記為：記為：第一節(jié)第一節(jié) 信度的概述信度的概述XXr信度系數的值域：信度系數的值域：0,1沒有百分之百可靠的測量，因此，沒有百分之百可靠的測量，因此，rXX=1只是理論只是理論上的值，實際當中是不存在的。上的值，實際當中是不存在的。？相關系數的值域是相關系

6、數的值域是-1,+1 ，信度系數的值域：，信度系數的值域：0,1，為什么？，為什么？1.經典測量理論的信度系數經典測量理論的信度系數（1）重測信度重測信度（test-retest coefficients），是指用同一個量表），是指用同一個量表對同一組被試施測兩次所得結果的一致性程度，其大小等于對同一組被試施測兩次所得結果的一致性程度，其大小等于同一組被試在兩次測驗上所得分數的相關系數。同一組被試在兩次測驗上所得分數的相關系數。（2）復本信度復本信度（alternative-form coefficients），是指兩個），是指兩個平行的測驗測量同一批被試所得結果的一致性程度，其大小平行的測驗

7、測量同一批被試所得結果的一致性程度，其大小等于同一批被試在兩個復本測驗上所得分數的相關系數。等于同一批被試在兩個復本測驗上所得分數的相關系數。（3）內部一致性系數內部一致性系數（internal consistency coefficients）也）也叫叫同質性信度同質性信度（homogeneity reliability），是指測驗內部所），是指測驗內部所有題目間的一致性程度，主要的計算方法有有題目間的一致性程度，主要的計算方法有KR20公式、公式、KR21公式、克龍巴赫公式、克龍巴赫系數，以及荷伊特信度等系數，以及荷伊特信度等 。第一節(jié)第一節(jié) 信度的概述信度的概述2.經典測量理論的測量標準

8、誤經典測量理論的測量標準誤 測量標準誤差測量標準誤差（standard error of measurement）是測量誤差的假設分布的標準差。用下列公式能夠是測量誤差的假設分布的標準差。用下列公式能夠容易地計算測量標準誤差：容易地計算測量標準誤差：第一節(jié)第一節(jié) 信度的概述信度的概述1tXXSEMSDr式中，式中，SDt表示測驗分數的標準差，表示測驗分數的標準差，rXX表示信度系數。表示信度系數。3.概化理論概化理論的概化系數的概化系數（generaliabilitycoefficients）4.IRT的測驗信息函數的測驗信息函數（test information function）四、分析測

9、驗信度應注意的問題四、分析測驗信度應注意的問題1.針對測驗類型選用恰當指標針對測驗類型選用恰當指標（1）傳統的信度概念適合于）傳統的信度概念適合于常模參照測驗常模參照測驗，這種，這種測驗的主要目的是為了區(qū)分個體在特定特征上所表測驗的主要目的是為了區(qū)分個體在特定特征上所表現出的差異性。個體在測驗分數中表現出的差異范現出的差異性。個體在測驗分數中表現出的差異范圍越大，該測驗的信度也就越高。圍越大，該測驗的信度也就越高。第一節(jié)第一節(jié) 信度的概述信度的概述（2）標準參照測驗（內容參照或領域參照測驗）標準參照測驗（內容參照或領域參照測驗）的目標是要的目標是要確定被試是否達到或未達到某個標準，從而將個體分

10、到不同的確定被試是否達到或未達到某個標準，從而將個體分到不同的組別：組別：“達標達標”和和“未達標未達標”。這種情況下，傳統的重測信度、。這種情況下，傳統的重測信度、復本信度以及內部一致性系數就不再適用。標準參照測驗可根復本信度以及內部一致性系數就不再適用。標準參照測驗可根據具體情況分別采用如下指標：據具體情況分別采用如下指標：適用于簡單的掌握與否的兩分決策，即所有的分類誤差適用于簡單的掌握與否的兩分決策，即所有的分類誤差都被認為同樣嚴重而不管它們離開臨界分數的距離。在都被認為同樣嚴重而不管它們離開臨界分數的距離。在這種情況下，可以使用平行型式進行再測，以便得出在這種情況下，可以使用平行型式進

11、行再測，以便得出在兩次測驗上得到相同決策的個體的百分比，進一步可算兩次測驗上得到相同決策的個體的百分比，進一步可算得得分類一致性系數分類一致性系數（coefficient of agreement）。）。 第一節(jié)第一節(jié) 信度的概述信度的概述不僅僅關心對掌握者和未掌握者的質的區(qū)分，同時也在不僅僅關心對掌握者和未掌握者的質的區(qū)分，同時也在分數連續(xù)體上描述了關于掌握和未掌握的量的差異。這分數連續(xù)體上描述了關于掌握和未掌握的量的差異。這類信度主要采用類信度主要采用K2(X,T)指標：指標： 第一節(jié)第一節(jié) 信度的概述信度的概述22222()(, )()TgxgSTn cKX TSXn c式中，式中， 、

12、 分別為被試總體在測驗上的真分數方差和觀測分別為被試總體在測驗上的真分數方差和觀測分數方差；分數方差； 、 分別為真分數和觀測分數的平均值；分別為真分數和觀測分數的平均值；ng為為測驗題目數，測驗題目數，c是以做對題目百分比表示的區(qū)分標準。是以做對題目百分比表示的區(qū)分標準。2TS2XSTXK2(X,T)值越大，說明觀測分與區(qū)分標準分數（劃界分數值越大，說明觀測分與區(qū)分標準分數（劃界分數）之間的差異代表真分數的對應差異量的可能性越大，）之間的差異代表真分數的對應差異量的可能性越大，因而觀測分與劃界分數的差異就越能反映真實能力上的因而觀測分與劃界分數的差異就越能反映真實能力上的差異。換言之，測驗就

13、更可信。差異。換言之，測驗就更可信。就單個測驗的結果而言，就單個測驗的結果而言， K2(X,T)的計算公式如下：的計算公式如下：第一節(jié)第一節(jié) 信度的概述信度的概述式中，是由庫德理查德式中，是由庫德理查德KR20公式求出的信度系數，其公式求出的信度系數，其余符號意義同前。余符號意義同前。2220222()()()XgXgSKRXn cKSXn c（3）在在純速度測驗（純速度測驗（speed test）中，個體差異完全取中，個體差異完全取決于速度，此時就無法恰當地解釋施測一次測驗的信決于速度，此時就無法恰當地解釋施測一次測驗的信度系數。度系數。如果條件許可，可采用如果條件許可，可采用重測法重測法或

14、是或是復本法復本法，這是比較合，這是比較合適的。適的。分半法分半法也可以使用，但是此時的分半是按時間分半，而也可以使用，但是此時的分半是按時間分半，而不是按照項目來分半。也就是，兩半分數必須根據分別不是按照項目來分半。也就是，兩半分數必須根據分別規(guī)定時間的兩個半測驗。例如，可以把奇偶項目分別印規(guī)定時間的兩個半測驗。例如，可以把奇偶項目分別印制在兩張卷上，每組項目的用時為全測驗的一半。這種制在兩張卷上，每組項目的用時為全測驗的一半。這種方法等于在同一時間實施了兩個等值測驗。方法等于在同一時間實施了兩個等值測驗。 第一節(jié)第一節(jié) 信度的概述信度的概述還有一種替代實施兩個半測驗的方法，就是把還有一種替

15、代實施兩個半測驗的方法，就是把總時間四總時間四等分等分，算出每段時間的分數。這種方法簡便易行，施測，算出每段時間的分數。這種方法簡便易行，施測時每當主試發(fā)出事先安排的信號，就要測驗參加進在他時每當主試發(fā)出事先安排的信號，就要測驗參加進在他們正在做的項目上打個記號。然后，把第一段和第四段們正在做的項目上打個記號。然后，把第一段和第四段時間內答對的項目數相加，得出一個半測驗分數；把第時間內答對的項目數相加，得出一個半測驗分數；把第二段和第三段時間內答對的項目數相加，得出另一個半二段和第三段時間內答對的項目數相加，得出另一個半測驗分數。四段時間如此相加，往往可以平衡練習、疲測驗分數。四段時間如此相加

16、，往往可以平衡練習、疲勞和其他因素的累積效應。特別是當項目難度水平前后勞和其他因素的累積效應。特別是當項目難度水平前后一致，而不是逐漸增加時，這種方法尤其令人滿意。一致，而不是逐漸增加時，這種方法尤其令人滿意。第一節(jié)第一節(jié) 信度的概述信度的概述2.信度的報告信度的報告（1）任何一個信度系數是針對引起測驗誤差的特定因任何一個信度系數是針對引起測驗誤差的特定因素而言的。有多少種影響測驗分數的條件，就有多少素而言的。有多少種影響測驗分數的條件，就有多少種測驗信度，因此，報告信度時應該詳細說明測試樣種測驗信度，因此，報告信度時應該詳細說明測試樣本的特性和所報告的信度類型。本的特性和所報告的信度類型。

17、在信度報告時只是報告信度系數，而缺乏說明估在信度報告時只是報告信度系數，而缺乏說明估算系數的方法細節(jié)，推導系數時所用的被試群體的特算系數的方法細節(jié)，推導系數時所用的被試群體的特征，以及獲取數據當時的施測條件，等等，這種信度征，以及獲取數據當時的施測條件，等等，這種信度報告是不合格的。報告是不合格的。 第一節(jié)第一節(jié) 信度的概述信度的概述（2）沒有一個單一的、最優(yōu)的方法來量化信度，沒有沒有一個單一的、最優(yōu)的方法來量化信度，沒有一個單獨的指數能恰當地表達所有的相關事實，沒有一個單獨的指數能恰當地表達所有的相關事實，沒有一個單獨的研究方法在所有的情形下都是最佳選擇，一個單獨的研究方法在所有的情形下都是

18、最佳選擇，且測驗編制者也不應局限于將某一種方法運用到任何且測驗編制者也不應局限于將某一種方法運用到任何一種測量手段上去。所以，測驗編制者在報告測驗信一種測量手段上去。所以，測驗編制者在報告測驗信度時，可以從多方面予以報告。度時，可以從多方面予以報告。 第一節(jié)第一節(jié) 信度的概述信度的概述（3）提供詳細的信度分析報告，讓了解相關知識的人提供詳細的信度分析報告，讓了解相關知識的人能夠對結果進行評定，并能夠重復信度分析的過程。能夠對結果進行評定，并能夠重復信度分析的過程。 例如，簡單說一句例如，簡單說一句“某測驗的信度是某測驗的信度是0.92”是不是不能接受的。較恰當的說法是能接受的。較恰當的說法是“

19、某測驗的信度系數為某測驗的信度系數為0.92，該數值是通過計算一份能力測驗間隔兩周兩次，該數值是通過計算一份能力測驗間隔兩周兩次測試成績的相關系數得出的。數據來源是從某市隨機測試成績的相關系數得出的。數據來源是從某市隨機抽取的抽取的500名小學名小學5年級的學生施測年級的學生施測”。第一節(jié)第一節(jié) 信度的概述信度的概述五、信度的標準與作用五、信度的標準與作用1.信度是評價測驗質量的重要指標之一。信度是評價測驗質量的重要指標之一。測驗類型測驗類型 信度系數信度系數 低低中中高高學業(yè)成就測驗學業(yè)成就測驗0.660.920.98學術能力測驗學術能力測驗0.560.900.97特殊能力傾向測驗特殊能力傾

20、向測驗0.260.880.96人格測驗人格測驗0.460.850.97興趣測驗興趣測驗0.420.840.93態(tài)度測驗態(tài)度測驗0.470.790.98注：表中數據來源，Lewis R. Aiken: Psychological testing and assessment (eighth edition), Allyn and Bacon, Inc, 1994.第一節(jié)第一節(jié) 信度的概述信度的概述2.信度是測量過程中所存在的隨機誤差大小的反映。信度是測量過程中所存在的隨機誤差大小的反映。第一節(jié)第一節(jié) 信度的概述信度的概述 例如，我們已知高考文科試卷的總信度例如，我們已知高考文科試卷的總信度rXX

21、 =0.965，文科，文科考生總分的標準差為考生總分的標準差為53.42,那么，文科考試成績的標準誤為：那么，文科考試成績的標準誤為：3.信度可以用來解釋個人測驗分數的意義信度可以用來解釋個人測驗分數的意義測量測量標準誤。標準誤。153.4210.9659.99tXXSEMSDr 如果某生的考試成績?yōu)槿绻成目荚嚦煽優(yōu)?95分，在置信度為分，在置信度為0.95時，其真時，其真分數的置信區(qū)間為：分數的置信區(qū)間為：495 1.96 9.99,495 1.96 9.99475,5154.信度可以幫助進行不同測驗分數的比較。信度可以幫助進行不同測驗分數的比較。第一節(jié)第一節(jié) 信度的概述信度的概述考察兩

22、個分數的差異是否可靠，是否真有差異的問題。比考察兩個分數的差異是否可靠，是否真有差異的問題。比如，某人的物理成績是否真的優(yōu)于化學？某人的數學技能本如，某人的物理成績是否真的優(yōu)于化學？某人的數學技能本學期是否真有進步？某人在韋氏智力量表上操作智商與言語學期是否真有進步？某人在韋氏智力量表上操作智商與言語智商的差異是否真有顯著意義等。智商的差異是否真有顯著意義等。 當兩測驗的方差相等時，差異分數的信度系數可用如下公當兩測驗的方差相等時，差異分數的信度系數可用如下公式求出式求出：12()1xxyyxyxxdiffxyrrrrr式中，式中，rXXdiff是差異分數的信度系數；是差異分數的信度系數；rX

23、X和和rYY是兩個測是兩個測驗各自的信度系數；驗各自的信度系數； rXY是兩測驗間的相關系數。是兩測驗間的相關系數。4.信度可以幫助進行不同測驗分數的比較。信度可以幫助進行不同測驗分數的比較。第一節(jié)第一節(jié) 信度的概述信度的概述差異分數的測量標準誤可用如下公式求出：差異分數的測量標準誤可用如下公式求出：式中，式中，SEdiff是差異分數的測量標準誤；是差異分數的測量標準誤；rXX和和rYY是兩個是兩個測驗各自的信度系數；測驗各自的信度系數；SD是兩測驗間使用的相同的標是兩測驗間使用的相同的標準差。在比較分數之前，必須將兩個測驗分數轉為具有準差。在比較分數之前，必須將兩個測驗分數轉為具有相同量表的

24、標準分數。相同量表的標準分數。2diffxxyySESDrr第一節(jié)第一節(jié) 信度的概述信度的概述例如，在韋氏成人智力量表中，言語和操作分測驗的信度例如，在韋氏成人智力量表中，言語和操作分測驗的信度為為 0.97和和0.93，而它們的智商的平均數為，而它們的智商的平均數為100,標準差為標準差為15,故言語和操作智商差數的標準誤為：故言語和操作智商差數的標準誤為：因為因為4.741.969.29,因此，言語和操作智商相差因此，言語和操作智商相差10分時，分時，在在0.05水平上，我們說存在顯著差異。若要在水平上，我們說存在顯著差異。若要在0.01水平上作水平上作出差異顯著的結論，就要相差出差異顯著

25、的結論，就要相差13分。分。21520.970.934.74diffxxyySESDrr測驗分數的比較與平均數差異顯著性檢驗是一回事嗎？測驗分數的比較與平均數差異顯著性檢驗是一回事嗎？第二節(jié)第二節(jié) 信度的種類與評估方法信度的種類與評估方法一、重測信度一、重測信度1.含義含義同一個測量工具在兩個不同時間對同一組被試施測所得同一個測量工具在兩個不同時間對同一組被試施測所得結果的一致性程度。結果的一致性程度。重測信度主要考察了一個測量工具是否能夠保證在不同重測信度主要考察了一個測量工具是否能夠保證在不同時間測量結果的一致性，他反映了測量工具的結果受到時間測量結果的一致性，他反映了測量工具的結果受到時

26、間間隔因素影響的大小。時間間隔因素影響的大小。一般來說，重測的時間間隔越短，那么各種施測情境的一般來說，重測的時間間隔越短，那么各種施測情境的變化就越小，重測信度系數就會越大。變化就越小，重測信度系數就會越大。重測信度系數較大時，說明該測量工具前、后兩次的測重測信度系數較大時，說明該測量工具前、后兩次的測量結果比較一致。結果具有較好的跨時間上的穩(wěn)定性。量結果比較一致。結果具有較好的跨時間上的穩(wěn)定性。第二節(jié)第二節(jié) 測驗信度的種類與評估方法測驗信度的種類與評估方法2.評估方法評估方法重測信度的大小可以通過計算測量工具的重測信度的大小可以通過計算測量工具的重測重測系數（系數（test-retest

27、coefficient）或叫或叫穩(wěn)定性系數穩(wěn)定性系數（coefficient of stability）來標志。具體來說，來標志。具體來說，就是求取同一組被試在兩個不同時間施測同一就是求取同一組被試在兩個不同時間施測同一個測量工具所得結果分數的相關系數。個測量工具所得結果分數的相關系數。第二節(jié)第二節(jié) 測驗信度的種類與評估方法測驗信度的種類與評估方法3.應用條件應用條件測量工具所測量的個體心理特質在時間上應該是相測量工具所測量的個體心理特質在時間上應該是相對穩(wěn)定的。對穩(wěn)定的。測量工具所測量的個體心理特質應該不存在明顯的測量工具所測量的個體心理特質應該不存在明顯的練習效應和遺忘效應。練習效應和遺忘

28、效應。在兩次施測間隔期間不應該進行專門的訓練和培訓在兩次施測間隔期間不應該進行專門的訓練和培訓，以保證重測信度反映的是隨機因素的影響效應。，以保證重測信度反映的是隨機因素的影響效應。第二節(jié)第二節(jié) 測驗信度的種類與評估方法測驗信度的種類與評估方法4.使用重測信度時需要注意的問題使用重測信度時需要注意的問題兩次施測時間間隔的長短會影響重測信度系數估計兩次施測時間間隔的長短會影響重測信度系數估計值的大小，因此，在報告重測信度系數時應該報告值的大小，因此，在報告重測信度系數時應該報告間隔的時間長度。間隔的時間長度。應該根據已有的相關研究結論考慮所測心理特質本應該根據已有的相關研究結論考慮所測心理特質本

29、身的穩(wěn)定性程度，以確定前后兩次施測時間的間隔身的穩(wěn)定性程度，以確定前后兩次施測時間的間隔究竟應該多長比較合適時，不應該隨便選擇間隔時究竟應該多長比較合適時，不應該隨便選擇間隔時間的長短。間的長短。第二節(jié)第二節(jié) 測驗信度的種類與評估方法測驗信度的種類與評估方法二、復本信度二、復本信度1.含義含義兩個平行的測驗（復本測驗）測量同一批被試所得結果兩個平行的測驗（復本測驗）測量同一批被試所得結果的一致性程度。的一致性程度。 復本信度反映了由于題目的不同以及時間間隔所導致的復本信度反映了由于題目的不同以及時間間隔所導致的測量誤差。測量誤差。 平行測驗或復本測驗指的是兩個在題目內容、數量、形平行測驗或復本

30、測驗指的是兩個在題目內容、數量、形式、難度、區(qū)分度、指導語、時限以及所用的例題、公式、難度、區(qū)分度、指導語、時限以及所用的例題、公式和測驗等其他方面都相同或相似的測驗。也就是用不式和測驗等其他方面都相同或相似的測驗。也就是用不同的題目測量同樣的內容而且其測驗結果的平均值和標同的題目測量同樣的內容而且其測驗結果的平均值和標準差都相同的兩個測驗。準差都相同的兩個測驗。第二節(jié)第二節(jié) 測驗信度的種類與評估方法測驗信度的種類與評估方法2.評估方法評估方法復本信度的估計過程就是計算同一批被試在兩個平復本信度的估計過程就是計算同一批被試在兩個平行的復本測驗上所得分數的相關系數，也叫作行的復本測驗上所得分數的

31、相關系數，也叫作等價等價系數（系數（coefficient of equivalence）。測試設計：同時測試和延時測試。測試設計：同時測試和延時測試。同時測試是在同一個時間段內進行測試，而延時測同時測試是在同一個時間段內進行測試，而延時測試則是在兩個時間段進行測試，同時測試可能會存試則是在兩個時間段進行測試，同時測試可能會存在作答疲勞的效應，而延時測試則可能會存在學習在作答疲勞的效應，而延時測試則可能會存在學習或培訓效應?；蚺嘤栃?。第二節(jié)第二節(jié) 測驗信度的種類與評估方法測驗信度的種類與評估方法3.應用條件應用條件要構造出兩份或兩份以上真正平行的測驗要構造出兩份或兩份以上真正平行的測驗;計算

32、復本信度需要對同一批被試測試兩份平行測驗計算復本信度需要對同一批被試測試兩份平行測驗，這就需要掌握一個合理的時間安排。，這就需要掌握一個合理的時間安排。應該盡量在測試結果報告中，詳盡地說明兩次測試應該盡量在測試結果報告中，詳盡地說明兩次測試的時間間隔、測試順序安排、測試過程中被試的有的時間間隔、測試順序安排、測試過程中被試的有關測驗經歷等。關測驗經歷等。第二節(jié)第二節(jié) 測驗信度的種類與評估方法測驗信度的種類與評估方法三、內部一致性信度三、內部一致性信度1.含義含義內部一致性信度主要評價了測驗各隨機組成部分之內部一致性信度主要評價了測驗各隨機組成部分之間是否測量了相同的心理特質，因此，它反映的是間

33、是否測量了相同的心理特質，因此，它反映的是題目內容的抽樣一致性程度。題目內容的抽樣一致性程度。 具體估計方法主要包括具體估計方法主要包括分半信度評估法分半信度評估法、庫德庫德-理查理查森信度評估法森信度評估法、克龍巴赫克龍巴赫Alpha系數評估法系數評估法。 與重測信度和復本信度不同，在估計測驗的內部一與重測信度和復本信度不同，在估計測驗的內部一致性信度時，只要用同一測驗對一批被試測試一次致性信度時，只要用同一測驗對一批被試測試一次。第二節(jié)第二節(jié) 測驗信度的種類與評估方法測驗信度的種類與評估方法2.分半信度分半信度含義含義我們總是可以把一個測驗的所有題目隨機地我們總是可以把一個測驗的所有題目隨

34、機地劃分成對半的兩個部分，然后估計所有被試劃分成對半的兩個部分，然后估計所有被試在這兩個部分題目上得分的一致性程度，這在這兩個部分題目上得分的一致性程度，這樣得到的測驗一致性估計稱為樣得到的測驗一致性估計稱為分半信度分半信度。分半信度評價了測驗兩個隨機組成部分的題分半信度評價了測驗兩個隨機組成部分的題目是否測量了相同的心理特質。目是否測量了相同的心理特質。第二節(jié)第二節(jié) 測驗信度的種類與評估方法測驗信度的種類與評估方法2.分半信度分半信度評估方法評估方法計算出被試在測驗兩個隨機組成部分的題目上得分之計算出被試在測驗兩個隨機組成部分的題目上得分之間的相關系數。間的相關系數。由于在用分半測驗得分計算

35、相關系數時，測驗題量被由于在用分半測驗得分計算相關系數時，測驗題量被縮短，信度系數需要通過以下這個公式對分半相關系縮短，信度系數需要通過以下這個公式對分半相關系數進行矯正而得到。數進行矯正而得到。 為兩個分半測驗之間的相關系數，為兩個分半測驗之間的相關系數， 為完整長度為完整長度測驗的信度系數估計值。測驗的信度系數估計值。第二節(jié)第二節(jié) 測驗信度的種類與評估方法測驗信度的種類與評估方法hhhhxxrrr12hhrxxr2.分半信度分半信度評估方法評估方法另外一個估計分半信度系數的方法是另外一個估計分半信度系數的方法是Rulon公式，他只需公式，他只需要計算所有被試在兩部分測驗上得分之差的方差以及

36、總要計算所有被試在兩部分測驗上得分之差的方差以及總分方差：分方差： 式中，式中， 為完整測驗的信度估計值，為完整測驗的信度估計值， 為被試在兩部分測為被試在兩部分測驗上得分之差的方差，驗上得分之差的方差， 為完整測驗總分方差。為完整測驗總分方差。 Rulon公式中分子方差反映了由于題目不同等條件帶來的公式中分子方差反映了由于題目不同等條件帶來的誤差方差，他與總方差之比反映了誤差方差在總方差中誤差方差，他與總方差之比反映了誤差方差在總方差中所占的比例。所占的比例。第二節(jié)第二節(jié) 測驗信度的種類與評估方法測驗信度的種類與評估方法xxr221dxxxSrS 2dS2xS2.分半信度分半信度使用時需注意

37、的問題使用時需注意的問題在估計測驗的分半信度時，雖然要求把一個測驗的在估計測驗的分半信度時，雖然要求把一個測驗的所有題目隨機地劃分成對半的兩個部分，但是在實所有題目隨機地劃分成對半的兩個部分，但是在實踐中對測驗分半時，為了盡量減少無關因素的影響踐中對測驗分半時，為了盡量減少無關因素的影響，通常需要考慮題型、題分、題目測試先后順序等，通常需要考慮題型、題分、題目測試先后順序等因素的平衡問題，比如因素的平衡問題，比如按照題目順序奇偶分半按照題目順序奇偶分半就是就是一個經常選擇的方法一個經常選擇的方法第二節(jié)第二節(jié) 測驗信度的種類與評估方法測驗信度的種類與評估方法3.庫德庫德-理查森信度理查森信度含義

38、含義在估計分半信度時，把一個測驗的題目分成兩半在估計分半信度時，把一個測驗的題目分成兩半的方式是非常多的。而每種分半方式得到的信度的方式是非常多的。而每種分半方式得到的信度估計值總會存在一些差異，但我們無法知道究竟估計值總會存在一些差異，但我們無法知道究竟哪種分半結果所得到的信度估計值是最合適的。哪種分半結果所得到的信度估計值是最合適的。估計所有可能的分半信度系數的平均數，作為完估計所有可能的分半信度系數的平均數，作為完整測驗的內部一致性最佳估計值。整測驗的內部一致性最佳估計值。第二節(jié)第二節(jié) 測驗信度的種類與評估方法測驗信度的種類與評估方法3.庫德庫德-理查森信度理查森信度評估方法：評估方法：

39、所有分半信度系數的平均數的估計方法。所有分半信度系數的平均數的估計方法。第二節(jié)第二節(jié) 測驗信度的種類與評估方法測驗信度的種類與評估方法12(1)1 201kiiixxppkrKRks2()1 - 211xxkX kXrK Rkks3.庫德庫德-理查森信度理查森信度使用條件使用條件Kuder-Richardson信度系數的估計只能針對信度系數的估計只能針對1、0記記分題型，對于其他題型需要使用更加一般化的估計分題型，對于其他題型需要使用更加一般化的估計方法。方法。 K-R 21公式假設測驗中所有項目的難度是相同的。公式假設測驗中所有項目的難度是相同的。Kuder-Richardson信度反映的是

40、項目間一致性程度信度反映的是項目間一致性程度，他會嚴重地受到測驗所測行為特質的同質性程度，他會嚴重地受到測驗所測行為特質的同質性程度的影響。的影響。第二節(jié)第二節(jié) 測驗信度的種類與評估方法測驗信度的種類與評估方法4. Cronbachs Alpha系數系數含義含義是一種比是一種比Kuder-Richardson方法更加一般化方法更加一般化的信度估計方法，它可以針對各種記分方式的信度估計方法，它可以針對各種記分方式的題型進行估計。的題型進行估計。第二節(jié)第二節(jié) 測驗信度的種類與評估方法測驗信度的種類與評估方法4. Cronbachs Alpha系數系數評估方法評估方法第二節(jié)第二節(jié) 測驗信度的種類與評

41、估方法測驗信度的種類與評估方法21211tkiisskk公式中，公式中，k是測驗題目個數，是測驗題目個數， 是被試在題目是被試在題目i上得上得分的方差，分的方差， 是被試測驗總分方差。是被試測驗總分方差。2iS2tS4. Cronbachs Alpha系數系數使用條件使用條件可以估計各種記分方式的測驗內部一致性信度系數，可以估計各種記分方式的測驗內部一致性信度系數，是更一般化的測驗內部一致性信度系數估計方法。是更一般化的測驗內部一致性信度系數估計方法。第二節(jié)第二節(jié) 測驗信度的種類與評估方法測驗信度的種類與評估方法四、評分者信度四、評分者信度1.含義含義在評價通過主觀評分方式得到的分數時，我們必

42、須了解在評價通過主觀評分方式得到的分數時，我們必須了解不同的評分者在評價被試作答反應時給的分數值的一致不同的評分者在評價被試作答反應時給的分數值的一致性程度（信度）性程度（信度） 。 一般的客觀型題目在評分時很少出現誤差，然而，對于一般的客觀型題目在評分時很少出現誤差，然而，對于諸如作文測驗、語言類測驗、以及其他的評價性測驗（諸如作文測驗、語言類測驗、以及其他的評價性測驗（如人格特質評級、投射測驗評分等），這些測驗類型的如人格特質評級、投射測驗評分等），這些測驗類型的評分過程就顯得非常主觀。評分過程就顯得非常主觀。 第二節(jié)第二節(jié) 測驗信度的種類與評估方法測驗信度的種類與評估方法2.評估方法評估

43、方法兩個評分者時：計算這兩個評分者評定分數之兩個評分者時：計算這兩個評分者評定分數之間的相關系數。間的相關系數。多個評價者評價同一批被試：計算和諧系數。多個評價者評價同一批被試：計算和諧系數。第二節(jié)第二節(jié) 測驗信度的種類與評估方法測驗信度的種類與評估方法五、信度系數及其估計方法小結五、信度系數及其估計方法小結1.測試次數和測試卷份數與信度系數估計方法測試次數和測試卷份數與信度系數估計方法第二節(jié)第二節(jié) 測驗信度的種類與評估方法測驗信度的種類與評估方法測試次數測試次數測試卷份數測試卷份數 1份份 2份份 1次次 分半信度分半信度Kuder-Richardson信度信度Alpha系數系數 復本信度（

44、同時測試）復本信度（同時測試） 2次次 重測信度重測信度 復本信度（延時測試）復本信度（延時測試） 2.各種信度估計方法的誤差方差來源各種信度估計方法的誤差方差來源 第二節(jié)第二節(jié) 測驗信度的種類與評估方法測驗信度的種類與評估方法信度估計方法信度估計方法 誤差方差來源誤差方差來源 重測信度重測信度復本信度（同時測試）復本信度（同時測試）復本信度（延時測試）復本信度（延時測試）分半信度分半信度Kuder-Richardson 和和Alpha系數系數評分者信度評分者信度 時間間隔時間間隔題目內容題目內容時間間隔與題目內容時間間隔與題目內容題目內容題目內容題目內容與心理行為特質的同質性題目內容與心理行

45、為特質的同質性評分者間差異評分者間差異 第三節(jié)第三節(jié) 測量的隨機誤差控制測量的隨機誤差控制一、影響測量信度的因素一、影響測量信度的因素影響測量信度的因素影響測量信度的因素施測間隔的時間施測間隔的時間被試被試主試主試施測情境施測情境測量工具測量工具第三節(jié)第三節(jié) 測量的隨機誤差控制測量的隨機誤差控制二、提高測驗信度的常用方法二、提高測驗信度的常用方法提高測驗信度的常用方法提高測驗信度的常用方法規(guī)范施測程序、統一施測環(huán)境規(guī)范施測程序、統一施測環(huán)境適當增加測驗的長度適當增加測驗的長度控制試題的難度分布控制試題的難度分布努力提高每道題的區(qū)分度努力提高每道題的區(qū)分度維持測驗的同質性維持測驗的同質性努力提高

46、測驗在被試中各個努力提高測驗在被試中各個同質亞團體上的信度同質亞團體上的信度保證被試有充裕的作答時間保證被試有充裕的作答時間嚴格控制評分誤差嚴格控制評分誤差第三節(jié)第三節(jié) 測量的隨機誤差控制測量的隨機誤差控制提高信度的方法提高信度的方法適當增加測驗的長度適當增加測驗的長度 為什么增加測驗的長度，會提高信度？ 測驗長度的增加與信度的提高不是等比例的提高信度的方法提高信度的方法適當增加測驗的長度適當增加測驗的長度 增加測驗長度與信度提高之間關系的公式：例：有一包含10題的測驗，其信度系數為0.30，若把測驗增加到原測驗長度的3倍，那么新測驗的信度系數應該是多少？例：原測驗共10題，信度系數為0.30，如要把測驗信度系數提高到0.94，需要把原測驗延長多少倍？增加多少題？1 (1) ttXXttttXXk rrkrkrrk式中： 為新測驗長度（題數）與原測驗長度之比為原測驗的信度系數為原測驗長度增加到 倍時的信度系數3 0.300.56251 (1)12 0.30ttXXttk rrkr 解：(1)0.954(1 0.30)48.39(1)0.30(1 0.954)XXttttXXrrkrr解：返回返回第四節(jié)第四節(jié) 評