調(diào)查問卷的信度效度分析方法 (2)

1、.調(diào)查問卷的信度效度分析方法問卷調(diào)查法是教育研究中廣泛采用的一種調(diào)查方法，根據(jù)調(diào)查目的設計的調(diào)查問卷是問卷調(diào)查法獲取訊息的工具，其質(zhì)量高低對調(diào)查結(jié)果的真實性、適用性等具有決定性的作用。為了保證問卷具有較高的可靠性和有效性，在形成正式問卷之前，應當對問卷進行試測，并對試測結(jié)果進行信度和效度分析，根據(jù)分析結(jié)果篩選問卷題項，調(diào)整問卷架構(gòu)，從而提升問卷的信度和效度。信度和效度分析的方法包括邏輯分析和統(tǒng)計分析，本文主要討論后者。一、信度分析 信度（Reliability）即可靠性，它是指采用同樣的方法對同一對象重復測量時所得結(jié)果的一致性程度。信度指標多以相關(guān)系數(shù)來表示：大致可分為三類：穩(wěn)定系數(shù)（跨時間的

2、一致性）、等值系數(shù)（跨形式的一致性）和內(nèi)在一致性系數(shù)（跨項目的一致性）。若以信度系數(shù)來表示信度的大小。信度系數(shù)越大，表示測量的可信程度越大。究竟信度系數(shù)要多少才算有高的信度。學者DeVellis(1991)認為，0.600.65（最好不要）；0.650.70（最小可接受值）；0.700.80（相當好）；0.800.90（非常好）。由此，一份信度系數(shù)好的量表或問卷，最好在0.80以上，0.70至0.80之間還算是可以接受的范圍；分量表最好在0.70以上，0.60至0.70之間可以接受。若分量表的內(nèi)部一致性系數(shù)在0.60以下或者總量表的信度系數(shù)在0.80以下，應考慮重新修訂量表或增刪題項。信度分析

3、的方法主要有以下四種1、重測信度法 這一方法是用同樣的問卷對同一組被調(diào)查者間隔一定時間重復施測，計算兩次施測結(jié)果的相關(guān)系數(shù)。顯然，重測信度屬于穩(wěn)定系數(shù)。重測信度法特別適用于事實式問卷，如性別、出生年月等在兩次施測中不應有任何差異，大多數(shù)被調(diào)查者的興趣、愛好、習慣等在短時間內(nèi)也不會有十分明顯的變化。如果沒有突發(fā)事件導致被調(diào)查者的態(tài)度、意見突變，這種方法也適用于態(tài)度、意見式問卷。由于重測信度法需要對同一樣本試測兩次，被調(diào)查者容易受到各種事件、活動和他人的影響，而且間隔時間長短也有一定限制，因此在實施中有一定困難。2、復本信度法 復本信度法是讓同一組被調(diào)查者一次填答兩份問卷復本，計算兩個復本的相關(guān)系

4、數(shù)。復本信度屬于等值系數(shù)。復本信度法要求兩個復本除表述模式不同外，在內(nèi)容、格式、難度和對應題項的提問方向等方面要完全一致，而在實際調(diào)查中，很難使調(diào)查問卷達到這種要求，因此采用這種方法者較少。3、折半信度法 折半信度法是將調(diào)查項目分為兩半，計算兩半得分的相關(guān)系數(shù)，進而估計整個量表的信度。折半信度屬于內(nèi)在一致性系數(shù)，測量的是兩半題項得分間的一致性。這種方法一般不適用于事實式問卷（如年齡與性別無法相比），常用于態(tài)度、意見式問卷的信度分析。在問卷調(diào)查中，態(tài)度測量最常見的形式是5級李克特（Likert）量表。進行折半信度分析時，如果量表中含有反意題項，應先將反意題項的得分作逆向處理，以確保各題項得分方向

5、的一致性，然后將全部題項按奇偶或前后分為盡可能相等的兩半，計算二者的相關(guān)系數(shù)（rhh，即半個量表的信度系數(shù)），最后用斯皮爾曼-布朗（Spearman-Brown）公式ru=2rhh/(1+rhh)求出整個量表的信度系數(shù)（ru）。4、信度系數(shù)法 Cronbach信度系數(shù)是目前最常用的信度系數(shù)，其公式為=(n/n-1)*(1-(Si2)/ST2)其中，n為量表中題項的總數(shù)，Si2 為第i題得分的題內(nèi)方差，ST2為全部題項總得分的方差。從公式中可以看出，系數(shù)評價的是量表中各題項得分間的一致性，屬于內(nèi)在一致性系數(shù)。這種方法適用于態(tài)度、意見式問卷（量表）的信度分析。二、效度分析 效度（Validity）

6、即有效性，它是指測量工具或手段能夠準確測出所需測量的事物的程度。效度分為三種類型內(nèi)容效度（Face Validity)、準則效度(Criterion Validity)和架構(gòu)效度Construct Validity)。效度分析有多種方法，其測量結(jié)果反映效度的不同方面。常用于調(diào)查問卷效度分析的方法主要有以下幾種。1、單項與總和相關(guān)效度分析 這種方法用于測量量表的內(nèi)容效度。內(nèi)容效度又稱表面效度或邏輯效度，它是指所設計的題項能否代表所要測量的內(nèi)容或主題。對內(nèi)容效度常采用邏輯分析與統(tǒng)計分析相結(jié)合的方法進行評價。邏輯分析一般由研究者或?qū)＜以u判所選題項是否“看上去”符合測量的目的和要求。統(tǒng)計分析主要采用單

7、項與總和相關(guān)分析法獲得評價結(jié)果，即計算每個題項得分與題項總分的相關(guān)系數(shù)，根據(jù)相關(guān)是否顯著判斷是否有效。若量表中有反意題項，應將其逆向處理后再計算總分。2、準則效度分析 準則效度又稱為效標效度或預測效度。準則效度分析是根據(jù)已經(jīng)得到確定的某種理論，選擇一種指標或測量工具作為準則（效標），分析問卷題項與準則的聯(lián)系，若二者相關(guān)顯著，或者問卷題項對準則的不同取值、特性表現(xiàn)出顯著差異，則為有效的題項。評價準則效度的方法是相關(guān)分析或差異顯著性檢驗。在調(diào)查問卷的效度分析中，選擇一個合適的準則往往十分困難，使這種方法的應用受到一定限制。3、結(jié)構(gòu)效度分析 結(jié)構(gòu)效度是指測量結(jié)果體現(xiàn)出來的某種結(jié)構(gòu)與測值之間的對應程度

8、。架構(gòu)效度分析所采用的方法是因子分析。有的學者認為，效度分析最理想的方法是利用因子分析測量量表或整個問卷的架構(gòu)效度。因子分析的主要功能是從量表全部變量（題項）中提取一些公因子，各公因子分別與某一群特定變量高度關(guān)聯(lián)，這些公因子即代表了量表的基本架構(gòu)。透過因子分析可以考察問卷是否能夠測量出研究者設計問卷時假設的某種架構(gòu)。在因子分析的結(jié)果中，用于評價架構(gòu)效度的主要指標有累積貢獻率、共同度和因子負荷。累積貢獻率反映公因子對量表或問卷的累積有效程度，共同度反映由公因子解釋原變量的有效程度，因子負荷反映原變量與某個公因子的相關(guān)程度。為了提升調(diào)查問卷的質(zhì)量，進而提升整個研究的價值，問卷的信度和效度分析絕非贅

9、疣蛇足，而是研究過程中必不可少的重要環(huán)節(jié)。Cronbach系數(shù)柯隆巴哈（Cronbach 1951）提出計算一個測量系統(tǒng)（問卷或測驗）的信度稱為Cronbach系數(shù)（簡稱系數(shù)），是目前社會科會研究最常使用的信度。當一個研究主題（或構(gòu)面）由很多項目組合，每個問項都與主題相關(guān)，由總分的變異數(shù)與問項的變異數(shù)做為評量信度的指標即為系數(shù)。01. Cronbach 系數(shù)的定義利用各問項變異數(shù)之和與整份量表分數(shù)的變異數(shù)的比值，可用來估計一份量表的信度，柯隆巴哈（Cronbach）提出系數(shù)為：此式為最常作為信度指標，其中s2i表示第i個問項xi的變異數(shù)，s2H 表所有問項總和（H= x1+x2+ .+xn）的

10、變異數(shù)（即整份測驗分數(shù)的變異數(shù)），n是問項個數(shù)。02. Cronbach 系數(shù)的實施技巧要做信度分析需先檢查每個問項是否都是同方向的（即都是正面問法，也就是題間的相關(guān)系數(shù)都是正的），如有一題與其它題相關(guān)系數(shù)都是負的，應考慮將此題先“變號”或“刪除”后再進行計算系數(shù)。如有受測者亂答，可將它的數(shù)據(jù)刪除后再算值。對問卷調(diào)查當有題目與其它題目是負相關(guān)時須注意是否反向問法。如是，則應先將得分反向，再計算信度或是刪除該題。若為測驗，則不能做反向處理，只能做刪除題目。03.標準化 Cronbach 系數(shù)的定義若一份量表有n題，題間的平均相關(guān)系數(shù)為r，則此量表的標準化系數(shù)為04. 利用SPSS進行信度分析 在

11、SPSS中，專門用來進行測驗信度分析的模塊為Scale下的Reliability Analysis；使用Data Reduction之下的Factor模塊。 Reliability Analysis模塊主要功能是檢驗測驗的信度，主要用來檢驗折半信度、庫李及a系數(shù)以及Hoyt信度系數(shù)值。至于重測信度和復本信度，只需將樣本在二次（份）測驗的分數(shù)的數(shù)據(jù)合并到同一數(shù)據(jù)文件之后，利用Correlate之下的Bivariate求其相關(guān)系數(shù)，即為重測或復本信度；而評分者信度則使用的Spearman等級相關(guān)及Kendall和諧系數(shù)。 表1 Reliability Analysis模塊的Model選項的參數(shù)術(shù)語

12、 關(guān)鍵詞功 能AlphaCronbach a系數(shù)Split-half折半信度，n是第二份量表的題數(shù)GuttmanGuttman最低下限真實信度法Parallel各題目變異數(shù)同質(zhì)時的最大概率（maximum-likelihood）信度Strict parallel各題目平均數(shù)與變異數(shù)均同質(zhì)時的最大概率信度表2 Reliability Analysis模塊的Statistics部分選項的參數(shù)術(shù)語關(guān)鍵詞功 能F testHoyt信度系數(shù)Friedman ChiFriedman等級變異數(shù)分析及Kendall和諧系數(shù)Cochran ChiCochrans Q檢驗，適用于答案為二分（如是非題）的量表Hot

13、ellings THotellings T2 檢驗TukeysTukey的可加性檢驗Intraclass量表內(nèi)各題目平均數(shù)相關(guān)系數(shù)建議進行因素分析之樣本數(shù)宜大于330份。論文：A first course in factor analysis 出處：New York: Academic Press, 1973. 作者：Comrey, A. L. 在因素分析前先以KMO抽樣適合性衡量 (Kaiser Meyer Olkin)和巴列特球型檢定(Bartletts Test of Sphericity) ，當KMO值愈大時，表示變項間的共同因素愈多，愈適合進行因素分析，根據(jù)學者Kaiser(1974

14、)觀點，如果KMO的值小于0.5時，較不宜進行因素分析Kaiser, H. F. “An Index of Factorial Simplicity,” Psychometrika (39), 1974, pp. 31-36.KMO是做主成分分析的效度檢驗指標之一,以前的文獻中寫說,KMO在0.9以上，非常適合做因子分析；在0.8-0.9之間，很適合；在0.7-0.8之間，適合；在0.6-0.7之間，尚可；在0.5-0.6之間，表示很差；在0.5以下應該放棄.量表題之處理 量表題的運用，通常是因為用一題無法完整測量某一個變量，因而需要使用數(shù)道題目來表示一個變量，然而這些題目真的能有效并一致地指

15、涉同一個變項嗎？這時我們便需要透過因素分析與信度分析來檢視量表的信、效度。因素分析量表題組是否具有效度，這組題目是否測量同一面向（或同一因素），其能解釋的變異量又有多高，便需要靠因素分析來檢驗。1. 選擇分析、數(shù)據(jù)縮減下之因子。 2. 將量表題組（請注意，只能同時放一組量表，如同儕關(guān)系量表，切勿將多組量表或所有的題目一起點選進去）點選至右邊之窗格。3. 按下描述性統(tǒng)計量，勾選KMO與Bartlett球形檢定。4. 萃取選擇主成分分析，并選擇陡坡圖。5. 至選項內(nèi)勾選依據(jù)因素負荷排序。全都選完后，即可按下確定。1. KMO與Bartlett檢定，是在檢定量表題組之間的相關(guān)。（1） Bartlet

16、t：量表題組是用來測量一個變項，因此應具有一定的相關(guān)程度，當Bartlett檢定達顯著（顯著性.000），即表示此題組具有共同之因素（一或數(shù)個因素）。 （2） KMO：然而題組間的相關(guān)程度若太高，則會造成多重共線性的問題，也就是說相關(guān)程度特別高的題目，事實上就是同一題拆成數(shù)題，如此便不符合設計量表題的原意，也會造成重復解釋、過度膨脹解釋力的后果，因此接著要看KMO取樣適切性量數(shù)，KMO必須要在0.6以上，KMO越接近1，表示量表題目間的相關(guān)情形良好，越適合進行因素分析。 2. 解說總變異量，在此會從題組中采用主成分分析法選擇出數(shù)個成分， 并指出成分中的數(shù)個題目共同解釋的總變異量，通常以第一個成

17、分之解釋變異量最高，如自右圖中所選出之第一個成分的題組，此一成分所能解釋的變異量為46.53，而本次研究法報告亦以選取第一個成分之題組即可。 3. 因素陡坡圖，亦即解說總變異量中每一成分之總和的圖示。如第1到第2成分間之落差特別大，則表示第1成分內(nèi)有重要的因素，而第2至第3、第4.成分間之坡度十分平緩，表示第2第6成份并未出現(xiàn)重要的因素，則不采用第2第6成份之題目。 4. 從最后的成分矩陣中，SPSS只抽選出一個成分，以及每一道題目在此成分中的因素負荷量。因素負荷量越高，表示該題在此成分中的重要性越高若因素負荷量低于0.6，則此題（如V47.6_1）不被列入該成分中，因此，在做下一階段的信度分

18、析時，此題亦需被剔除。但下面仍將此題放入，看看該題信度分析之結(jié)果。信度分析具有信度（Reliability）的題目，必須具有穩(wěn)定性、一致性與精確性。至于量表是由題組所構(gòu)成，這些題目間的穩(wěn)定性、一致性與精確性，就必須用信度分析來檢測。1. 自分析下的量尺法進入信度分析的對話框。 2. 將一組量表題 （請注意，只能同時放一組量表，如同儕關(guān)系量表，切勿將多組量表或所有的題目一起點選進去）的題目自左邊點選至右邊的項目框內(nèi)。 3. 按下統(tǒng)計量，進入另一個窗口，將左上角的描述性統(tǒng)計量對象的三個選項勾選起來。 4. 模式部分，請選取Alpha值（即值），即可按確定，讓SPSS自動執(zhí)行信度分析。1. 接下來出

19、現(xiàn)的信度分析輸出檔，首先可以看到最下面出現(xiàn)的Alpha值，值越高，表示此組量表的信度越高，各題之間也具有更高的一致性。值若低于0.6，則此量表信度太低，不宜采用。 2. 若值低時，首先可以看Alpha if Item Deleted，這部分是指在這個量表題組中，若刪掉V47.1_1題，則此量表的值將由0.7314降到0.6733，刪掉V47.6_1題 （亦即作因素分析后，被剔除的無效的題目），則量表的值會提升至0.7946；因此，此一量表題組便 需刪去V47.6_1題以提升信度，其它題目則要保留。若整體的值都低于0.6時，此時只能藉由修改題目內(nèi)容來提升其信度。 3. 在Corrected Item-Total Correlation的部分看到的是這些題目之間的相關(guān)程度，其相關(guān)系數(shù)越高，表示該題和其它題目間的一致性越高，像V47.6_1，和其它題目間的相關(guān)系數(shù)低，因此和其它題目較不一致。總而言之，一組量表的信度（值）不得低于0.