信度效度評價

1、信度效度評價信度評價信度評價問卷的信度是指問卷的穩(wěn)定性和可靠性，主要有三種信度：問卷的信度是指問卷的穩(wěn)定性和可靠性，主要有三種信度：1 1、重復(fù)信度、重復(fù)信度(test(testretest reliability)retest reliability)，2 2、內(nèi)部信度、內(nèi)部信度(internal reliability)(internal reliability)3 3、觀察者之間的信度、觀察者之間的信度(inter-rater reliability)(inter-rater reliability)。國外用問卷進(jìn)行的研究，通常對問卷的重復(fù)信度和內(nèi)部信國外用問卷進(jìn)行的研究，通常對問卷的重

2、復(fù)信度和內(nèi)部信度分析較多。我們著重說明前兩者。度分析較多。我們著重說明前兩者。一、重復(fù)信度1 1、理論知識：、理論知識：用同一問卷對相同對象進(jìn)行兩次測量，如果兩次用同一問卷對相同對象進(jìn)行兩次測量，如果兩次測量結(jié)果的一致性很好。則問卷的重復(fù)信度好。測量結(jié)果的一致性很好。則問卷的重復(fù)信度好。兩次測量的時間間隔視具體情況而定，一般為兩次測量的時間間隔視具體情況而定，一般為2 24 4周，樣本量通常為周，樣本量通常為20203030人。人。當(dāng)評估的變量是分類變量用當(dāng)評估的變量是分類變量用KappaKappa系數(shù)來評估重系數(shù)來評估重復(fù)信度一般來說，復(fù)信度一般來說，KappaKappa系數(shù)大于系數(shù)大于0

3、07575表示重表示重復(fù)信度很好，在復(fù)信度很好，在0 04 40 07575表示較好，而低于表示較好，而低于0 04 4表示較差。表示較差。如果是連續(xù)變量或等級變量，則用內(nèi)部相關(guān)系數(shù)如果是連續(xù)變量或等級變量，則用內(nèi)部相關(guān)系數(shù)(icc)(icc)來評價，一般來說，來評價，一般來說，ICCICC大于大于0 07575表示極好，表示極好，ICCICC在在0 06 6到到0 07575表示較好。表示較好。分析：分析：（1 1）本問卷數(shù)據(jù)為等級數(shù)據(jù)，故選用）本問卷數(shù)據(jù)為等級數(shù)據(jù)，故選用ICCICC內(nèi)部相關(guān)系數(shù)來內(nèi)部相關(guān)系數(shù)來評價，在評價，在SASSAS中調(diào)用中調(diào)用proc corrproc corr過程

4、。過程。（2 2）因為在進(jìn)行相關(guān)分析前，需檢驗數(shù)據(jù)的正態(tài)性，如）因為在進(jìn)行相關(guān)分析前，需檢驗數(shù)據(jù)的正態(tài)性，如果數(shù)據(jù)滿足正態(tài)性，用果數(shù)據(jù)滿足正態(tài)性，用 Pearson Pearson 積距積距 相相 關(guān)關(guān) 系系 數(shù)；數(shù)； 否則用否則用 Spearman Spearman 等級相關(guān)等級相關(guān) 系數(shù)。本問卷數(shù)據(jù)為等級資料，故系數(shù)。本問卷數(shù)據(jù)為等級資料，故選用選用Spearman Spearman 等級相關(guān)等級相關(guān) 系數(shù)。系數(shù)。2 2、SASSAS實現(xiàn)實現(xiàn)（1 1）先對數(shù)據(jù)進(jìn)行處理，保存為）先對數(shù)據(jù)進(jìn)行處理，保存為csvcsv格式格式（2 2）data a;data a;infile e:aa.csv

5、dsd firstobs=2; /infile e:aa.csv dsd firstobs=2; /* *從第二行開始導(dǎo)入數(shù)據(jù)從第二行開始導(dǎo)入數(shù)據(jù)* */ /input x1-x50 rx1-rx50; /input x1-x50 rx1-rx50; /* *第一次測量變量與第二次測量變量第一次測量變量與第二次測量變量* */ /proc print;proc print;run;run;%macro %macro corr1corr1; /; /* *定義一個叫定義一個叫corr1corr1的宏，進(jìn)行相關(guān)分析的宏，進(jìn)行相關(guān)分析* */ /%do i=1 %to 50;%do i=1 %to

6、50; / /* *開始循環(huán)語句開始循環(huán)語句* */ /ods output spearmancorr=r_spr&i;ods output spearmancorr=r_spr&i;run;run;proc corr data=a spearman; /proc corr data=a spearman; /* *使用使用spearmanspearman相關(guān)系數(shù)相關(guān)系數(shù)* */ /var x&i rx&i;var x&i rx&i;run;run;%end;%end;%mend corr1;%mend corr1;% %corr1corr1;

7、;3、結(jié)果解釋P0.0001，我們有理由認(rèn)為，我們有理由認(rèn)為x1與與rx1相關(guān)，相關(guān)系數(shù)相關(guān)，相關(guān)系數(shù)0.451340.8 0.8表示內(nèi)部一致性極好，表示內(nèi)部一致性極好， 在在0.60.6到到0.80.8表示較好表示較好, ,而低于而低于0.60.6表示內(nèi)部一致性較差。表示內(nèi)部一致性較差。分析：在分析：在SASSAS軟件中，軟件中， 系數(shù)調(diào)用系數(shù)調(diào)用PROC CORRPROC CORR過程計算，只要在選擇項過程計算，只要在選擇項加上參數(shù)加上參數(shù)alphaalpha即可。即可。步驟如下：首先計算反映某一分量表所有條目的步驟如下：首先計算反映某一分量表所有條目的 系數(shù)，然后逐一去掉某一條目后再計算

8、系數(shù)，然后逐一去掉某一條目后再計算 系數(shù)，如果系數(shù)，如果 系數(shù)系數(shù)值因去掉該條目而增大則考慮把該條目從分量表刪除。值因去掉該條目而增大則考慮把該條目從分量表刪除。2 2、SASSAS實現(xiàn)實現(xiàn)（1 1）先對數(shù)據(jù)進(jìn)行處理，保存為）先對數(shù)據(jù)進(jìn)行處理，保存為csvcsv格式格式（2 2）data b;data b;infile e:TCM.csv dsd firstobs=2;infile e:TCM.csv dsd firstobs=2;input A1-A10 B1-B4 C1-C2 D1-D5 E1-E4 F1-F2 G1-G3 input A1-A10 B1-B4 C1-C2 D1-D5 E1

9、-E4 F1-F2 G1-G3 H1-H5 I1 J1-J32 K1-K7 L1-L6 M1-M5H1-H5 I1 J1-J32 K1-K7 L1-L6 M1-M5N1-N3 O1-O3 P1-P3 Q1-Q3 R1-R3 S1-S5 T1-T5 U1-U5 N1-N3 O1-O3 P1-P3 Q1-Q3 R1-R3 S1-S5 T1-T5 U1-U5 V1-V4 W1-W5 X1-X4 Y1-Y4 ;V1-V4 W1-W5 X1-X4 Y1-Y4 ;proc print;proc print;run;run;proc corr data=b alpha ; /proc corr data=b

10、 alpha ; /* *對第一個分量表進(jìn)行分析對第一個分量表進(jìn)行分析* */ /var A1-A10;var A1-A10;run;run;proc corr data=b alpha;proc corr data=b alpha;var B1-B4; /var B1-B4; /* *同上一個分量表的操作同上一個分量表的操作* */ /run;run;proc corr data=b alpha;proc corr data=b alpha;var C1-C2;var C1-C2;run;run;（下面的分量表同理）（下面的分量表同理） 生理機能條目中A1，A9，A10應(yīng)該刪除，即是問卷中A

11、301，A309，A310應(yīng)該刪除。生理職能的所有條目都應(yīng)該保留，即問卷中A401，A402，A403，A404都保留。軀體疼痛的所有條目都應(yīng)該保留，即A701，A801應(yīng)該保留。一般健康狀況的條目中D1應(yīng)該刪除，即問卷中A101應(yīng)該刪除，其余保留。精力的條目中E1應(yīng)該刪除，即A901應(yīng)該刪除，其余保留。社會功能的所有條目都應(yīng)該保留情感職能的所有條目應(yīng)該保留精神健康的條目中，H5應(yīng)該刪除，即A908應(yīng)該刪除。軀體維度的條目中，J4，J5和J6應(yīng)該刪除，即B104，B105和B106應(yīng)該刪除，其余保留。心理維度的條目中，K1應(yīng)該刪除，即B301應(yīng)該刪除，其余保留。自然維度的條目中，L1應(yīng)該刪除，

12、即B401應(yīng)該刪除，其余保留。社會維度的所有條目都應(yīng)該保留。精氣神的條目中，N3應(yīng)該刪除，即B301應(yīng)該刪除，其余保留。睡眠的條目中，O3應(yīng)該刪除，即B105應(yīng)該刪除，其余保留。飲食的條目中，P1應(yīng)該刪除，即B106應(yīng)該刪除，其余保留。大便的條目中，Q1應(yīng)該刪除，即B109應(yīng)該刪除，其余保留。小便的條目中，R3應(yīng)該刪除，即B1014應(yīng)該刪除，其余保留。氣虛的條目中，S1應(yīng)該刪除，即B102應(yīng)該刪除，其余保留。陽虛的條目中，T1應(yīng)該刪除，即B1010應(yīng)該刪除，其余保留。陰虛的條目中，U4應(yīng)該刪除，即B403應(yīng)該刪除，其余保留。 濕熱的所有條目都保留痰濕的條目中，W1和W2應(yīng)該刪除，即B104和B

13、105應(yīng)該刪除，其余保留。血瘀的條目中，X4應(yīng)該刪除，即B201應(yīng)該刪除，其余保留。氣郁的條目中，Y3應(yīng)該刪除，即B305應(yīng)該刪除，其余保留。效度評價效度評價問卷的效度是指問卷測量的正確性和有效性，主要有表面問卷的效度是指問卷測量的正確性和有效性，主要有表面效度、內(nèi)容效度、準(zhǔn)則效度和結(jié)構(gòu)效度等效度、內(nèi)容效度、準(zhǔn)則效度和結(jié)構(gòu)效度等（1 1）表面效度）表面效度表面效度是指條目書面表達(dá)的意思是否為真正要測定的內(nèi)表面效度是指條目書面表達(dá)的意思是否為真正要測定的內(nèi)容，這是一個主觀指標(biāo)，常由專家評閱確定。有時為了避容，這是一個主觀指標(biāo)，常由專家評閱確定。有時為了避免應(yīng)答者回答的免應(yīng)答者回答的“社會期望偏倚

14、社會期望偏倚”，獲得真正的信息，常，獲得真正的信息，常需要掩飾條目的真正目的，這時就要犧牲表面效度而提高需要掩飾條目的真正目的，這時就要犧牲表面效度而提高其他效度。其他效度。（2 2）內(nèi)容效度）內(nèi)容效度內(nèi)容效度是指組成量表的條目是否包括了想要測量的內(nèi)容的各個方面，內(nèi)容效度是指組成量表的條目是否包括了想要測量的內(nèi)容的各個方面，如果包括了各個方面，則內(nèi)容效度較好。與表面效度一樣，內(nèi)容效度如果包括了各個方面，則內(nèi)容效度較好。與表面效度一樣，內(nèi)容效度也是一個主觀指標(biāo)。也是一個主觀指標(biāo)。（3 3）準(zhǔn)則效度）準(zhǔn)則效度準(zhǔn)則效度是指問卷測量結(jié)果與準(zhǔn)則效度是指問卷測量結(jié)果與“金標(biāo)準(zhǔn)金標(biāo)準(zhǔn)”測量結(jié)果的一致性程度。

15、分測量結(jié)果的一致性程度。分析準(zhǔn)則效度的通常做法是對問卷測量結(jié)果與析準(zhǔn)則效度的通常做法是對問卷測量結(jié)果與“金標(biāo)準(zhǔn)金標(biāo)準(zhǔn)”測量結(jié)果進(jìn)行測量結(jié)果進(jìn)行相關(guān)分析相關(guān)分析, ,，相關(guān)系數(shù)越大證明準(zhǔn)則效度越好，一般認(rèn)為相關(guān)系數(shù)在，相關(guān)系數(shù)越大證明準(zhǔn)則效度越好，一般認(rèn)為相關(guān)系數(shù)在0.40.80.40.8比較理想。比較理想。（4 4）結(jié)構(gòu)效度是指問卷是否含有理論上期望的特征，包括以下幾個）結(jié)構(gòu)效度是指問卷是否含有理論上期望的特征，包括以下幾個方面：問卷測量結(jié)果與理論上測量結(jié)果的平行程度；問卷評價的方面：問卷測量結(jié)果與理論上測量結(jié)果的平行程度；問卷評價的現(xiàn)象與其他現(xiàn)象的獨立性；問卷結(jié)果是否符合該問卷要評價現(xiàn)象的現(xiàn)

16、象與其他現(xiàn)象的獨立性；問卷結(jié)果是否符合該問卷要評價現(xiàn)象的有關(guān)理論預(yù)測。有關(guān)理論預(yù)測。 評價問卷結(jié)構(gòu)效度常用的方法是因子分析，因子分析的目的是評價問卷結(jié)構(gòu)效度常用的方法是因子分析，因子分析的目的是想了解屬于某二級量表的條目是否如預(yù)測那樣集中在一個因子里。做想了解屬于某二級量表的條目是否如預(yù)測那樣集中在一個因子里。做因子分析時，預(yù)測因子的數(shù)目需事先確定，然后再與因子分析的因子因子分析時，預(yù)測因子的數(shù)目需事先確定，然后再與因子分析的因子數(shù)目比較，一般而言，如量表的公因子能解釋數(shù)目比較，一般而言，如量表的公因子能解釋50%50%以上的變異，而且以上的變異，而且每個條目在相應(yīng)的因子上有足夠強度的負(fù)荷（大

17、于等于每個條目在相應(yīng)的因子上有足夠強度的負(fù)荷（大于等于0.40.4），則認(rèn)），則認(rèn)為該量表具有較好的結(jié)構(gòu)效度。為該量表具有較好的結(jié)構(gòu)效度。結(jié)構(gòu)效度構(gòu)編程如下：data b;infile e:TCM.csv dsd firstobs=2;input A1-A10 B1-B4 C1-C2 D1-D5 E1-E4 F1-F2 G1-G3 H1-H5 I1 J1-J32 K1-K7 L1-L6 M1-M5 N1-N3 O1-O3 P1-P3 Q1-Q3 R1-R3 S1-S5 T1-T5 U1-U5 V1-V4 W1-W5 X1-X4 Y1-Y4;proc print;run;proc factor

18、M=PRIN PRIORS=ONE R=V SCORE;var A1-A10;run;編程編程proc factor M=PRIN PRIORS=ONE R=V SCOREproc factor M=PRIN PRIORS=ONE R=V SCORE的解釋的解釋分析：分析：1 1、提取初始公因子的主要方法：即在選擇項、提取初始公因子的主要方法：即在選擇項METHOD=METHOD=或或M=M=后填后填1 1個選擇項個選擇項PRINCIPALPRINCIPAL：主成分分析方法：主成分分析方法PRINITPRINIT：迭代主因子分析：迭代主因子分析2 2、始各變量的公因子方差、始各變量的公因子方差

19、h2h2賦初值，即在賦初值，即在PRIORS=PRIORS=后填后填1 1個選擇項，中括號內(nèi)為個選擇項，中括號內(nèi)為縮寫形式，通常在用主成分分析方法時，才讓縮寫形式，通常在用主成分分析方法時，才讓PRIORS=ONEPRIORS=ONE。3 3、規(guī)定因子軸的旋轉(zhuǎn)方法：即在選擇項、規(guī)定因子軸的旋轉(zhuǎn)方法：即在選擇項POTATE=POTATE=或或R=R=后填后填1 1個選擇項：個選擇項：VARIMAXVVARIMAXV：最大方差旋轉(zhuǎn)法。：最大方差旋轉(zhuǎn)法。4 4、SCORESCORE表示要求算出因子得分模型中的系數(shù)。表示要求算出因子得分模型中的系數(shù)。結(jié)果如下：1、前兩個特征值、前兩個特征值3.5881

20、9419,1.04773532都大于都大于1，將根據(jù)這兩個較大的特征值提取，將根據(jù)這兩個較大的特征值提取 兩個相應(yīng)的初始公因子。兩個相應(yīng)的初始公因子。2、由上累積貢獻(xiàn)率可知，前、由上累積貢獻(xiàn)率可知，前5個因子已經(jīng)可以解釋個因子已經(jīng)可以解釋86.91%的方差。的方差。結(jié)論：結(jié)論：經(jīng)最大方差旋轉(zhuǎn)法旋轉(zhuǎn)后的前經(jīng)最大方差旋轉(zhuǎn)法旋轉(zhuǎn)后的前5個的個的因子模型為：因子模型為：x1=0.0295F1+0.74900F2x2=0.75428F1+0.35016F2x3=0.82331F1+0.13716F2x4=0.13099F1+0.63639F2x5=0.73143F1+0.05453F2 從旋轉(zhuǎn)后的因子模

21、型來看，第一公因子從旋轉(zhuǎn)后的因子模型來看，第一公因子支配著支配著x2,x3,x5,第二公因子支配著第二公因子支配著x1,x4。第一公因子反映，可稱為，。第一公因子反映，可稱為，第二公因子反映，可稱為第二公因子反映，可稱為 各公因子包含的因子載荷較大的條目有各公因子包含的因子載荷較大的條目有足夠的強度的負(fù)荷（大于足夠的強度的負(fù)荷（大于0.4），說明該），說明該調(diào)查表有較好的結(jié)構(gòu)效度。調(diào)查表有較好的結(jié)構(gòu)效度。問卷的內(nèi)容效度檢驗問卷的內(nèi)容效度檢驗 :內(nèi)容效度是指問卷各條目是否測定其內(nèi)容效度是指問卷各條目是否測定其希望測量的內(nèi)容。希望測量的內(nèi)容。內(nèi)容效度可以用反映同一內(nèi)容范圍的兩個不同測驗，對同內(nèi)容效

22、度可以用反映同一內(nèi)容范圍的兩個不同測驗，對同一組被試施測結(jié)果的相關(guān)系數(shù)來表示。若相關(guān)高，表明內(nèi)一組被試施測結(jié)果的相關(guān)系數(shù)來表示。若相關(guān)高，表明內(nèi)容效度高，若相關(guān)低，表明內(nèi)容效度低。容效度高，若相關(guān)低，表明內(nèi)容效度低。因此，我們從以下三個方面去評價內(nèi)容效度。因此，我們從以下三個方面去評價內(nèi)容效度。一、從軀體感受、心理狀態(tài)、自然的適應(yīng)能力、社會的適一、從軀體感受、心理狀態(tài)、自然的適應(yīng)能力、社會的適應(yīng)能力等四個維度進(jìn)行評價應(yīng)能力等四個維度進(jìn)行評價二、從精氣神、睡眠、飲食、二便、氣血津液功能狀態(tài)的二、從精氣神、睡眠、飲食、二便、氣血津液功能狀態(tài)的維度進(jìn)行評價維度進(jìn)行評價三、從陰陽氣血津液功能狀態(tài)的維度

23、去評價。三、從陰陽氣血津液功能狀態(tài)的維度去評價。因為各維度下又有不同數(shù)量的條目，因此我們對每個維度因為各維度下又有不同數(shù)量的條目，因此我們對每個維度每個觀測者所有條目算出總分，并按照事先確定的評定方每個觀測者所有條目算出總分，并按照事先確定的評定方法劃分不同的等級，用法劃分不同的等級，用spearman秩相關(guān)來描述各個維度秩相關(guān)來描述各個維度之間的相關(guān)關(guān)系，從而評價問卷的內(nèi)容效度。之間的相關(guān)關(guān)系，從而評價問卷的內(nèi)容效度。注意：注意：a1數(shù)據(jù)文件事先已被導(dǎo)入數(shù)據(jù)文件事先已被導(dǎo)入SAS中的中的work文文件夾里，命名為件夾里，命名為a1proc print data=a1;run;ods html;proc corr spearman;var shenti xinli ziran shehui;run;proc corr spearman;var jingqishen shuimian yinshi dabian xiaobian;run;proc corr spearman;var qixu yangxu yinxu shire tanshi xueyu qiyu;run;ods html close;編程如下編程如下：結(jié)果如下：1)對問卷軀體對問卷軀體 、心理、心理 、自然、自然 、社會社會 4 個維度的相關(guān)系數(shù)檢驗個維度的相關(guān)系數(shù)檢驗顯示顯示,身體