信度效度評(píng)價(jià)

1、信度效度評(píng)價(jià)信度評(píng)價(jià)信度評(píng)價(jià)問(wèn)卷的信度是指問(wèn)卷的穩(wěn)定性和可靠性，主要有三種信度：?jiǎn)柧淼男哦仁侵竼?wèn)卷的穩(wěn)定性和可靠性，主要有三種信度：1 1、重復(fù)信度、重復(fù)信度(testretest reliability)(testretest reliability)，2 2、內(nèi)部信度、內(nèi)部信度(internal reliability)(internal reliability)3 3、觀(guān)察者之間的信度、觀(guān)察者之間的信度(inter-rater reliability)(inter-rater reliability)。國(guó)外用問(wèn)卷進(jìn)行的研究，通常對(duì)問(wèn)卷的重復(fù)信度和內(nèi)部信國(guó)外用問(wèn)卷進(jìn)行的研究，通常對(duì)問(wèn)卷的重

2、復(fù)信度和內(nèi)部信度分析較多。我們著重說(shuō)明前兩者。度分析較多。我們著重說(shuō)明前兩者。一、重復(fù)信度1 1、理論知識(shí)：、理論知識(shí)：用同一問(wèn)卷對(duì)相同對(duì)象進(jìn)行兩次測(cè)量，如果兩次用同一問(wèn)卷對(duì)相同對(duì)象進(jìn)行兩次測(cè)量，如果兩次測(cè)量結(jié)果的一致性很好。則問(wèn)卷的重復(fù)信度好。測(cè)量結(jié)果的一致性很好。則問(wèn)卷的重復(fù)信度好。兩次測(cè)量的時(shí)間間隔視具體情況而定，一般為兩次測(cè)量的時(shí)間間隔視具體情況而定，一般為2 24 4周，樣本量通常為周，樣本量通常為20203030人。人。當(dāng)評(píng)估的變量是分類(lèi)變量用當(dāng)評(píng)估的變量是分類(lèi)變量用KappaKappa系數(shù)來(lái)評(píng)估重系數(shù)來(lái)評(píng)估重復(fù)信度一般來(lái)說(shuō)，復(fù)信度一般來(lái)說(shuō)，KappaKappa系數(shù)大于系數(shù)大于0

3、07575表示重表示重復(fù)信度很好，在復(fù)信度很好，在0 04 40 07575表示較好，而低于表示較好，而低于0 04 4表示較差。表示較差。如果是連續(xù)變量或等級(jí)變量，則用內(nèi)部相關(guān)系數(shù)如果是連續(xù)變量或等級(jí)變量，則用內(nèi)部相關(guān)系數(shù)(icc)(icc)來(lái)評(píng)價(jià)，一般來(lái)說(shuō)，來(lái)評(píng)價(jià)，一般來(lái)說(shuō)，ICCICC大于大于0 07575表示極好，表示極好，ICCICC在在0 06 6到到0 07575表示較好。表示較好。分析：分析：（1 1）本問(wèn)卷數(shù)據(jù)為等級(jí)數(shù)據(jù)，故選用）本問(wèn)卷數(shù)據(jù)為等級(jí)數(shù)據(jù)，故選用ICCICC內(nèi)部相關(guān)系數(shù)來(lái)內(nèi)部相關(guān)系數(shù)來(lái)評(píng)價(jià)，在評(píng)價(jià)，在SASSAS中調(diào)用中調(diào)用proc corrproc corr過(guò)程

4、。過(guò)程。（2 2）因?yàn)樵谶M(jìn)行相關(guān)分析前，需檢驗(yàn)數(shù)據(jù)的正態(tài)性，如）因?yàn)樵谶M(jìn)行相關(guān)分析前，需檢驗(yàn)數(shù)據(jù)的正態(tài)性，如果數(shù)據(jù)滿(mǎn)足正態(tài)性，用果數(shù)據(jù)滿(mǎn)足正態(tài)性，用 Pearson Pearson 積距積距 相相 關(guān)關(guān) 系系 數(shù)；數(shù)； 否則用否則用 Spearman Spearman 等級(jí)相關(guān)等級(jí)相關(guān) 系數(shù)。本問(wèn)卷數(shù)據(jù)為等級(jí)資料，故系數(shù)。本問(wèn)卷數(shù)據(jù)為等級(jí)資料，故選用選用Spearman Spearman 等級(jí)相關(guān)等級(jí)相關(guān) 系數(shù)。系數(shù)。2 2、SASSAS實(shí)現(xiàn)實(shí)現(xiàn)（1 1）先對(duì)數(shù)據(jù)進(jìn)行處理，保存為）先對(duì)數(shù)據(jù)進(jìn)行處理，保存為csvcsv格式格式（2 2）data a;data a;infile e:aa.csv

5、dsd firstobs=2; /infile e:aa.csv dsd firstobs=2; /* *從第二行開(kāi)始導(dǎo)入數(shù)據(jù)從第二行開(kāi)始導(dǎo)入數(shù)據(jù)* */ /input x1-x50 rx1-rx50; /input x1-x50 rx1-rx50; /* *第一次測(cè)量變量與第二次測(cè)量變量第一次測(cè)量變量與第二次測(cè)量變量* */ /proc print;proc print;run;run;%macro %macro corr1corr1; /; /* *定義一個(gè)叫定義一個(gè)叫corr1corr1的宏，進(jìn)行相關(guān)分析的宏，進(jìn)行相關(guān)分析* */ /%do i=1 %to 50;%do i=1 %to

6、50; / /* *開(kāi)始循環(huán)語(yǔ)句開(kāi)始循環(huán)語(yǔ)句* */ /ods output spearmancorr=r_spr&i;ods output spearmancorr=r_spr&i;run;run;proc corr data=a spearman; /proc corr data=a spearman; /* *使用使用spearmanspearman相關(guān)系數(shù)相關(guān)系數(shù)* */ /var x&i rx&i;var x&i rx&i;run;run;%end;%end;%mend corr1;%mend corr1;% %corr1corr1; ;3、結(jié)果解釋P0.0001，我們有理由認(rèn)為，我

7、們有理由認(rèn)為x1與與rx1相關(guān)，相關(guān)系數(shù)相關(guān)，相關(guān)系數(shù)0.451340 0. .8 8表示內(nèi)部一致性極好，表示內(nèi)部一致性極好， 在在0 0. .6 6到到0 0. .8 8表示較好表示較好, ,而低于而低于0 0. .6 6表示內(nèi)部一致性較差表示內(nèi)部一致性較差。分析：在分析：在SASSAS軟件中，軟件中， 系數(shù)調(diào)用系數(shù)調(diào)用PROC CORRPROC CORR過(guò)程計(jì)算，只要在選擇項(xiàng)過(guò)程計(jì)算，只要在選擇項(xiàng)加上參數(shù)加上參數(shù)alphaalpha即可。即可。步驟如下：首先計(jì)算反映某一分量表所有條目的步驟如下：首先計(jì)算反映某一分量表所有條目的 系數(shù)，然后逐一去掉某一條目后再計(jì)算系數(shù)，然后逐一去掉某一條目后

8、再計(jì)算 系數(shù)，如果系數(shù)，如果 系數(shù)系數(shù)值因去掉該條目而增大則考慮把該條目從分量表刪除。值因去掉該條目而增大則考慮把該條目從分量表刪除。2 2、SASSAS實(shí)現(xiàn)實(shí)現(xiàn)（1 1）先對(duì)數(shù)據(jù)進(jìn)行處理，保存為）先對(duì)數(shù)據(jù)進(jìn)行處理，保存為csvcsv格式格式（2 2）data b;data b;infile e:TCM.csv dsd firstobs=2;infile e:TCM.csv dsd firstobs=2;input A1-A10 B1-B4 C1-C2 D1-D5 E1-E4 F1-F2 G1-G3 input A1-A10 B1-B4 C1-C2 D1-D5 E1-E4 F1-F2 G1-G

9、3 H1-H5 I1 J1-J32 K1-K7 L1-L6 M1-M5H1-H5 I1 J1-J32 K1-K7 L1-L6 M1-M5N1-N3 O1-O3 P1-P3 Q1-Q3 R1-R3 S1-S5 T1-T5 U1-U5 N1-N3 O1-O3 P1-P3 Q1-Q3 R1-R3 S1-S5 T1-T5 U1-U5 V1-V4 W1-W5 X1-X4 Y1-Y4 ;V1-V4 W1-W5 X1-X4 Y1-Y4 ;proc print;proc print;run;run;proc corr data=b alpha ; /proc corr data=b alpha ; /* *對(duì)

10、第一個(gè)分量表進(jìn)行分析對(duì)第一個(gè)分量表進(jìn)行分析* */ /var A1-A10;var A1-A10;run;run;proc corr data=b alpha;proc corr data=b alpha;var B1-B4; /var B1-B4; /* *同上一個(gè)分量表的操作同上一個(gè)分量表的操作* */ /run;run;proc corr data=b alpha;proc corr data=b alpha;var C1-C2;var C1-C2;run;run;（下面的分量表同理）（下面的分量表同理） 生理機(jī)能條目中A1，A9，A10應(yīng)該刪除，即是問(wèn)卷中A301，A309，A310應(yīng)

11、該刪除。生理職能的所有條目都應(yīng)該保留，即問(wèn)卷中A401，A402，A403，A404都保留。軀體疼痛的所有條目都應(yīng)該保留，即A701，A801應(yīng)該保留。一般健康狀況的條目中D1應(yīng)該刪除，即問(wèn)卷中A101應(yīng)該刪除，其余保留。精力的條目中E1應(yīng)該刪除，即A901應(yīng)該刪除，其余保留。社會(huì)功能的所有條目都應(yīng)該保留情感職能的所有條目應(yīng)該保留精神健康的條目中，H5應(yīng)該刪除，即A908應(yīng)該刪除。軀體維度的條目中，J4，J5和J6應(yīng)該刪除，即B104，B105和B106應(yīng)該刪除，其余保留。心理維度的條目中，K1應(yīng)該刪除，即B301應(yīng)該刪除，其余保留。自然維度的條目中，L1應(yīng)該刪除，即B401應(yīng)該刪除，其余保留

12、。社會(huì)維度的所有條目都應(yīng)該保留。精氣神的條目中，N3應(yīng)該刪除，即B301應(yīng)該刪除，其余保留。睡眠的條目中，O3應(yīng)該刪除，即B105應(yīng)該刪除，其余保留。飲食的條目中，P1應(yīng)該刪除，即B106應(yīng)該刪除，其余保留。大便的條目中，Q1應(yīng)該刪除，即B109應(yīng)該刪除，其余保留。小便的條目中，R3應(yīng)該刪除，即B1014應(yīng)該刪除，其余保留。氣虛的條目中，S1應(yīng)該刪除，即B102應(yīng)該刪除，其余保留。陽(yáng)虛的條目中，T1應(yīng)該刪除，即B1010應(yīng)該刪除，其余保留。陰虛的條目中，U4應(yīng)該刪除，即B403應(yīng)該刪除，其余保留。 濕熱的所有條目都保留痰濕的條目中，W1和W2應(yīng)該刪除，即B104和B105應(yīng)該刪除，其余保留。血

13、瘀的條目中，X4應(yīng)該刪除，即B201應(yīng)該刪除，其余保留。氣郁的條目中，Y3應(yīng)該刪除，即B305應(yīng)該刪除，其余保留。效度評(píng)價(jià)效度評(píng)價(jià)問(wèn)卷的效度是指問(wèn)卷測(cè)量的正確性和有效性，主要有表面問(wèn)卷的效度是指問(wèn)卷測(cè)量的正確性和有效性，主要有表面效度、內(nèi)容效度、準(zhǔn)則效度和結(jié)構(gòu)效度等效度、內(nèi)容效度、準(zhǔn)則效度和結(jié)構(gòu)效度等（1 1）表面效度）表面效度表面效度是指條目書(shū)面表達(dá)的意思是否為真正要測(cè)定的內(nèi)表面效度是指條目書(shū)面表達(dá)的意思是否為真正要測(cè)定的內(nèi)容，這是一個(gè)主觀(guān)指標(biāo)，常由專(zhuān)家評(píng)閱確定。有時(shí)為了避容，這是一個(gè)主觀(guān)指標(biāo)，常由專(zhuān)家評(píng)閱確定。有時(shí)為了避免應(yīng)答者回答的免應(yīng)答者回答的“社會(huì)期望偏倚社會(huì)期望偏倚”，獲得真正的信

14、息，常，獲得真正的信息，常需要掩飾條目的真正目的，這時(shí)就要犧牲表面效度而提高需要掩飾條目的真正目的，這時(shí)就要犧牲表面效度而提高其他效度。其他效度。（2 2）內(nèi)容效度）內(nèi)容效度內(nèi)容效度是指組成量表的條目是否包括了想要測(cè)量的內(nèi)容的各個(gè)方面，內(nèi)容效度是指組成量表的條目是否包括了想要測(cè)量的內(nèi)容的各個(gè)方面，如果包括了各個(gè)方面，則內(nèi)容效度較好。與表面效度一樣，內(nèi)容效度如果包括了各個(gè)方面，則內(nèi)容效度較好。與表面效度一樣，內(nèi)容效度也是一個(gè)主觀(guān)指標(biāo)。也是一個(gè)主觀(guān)指標(biāo)。（3 3）準(zhǔn)則效度）準(zhǔn)則效度準(zhǔn)則效度是指問(wèn)卷測(cè)量結(jié)果與準(zhǔn)則效度是指問(wèn)卷測(cè)量結(jié)果與“金標(biāo)準(zhǔn)金標(biāo)準(zhǔn)”測(cè)量結(jié)果的一致性程度。分測(cè)量結(jié)果的一致性程度。分析

15、準(zhǔn)則效度的析準(zhǔn)則效度的通常做法是對(duì)問(wèn)卷測(cè)量結(jié)果與通常做法是對(duì)問(wèn)卷測(cè)量結(jié)果與“金標(biāo)準(zhǔn)金標(biāo)準(zhǔn)”測(cè)量結(jié)果進(jìn)行測(cè)量結(jié)果進(jìn)行相關(guān)分析相關(guān)分析, ,，相關(guān)系數(shù)越大證明準(zhǔn)則效度越好，一般認(rèn)為相關(guān)系數(shù)在，相關(guān)系數(shù)越大證明準(zhǔn)則效度越好，一般認(rèn)為相關(guān)系數(shù)在0.40.80.40.8比較理想。比較理想。（4 4）結(jié)構(gòu)效度是指問(wèn)卷是否含有理論上期望的特征，包括以下幾個(gè)）結(jié)構(gòu)效度是指問(wèn)卷是否含有理論上期望的特征，包括以下幾個(gè)方面：?jiǎn)柧頊y(cè)量結(jié)果與理論上測(cè)量結(jié)果的平行程度；問(wèn)卷評(píng)價(jià)的方面：?jiǎn)柧頊y(cè)量結(jié)果與理論上測(cè)量結(jié)果的平行程度；問(wèn)卷評(píng)價(jià)的現(xiàn)象與其他現(xiàn)象的獨(dú)立性；問(wèn)卷結(jié)果是否符合該問(wèn)卷要評(píng)價(jià)現(xiàn)象的現(xiàn)象與其他現(xiàn)象的獨(dú)立性；問(wèn)卷結(jié)

16、果是否符合該問(wèn)卷要評(píng)價(jià)現(xiàn)象的有關(guān)理論預(yù)測(cè)。有關(guān)理論預(yù)測(cè)。 評(píng)價(jià)問(wèn)卷結(jié)構(gòu)效度常用的方法是因子分析，因子分析的目的是評(píng)價(jià)問(wèn)卷結(jié)構(gòu)效度常用的方法是因子分析，因子分析的目的是想了解屬于某二級(jí)量表的條目是否如預(yù)測(cè)那樣集中在一個(gè)因子里。做想了解屬于某二級(jí)量表的條目是否如預(yù)測(cè)那樣集中在一個(gè)因子里。做因子分析時(shí)，預(yù)測(cè)因子的數(shù)目需事先確定，然后再與因子分析的因子因子分析時(shí)，預(yù)測(cè)因子的數(shù)目需事先確定，然后再與因子分析的因子數(shù)目比較，一般而言，如量表的公因子能解釋數(shù)目比較，一般而言，如量表的公因子能解釋50%50%以上的變異，而且以上的變異，而且每個(gè)條目在相應(yīng)的因子上有足夠強(qiáng)度的負(fù)荷（大于等于每個(gè)條目在相應(yīng)的因子上

17、有足夠強(qiáng)度的負(fù)荷（大于等于0.40.4），則認(rèn)），則認(rèn)為該量表具有較好的結(jié)構(gòu)效度。為該量表具有較好的結(jié)構(gòu)效度。結(jié)構(gòu)效度構(gòu)編程如下：data b;infile e:TCM.csv dsd firstobs=2;input A1-A10 B1-B4 C1-C2 D1-D5 E1-E4 F1-F2 G1-G3 H1-H5 I1 J1-J32 K1-K7 L1-L6 M1-M5 N1-N3 O1-O3 P1-P3 Q1-Q3 R1-R3 S1-S5 T1-T5 U1-U5 V1-V4 W1-W5 X1-X4 Y1-Y4;proc print;run;proc factor M=PRIN PRIORS=

18、ONE R=V SCORE;var A1-A10;run;編程編程proc factor M=PRIN PRIORS=ONE R=V SCOREproc factor M=PRIN PRIORS=ONE R=V SCORE的解釋的解釋分析：分析：1 1、提取初始公因子的主要方法：即在選擇項(xiàng)、提取初始公因子的主要方法：即在選擇項(xiàng)METHOD=METHOD=或或M=M=后填后填1 1個(gè)選擇項(xiàng)個(gè)選擇項(xiàng)PRINCIPALPRINCIPAL：主成分分析方法：主成分分析方法PRINITPRINIT：迭代主因子分析：迭代主因子分析2 2、始各變量的公因子方差、始各變量的公因子方差h2h2賦初值，即在賦初值，

19、即在PRIORS=PRIORS=后填后填1 1個(gè)選擇項(xiàng)，中括號(hào)內(nèi)為個(gè)選擇項(xiàng)，中括號(hào)內(nèi)為縮寫(xiě)形式，通常在用主成分分析方法時(shí)，才讓縮寫(xiě)形式，通常在用主成分分析方法時(shí)，才讓PRIORS=ONEPRIORS=ONE。3 3、規(guī)定因子軸的旋轉(zhuǎn)方法：即在選擇項(xiàng)、規(guī)定因子軸的旋轉(zhuǎn)方法：即在選擇項(xiàng)POTATE=POTATE=或或R=R=后填后填1 1個(gè)選擇項(xiàng)：個(gè)選擇項(xiàng)：VARIMAXVVARIMAXV：最大方差旋轉(zhuǎn)法。：最大方差旋轉(zhuǎn)法。4 4、SCORESCORE表示要求算出因子得分模型中的系數(shù)。表示要求算出因子得分模型中的系數(shù)。結(jié)果如下：1、前兩個(gè)特征值、前兩個(gè)特征值3.58819419,1.0477353

20、2都大于都大于1，將根據(jù)這兩個(gè)較大的特征值提取，將根據(jù)這兩個(gè)較大的特征值提取 兩個(gè)相應(yīng)的初始公因子。兩個(gè)相應(yīng)的初始公因子。2、由上累積貢獻(xiàn)率可知，前、由上累積貢獻(xiàn)率可知，前5個(gè)因子已經(jīng)可以解釋個(gè)因子已經(jīng)可以解釋86.91%的方差。的方差。結(jié)論：結(jié)論：經(jīng)最大方差旋轉(zhuǎn)法旋轉(zhuǎn)后的前經(jīng)最大方差旋轉(zhuǎn)法旋轉(zhuǎn)后的前5個(gè)的個(gè)的因子模型為：因子模型為：x1=0.0295F1+0.74900F2x2=0.75428F1+0.35016F2x3=0.82331F1+0.13716F2x4=0.13099F1+0.63639F2x5=0.73143F1+0.05453F2 從旋轉(zhuǎn)后的因子模型來(lái)看，第一公因子從旋轉(zhuǎn)后的

21、因子模型來(lái)看，第一公因子支配著支配著x2,x3,x5,第二公因子支配著第二公因子支配著x1,x4。第一公因子反映，可稱(chēng)為，。第一公因子反映，可稱(chēng)為，第二公因子反映，可稱(chēng)為第二公因子反映，可稱(chēng)為 各公因子包含的因子載荷較大的條目有各公因子包含的因子載荷較大的條目有足夠的強(qiáng)度的負(fù)荷（大于足夠的強(qiáng)度的負(fù)荷（大于0.4），說(shuō)明該），說(shuō)明該調(diào)查表有較好的結(jié)構(gòu)效度。調(diào)查表有較好的結(jié)構(gòu)效度。問(wèn)卷的內(nèi)容效度檢驗(yàn)問(wèn)卷的內(nèi)容效度檢驗(yàn) :內(nèi)容效度是指問(wèn)卷各條目是否測(cè)定其內(nèi)容效度是指問(wèn)卷各條目是否測(cè)定其希望測(cè)量的內(nèi)容。希望測(cè)量的內(nèi)容。內(nèi)容效度可以用反映同一內(nèi)容范圍的兩個(gè)不同測(cè)驗(yàn)，對(duì)同內(nèi)容效度可以用反映同一內(nèi)容范圍的兩

22、個(gè)不同測(cè)驗(yàn)，對(duì)同一組被試施測(cè)結(jié)果的相關(guān)系數(shù)來(lái)表示。若相關(guān)高，表明內(nèi)一組被試施測(cè)結(jié)果的相關(guān)系數(shù)來(lái)表示。若相關(guān)高，表明內(nèi)容效度高，若相關(guān)低，表明內(nèi)容效度低。容效度高，若相關(guān)低，表明內(nèi)容效度低。因此，我們從以下三個(gè)方面去評(píng)價(jià)內(nèi)容效度。因此，我們從以下三個(gè)方面去評(píng)價(jià)內(nèi)容效度。一、從軀體感受、心理狀態(tài)、自然的適應(yīng)能力、社會(huì)的適一、從軀體感受、心理狀態(tài)、自然的適應(yīng)能力、社會(huì)的適應(yīng)能力等四個(gè)維度進(jìn)行評(píng)價(jià)應(yīng)能力等四個(gè)維度進(jìn)行評(píng)價(jià)二、從精氣神、睡眠、飲食、二便、氣血津液功能狀態(tài)的二、從精氣神、睡眠、飲食、二便、氣血津液功能狀態(tài)的維度進(jìn)行評(píng)價(jià)維度進(jìn)行評(píng)價(jià)三、從三、從陰陽(yáng)氣血津液功能狀態(tài)的陰陽(yáng)氣血津液功能狀態(tài)的維度

23、去維度去評(píng)價(jià)評(píng)價(jià)。因?yàn)楦骶S度下又有不同數(shù)量的條目，因此我們對(duì)每個(gè)維度因?yàn)楦骶S度下又有不同數(shù)量的條目，因此我們對(duì)每個(gè)維度每個(gè)觀(guān)測(cè)者所有條目算出總分，并按照事先確定的評(píng)定方每個(gè)觀(guān)測(cè)者所有條目算出總分，并按照事先確定的評(píng)定方法劃分不同的等級(jí)，用法劃分不同的等級(jí)，用spearman秩相關(guān)來(lái)描述各個(gè)維度秩相關(guān)來(lái)描述各個(gè)維度之間的相關(guān)關(guān)系，從而評(píng)價(jià)問(wèn)卷的內(nèi)容效度。之間的相關(guān)關(guān)系，從而評(píng)價(jià)問(wèn)卷的內(nèi)容效度。注意：注意：a1數(shù)據(jù)文件事先已被導(dǎo)入數(shù)據(jù)文件事先已被導(dǎo)入SAS中的中的work文文件夾里，命名為件夾里，命名為a1proc print data=a1;run;ods html;proc corr spearman;var shenti xinli ziran shehui;run;proc corr spearman;var jingqishen shuimian yinshi dabian xiaobian;run;proc corr spearman;var qixu yangxu yinxu shire tanshi xueyu qiyu;run;ods html close;編程如下編程如下：結(jié)果如下：1)對(duì)問(wèn)卷軀體對(duì)問(wèn)卷軀體 、心理、心理 、自然、自然 、社會(huì)社會(huì) 4 個(gè)維度的相關(guān)系數(shù)檢驗(yàn)個(gè)維度的相關(guān)系數(shù)檢驗(yàn)顯示顯示,身體身