測量信度與效度

測量measurement1整理課件6.1測量的定義「測量」是針對某一特定對象、人、或組織，有關某種特徵或行為(消費、所得、人格特質…)，賦予其一個值，使其數(shù)值能代表(或符合)構念中所代表的概念或狀況。它是屬於衡量的問題。「測量」就是研究者根據(jù)一定「規(guī)則」將數(shù)值(或其它符號)指派給物體或事物(變數(shù))身上之一種程序。*2整理課件測量的三個程序(1)選擇可觀察的「個體或事物」(即「對象」(2)以數(shù)字或符號代表事件的特性，即數(shù)值系統(tǒng)(numericalsystem)(3)依據(jù)指派「規(guī)則」賦予觀察對象一個符號或數(shù)字，此種「規(guī)則」就是操作型定義。*3整理課件測量資料尺度分類1.名義尺度：為標示目的指定的數(shù)值，主要目的是分類。例如身分證號碼、性別，不同號碼沒有大小區(qū)分，不能做加減。2.順序尺度：此尺度資料可表示事物間的等級或順序，但不能衡量不同等級間的距離。只有大小沒有距離，例如Likert五點計分量表所得數(shù)據(jù)，可能是１～５分，亦可能是-2～+2分，且假設5>4，但5-4≠1。4整理課件數(shù)值系統(tǒng)可分四大類3.等距(區(qū)間)尺度：具有前兩者的資料的特性，可比大小亦可比差距。前後距離相等，但沒有倍數(shù)關係，所以沒有絕對的0(有距離，但沒有絕對的零點)。例如5-4=1,但4≠2×2。4.比例尺度：具有前三者的資料特性，且可以做倍數(shù)比較。有距離，有絕對的零點。例如，4=2×2。比例尺度是最好的衡量尺度，其與等距尺度的區(qū)別在於比例尺度有絕對的原點

0。5整理課件6.1.2變數(shù)(variable)種類1.自變數(shù)：在實驗法中又稱「因變數(shù)」或實驗變數(shù)，它是經(jīng)由實驗者安排或操弄的變數(shù)。2.依變數(shù)：在實驗法中又稱「果變數(shù)」或反應變數(shù)，它是實驗者企圖觀察測量的行為或反應。3.外生(extraneous)變數(shù)：指自變數(shù)以外，但凡可能影響結果(依變數(shù))之因素。6整理課件4.中介變數(shù)：指介於自變數(shù)與依變數(shù)之間，但凡會對研究結果會產(chǎn)生作用的內在歷程。通常是不能直接觀察辨認的，只能憑個體外顯行為的線索來推知。*7整理課件6.2數(shù)值指派的「規(guī)則」數(shù)值指派規(guī)則牽涉到如何將測量結果(如a)推論到構念(以A表示)，推論結果有四種情況：情況1：有信度，效度低情況2：有信度，有效度情況3：信度低，效度低情況4：無信度，無效度8整理課件三種無效度的推論：情況1：測量結果a與b有關，但無法代表構念A,B情況2：測量結果a與b有關，但構念A,B不相關情況3：測量結果a與b無關，但構念A,B有關9整理課件測量誤差指「真正差異」以外任何引起測量分數(shù)的差異。測量誤差(誤差分數(shù))的來源有二大類：(1)系統(tǒng)性誤差：它會對測量結果產(chǎn)生一致性固定的影響；(2)隨機性誤差：主要是來自受訪者身心狀況(情緒、性格、動機…)、情境因素(噪音、太太在場、趕飛機、太熱…)、及測量試題(內容太長、太難…)的干擾影響*10整理課件(1)系統(tǒng)性誤差系統(tǒng)性誤差(systematicerrors)只要使用測量工具，它就會產(chǎn)生。系統(tǒng)性誤差對個案間及研究間的影響方式都是「固定」不變的。換言之，對相同情境受訪者或不同情境受訪者的同一位受訪者，均產(chǎn)生同樣的影響。*11整理課件(2)隨機性誤差每一次以「不同」方式來影響測量工具的使用。隨機性誤差(又稱非系統(tǒng)性誤差)之主要來源，可分成以下六種因素，這些因素是施測者無法控制的:*12整理課件隨機性誤差之主要來源(1)受測者因素:因受測者本身特質(如隨和性)不同、當時個人的情緒好壞，都會導致測量結果的不同。例如：

老大「愛問」：「蕃茄為何有紅有綠？鵝為什麼叫聲大？岳母為什麼眼睛紅？」

老二「愛答」：「蕃茄因為曬到太陽、鵝因為脖子長、岳母沒睡好」。

老三「愛質疑」：「胡蘿蔔也會曬到變紅、青蛙脖子短但叫聲也很大、母豬每天睡眼睛也會紅」。13整理課件隨機性誤差之主要來源(2)情境因素：訪談時任何外力的影響(3)施測者因素：例如，訪談者的解釋、重述、語氣、態(tài)度、肢體動作、草率的資料處理…等。(4)量表使用方式：是由訪問員代填，還是受訪者親自填答。(5)資料的分析處理之影響。14整理課件隨機性誤差之主要來源(6)測量工具因素：量表的設計及形式，包括：(I)測量工具內容：混淆(區(qū)別效度不佳)、語意不清(信度不佳)、編排不良(建構效度不佳)…等；(II)測量項目缺乏，未能涵蓋所欲測量的特性(即內容效度不佳)、項目的篩選(III)有無引導作答的嫌疑…等。*15整理課件測量工具好壞的評量準則1.效度：該量表是否真能測量到我們欲衡量的特性(系統(tǒng)誤差小)。2.信度：該測量工具所衡量的結果是否具有穩(wěn)定性、一致性(隨機誤差小)。3.敏感度：事物起了變化，該測量工具是否能顯現(xiàn)出差異。4.實用性：即考量該測量工具的經(jīng)濟性、便利性、可解釋性。*16整理課件6.4量表(scale)的設計所謂「量表化」(scaling)，它是一種測量的程序，旨在將衡量對象或欲衡量的特性(property)指派某些數(shù)值，以便將測量對象之特性數(shù)值化。衡量「變數(shù)」可用單一問項來量衡量「構念」則要用量表來量。量表是用一個以上的指標(indicant,item,manifested)來測量某個體/事物的特性。17整理課件6.5「量表」設計的技術1.李克特量表：採評分加總之計分方式2.Thurstone量表：又稱共識量表3.語意差異量表：4.Guttman量表：採累計量表計分方式18整理課件李克特量表李克特(Likert)量表是屬「評分加總式量表」最常用的一種，屬同一「構念」的「這些項目」是用「加總」方式來計分，單獨或個別項目是無意義的?！冈u分加總式量表」是對某一概念/構念所設計的數(shù)個項目，測量每位受訪者對它們的態(tài)度反應(同意程度)。每一個反應都給一個數(shù)值，以代表受訪者對該項目的贊同程度，將每位受訪者在這些項目的得分加總，即是受訪者對該題的態(tài)度。*19整理課件李克特量表加總式量表有二個假說或特徵：(1)每一個態(tài)度項目都具有相同量值，但項目之間則沒有差別量值。(2)對同一項目而言，受訪者的反應程度是不同的(具有差別量值)。20整理課件Likert量表設計的步驟1.建立大量有關某一「態(tài)度」構念之題庫，每一個敘述等於一個項目，並隨機式排列這些項目。2.邀請一組樣本，請各受訪者對上述態(tài)度各項目表達立場(前測、預測)3.進行項目分析:旨在對量表之題庫做篩選，它是假定每一項目都具有相同的量值。項目的好壞是依據(jù)其是否具有區(qū)別力，以決定項目保存或刪除。21整理課件項目分析之方法1.相關分析法：計算每一項目與總分的積差相關(以符號Rti表示)，當作該題的「區(qū)別指數(shù)，區(qū)別指數(shù)偏低者，即表示該題未能區(qū)分受試者的反應程度，沒有區(qū)別效果，可予剔除。2.內部一致性效標分析法：將所有受試者在預試量表得分的總和依上下分排序，前25%為高分組，後25%為低分組。爾後以高分組受試者在某一項目(題)得分之平均數(shù)減低分組受試者在同一題得分之平均數(shù)，其差即代表此題的鑑別力。(p136)22整理課件Thurstone量表是由一群「專家」依以下準則篩選項目：1.與研究主題之關聯(lián)性2.題意是否模糊3.項目所表達之態(tài)度層次：Thurstone量表能否編製成功之關鍵點，是在編製過程。將專家意見(該題去留)不一致者的項目刪除。23整理課件語意差異量表

語意差異(量表瞭解受訪者對事物的認知)是假設事物的意涵可能有多種層面，而這些特質層面之空間，謂之語意空間，例如：好的

1 2 3 4 5 6 7

差的 快的

1 2 3 4 5 6 7

慢的 強的

1 2 3 4 5 6 7

弱的 24整理課件語意差異量表之設計步驟1.先建立題庫(一組項目)，並對「態(tài)度」目標物，就受訪者可能的反應，選擇其兩極化的形容詞，來橫跨「1至7」之選答區(qū)，以便受訪者填答2.對受訪者所回收資料進行資料分析，計算出每題(變數(shù))的平均數(shù)。3.依據(jù)項目順序，將每題(變數(shù))平均數(shù)集結起來，以形成整個量表之特徵輪廓(p142)25整理課件Guttman量表Guttman量表則可用來檢定具有不同強弱程度之一組項目是否都屬「單一構面」(uni-dimension)，所謂「單一構面」是指受訪者對項目所反應的態(tài)度，均集中在某一方向上。例如，組織階層、社會差距、種族歧視、自主性(反權威、反傳統(tǒng)、開放性)…等等。*26整理課件Guttman量表27整理課件Guttman量表編製步驟1.建立可用以測量某事實之具體句子或項目。2.選取一組樣本進行前測，將被80%受訪者填答「同意」或「不同意」的項目刪除。3.找100人以上受訪者進行後測。4.整理後測回收資料，將彙總後的數(shù)據(jù)代入CR公式，以求出「複製係數(shù)」，假設CR值在0.8以上者，才可以說：「這些強烈程度題確實屬於同一構面」。28整理課件6.6效度信度過低，則沒有效度效度過低，則信度沒有意義。三種效度：內容效度、效標關聯(lián)效度、及建構效度。*29整理課件6.6.1內容效度1.抽樣效度：量表所包含的項目是否能代表母體構念的項目。內容效度的上下，端賴項目取樣代表性之大小而定。2.外表效度：是指量表項目和形式上，給人的主觀印象，如果該量表從外表來看，似乎確實可適切地測量其欲測的特質或行為，便稱它具有外表效度。30整理課件6.6.2效標關聯(lián)效度又稱實用效度或實証效度，意指這種效度應建立在實証資料之上。效標關聯(lián)效度並不涉及構念的問題。依據(jù)效標不同，效標關聯(lián)效度可分為同時效標及預測效標，兩者皆表示測量工具(分數(shù))和效標之間相關的程度。31整理課件1.同時效標：是指測量工具與效標同時存在。例如，以「口袋中零用錢」(屬測量工具)衡量受訪者的「所得」(屬效標)上下，假設兩者相關很高，則「同時效度」高。所謂「效標」是用來顯示測量工具所欲測量(或預測)的特質之獨立量數(shù)，以作為檢定效度的參考標準。32整理課件6.6.2效標關聯(lián)效度2.預測效標：是指測量工具出現(xiàn)在校標之前。例如，研究者自編「成就測驗」(量表)即可用預測兩年後研究生英文成績當效標，假設兩者相關很高，則表示該量表「預測效標」高。33整理課件6.6.3建構效度指「量表能測量理論上某概念或特質的程度」，強調的是量表所衡量的是否能代表所要衡量的構念。建構效度有二類：收歛效度及區(qū)別效度34整理課件收歛(convergent)效度收歛效度是指來自相同構念的這些項目，彼此之間相關性高。如假設要衡量相同的東西(筆試、口試)，則所得分數(shù)(結果)應相同(筆試與口試成績之相關要高)區(qū)別效度：是指來自不同構念的項目，彼此之間相關性低。35整理課件效度之另ㄧ種分類1.測量效度：即測量工具的效度，指量表的有效性2.設計效度：分內部效度及外部效度，指所測量到的變數(shù)關係是否有效(不受外生變數(shù)影響)3.分析效度：統(tǒng)計分析所發(fā)現(xiàn)的結果。4.推論效度：又稱外部效度，指結果可推論到母群的程度36整理課件6.6.6影響效度的因素1.樣本性質：樣本多樣性、代表性愈高，測量工具效度就愈高。2.測驗信度：假設信度太低，則效度亦低3.干擾變數(shù)：它是指存在於測驗所欲測特質及其效標之外，但卻與兩者間具有某種相關程度的變數(shù)。例如，年齡層、性別、環(huán)境背景…等。*37整理課件6.信度信度(reliability)是指一個測量工具包含「變數(shù)誤差」的程度。「變數(shù)誤差」即在任一次測量中，觀察值之間呈現(xiàn)之不一致、或採用相同測量工具，然而對特定單位施測，每次所得結果都不同。信度是指測量資料的可靠性，即一個測量工具在測量的「一致性」或「穩(wěn)定性」*38整理課件6.7.1信度種類1.等值性信度：又稱「複本法」，專門為檢定同一測驗中不同複本上分數(shù)的一致。(1)複本信度：不同研究者運用同一量表，對不同一批的樣本施測，結果的一致性。(2)折半係數(shù)：將同一量表「項目內容相似」，分成兩半(單數(shù)題、雙數(shù)題)，計算各半測驗的總分之相關。39整理課件6.7.1信度種類2.穩(wěn)定性信度：對同一批樣本，前後二期測兩次，假設兩者的相關愈高，則表示該測驗的穩(wěn)定係數(shù)愈高。3.一致性信度：旨在檢定某量表在各種不同層面的一致性。例如，量表單獨項目與總分是否一致性…等等。此種信度又可分成：折半信度、庫李信度、Cronbach’sα信度…等幾類*