傳播學(xué)社會研究方法-CH2測量概念化與操作化

測量、概念化與操作化：

在研究者抽象的設(shè)想與經(jīng)驗現(xiàn)實之間建立起清晰的聯(lián)系

測量(measure)概念化(conceptualization)操作化(operationalization)1你認為這些說法正確嗎？現(xiàn)代社會戀人之間愛情的成分越多，物質(zhì)的成分就越少；反之亦然。當(dāng)個人的受教育程度提高，其對他人的偏見會顯著減少。網(wǎng)民的網(wǎng)絡(luò)技能越高那么其從互聯(lián)網(wǎng)上獲益越多。越贊同“黨的新聞事業(yè)〞理念的新聞工作者，越可能在其報道中為民說話。2Outlineofthisclass

AnoutlineofconceptualizationandoperationalizationinresearchConcept1 Theorization Concept2

Validity Validity

Measure1 EmpiricalAnalysis Measure2&ReliabilityReliability&3抽象建構(gòu)抽象建構(gòu)概念定義概念定義指標或測量指標或測量概念化概念化操作化操作化假設(shè)因果關(guān)系驗證經(jīng)驗假設(shè)思辯/邏輯過程實證過程理論層面操作層面經(jīng)驗層面4理論、概念與測量實施一個研究之時必須考慮/詢問以下問題：該研究涵該了哪些關(guān)鍵概念？研究者是如何界定關(guān)鍵概念？概念化的挑戰(zhàn)關(guān)鍵概念發(fā)源于何處？由既有理論生發(fā)？既有的理論/研究如何對該概念和其他概念間的關(guān)系予以說明？理論化的挑戰(zhàn)該研究在如何測量這些關(guān)鍵概念？操作化的挑戰(zhàn)5PerceivedPopularityoftheInternetAdoptionoftheInternetUseoftheInternetIndividualCharacteristicsPerceivedCharacteristicoftheInternetPerceivedNeedfortheInternetZhu,J.J.H.,&He,Z.(2002).

Perceivedcharacteristics,perceivedneeds,andperceivedpopularity:AdoptionanduseoftheInternetinChina.CommunicationResearch,29(4):466-495.6測量當(dāng)社會研究者檢驗假設(shè)、評估解釋、為理論提供經(jīng)驗支持或系統(tǒng)的研究某個應(yīng)用議題或社會世界的某些領(lǐng)域時，他們將測量概念和變量，如智力、社會孤獨感、網(wǎng)絡(luò)依賴、網(wǎng)絡(luò)成癮、廣告信息卷入度、媒介色情信息限制支持度、關(guān)于媒介暴力內(nèi)容的態(tài)度等。定量研究者遠遠比定性研究者更為關(guān)心測量。測量是資料采集前的獨立步驟，為此開展出一系列專門的術(shù)語和技巧。定量研究者采用演繹取向而不是歸納路徑：從概念開始，通過精確細致的測量來捕捉它，并以數(shù)字形式來表示。7測量、概念化和操作化日常生活中人們有意無意的測量非物質(zhì)世界，但通常是用并不太精確的術(shù)語；而在物質(zhì)世界中科學(xué)家的測量延展了人類的感覺。測量是根據(jù)法那么，對研究對象或事件分配假設(shè)干數(shù)字。定量和定性研究者在測量中，都適用兩個過程：概念化和操作化。測量的顯在工具，常常表現(xiàn)為量表(scales)。8測量層次測量有四個層次：定類(nominal)、定序(ordinal)、定距(interval)和定比(ratio)。測量層次(levelofmeasurement)，說明了連續(xù)和離散變量之間的差異。一個變量在何種層次上被測量，直接取決于其被概念化的過程以及研究者所采用的資料采集方法的類型。層次不同的類型排列等級受測類別間的距離真正的零點定類是定序是是定距是是是定比是是是是9觀念、概念化和概念由于每個人頭腦中的印象并不能直接用來交流，因此人們用每份資料的標簽來交流彼此觀察到的事物和代表事物的觀念。和觀念(conception)有關(guān)的標簽使人們可以相互交流，且使人們可就標簽的含義達成共識。達成共識的過程被稱為(廣義的)“概念化〞(conceptualization)，達成共識的結(jié)果就是概念(concept)。概念是一組觀念。10概念化Conceptualization概念化Referstotheprocessthroughwhichwespecifypreciselywhatwemeanwhenweuseparticularterms概念化是捕捉一個設(shè)想并通過賦予它一個概念或理論定義的方式來提煉它，即概念化是徹底想通想透設(shè)想/概念的意義的過程Relativelyabstract11操作化Operationalization操作化Referstothespecificationofresearchproceduresthatwillresultinempiricalobservationsrepresentingthoseconceptsintherealworld連接概念定義與一套特別的測量技術(shù)或程序Hastobeconcreteandprecise操作定義，即通過研究者執(zhí)行的特定操作行為產(chǎn)生的定義，可以是一份調(diào)查問卷、在實地場景中觀察事件的方法、在大量媒體中測量信息內(nèi)容的方法等。12概念化與操作化的銜接OperationalizationshouldfollowandmatchconceptualizationWemeasureathinginaspecificmannerbecausewehavedefinedthethinginaspecificway13對“大學(xué)質(zhì)量〞的概念化與操作化Example1:QualityofUniversityIsWuhanUniversityagooduniversity?IsitbetterthanornotasgoodasHUST?Conceptualdefinition:Asaneducationalinstitution,auniversityisgoodtotheextentthatitsuccessfullytransmitsadvancedlevelknowledgetopeopleinasocietyOperationalization:%offacultymemberswithPh.D.sTeacher-to-studentratioAvailabilityofadvancedteachingfacilitiesThesizeofthelibrary14對“大學(xué)質(zhì)量〞的概念化與操作化Conceptualdefinition:Asaresearchinstitution,auniversityisgoodtotheextentthatitsuccessfullyproducesadvancedknowledgeOperationalization:%offacultymemberswithPh.D.sSizeofgraduateschoolResearchoutputoffacultymembersAvailabilityofresearchfundingAdvancedresearchfacilitiesThesizeofthelibrary15“播送收聽〞的概念化與操作化Example2:FrequencyofradiolisteningWhatcountsas“l(fā)istening〞?E.g.,amountoftimespentlisteningtotheradio,includingwhenradioservesasbackground16“媒介可信度〞的概念化與操作化媒介可信度(Mediacredibility):概念定義：可信度是為受傳者所感受到的信源或傳播媒介的一種品質(zhì)，即不管其傳播的內(nèi)容為何而能令受傳者無可爭辯的信賴(West,1994)。一個向公眾提供了準確及公正無偏的信息的信源，可被認為是可信的(Hass,1981)。操作定義：構(gòu)建基于5級李克特量表的以下四個題項(items)：“整體上來看，電視(報紙/播送)新聞?????(1)個人感覺值得信賴；(2)根本上是真實的；(3)立場公正，不試圖以主觀意志影響人；(4)解釋得比較全面、完整〞。17“物質(zhì)主義傾向〞的操作化貝爾克的物質(zhì)主義量表租一輛車比買一輛車對我更有吸引力；〔R〕我對那些也許應(yīng)當(dāng)扔掉的東西總是戀戀不忘；即使是價值很小的東西被偷了，我也會非常不安；我掉了東西之后不會特別不安；〔R〕較之于大多數(shù)人，我較少把自己的東西鎖起來；我寧愿買某間東西而不愿從朋友處借來一用；我很擔(dān)憂別人把我擁有的東西借走；旅游時我喜歡照很多照片；我從不丟棄東西。18“互聯(lián)網(wǎng)采納〞的操作化Internetadoption.Asdescribedabove,weconceptualizetheadoptionoftheInternetasanominalvariableoffourcategoriesthataremutuallyexclusiveatagivenpointintimebutdynamicallytransitoryovertime.Tomeasureit,weaskedtwoquestionsinthesurvey:“AreyoucurrentlyusingtheInternet?〞and“Ifnot,howlikelywillyoubeusingitinthenext12months?〞Therespondentswereexplicitlytoldthat“usingtheInternet〞includesnotonlysurfingtheWebbutalsoreceivingandsendinge-mailmessages,onlinechatting,shopping,tradingstocks,andotheronlineactivities.Basedontheiranswerstothetwoquestions,respondentswereeachassignedtooneofthefourcategories:(a)ContinuousAdopters(whoarecurrentlyusingtheInternet),(b)DiscontinuedAdopters(whohadusedtheInternetbutstoppedusingit),(c)PotentialAdopters(whohavenotusedbutarelikelytousetheInternetwithinayear),and(d)UnlikelyAdopters(whohavenotusedandarenotlikelytousetheInternetanytimesoon).19Journalisticroles.Thesevariablesweremeasuredbyaskingtherespondentstoindicateona5-pointLikert-typescale,from1(notatallimportant)to5(veryimportant),howimportanteachfunctiondescribedinastatementwas.BasedonourconceptualanalysisofhowmediaroleswerebeingdiscussedamongChina’sjournalists,abatteryof18statementswasdeveloped.SomeofthemwereadaptedfromWeaverandWilhoit(1996),andotherswerecreatedbasedontheuniquesituationinChina.Fiveoftheitemsweredesignedtoassessthemediaentertainmentrole.Buttheydidnotgroupintoasinglefactor,nordidtheyloadcleanlyonanyoftheotherfourfactors.Thesewereeliminatedfromthesubsequentanalysis.Theremaining13formedfourcleanfactorsinanexploratoryfactoranalysis.ThefourfactorscorrespondtothefourrolesspecifiedinWeaverandWilhoit:interpretive,disseminator,adversarial,andpopularadvocacy.12Basedonthisresult,fourindiceswerecreatedbyaveragingacrosstheitemsineachfactor.Eachindexyieldedanacceptablelevelofreliability(seeAppendixBfordetails).MeasurementofJournalisticroles2021測量并非所有概念都可以被測量，如潛意識、虛假意識、文學(xué)價值等，但是這些概念有助于人們思考問題。測量無所謂對錯，但有好壞之分，好的測量具有以下特征：概念化的闡述清晰、意義明確易于被操作化與研究中的理論設(shè)想具有連慣性符合研究的目的與具體情景22“沒有任何神奇的手法可以把建構(gòu)轉(zhuǎn)變?yōu)榫_的概念定義，這需要仔細的思考、直接的觀察和與其他人交換意見、閱讀其他人所思所言，以及嘗試各種可能的定義。〞單獨的一個設(shè)想可能同時有數(shù)個定義，人們對于這些定義不一定會有完全相同的看法。概念定義常常會與理論架構(gòu)/范式，以及研究的目的相關(guān)，譬如如何界定“社會階級〞？如何界定“好的大學(xué)〞？“媒介暴力〞、“傳播攻擊性〞？某些概念極為抽象和復(fù)雜，本身包含了許屢次級概念或不同的維度/層面，此種概念常常被稱為“構(gòu)念〞(construct)。如何概念化？23如何概念化？盡可能多的在既有文獻和研究中尋找自己所關(guān)注的那個概念，當(dāng)搜集到不同的定義、不同層面的定義與相關(guān)的概念之后，就可以看到這個核心觀念的界限范圍。在此根底上，可以自己為某一個概念下定義，尤其是，需要列出這個概念所需要表達的外延或外在表征，尤其是當(dāng)這個設(shè)想所表達的是一種態(tài)度/感覺/心理狀態(tài)，這些外延的變化范圍，如自高到低等，它們有助于實現(xiàn)操作化。24測量品質(zhì)兩個標準：信度(reliability)和效度(validity)。信度：在不同的時點上屢次測量，產(chǎn)生一致結(jié)果的可能性。譬如，同一份問卷，同一個受訪者填寫兩次結(jié)果會一樣么？它涉及到測量的穩(wěn)定性、內(nèi)在一致性和等價性。你喜歡看武俠片么？“喜歡〞、“不喜歡〞、“說不清楚〞。請在0-100之間標出你喜歡看武俠片的程度？陳述(statement/item)愈是具體實在，那么測量的信度愈高客觀的觀察一般會產(chǎn)生更有信度的結(jié)果看恐怖片受到驚嚇的程度：詢問vs皮膚測試問受訪者的年齡vs查驗其身份證25改善測量信度清晰概念化所有設(shè)想：尤其對復(fù)雜的概念或構(gòu)念必須如此前測－后測法：同樣的受訪者施以兩次測量，將測量的結(jié)果算術(shù)平均多指標測量：將各個指標的分值加總E.g.,AttentiontonewsmediaDoyoupayattentiontonewsontelevision?Doyoupayattentiontonewsinthenewspapers?DoyoupayattentiontonewsontheInternet?Doyoupayattentiontonewsonradio?使用成熟量表：少用自建量表，但在借鑒成熟量表時需要對其加以改造，尤其要注意文化差異問題提高測量層次：盡可能用最精確的等級來測量設(shè)想Research-workerreliabilityInterviewertraininginsurveySupervisinginterviewersinasurveyandrandomcheckingofcompletedinterviewsInter-coderreliabilityincontentanalysis26多指標測量自變量測量因變量測量經(jīng)驗關(guān)聯(lián)？a1a2a3b2b1b3AB27題號項目均值標準差I(lǐng)-Tr**因子載荷Alpha網(wǎng)絡(luò)知識.75IK1我知道“蠕蟲”這種網(wǎng)絡(luò)病毒？.39.49.46.54IK2我知道怎么去對付“蠕蟲”這種網(wǎng)絡(luò)病毒？.20.40.49.58IK3我知道什么是“置頂”？.57.50.46.46*IK4我知道如何將帖子“置頂”？.37.48.38.39*IK5我知道什么是Cookies？.46.50.44.55IK6我知道如何使用Cookies？.23.42.49.60IK7我知道什么是“代理服務(wù)器”？.52.50.49.59IK8我知道如何設(shè)置“代理服務(wù)器”？.26.44.47.58IK9我知道什么是網(wǎng)絡(luò)視頻中的“緩沖”？.91.29.21.20*IK10我知道怎么應(yīng)付網(wǎng)絡(luò)視頻中的“緩沖”這一現(xiàn)象？.53.50.29.31*網(wǎng)絡(luò)經(jīng)歷EX1您使用網(wǎng)絡(luò)大約有多少個月？44.9527.57網(wǎng)絡(luò)自我效能感.78SE1我有信心能在網(wǎng)上搜索到自己所需的信息3.76.82.52.65SE2我有信心通過網(wǎng)絡(luò)來解決實際問題3.38.83.65.79SE3我有把握通過網(wǎng)絡(luò)與人較好的交流3.36.86.43.48*SE4我有信心通過網(wǎng)絡(luò)來完成需要做的事情3.37.79.53.61SE5我覺得自己可較好的使用網(wǎng)絡(luò)設(shè)備3.25.87.57.62SE6即使身邊沒有人幫助，我也能通過網(wǎng)絡(luò)完成相關(guān)工作3.21.88.53.57復(fù)合測量28復(fù)合測量2930研究效度研究的效度主要有兩個：內(nèi)在效度(internalvalidity)vs.外在效度(externalvalidity)。統(tǒng)計效度。內(nèi)在效度：某一個研究設(shè)計是否嚴謹(能排除任何可能混淆的變項)。外在效度：某一個研究結(jié)果能否概化(generalize)至現(xiàn)實情境，或更大現(xiàn)實世界范圍中，也稱之生態(tài)效度(ecologyvalidity)。研究最好能兼顧內(nèi)外在效度，不過通常此二效度很難兼顧。內(nèi)在效度愈強，其外在效度愈弱；外在效度愈強，其內(nèi)在效度愈弱。31測量效度Validityreferstotheextenttowhichanempiricalmeasureadequatelyreflectsthemeaningoftheconceptunderconsideration,orinotherwords,theextenttowhichtheoperationaldefinitionfollowstheconceptualdefinition,orinotherwords,Whetheryouaremeasuringwhatyouwanttomeasure所有的效度都在試圖答復(fù)一個問題：我們是否測量到了我們想測的東西ExamplesofmeasureswithproblematicvalidityAttitudetowardsAmericancultureWhetheronelikesMcDonald’sornot32測量效度FamiliaritywithnewmediatechnologiesNumberofhoursusingtheInternetperdayWillingnesstoexpressanopinionThenumberofdon’tknowanswersgiveninasurveysettingDeferencetogovernmentalauthorityMeasuredbypeople’sattitudetowardsgovernmentalregulationregardingwearingofseatbelt33效度就其核心，測量效度是設(shè)想與其指標間的吻合程度，觸及的是概念與操作定義兩者之間有多契合的問題。然而，“我們永遠無法得到絕對效度的原因，是因為設(shè)想都是抽象的概念，而指標那么是具體的觀察。在我們對于這個世界的精神圖畫與我們在特定時空下所做的特定事物之間，是存在一定距離的。〞效度是程度問題(validitycanbeconsideredasamatterofdegree)。效度是動態(tài)過程的一局部，會隨著證據(jù)的積累與時俱增。如果沒有效度，所有的測量會變得毫無疑義。34效度類別外表效度內(nèi)容效度效標效度并發(fā)效度預(yù)測效度建構(gòu)效度收斂效度互斥效度35外表效度(facevalidity)涵義：外表上來看，人們會相信定義與測量方法是相符的么？用最簡單的也是最根本的主觀判斷的方法，一般根據(jù)測量量表所選的題項來判斷，僅從外表上來觀察判斷其是否能夠代表想要測量的設(shè)想/構(gòu)念。也有人認為外表效度與內(nèi)容效度不同。36內(nèi)容效度(contentvalidity)涵義：測量工具將定義下的所有內(nèi)容都代表出來了么？一個概念定義含有數(shù)個觀念：它是包含觀念與概念的一個“空間〞，測量工具應(yīng)該是概念空間中所有觀念或區(qū)域的樣本或代表。Thedegreetowhichthemeasurehascapturedtherangeofmeaningsrepresentedbytheconcept.37效標效度(criterionvalidity)亦稱效標關(guān)聯(lián)效度、獨立標準效度、準那么效度、參照物效度，····邏輯：效標是一個與量表有密切關(guān)聯(lián)的獨立標準，將量表所測特性看成因變量，將效標看成自變量，所測特性與效標密切相關(guān)的量表才是有效的量表。效標效度的分析方法：考察所測特性(因變量)與效標(自變量)是否有顯著的相關(guān)(相關(guān)分析)或是對效標的不同取值，特性的值是否表，現(xiàn)出顯著的差異。難處：效標確實定并不是一件容易的事，擇效標一般要根據(jù)某種的理論、或某種已經(jīng)得到肯定的結(jié)論。38效標效度臺灣的“蘭嶼民眾傳播行為與現(xiàn)代化程度之研究〞，用離島經(jīng)驗作為測量雅美族人現(xiàn)代化程度的效標。再如：員工士氣與工作滿意度、電視廣告收看與物質(zhì)主義。依效標取得時間的不同，效標關(guān)聯(lián)效度又區(qū)分為“同時(并發(fā))效度〞(concurrentvalidity)與“預(yù)測效度〞(predicativevalidity)二種。39建構(gòu)效度(constructvalidity)針對多重指標的測量工具。關(guān)注的是：如果這個測量工具有效，不同的指標產(chǎn)生的是一致結(jié)果么？尤其是，當(dāng)眾多指標測量的是一個構(gòu)念的不同維度/層面，測量的結(jié)果與預(yù)想的情形是否一樣？建構(gòu)效度分為：收斂效度或趨同效度(convergentvalidity)和區(qū)分效度/互斥效度/歧異效度(discriminantvalidity)。同一個設(shè)想的多個測量指標，產(chǎn)生相同的測量結(jié)果或類似的模式；不同設(shè)想的多個測量指標產(chǎn)生不同甚至相反的結(jié)果或負相關(guān)。40相對優(yōu)越性相對不利性形象可察性易用性公眾的移動電話創(chuàng)新特征感知理論構(gòu)想相對優(yōu)越性-易用性-可察性相對不利性形象公眾的移動電話創(chuàng)新特征感知真實世界建構(gòu)效度的例子41題項因子一因子二因子三移動電話可以讓我隨時隨地聯(lián)系我想要聯(lián)系的人.822－.119.026移動電話讓我的工作更有效率、生活更加便利.867－.033.050移動電話用起來很簡單.580－.396.300我很快就學(xué)會了怎樣用移動電話.560－.472.242用移動電話的好處是很明顯的.786－.056.193我覺得很容易向別人介紹用移動電話的好處.751－.314.200用移動電話是時尚的標志.091－.163.904如果不用移動電話，我會覺得很沒有面子.227－.163.867