對(duì)360度反饋評(píng)價(jià)系統(tǒng)偏差的矯正研究

1、對(duì)360度反饋評(píng)價(jià)系統(tǒng)偏差的矯正研究鐘 衛(wèi) 袁 衛(wèi)摘要：360度反饋評(píng)價(jià)作為一種新的業(yè)績(jī)改進(jìn)方法在一些大公司里得到了廣泛的應(yīng)用。但是，在使用該方法時(shí)，如何消除由于評(píng)價(jià)者的因素和評(píng)分尺度的不同，所造成的異常評(píng)分和評(píng)分者間的不一致性問(wèn)題，一直是研究者關(guān)注的問(wèn)題。本文從統(tǒng)計(jì)分析的角度，結(jié)合實(shí)際案例，提出用剔除離群值和標(biāo)準(zhǔn)化的辦法來(lái)消除這種系統(tǒng)偏差。關(guān)鍵詞：360度反饋評(píng)價(jià)、系統(tǒng)偏差、離群值、標(biāo)準(zhǔn)化A Study on the Correction of Systemic Bias of 360-degree Feedback AssessmentAbstract：As a new method of

2、 improving on achievement, 360-degree Feedback Assessment has been widely used in some big companies. However, how to eliminate the impact of abnormal grades and disagreement among raters caused by different raters and different scales is a focus when we use the method. From the point of view of sta

3、tistics, the author, by using a case, puts forward that removing the outliers and standardization can adjust the systemic bias.Key words：360-degree Feedback Assessment、systemic bias、outliers、standardization.360度反饋評(píng)價(jià)（360-degree feedback assessment），也稱(chēng)為全方位反饋評(píng)價(jià)(multi-rater assessment)或多源反饋評(píng)價(jià)(multi-sour

4、ce feedback assessment,簡(jiǎn)稱(chēng)MSF)。 Romano C. Conquering the fear of feedback. Human Resource Focus; 1994,71(3),327-341.傳統(tǒng)的績(jī)效評(píng)價(jià)，主要由被評(píng)價(jià)者的上級(jí)對(duì)其進(jìn)行評(píng)價(jià)；而360度反饋評(píng)價(jià)則由與被評(píng)價(jià)者有密切關(guān)系的人，包括被評(píng)價(jià)者的上級(jí)、下級(jí)、自己、同事等,有時(shí)甚至包括顧客(包括外部顧客和內(nèi)部顧客)等，分別匿名對(duì)被評(píng)價(jià)者進(jìn)行評(píng)價(jià)。然后，由專(zhuān)業(yè)人員根據(jù)有關(guān)人員對(duì)被評(píng)價(jià)者的評(píng)價(jià)，對(duì)比被評(píng)價(jià)者的自我評(píng)價(jià)向被評(píng)價(jià)者提供反饋，以幫助被評(píng)價(jià)者提高其能力水平和業(yè)績(jī)。作為一種新的業(yè)績(jī)改進(jìn)方法，360度

5、反饋評(píng)價(jià)，由于其信息來(lái)源的多樣性,反饋的準(zhǔn)確性、客觀性和全面性等優(yōu)點(diǎn)得到了廣泛的應(yīng)用。Fortune 500強(qiáng)所有的企業(yè)都已經(jīng)采用了這種評(píng)價(jià)方法。 360度反饋，來(lái)自中國(guó)管理傳播網(wǎng)：目前，國(guó)內(nèi)的一些企業(yè)也開(kāi)始采用這種評(píng)價(jià)方法。但是，該方法在使用時(shí)，也存在著一些不足。一、360度反饋評(píng)價(jià)存在的不足及一般的矯正方法從現(xiàn)有的資料看，360度反饋評(píng)價(jià)主要存在以下問(wèn)題：（1）、評(píng)價(jià)者的個(gè)人偏見(jiàn)導(dǎo)致評(píng)分偏差。王丹、周曙. 360度考核的應(yīng)用探析.商業(yè)研究，2003，6：22-24偏見(jiàn)常表現(xiàn)在以年齡、性別、其他社會(huì)群體及成員的認(rèn)識(shí)和態(tài)度的問(wèn)題上。在績(jī)效考核中,被評(píng)者之間的個(gè)人差異(主要是指年齡、種族和性別這

6、一類(lèi)個(gè)人特點(diǎn)方面的差異),有時(shí)候也會(huì)影響他們所得到的評(píng)價(jià),甚至?xí)?dǎo)致他們所得到的評(píng)價(jià)大大偏離他們的實(shí)際工作績(jī)效。（2）、利害關(guān)系的權(quán)衡會(huì)使評(píng)分失真。王丹.周曙. 360度考核的應(yīng)用探析.商業(yè)研究，2003，6：22-24在考核過(guò)程中,會(huì)出現(xiàn)有因維護(hù)自己的自尊、同事競(jìng)爭(zhēng)、下級(jí)對(duì)上級(jí)權(quán)威的懼怕感而使考評(píng)有偏移。例如, 可能會(huì)給自己較高的評(píng)價(jià)，而給其他人以較低的評(píng)價(jià)；可能會(huì)給跟自己關(guān)系好的被評(píng)價(jià)者以較高的評(píng)價(jià)，給跟自己關(guān)系不好的被評(píng)價(jià)者以較低的評(píng)價(jià)。（3）、信息來(lái)源的多樣性導(dǎo)致評(píng)分尺度不同。360度反饋評(píng)價(jià)由于其評(píng)價(jià)角度的多元化，不同的評(píng)價(jià)者所能夠觀察到的被評(píng)價(jià)者的工作績(jī)效側(cè)面各不相同,或者由于他們

7、的評(píng)價(jià)標(biāo)準(zhǔn)不同,對(duì)被評(píng)價(jià)者的同一面有著不同的評(píng)價(jià)。 時(shí)雨等. 360度反饋評(píng)價(jià)結(jié)構(gòu)和方法的研究，科研管理，2002，9：124-129對(duì)于由以上原因造成的360度反饋評(píng)價(jià)可靠性較差的問(wèn)題,許多文章建議從以下角度進(jìn)行改進(jìn),以使360度考核更真實(shí)、公正、可信。這主要包括：（1）、在考評(píng)時(shí)應(yīng)將這些360度反饋工具分發(fā)給那些做誠(chéng)實(shí)回答的考評(píng)人，那些提供過(guò)高或過(guò)低情況的員工不適合參加考評(píng)； 馮明. 360度反饋及其操作、研究和應(yīng)用. 外國(guó)經(jīng)濟(jì)與管理.1998,11：8-12（2）、對(duì)評(píng)價(jià)者進(jìn)行指導(dǎo)和培訓(xùn)，讓評(píng)價(jià)者對(duì)被評(píng)價(jià)者的職位角色有所了解，讓評(píng)價(jià)者知道如何來(lái)做出正確的評(píng)價(jià)，讓評(píng)價(jià)者知道在評(píng)價(jià)的過(guò)程中經(jīng)

8、常會(huì)犯哪些錯(cuò)誤。360度反饋，來(lái)自中國(guó)管理傳播網(wǎng)：誠(chéng)然，上述措施在一定程度上能消除評(píng)價(jià)者的因素和評(píng)分尺度的不同所造成的偏差，但是要想完全消除這些不足，僅靠選擇、指導(dǎo)和培訓(xùn)評(píng)估者顯然是不夠的。下文給合國(guó)內(nèi)某家公司做360度反饋評(píng)價(jià)的實(shí)際案例，說(shuō)明如何消除這種評(píng)價(jià)方法的系統(tǒng)偏差。二、原始評(píng)分的系統(tǒng)偏差及原因教育統(tǒng)計(jì)學(xué)中有這樣一個(gè)基本假設(shè)：“教育問(wèn)題中，往往出現(xiàn)樣本容量大，因而可能利用大數(shù)法則(law of large numbers)以近似的途徑作替代的統(tǒng)計(jì)分析”。 教育統(tǒng)計(jì)學(xué)，來(lái)自中國(guó)教育學(xué)科站點(diǎn)： 。作者：佚名。所以，當(dāng)參加某項(xiàng)測(cè)試或打分的人數(shù)足夠多時(shí)，可以假定這些分值近似服從正態(tài)分布。這是評(píng)

9、價(jià)打分質(zhì)量好壞的一個(gè)重要標(biāo)志。假設(shè)該公司為每個(gè)被評(píng)估崗位量身定做了4個(gè)緯度的20項(xiàng)能力要求的問(wèn)卷，以Average來(lái)表示每個(gè)被評(píng)估者在這20個(gè)問(wèn)題上得分的平均值，共計(jì)有3235條員工間互評(píng)的記錄。下面從兩個(gè)角度考察原始評(píng)分的偏差。1、Average分布總體概況以3235條互評(píng)記錄為考察對(duì)象，分別作出直方圖和箱線(xiàn)圖。 對(duì)箱線(xiàn)圖的解釋?zhuān)簭木€(xiàn)的最小值到盒子的開(kāi)始包含了1/4的觀測(cè)值，從盒子的開(kāi)始到盒子中間的線(xiàn)包含了1/4的觀測(cè)值，從這條線(xiàn)到盒子的結(jié)束包含了1/4的觀測(cè)，從盒子的結(jié)束到線(xiàn)的結(jié)束，包含了剩余的1/4觀測(cè)。超過(guò)1.5倍的四分位數(shù)間距為離群值，以“O”表示；超過(guò)3倍的是極值，以“*”表示。其

10、后的數(shù)值表示其在總體中的位置。找離群值的辦法：先計(jì)算兩個(gè)四分位點(diǎn)的距離，再乘以1.5倍，然后用這個(gè)值分別加上四分位數(shù)、減下四分位數(shù)即得上下離群值的范圍從直方圖看，存在一定程度的左偏；曲線(xiàn)不光滑；打45的人較多。從箱線(xiàn)圖看，只存在一些低的離群值和極值；該圖形不對(duì)稱(chēng)。2、每個(gè)被評(píng)估者得分情況以每個(gè)被評(píng)估者為考察對(duì)象，分別作出直方圖和箱線(xiàn)圖。從直方圖看，有點(diǎn)左偏，曲線(xiàn)不光滑。從箱線(xiàn)圖看，只存在低的離群值，而無(wú)高的離群值。正如前文中所提到的，造成上述系統(tǒng)偏差的主要原因有：第一,部分評(píng)價(jià)者給出了不合理的評(píng)分。這包括：（1）有些評(píng)價(jià)者對(duì)所有被評(píng)估者都給出了相同的評(píng)分；（2）一些部門(mén)的評(píng)分要明顯高于其他部門(mén)

11、；（3）整體上，打高分的紀(jì)錄數(shù)過(guò)多。約62.4%的評(píng)分都在4分以上，這就導(dǎo)致均值過(guò)于靠后，從而打分的區(qū)分度不夠。第二，評(píng)價(jià)者的心理因素嚴(yán)重影響了評(píng)分。從均值看，給上級(jí)的打分要高于給同事的打分，更高于給下級(jí)的打分。這種現(xiàn)象固然有對(duì)上級(jí)業(yè)績(jī)的肯定，但無(wú)法排除下級(jí)因心理上的恐懼而不得不給上級(jí)打高分的可能。第三，評(píng)分尺度的不同造成了嚴(yán)重的偏差。由于不同的評(píng)價(jià)者具有不同的評(píng)分尺度，有些評(píng)估者對(duì)所有的人打分都很緊，有些評(píng)估者對(duì)所有的人打分都很松，還有些評(píng)估者對(duì)部分人打分松，部分人打分緊，這就造成了原始分?jǐn)?shù)的不穩(wěn)定。當(dāng)用這些原始分?jǐn)?shù)進(jìn)行簡(jiǎn)單平均以考察每個(gè)被評(píng)估者的績(jī)效時(shí)，會(huì)存在問(wèn)題。這是因?yàn)椴煌u(píng)價(jià)者的原始

12、評(píng)分的標(biāo)準(zhǔn)不同、內(nèi)容不同,所反映的意義也不同，從而結(jié)果也就不盡合理了。所以，在對(duì)員工進(jìn)行評(píng)估時(shí)，不能簡(jiǎn)單地用原始數(shù)據(jù)進(jìn)行分析，需要調(diào)整。三、對(duì)原始數(shù)據(jù)的調(diào)整和標(biāo)準(zhǔn)化1、需要?jiǎng)h除的記錄有三類(lèi)評(píng)分記錄需要?jiǎng)h除：（1）、對(duì)所有的被評(píng)估者均給出了相同的分?jǐn)?shù)，也即標(biāo)準(zhǔn)差為0。結(jié)果有11個(gè)評(píng)估者，72條記錄被刪除。（2）、標(biāo)準(zhǔn)差不存在。這是指只給一個(gè)人評(píng)分，看不出他的尺度。有一條記錄被刪除。（3）、對(duì)評(píng)估者和被評(píng)估者來(lái)說(shuō)都是異常值。如果一個(gè)分值對(duì)于評(píng)估者來(lái)說(shuō)是異常的低（高）值，但對(duì)于這個(gè)被評(píng)估者來(lái)說(shuō)卻是正常值，這條評(píng)分記錄不能刪除。同樣，如果一個(gè)分值對(duì)于被評(píng)估者來(lái)說(shuō)是異常的低（高）值，但對(duì)于評(píng)估者來(lái)說(shuō)卻是

13、正常值，這條評(píng)分記錄也不能刪除。符合對(duì)評(píng)估者和被評(píng)估者來(lái)說(shuō)都是異常值的記錄有11條。經(jīng)過(guò)刪除后，還剩下3151條記錄。2、標(biāo)準(zhǔn)化 王進(jìn)忠.張秀卿. 標(biāo)準(zhǔn)分及其應(yīng)用.教學(xué)與管理。2001.3：95-97不同的評(píng)估者一般有不同的均值和標(biāo)準(zhǔn)差。統(tǒng)計(jì)上，均值和標(biāo)準(zhǔn)差不同時(shí)，一個(gè)評(píng)估者的值不能與另一個(gè)評(píng)估者的值相比較。一個(gè)粗淺的解決辦法就是將不同的評(píng)分者變換到同一個(gè)尺度下，也即將原始得分轉(zhuǎn)化為標(biāo)準(zhǔn)分。標(biāo)準(zhǔn)分是一種由原始分推導(dǎo)出來(lái)的相對(duì)地位量數(shù),是用來(lái)說(shuō)明原始分在所屬的那批分?jǐn)?shù)中的相對(duì)位置的，其本質(zhì)是一種與位置狀況相聯(lián)系的相對(duì)分?jǐn)?shù)。它在計(jì)算時(shí), 是以某一個(gè)評(píng)分者所有評(píng)分的均值作為參照點(diǎn),以這個(gè)評(píng)分者的標(biāo)準(zhǔn)

14、差作為單位來(lái)表示距離的。其基本公式是: 式中，為某一評(píng)分者的一個(gè)評(píng)分，和分別表示該評(píng)分者的所有評(píng)分的均值和標(biāo)準(zhǔn)差。Z分?jǐn)?shù)由正負(fù)號(hào)和絕對(duì)數(shù)值兩個(gè)部分組成，正負(fù)號(hào)說(shuō)明原始分是大于還是小于平均數(shù)；絕對(duì)數(shù)值說(shuō)明原始分距離平均分?jǐn)?shù)的遠(yuǎn)近程度。一批分?jǐn)?shù)全部轉(zhuǎn)換成Z分?jǐn)?shù)后,它們的整個(gè)分布形態(tài)并沒(méi)有發(fā)生改變。Z分?jǐn)?shù)能準(zhǔn)確刻畫(huà)一個(gè)分?jǐn)?shù)在一批分?jǐn)?shù)中的相對(duì)位置。為了體現(xiàn)公平、公正的原則，TOEFL考試的成績(jī)、部分省市的高考分?jǐn)?shù)等，都是按照上述方法，將原始分轉(zhuǎn)化成標(biāo)準(zhǔn)分。用此方法對(duì)所有的評(píng)分者的評(píng)分進(jìn)行標(biāo)準(zhǔn)化，得到3151條新記錄。四、系統(tǒng)偏差矯正后的分布1、Average分布總體概況（1）、直方圖這個(gè)直方圖較未修勻的圖形顯得較平滑，左偏程度也較原圖形小。從箱線(xiàn)圖看，存在一些低的離群值和一些高的離群值，都無(wú)極值,該圖形近似對(duì)稱(chēng)。2、每個(gè)被評(píng)估者得分情況（1）、直方圖直方圖看上去較未調(diào)整之前的圖形平滑得多，箱線(xiàn)圖也呈現(xiàn)出高低離群值都有的一種近似對(duì)稱(chēng)的布局。五、結(jié)論從上述矯正前后的直方圖和箱線(xiàn)圖看，修勻后數(shù)據(jù)的質(zhì)量明顯比修勻前要高，這就驗(yàn)證了剔除離群值和標(biāo)準(zhǔn)化的辦法起到了作用。另外，通過(guò)比較標(biāo)準(zhǔn)化前后每