信息化教學(xué)資源績效評價研究

1、    信息化教學(xué)資源績效評價研究          摘要：本文分析了目前我國信息化教學(xué)資源績效評價中存在的問題，在參考國內(nèi)外學(xué)者對網(wǎng)絡(luò)信息資源評價的研究基礎(chǔ)上，借鑒績效評價的思想與方法探討信息化教學(xué)資源績效評價的問題與對策，并提出了信息化教學(xué)資源的評價內(nèi)容、評價指標(biāo)體系和評價方法。關(guān)鍵詞：校園網(wǎng)，教育信息資源，績效評價，評價內(nèi)容，評價方法一、引言當(dāng)前，國內(nèi)外高度重視教育信息化，將教育信息化作為推動教育改革，提升高校綜合實力的重要舉措。在目前校園網(wǎng)硬件建設(shè)已具有一定

2、規(guī)模，教育信息化基礎(chǔ)設(shè)施建設(shè)已基本完善的基礎(chǔ)上，信息化教學(xué)資源的優(yōu)化配置與高效開發(fā)利用已成為高校教育信息化的核心要素。信息化教學(xué)資源打破了傳統(tǒng)教學(xué)中時空的限制，為學(xué)習(xí)者提供了個性化的學(xué)習(xí)環(huán)境，以多媒體形式呈現(xiàn)學(xué)習(xí)內(nèi)容，以交互方式實施學(xué)習(xí)活動，實現(xiàn)學(xué)習(xí)資源的共享。根據(jù)現(xiàn)代遠程教育工程教育資源建設(shè)技術(shù)規(guī)范，教育信息資源可以分為以下八類：媒體素材庫、試題庫、網(wǎng)絡(luò)課件庫、案例庫、文獻資料庫、問題解答庫、資源目錄索引庫、網(wǎng)絡(luò)課程庫?？冃?，從語言學(xué)的角度來看，包含有成績和效益的意思。是一個組織或個人在一定時期內(nèi)的投入產(chǎn)出情況，投入的是人力、物力、時間等物質(zhì)資源，產(chǎn)出指的是工作任務(wù)在數(shù)量、質(zhì)量及效率方面的完

3、成情況。1績效評價是指運用數(shù)理統(tǒng)計、運籌學(xué)原理和特定指標(biāo)體系，對照預(yù)先制定好的標(biāo)準(zhǔn)和目標(biāo)，按照一定的程序，通過定量定性對比分析，對項目在一定期間的經(jīng)營效益和經(jīng)營者業(yè)績做出客觀、公正和準(zhǔn)確的綜合評判，系統(tǒng)地評價其有效性（質(zhì)量）的過程。2績效評價在企業(yè)管理理論中有時也稱作績效測度，本文引入企業(yè)管理理論中的績效評價，借鑒績效評價的思想與方法探討信息化教學(xué)資源的績效評價的問題與對策。二、高校信息化教學(xué)資源績效評價研究中存在的問題及原因根據(jù)績效評價的定義，信息化教學(xué)資源績效評價可以概括為：評價主體依據(jù)一定的標(biāo)準(zhǔn)和體系，運用績效評價的有關(guān)理論和方法，依據(jù)客觀事實和數(shù)據(jù)，通過定量和定性分析的方法，對信息化教

4、學(xué)資源的效益和效能做出客觀、公正和準(zhǔn)確判斷的過程，通過績效評價來驗證與促進資源建設(shè)和服務(wù)質(zhì)量，提高資源利用率，實現(xiàn)資源質(zhì)量的科學(xué)管理。其中信息化教學(xué)資源評價的主體與客體可互為轉(zhuǎn)化，二者是積極互動的關(guān)系。從目前國內(nèi)外對信息化教學(xué)資源績效評價的研究來看，關(guān)于信息化教學(xué)資源績效評價模型和方法的文獻較少，基礎(chǔ)理論和實證研究均遠遠滯后于資源開發(fā)技術(shù)的蓬勃發(fā)展。國內(nèi)針對績效評價的研究極其有限，主要是以個人進行的國內(nèi)外文獻研究的理論探討為主，研究重點在信息化教學(xué)資源理論體系構(gòu)建方面，如評價指標(biāo)體系的建立、評價方法等方面，3績效評價和績效評價指標(biāo)建立目前僅處于探討階段，沒有出現(xiàn)系統(tǒng)的理論及方法研究的文獻，也沒

5、有形成一個成熟的評價理論和實際評價模式，研究信息化教學(xué)資源成本效益的實證研究相對缺乏，遠未達到深入系統(tǒng)的理論研究和應(yīng)用層面，這些問題的原因主要包括：1.信息化教學(xué)資源種類繁多，更新速度快，評價的標(biāo)準(zhǔn)難以跟上其發(fā)展速度首先，信息化教學(xué)資源的特點是資源眾多、內(nèi)容豐富、海量存儲、資源分散、具有多種表現(xiàn)形式和類別、數(shù)據(jù)類型復(fù)雜等，由于不同的資源有不同的標(biāo)準(zhǔn)與要求，因此很難用統(tǒng)一的信息化教學(xué)資源評價標(biāo)準(zhǔn)來進行資源的評價；其次，信息化教學(xué)資源發(fā)展迅速，更新頻繁，時效性強，資源平臺與資源種類不斷推陳出新，評價標(biāo)準(zhǔn)和方法跟不上動態(tài)變化的資源發(fā)展速度，資源種類的多樣性和復(fù)雜性造成了確定資源評價標(biāo)準(zhǔn)的困難與評價方

6、法的相對滯后；此外，信息化教學(xué)資源無中心控制、組織松散、分散無序、可被輕易復(fù)制和廣泛傳播等特點，使資源績效難以用統(tǒng)一的度量標(biāo)準(zhǔn)量化。2.信息化教學(xué)資源投入與產(chǎn)出的經(jīng)濟效益難以量化信息化教學(xué)資源是一種具有一定公益性質(zhì)的資源，是用來滿足教育教學(xué)需要的，教育機構(gòu)作為非營利性機構(gòu)，既無提高資源利用率的動力，又無提高效率的壓力，所以教育效率的問題長期被人們所忽視。4盡管有學(xué)者提出過教育資源利用率的問題，但目前還沒有形成系統(tǒng)的理論，也沒有具體的評價指標(biāo)。資源的布局是否合理？用戶的信息需求是否得到最大限度的滿足？資源的共享程度和資源的創(chuàng)造性如何？學(xué)生在應(yīng)用了信息化教學(xué)資源后的效果如何？這些問題是與教育資源績

7、效密切聯(lián)系的，但這些問題卻難以在短時間內(nèi)進行衡量，需要長時間的追蹤才能收集到相關(guān)的數(shù)據(jù)，進行統(tǒng)計后才能做出科學(xué)的結(jié)論，因此，很難在短時間內(nèi)對信息化教學(xué)資源做出全面、客觀、系統(tǒng)的評價。3.探討信息化教學(xué)資源成本效益的研究相對缺乏信息化教學(xué)資源的存在形式與傳統(tǒng)經(jīng)濟學(xué)中討論的一般物品有很大區(qū)別，與一般的信息資源也有很大的區(qū)別，除了具備一般信息資源的屬性，如共享性、可被多次復(fù)制和廣泛傳播、具有知識性和時效性等性質(zhì)外，還有多媒體的表現(xiàn)形式、迅速便捷的獲取方式、廣泛互動的傳播方式；與傳統(tǒng)教育資源相比，具有服務(wù)對象的不確定性等，這就造成了資源可比性方面的困難，從而造成現(xiàn)在的評估指標(biāo)、概念不統(tǒng)一，缺乏普適性。

8、因此，信息化教學(xué)資源評價是一項全新的工作，雖然可以借鑒以往對傳統(tǒng)信息資源評價的標(biāo)準(zhǔn)，但由于兩者存在的差異相當(dāng)大，所以并沒有現(xiàn)成的經(jīng)驗可以直接借鑒和參考。應(yīng)從哪些方面進行評價，至今還沒有權(quán)威的標(biāo)準(zhǔn)，一切都在不斷摸索中前進。5三、高校信息化教學(xué)資源績效評價的對策信息化教學(xué)資源的績效評價是一個復(fù)雜的綜合評價過程，應(yīng)該從內(nèi)容角度、經(jīng)濟角度、技術(shù)角度和社會角度來研究資源的績效。盡管目前國內(nèi)外在網(wǎng)絡(luò)信息資源績效評價方面開展的研究還沒有形成一個成熟的評價理論和實際評價模式，但其中電子資源績效評價指標(biāo)的制定以及具體實施為信息化教學(xué)資源績效評價研究提供了寶貴的經(jīng)驗，研究成果可供參考。Bertot和McClure

9、（1999）為ARL建議的電子資源績效評價框架有資源內(nèi)容、資源服務(wù)和技術(shù)支撐三個組成部分。國內(nèi)的許多專家學(xué)者和教育工作者也曾進行過類似研究，其中，董小英總結(jié)出評價的9項標(biāo)準(zhǔn)：信息的準(zhǔn)確性、信息發(fā)布者的權(quán)威性、提供信息的廣度和深度、主頁中的鏈接是否可靠和有效、版面設(shè)計質(zhì)量、信息的時效性、讀者對象、信息的獨特性、主頁的可操作性；6張詠提出了比較具體的評價標(biāo)準(zhǔn)，包括：可信性（權(quán)威性、目的性、公正性、利益傾向性、內(nèi)容相關(guān)性及效用性、質(zhì)量控制），信息內(nèi)容（準(zhǔn)確性、完整性、時效性與存檔性、信息組織與寫作），鏈接質(zhì)量（鏈接內(nèi)容、鏈接的表現(xiàn)形式），易用程度（界面友好性、查詢與檢索性能、交互性能），站點美觀和多

10、媒體設(shè)計，反饋與交流，可達性。7可見，國內(nèi)外學(xué)者關(guān)于資源績效評價的一些已有研究成果可以為評判信息化教學(xué)資源的質(zhì)量、服務(wù)和適用性提供科學(xué)的理論指導(dǎo)和支撐。信息化教學(xué)資源績效除了考慮內(nèi)容、質(zhì)量、技術(shù)等因素外，還要考慮資源的投入成本、資源的服務(wù)、資源的利用與共享和資源所產(chǎn)生的效能等方面的內(nèi)容，并據(jù)此進行綜合績效評價。此外，信息化教學(xué)資源評價還必須包括教育教學(xué)的有關(guān)屬性，符合教育教學(xué)資源的有關(guān)標(biāo)準(zhǔn)，有明確的教學(xué)目標(biāo)與對象，有先進教育理論指導(dǎo)，傳遞正確的教學(xué)內(nèi)容，支持教師的教學(xué)，提供學(xué)習(xí)工具，為學(xué)習(xí)者提供全方位、全過程的學(xué)習(xí)支持服務(wù)，提供對學(xué)習(xí)者學(xué)習(xí)過程的監(jiān)控。在明確績效評價研究的內(nèi)容后，還要建立全面系

11、統(tǒng)的評價指標(biāo)體系，最后要選用科學(xué)的評價方法。1.明確信息化教學(xué)資源績效評價內(nèi)容信息化教學(xué)資源績效評價應(yīng)該從資源的投入成本與產(chǎn)出來進行評估。信息化資源的投入包括資源的購買或開發(fā)制作、技術(shù)設(shè)備支持、正常運營成本；產(chǎn)出包括學(xué)生學(xué)習(xí)績效、經(jīng)濟效益、社會附加效益的提高等等。提高資源績效意味著應(yīng)降低成本，提高資源的建設(shè)質(zhì)量和利用效率，優(yōu)化資源配置。據(jù)此，資源績效評價內(nèi)容應(yīng)包括資源投入成本、信息質(zhì)量、教育科學(xué)性、資源的建設(shè)與共享、資源利用與服務(wù)、資源的獲得、師生信息資源素養(yǎng)、技術(shù)支撐等方面的內(nèi)容。資源投入成本：資源投入成本包括經(jīng)費投入、人員投入、管理投入成本等。具體包括資源購買或制作的價格、軟件和硬件的購置

12、費用、資源制作人員總數(shù)、教師培訓(xùn)人次及教育培訓(xùn)費用、資源管理人員總數(shù)、管理人員培訓(xùn)費用、資源維護更新的費用、資源庫服務(wù)成本、人均服務(wù)成本、受指導(dǎo)的師生用戶人數(shù)、指導(dǎo)用戶使用和獲取資源的小時數(shù)等等。信息質(zhì)量：包括資源導(dǎo)航設(shè)計、信息組織、提供信息的廣度和深度、資源的全面性、準(zhǔn)確性、權(quán)威性、時效性、交互性、藝術(shù)性、畫面的美觀性、獨特性、內(nèi)容更新頻率等。教育科學(xué)性：包括教學(xué)目標(biāo)、對象、教學(xué)內(nèi)容、教學(xué)策略支持、教學(xué)管理與學(xué)習(xí)評估系統(tǒng)、學(xué)習(xí)輔助工具，資源形式和內(nèi)容，信息的科學(xué)性、真實性、可靠性、主題多樣性以及實用性等因素。資源的建設(shè)與共享：包括資源自主開發(fā)性、區(qū)域共享范圍與級別、資源的共享范圍與級別、學(xué)科

13、共享性、不同信息類型資源的共享程度。資源利用與服務(wù)：資源利用體現(xiàn)在用戶需求、登錄次數(shù)、檢索次數(shù)和下載次數(shù)、校人均使用的次數(shù)、全文下載量；8資源的服務(wù)體現(xiàn)在用戶滿意程度、幫助與導(dǎo)航、維護更新服務(wù)、規(guī)范化與標(biāo)準(zhǔn)化程度、服務(wù)時間、資源應(yīng)用于各種教學(xué)活動學(xué)時數(shù)等方面。資源的獲得：資源的獲得包括資源的數(shù)量和資源檢索系統(tǒng)功能。資源的數(shù)量指標(biāo)包括學(xué)科覆蓋率、資源的數(shù)據(jù)量、資源信息的類型、資源重復(fù)率；資源檢索系統(tǒng)功能指資源檢索界面的友好程度、用戶檢索的易用性和方便性、檢索系統(tǒng)的并發(fā)用戶或在線用戶數(shù)控制、用戶服務(wù)鏈接的可靠與有效性等。師生信息資源素養(yǎng)：衡量的指標(biāo)主要有師生資源信息素養(yǎng)測評、學(xué)校信息化發(fā)展規(guī)劃等。

14、9技術(shù)支撐：主要的指標(biāo)有采用的數(shù)據(jù)庫管理技術(shù)、資源的上傳、下載、瀏覽、審核、查詢、刪除、可操作性、使用分析，數(shù)據(jù)的可得性、資源的安全性、穩(wěn)定性、規(guī)范性、便捷性等。2.建立全面系統(tǒng)的評價指標(biāo)體系由于信息化教學(xué)資源績效評價具有多種影響因素，是一個綜合的評價系統(tǒng)，在研究信息化教學(xué)資源績效評價、建立評價指標(biāo)體系時，既要有定性的指標(biāo)，又要有定量的指標(biāo)；指標(biāo)體系應(yīng)考慮主觀因素，也應(yīng)考慮客觀因素。盡管信息化教學(xué)資源的類型多種多樣，但其中一些指標(biāo)是所有的資源所必須具備的，因此我們可以先建立信息化教學(xué)資源所必須具備的基本指標(biāo)項，然后，再根據(jù)不同的資源信息類型（如多媒體素材、網(wǎng)絡(luò)課程和其他的教學(xué)數(shù)據(jù)）進行指標(biāo)項的

15、調(diào)整，并對不同的指標(biāo)項分配不同的權(quán)重，從而建立評價指標(biāo)（如表所示）。 在建立信息化教學(xué)資源績效評價指標(biāo)后，還要對各項指標(biāo)分配權(quán)重，形成評價指標(biāo)體系，目前，對指標(biāo)權(quán)重的分配可采用問卷調(diào)查法、層次分析法、模糊分析法、加權(quán)平均法、數(shù)據(jù)包絡(luò)分析方法等。3.選用科學(xué)的信息化教學(xué)資源績效評價方法對信息化教學(xué)資源的評價方法主要有定性評價和定量評價兩類方法。目前，大多數(shù)學(xué)者都提出信息化教學(xué)資源的定性與定量相結(jié)合的評價方法。定性評價方法是一種較為成熟的評價方法。定性評價方法大多集中于評價指標(biāo)的確定。10通過按照一定的評價原則、標(biāo)準(zhǔn)、指標(biāo)對信息化資源進行評價，目前已有許多國內(nèi)外專家提出了評價信息化資源的

16、原則、標(biāo)準(zhǔn)、評價指標(biāo)，但定性評價方法存在較強的主觀性，指標(biāo)項的設(shè)置和權(quán)重的分配往往會跟隨評價標(biāo)準(zhǔn)的制定者而變化。問卷調(diào)查法是一種信息化教學(xué)資源的常用方法，問卷調(diào)查通常有抽樣調(diào)查和在線調(diào)查等形式。由于問卷調(diào)查的信度和效度容易受問卷的設(shè)計、評價標(biāo)準(zhǔn)、抽樣方法、樣本數(shù)量、樣本分布和網(wǎng)絡(luò)環(huán)境等多種因素所制約，因此，調(diào)查結(jié)果并不能全面準(zhǔn)確反映資源的質(zhì)量，在實施評價工作時需要花費較多的時間、人力、物力和財力，成本高，從而使得這種評價方法的可操作性較差，也難以適應(yīng)大量資源評價的需要，評價結(jié)果的可靠性也較低。定量評價是從客觀量化角度、按照數(shù)量分析方法對信息化教學(xué)資源進行優(yōu)選和評價，常見的定量評價方法是網(wǎng)絡(luò)計量

17、法。其中“網(wǎng)絡(luò)影響因子”（Web Impact Factor，WIF）一詞由丹麥皇家圖書信息學(xué)院的Peter Ingwersen提出。目前，一般是利用網(wǎng)上自動搜集和整理網(wǎng)站信息的評估工具，實現(xiàn)網(wǎng)站的訪問量統(tǒng)計和鏈接情況統(tǒng)計，通過對被訪問服務(wù)器的訪問數(shù)字進行統(tǒng)計分析，以此對網(wǎng)站排序，或者通過搜索引擎完成網(wǎng)站被鏈接次數(shù)的統(tǒng)計及排序。通過對網(wǎng)上信息進行定量描述和統(tǒng)計分析揭示資源的數(shù)量特征和內(nèi)在規(guī)律，從客觀量化角度對資源進行優(yōu)選與評價，這種評價方法具有方便、快速、客觀公正、評價范圍廣等優(yōu)點，是信息資源評價的一個發(fā)展方向。11對信息化資源常用的評價方法還包括第三方評價法、層次分析法（AHP）、模糊分析法

18、、加權(quán)平均法、數(shù)據(jù)包絡(luò)分析方法（DEA）等。第三方評價法是由第三方介入的針對資源所有者以及用戶所做的定性與定量相結(jié)合的電子資源評價方法。主要形式有兩類：第一類是商業(yè)性的專業(yè)網(wǎng)絡(luò)信息資源評價網(wǎng)站（如Magellan Internet Guide、LycosTop5%等）。第二類是面向?qū)W術(shù)研究人員、對學(xué)術(shù)信息資源進行評價的網(wǎng)站（如ADAM、EELS、SOSIG）等；7層次分析法是利用人們的常規(guī)思維來處理問題，將一個復(fù)雜問題分解成若干個小問題，并充分利用人們分析、判斷和綜合問題的能力，對復(fù)雜問題進行量化。該方法通過對網(wǎng)站的屬性進行概念劃分，利用專家調(diào)查法來取得數(shù)據(jù)和權(quán)重，通過評分，確定網(wǎng)站的級別或排

19、名；12模糊分析法是考慮到信息資源評價是一個綜合評價的過程，需要考慮多種因素的影響作用，而且這些因素往往具有一定程度的模糊性；加權(quán)平均法是考慮到各項指標(biāo)的適用對象或范圍。利用“調(diào)查求重”的方法求得各指標(biāo)的權(quán)重，然后利用加權(quán)平均的思想得出網(wǎng)絡(luò)信息評價。指標(biāo)體系既有定性指標(biāo)，也有定量指標(biāo)；既考慮到網(wǎng)絡(luò)信息資源的外部特征，也考慮到其內(nèi)部特征，即信息的內(nèi)容屬性；13數(shù)據(jù)包絡(luò)分析方法（Data Envelopment Analysis，DEA）是一種針對具有多投入和多產(chǎn)出的復(fù)雜系統(tǒng)進行相對有效性綜合評價的方法，運用數(shù)學(xué)規(guī)劃模型比較同類型的決策單元之間的相對效率，依據(jù)決策單元輸入和輸出來評價各決策單元有效

20、性，由著名的運籌學(xué)家A·Charnes和W·W·Cooper等人創(chuàng)立，由于DEA方法不需要預(yù)先估計參數(shù)，因而可以避免人為主觀因素，減少誤差，簡化運算，具有很強的客觀性。因此，有人將DEA作為人力資本系統(tǒng)14、企業(yè)技術(shù)創(chuàng)新成果15的評價方法，也有人應(yīng)用DEA對高校投資效益進行評價的探討16、評價高校產(chǎn)出水平17等。信息化教學(xué)資源作為一項從建設(shè)、管理到應(yīng)用的系統(tǒng)工程，是一個具有多種投入和產(chǎn)出的復(fù)雜大系統(tǒng)，因此有些學(xué)者認為特別適合應(yīng)用DEA進行評價。11四、結(jié)束語教育信息化是一項投資巨大的、復(fù)雜的社會系統(tǒng)工程，信息化教學(xué)資源的建設(shè)極大地推進了教育信息化的進程。目前，網(wǎng)絡(luò)

21、教育信息資源的績效評價問題已成為教育界關(guān)注的熱點問題之一，尋求有效的評價和管理信息資源的方法正成為當(dāng)前研究熱點。對信息化教學(xué)資源績效進行評價和比較，有助于教學(xué)質(zhì)量的提高和教學(xué)成本的控制，減少資源的重復(fù)建設(shè)，不斷提高信息化教學(xué)資源的教學(xué)有效性；此外，信息化教學(xué)資源績效評價可以為資源建設(shè)的科學(xué)決策提供參考，為資源的建設(shè)者和管理者提供指導(dǎo)性建議，促進各級信息資源中心的建設(shè)與發(fā)展，促進資源的整體優(yōu)化建設(shè)。參考文獻：2 Steve Morgna. Performance assessment in academic libraries J. Mansell Publishing Limited，1995.3 向英明，譚藝曼，林歡.電子資源綜合評價指標(biāo)體系及其數(shù)學(xué)模型的研究 J. 圖書館雜志，2004（1）：31-32.4 韓鄭仁星，陳壟.開放遠程教育成本效益研究的現(xiàn)狀及思考 J. 中國遠程教育，2003（5）：26-32.5 陸寶益.網(wǎng)絡(luò)信息資源的評價 J. 情報學(xué)報，2002，21（1）：71-76.6 董曉英.網(wǎng)絡(luò)環(huán)境下信息資源的管理與信息服務(wù) M. 北京：中國對外