教育信息化績效評價指標(biāo)體系研究
編者按:轉(zhuǎn)載了一篇關(guān)于教育信息化績效評價的博文,覺得有必要把我們在去年學(xué)會年會發(fā)表的相關(guān)論文也通過博客發(fā)布出來。記得《十年規(guī)劃》總結(jié)會上,王延覺司長也提到教育信息化績效評價將是下一階段的工作重點之一,因此,希望能夠引起同行關(guān)于教育信息化績效評價的大討論。吳海燕,蔣東興,戚麗,袁芳,付小龍,杜炤,苗春雨
(清華大學(xué)計算機與信息管理中心)
摘要:教育信息化績效評價是促進教育信息化持續(xù)發(fā)展的有效手段,缺乏實用的評價指標(biāo)體系是開展教育信息化績效評價巨大障礙。本文從基教、職教、高教、教育行政管理四種教育類別的教育信息化業(yè)務(wù)模型出發(fā),通過分解教育信息化的支撐與建設(shè)對象,建立了教育信息化績效評價的元模型,得到了教育信息化績效評價指標(biāo)體系的一級與二級指標(biāo),通過對績效評價維度的分析,得到了三級、四級指標(biāo)與數(shù)據(jù)觀測點,從而構(gòu)成了完整的教育信息化績效評價指標(biāo)體系。
關(guān)鍵詞:教育信息化 績效評價 指標(biāo)體系
中圖分類號:G434 文獻標(biāo)識碼:B
1.引言
教育信息化是當(dāng)今世界各國應(yīng)對知識經(jīng)濟挑戰(zhàn)、實現(xiàn)教育現(xiàn)代化的必由之路,是衡量教育現(xiàn)代化程度和綜合實力的重要標(biāo)志。教育信息化是提升教育質(zhì)量、推動高等教育大眾化、建立學(xué)習(xí)型社會的基礎(chǔ)和條件。教育部“教育信息化建設(shè)與應(yīng)用研究”重大課題的研究成果認為我國教育信息化建設(shè)總體處于“推廣普及向應(yīng)用提高轉(zhuǎn)變”階段,未來的發(fā)展重點是如何實現(xiàn)教育和信息技術(shù)的進一步融合與協(xié)調(diào)發(fā)展。為了實現(xiàn)這一目標(biāo),必須將對教育信息化水平的評價逐步由以“投入為主”,轉(zhuǎn)變?yōu)橐浴翱冃橹鳌?,通過對教育信息化績效評價來促進教育信息化的應(yīng)用發(fā)展。
通過文獻調(diào)研我們發(fā)現(xiàn)[1][2][3][4][5],在教育信息化績效評價領(lǐng)域,無論國外還是國內(nèi)都處于嘗試探索階段,在這一領(lǐng)域至今還沒有成熟的理論指導(dǎo)和合適的測量辦法、測量工具。教育信息化績效評價是一個復(fù)雜的過程,因為教育信息化不僅是個動態(tài)的發(fā)展過程,還是個多投入多產(chǎn)出的過程,它的產(chǎn)出不易用量化指標(biāo)來衡量。教育信息化的效益具有多樣性,不僅要看其經(jīng)濟效益,更主要的是看社會效益;不僅要看當(dāng)前效益,更多的表現(xiàn)為長遠效益;不僅要看固有效益,更多的表現(xiàn)為派生效益。
完整的教育信息化績效評價包括評價參與者、評價約束條件、評價指標(biāo)體系、評價數(shù)據(jù)采集方法、評價模型與評價方法及評價基準等多方面內(nèi)容,教育信息績效評價指標(biāo)體系的構(gòu)建則是教育信息化績效評價中的核心問題。在教育部軟科學(xué)研究項目“教育信息化推進機制與政策研究”的支持下,我們開展了教育信息化績效評價機制的研究,試圖在充分參考國內(nèi)外有關(guān)研究成果的基礎(chǔ)上,從教育信息化績效相關(guān)的若干評價層面出發(fā),建立教育信息化績效評價指標(biāo)體系。我們通過對教育信息化內(nèi)容的分析,抽取得到了教育信息化績效評價的評價對象和層次關(guān)系,作為指標(biāo)體系的一級、二級指標(biāo);通過對教育信息化績效內(nèi)涵的分析,得出了教育信息化績效評價的四個評價角度,作為指標(biāo)體系的三級、四級指標(biāo),進而構(gòu)成了教育信息化績效評價指標(biāo)體系。
2.教育信息化績效評價元模型
從國家教育系統(tǒng)整體上看,我國教育信息化的主要對象可以簡化為教育部、省級教育廳、市級教育局、區(qū)縣級教育局四級行政部門,管理著高等學(xué)校、職業(yè)學(xué)校、基礎(chǔ)教育學(xué)校、學(xué)前教育學(xué)校四類學(xué)校。從教育信息化績效評價看,既應(yīng)包括對四級教育行政部門、四類學(xué)校的評價,就是微觀的教育信息化評價;也應(yīng)包括對國家教育系統(tǒng)信息化的整體評價,即宏觀的教育信息化評價。本評價指標(biāo)體系主要關(guān)注對于教育信息化對象的評價,屬于微觀評價層面。
2.1 教育信息化績效評價對象剖析
為進行微觀的教育信息化評價,需要對具體的評價對象進行剖析,本文對兩類典型的教育信息化實體,即高等學(xué)校和教育行政管理機構(gòu),進行了業(yè)務(wù)及信息化對業(yè)務(wù)的支撐關(guān)系分析,建立了相應(yīng)的業(yè)務(wù)模型及信息化支撐模型,并進一步對教育信息化的績效評價對象進行了抽象。
高校主要包括人才培養(yǎng)、科學(xué)研究、社會服務(wù)、文化傳承創(chuàng)新等職能,高校的業(yè)務(wù)也圍繞著這幾項職能展開,以這幾項職能為主線,我們對高校業(yè)務(wù)進行分析、歸納、關(guān)聯(lián)、整合,建立了高校的業(yè)務(wù)模型[6][7][8][9],通過對高校業(yè)務(wù)模型的分析歸納,我們提煉出高校信息化的三類支撐對象:業(yè)務(wù)活動(如教學(xué)活動、科研活動、管理活動等)、用戶(如教師、學(xué)生、管理服務(wù)人員等)及事業(yè)發(fā)展目標(biāo)(如人才培養(yǎng)、科學(xué)研究、社會服務(wù)、文化傳承創(chuàng)新等)。而高校信息化的主要建設(shè)內(nèi)容包括信息化基礎(chǔ)設(shè)施、信息系統(tǒng)與數(shù)據(jù)、以及信息化人才隊伍,這樣,我們得出高校業(yè)務(wù)的信息化支撐模型如圖1左圖所示,圖中所示的三個層次六方面內(nèi)容,也正是教育信息化績效評價關(guān)注的主要對象。
圖1:高校與教育行政管理部門的信息化業(yè)務(wù)支撐模型
基于對教育行政管理部門的業(yè)務(wù)職能、管理層次以及主要業(yè)務(wù)信息流的分析,以學(xué)校、教師、學(xué)生三類主體的管理為主線,采用類似的方法對教育行政管理部門的業(yè)務(wù)、信息化支撐與建設(shè)內(nèi)容進行了分析與抽象,建立了教育行政管理業(yè)務(wù)的信息化支撐模型如圖1右圖所示,與高校的模型類似,同樣包括三個層次六個方面內(nèi)容,也正是教育信息化績效評價關(guān)注的主要對象。
2.2教育信息化績效評價元模型
通過對比可以看出,高校業(yè)務(wù)信息化支撐模型與教育行政管理業(yè)務(wù)信息化支撐模型十分相似,我們從這兩個模型中,能夠抽象得出教育信息化的組成要素及要素間的支撐關(guān)系,構(gòu)成了教育信息化績效評價的元模型(如圖2所示)。從教育信息化的組成要素來說,包括事業(yè)發(fā)展、業(yè)務(wù)活動與流程、用戶效果、信息化基礎(chǔ)設(shè)施、信息系統(tǒng)與數(shù)據(jù)、信息化隊伍6個組成要素。從要素間的相互支撐關(guān)系上看,這6個要素又形成了3個層次,即IT技術(shù)層、業(yè)務(wù)活動與用戶層、事業(yè)發(fā)展層,這3個層次形成了順序支撐關(guān)系:IT技術(shù)層直接支撐教育的業(yè)務(wù)活動與流程、用戶的應(yīng)用效果;而教育的業(yè)務(wù)活動與流程和用戶的應(yīng)用效果又支撐著教育事業(yè)發(fā)展各項業(yè)務(wù)目標(biāo)的實現(xiàn)。
圖2:教育信息化績效評價的元模型
3.教育信息化績效評價指標(biāo)體系的組成
教育信息化績效評價即可簡化為對教育信息化績效評價的元模型的6個組成要素的評價,因此這6個要素構(gòu)成了評價指標(biāo)體系的一級指標(biāo),考慮到指標(biāo)體系的可操作性,需要對這6個要素進行進一步分解,分解的結(jié)果即為指標(biāo)體系的二級指標(biāo)。為了實施評價,我們還需對教育信息化績效評價的內(nèi)涵與外延進行分析,即分析從哪些角度進行教育信息化績效評價,對評價角度的分解即構(gòu)成了三級、四級指標(biāo)。對于每個指標(biāo)項,還需要設(shè)置觀測點,說明各指標(biāo)需要采集的數(shù)據(jù)項。四級指標(biāo)與觀測點共同構(gòu)成了完整的教育信息化績效評價指標(biāo)體系。因為篇幅的關(guān)系,本文只討論教育信息化績效評價通用指標(biāo)體系,在此基礎(chǔ)上進行裁剪,能夠得到各具體教育類別的評價指標(biāo)體系。
3.1一級、二級指標(biāo)
綜上所述,教育信息化績效評價指標(biāo)體系的一級指標(biāo)包括事業(yè)發(fā)展、用戶效果、業(yè)務(wù)活動與流程、基礎(chǔ)設(shè)施、信息系統(tǒng)與數(shù)據(jù)、信息化隊伍六項。對一級指標(biāo)的分解則構(gòu)成了二級指標(biāo)項(如圖3所示),因為本文研究的是通用的教育信息化績效評價指標(biāo)體系,所以在進行分解時,統(tǒng)籌考慮了高校、職教、基教、學(xué)前教育、教育行政管理等不同教育類別的情況。

圖3教育信息化績效評價指標(biāo)體系的一級、二級指標(biāo)
l縱觀各教育類別,人才培養(yǎng)、科學(xué)研究、社會服務(wù)、文化傳承創(chuàng)新是教育事業(yè)發(fā)展的主要目標(biāo),因此將一級指標(biāo)“事業(yè)發(fā)展”進一步分解為這四個二級指標(biāo);
l學(xué)生、教師、管理人員、行政部門、校外用戶是教育信息化的主要服務(wù)對象,教育信息化績效中對于用戶效果的績效評價主要考量這五類用戶的信息化體驗,因此,將一級指標(biāo)“用戶效果”進一步分解為這五個二級指標(biāo);
l通過對各類教育業(yè)務(wù)的分析,我們發(fā)現(xiàn)教育的業(yè)務(wù)主要有教學(xué)活動、科研活動、管理活動、生活服務(wù)、文化與交流活動等五類活動,教育信息化對于教育事業(yè)的支撐主要體現(xiàn)在對這五類活動的支撐,因此將這五類活動作為一級指標(biāo)“業(yè)務(wù)活動與流程”的二級指標(biāo),通過評價教育信息化對這五類活動的支撐績效,評價教育信息化對教育業(yè)務(wù)活動與流程的支撐績效;
l信息化基礎(chǔ)設(shè)施包括網(wǎng)絡(luò)、數(shù)據(jù)中心、電化教學(xué)環(huán)境、辦公及實驗室計算機設(shè)備等四類內(nèi)容,體現(xiàn)了教育信息化的硬件建設(shè)成果,因此將一級指標(biāo)“基礎(chǔ)設(shè)施”分解為這四個二級指標(biāo),評價教育信息化基礎(chǔ)設(shè)施的建設(shè)績效;
l信息系統(tǒng)及數(shù)據(jù)是信息化建設(shè)的重要成果,體現(xiàn)了教育信息化技術(shù)應(yīng)用方面的成果與效果,因此將一級指標(biāo)“信息系統(tǒng)與數(shù)據(jù)”分解為信息系統(tǒng)和數(shù)據(jù)兩個二級指標(biāo),評價教育信息化在信息系統(tǒng)與數(shù)據(jù)方面的績效;
l信息化隊伍既包括信息化專職隊伍——網(wǎng)絡(luò)信息中心的專業(yè)技術(shù)人員,又包括信息化兼職隊伍——管理部門、院系信息員及網(wǎng)管隊伍,信息化隊伍是教育信息化建設(shè)推進的執(zhí)行者,將一級指標(biāo)“信息化隊伍”分解為信息化專職隊伍及信息化兼職隊伍這兩個二級指標(biāo),評價教育信息化隊伍建設(shè)方面的績效。
3.2三級、四級指標(biāo)
通過對評價對象的分析與研究,我們得到評價指標(biāo)體系的一級、二級指標(biāo),下文將對通過對評價維度的分析,建立指標(biāo)體系的三級與四級指標(biāo)。
單純從語言學(xué)的角度來看,績效包含有成績和效益的意思。績效評價是一個創(chuàng)新發(fā)展中的概念,內(nèi)涵本身就是兼容并蓄的,外延也極其廣闊,只有結(jié)合特定語境,才能準確定義。結(jié)合我國教育信息化的發(fā)展歷程、現(xiàn)狀與遠景目標(biāo),我們認為信息化績效是指信息化建設(shè)的表現(xiàn)、狀態(tài)、成績、效果。具體來說,將績效分解為投入、成果、質(zhì)量、效果四個方面,作為指標(biāo)體系的三級指標(biāo),從這四個方面對教育信息化績效評價的評價對象進行績效評價。進一步結(jié)合教育信息化的特點,將投入分解為人力與財力投入,即經(jīng)費與人力;將成果分解為數(shù)量、廣度與深度;將質(zhì)量分解為“正確、準確”、“方便、快捷”、“安全、穩(wěn)定”、“標(biāo)準、規(guī)范”四個子評價角度;將效果分解為效率、效益、用戶滿意度、能力提升、結(jié)構(gòu)優(yōu)化、開放共享六個子評價角度。對于三級指標(biāo)的分解構(gòu)成了績效評價體系的四級指標(biāo),如圖4所示。
圖4教育信息化績效評價指標(biāo)體系的三級與四級指標(biāo)
3.3指標(biāo)體系示例
上文中我們對教育信息化績效評價的對象與評價角度進行了深入分析,作為評價指標(biāo)體系的一級、二級與三級、四級指標(biāo),評價對象與評價角度的結(jié)合,輔之以具體的觀測點,就形成了完整的教育信息化績效評價指標(biāo)體系。因完整的指標(biāo)體系篇幅較長,本文只截取了一級指標(biāo)“事業(yè)發(fā)展”部分的內(nèi)容,如下表所示。
表1:教育信息化評價指標(biāo)體系(通用)一級指標(biāo)“事業(yè)發(fā)展”部分內(nèi)容
二級 指標(biāo) | 三級指標(biāo) | 四級 指標(biāo) | 觀測點 |
人才培養(yǎng) | 成果 | 數(shù)量 | 教學(xué)信息資源的總量 |
數(shù)字化教學(xué)課程的數(shù)量 | |||
效果 | 能力提升 | 能夠應(yīng)用信息技術(shù)檢索和收集信息的人員比例 | |
能夠熟練應(yīng)用信息技術(shù)撰寫電子文檔的人員比例 | |||
能夠熟練應(yīng)用信息技術(shù)分享和交流信息的人員比例 | |||
通過信息技術(shù)開展教學(xué)活動的課程比例 | |||
在學(xué)習(xí)中熟練應(yīng)用信息技術(shù)的學(xué)生比例 | |||
在教學(xué)中熟練應(yīng)用信息技術(shù)的教師比例 | |||
科學(xué)研究 | 成果 | 數(shù)量 | 科研裝備數(shù)字化比例 |
科研資源的總量 | |||
數(shù)字化科研數(shù)據(jù)、實驗數(shù)據(jù)記錄數(shù) | |||
數(shù)字化科研成果的數(shù)量 | |||
效果 | 效率 | 納入信息化管理的科研項目比例 | |
應(yīng)用信息技術(shù)開展科學(xué)研究的科研項目比例 | |||
能力提升 | 能夠應(yīng)用信息技術(shù)檢索科技文獻數(shù)據(jù)庫查找科技期刊論文的人員比例 | ||
能夠應(yīng)用仿真、模擬、科學(xué)計算等信息技術(shù)手段開展科學(xué)研究的人員比例 | |||
通過信息化開展科研協(xié)作比例 | |||
開放共享 | 通過科研資源共享平臺共享儀器設(shè)備的次數(shù) | ||
通過科研資源共享平臺共享的儀器設(shè)備資源總數(shù) | |||
Google等四大搜索引擎搜到總頁數(shù) | |||
用GoogleScholar搜索到的該機構(gòu)庫擁有的歸一化后的論文總數(shù) | |||
社會服務(wù) | 成果 | 數(shù)量 | 對外宣傳網(wǎng)站的總頁面數(shù) |
教育電子政務(wù)公開的欄目數(shù) | |||
效果 | 效益 | 對外宣傳網(wǎng)站的最近三年的年均訪問量 | |
網(wǎng)絡(luò)遠程課程的在學(xué)學(xué)生人數(shù) | |||
建立電子學(xué)習(xí)檔案的學(xué)生比例_ | |||
開放共享 | Google等四大搜索引擎搜索的學(xué)校網(wǎng)站總頁面數(shù) | ||
開放的網(wǎng)絡(luò)課程門數(shù) | |||
開放的精品課程門戶 | |||
開放的多媒體課件個數(shù) | |||
教育公共信息服務(wù)占全部教育公共服務(wù)的比例 | |||
文化傳承 | 成果 | 數(shù)量 | 外文網(wǎng)站的頁面總數(shù) |
文化網(wǎng)站的頁面總數(shù) | |||
外文網(wǎng)站的非中文語種個數(shù) | |||
效果 | 效益 | 文化網(wǎng)站最近三年的年均訪問量 | |
外文網(wǎng)站的最近三年的年均訪問量 | |||
校園社交網(wǎng)站年均發(fā)帖數(shù)量 | |||
校園社交網(wǎng)絡(luò)的用戶總數(shù) | |||
校園社交網(wǎng)絡(luò)的人均年訪問次數(shù) | |||
訪問網(wǎng)站的校外IP所屬的國家和地區(qū)總數(shù) |
4.總結(jié)與展望
教育信息化績效評價是教育信息化發(fā)展到一定階段后必需開展的工作,開展績效評價有利于為教育信息化的有序發(fā)展建立正確的導(dǎo)向。教育信息化績效評價各方面的研究都剛剛起步,雖然國際上有一些經(jīng)驗可以借鑒,但需要我們結(jié)合國情進行探索。本文通過對具體的教育信息化業(yè)務(wù)模型的深入剖析、對教育信息化績效評價內(nèi)涵的分解,得出了一個有四級指標(biāo)及相應(yīng)觀測點構(gòu)成的評價指標(biāo)體系。因為作者的閱歷、掌握的研究資料等條件的局限,該指標(biāo)體系還有許多不盡完善之處,懇請各位專家批評指正。
同時還需看到,教育信息化績效評價是一項復(fù)雜的系統(tǒng)工程,建立評價指標(biāo)體系僅僅是其中的一項內(nèi)容,后續(xù)還需開始數(shù)據(jù)采集方法設(shè)計與實現(xiàn)、評價模型與評價方法設(shè)計等在內(nèi)的研究與實踐工作,才能真正將教育信息化績效評價開展起來,這需要教育信息化戰(zhàn)線上全體同仁的共同努力。我們相信,對教育信息化進行科學(xué)、可行的績效評價,是教育信息化持續(xù)有序發(fā)展的必由之路,必將在中國教育信息化的發(fā)展歷程中發(fā)揮重要作用。
參考文獻
1.中國高等教育學(xué)會教育信息化評價體系調(diào)查,http://www.edu-info.edu.cn/xhzl/pjtxdc.html
2.Campus ComputingProject (CCP)項目,http://www.campuscomputing.net/
3.張成洪,朱宇紅,————高偉勛,宓詠,高校信息化評價指標(biāo)體系研究,教育信息化,2004年第7月(增刊),總第100期。
4.李興國等,廣東高校信息化建設(shè)參考標(biāo)準,粵教信息[2005]1號文件。
5.金永燦(譯),韓國高等教育信息化指標(biāo)的開發(fā)研究,2002.12。
6.劉啟新、蔣東興、付小龍等,《校級統(tǒng)一信息系統(tǒng)頂層設(shè)計方法》,《大連海事大學(xué)學(xué)報》,第35卷增2,2009.9
7.王旭、蔣東興、陳懷楚,《大學(xué)資源計劃的理論與發(fā)展》,《教育信息化》,2005.11
8.http://www.opengroup.org/architecture/togaf9-doc/arch/index.html
9.http://www.whitehouse.gov/omb/e-gov/fea/
愛華網(wǎng)


