董 菡
(1.湖北大學(xué) 圖書館;2.湖北省教育信息化工程技術(shù)研究中心,湖北 武漢430062)
教育信息化是我國教育改革和發(fā)展的重要組成部分,是實(shí)現(xiàn)教育現(xiàn)代化的必由之路??疾旖逃畔⒒陌l(fā)展,績效評價(jià)是一個行之有效的方式。我國對于教育信息化績效評價(jià)的研究范圍主要包括:研究綜述、不同區(qū)域教育信息化(如農(nóng)村鄉(xiāng)鎮(zhèn)、少數(shù)民族地區(qū)、某省市縣等)、不同學(xué)校類型教育信息化(如基礎(chǔ)教育、高等教育、職業(yè)教育等)、教育信息化某一方面(如教師績效、課堂教學(xué)、信息化領(lǐng)導(dǎo)力、教育資源庫、技術(shù)裝備、經(jīng)濟(jì)投入等)。國內(nèi)教育信息化績效評價(jià)方法主要有水平評價(jià)、效益評價(jià)和產(chǎn)出評價(jià)三類。
(1)投入產(chǎn)出效益評價(jià)原則。績效評價(jià)的關(guān)鍵在于投入與產(chǎn)出的收益率,因此,在指標(biāo)構(gòu)建時(shí),既要體現(xiàn)投入情況,又要體現(xiàn)產(chǎn)出情況。這是重要的評價(jià)原則,也是構(gòu)建指標(biāo)體系的基礎(chǔ)。
(2)政府政策文件導(dǎo)向原則。針對湖北省基礎(chǔ)教育信息化的評價(jià),其評價(jià)指標(biāo)是否能夠反映省基礎(chǔ)教育信息化發(fā)展方向尤其重要,因此,相關(guān)政策文件所涉及到的指標(biāo)或標(biāo)準(zhǔn)是最為重要的參考指標(biāo),同時(shí)以國家相關(guān)政策為參考。
(3)文獻(xiàn)高頻次指標(biāo)參考原則。對于歷年來相關(guān)相關(guān)研究文獻(xiàn)中出現(xiàn)頻次較高的指標(biāo)可以結(jié)合政策指標(biāo)綜合采用,根據(jù)實(shí)際構(gòu)建情況選用;同時(shí),考慮到反映時(shí)代發(fā)展趨勢的需要,還應(yīng)當(dāng)參考新出現(xiàn)的指標(biāo)。
1.2.1 指標(biāo)選取方法
吳砥指出,目前教育信息化的指標(biāo)選擇主要有兩種方法:一是定量分析。通過運(yùn)用一些數(shù)學(xué)方法對指標(biāo)間的相似性和關(guān)聯(lián)性進(jìn)行判斷,進(jìn)而來篩選評估的指標(biāo)體系。二是定性選擇。如訪談法、專家咨詢法,主要通過主觀經(jīng)驗(yàn)對指標(biāo)進(jìn)行篩選。在評估指標(biāo)的構(gòu)建上,首先基于年鑒指標(biāo)、規(guī)劃指標(biāo)和全國教育事業(yè)統(tǒng)計(jì)指標(biāo)形成基礎(chǔ)指標(biāo),同時(shí)根據(jù)地區(qū)差異、新的政策要求對基礎(chǔ)指標(biāo)進(jìn)行補(bǔ)充,然后邀請行業(yè)內(nèi)知名專家對指標(biāo)進(jìn)行進(jìn)一步的挑選和評判,最后,采用聚類分析法構(gòu)建教育信息化領(lǐng)域的評估指標(biāo)體系[1]。此次指標(biāo)體系構(gòu)建亦采取定量與定性相結(jié)合的方法,先用定量分析方式,以湖北省政策文件和文獻(xiàn)分析中的高頻次指標(biāo)和新興指標(biāo)作為基礎(chǔ)指標(biāo),同時(shí)輔以定性方式,通過專家團(tuán)隊(duì)對定量方式構(gòu)建的指標(biāo)分級賦值,進(jìn)行重要性評判,取平均值,對于均值過低的指標(biāo)予以刪除,對于原指標(biāo)集中未出現(xiàn)而由專家共同提出的指標(biāo)予以考量。
1.2.2 指標(biāo)構(gòu)建方法
(1)層次分析法:是將與決策總是有關(guān)的元素分解成各種層次,在此基礎(chǔ)之上進(jìn)行定性和定量分析的決策方法。本文主要用于指標(biāo)體系層次分解。
(2)Delphi法:是專家咨詢法的一種,它依據(jù)系統(tǒng)的程序,采用專家匿名發(fā)表意見的方式,通過多輪次調(diào)查專家對問卷所提問題的看法,經(jīng)過反復(fù)征詢、歸納、修改,最后匯總成專家基本一致的看法,作為預(yù)測的結(jié)果。本文在二級指標(biāo)和三級指標(biāo)或觀測點(diǎn)的選取以及相應(yīng)指標(biāo)的權(quán)重設(shè)置方面運(yùn)用該方法。
以CNKI為刊源,以“(‘教育信息化’or‘信息技術(shù)教育’or‘農(nóng)村遠(yuǎn)程教育工程’or‘農(nóng)遠(yuǎn)工程’)and(‘績效’or‘成本效益’or‘成本’or‘效益’)and(‘評價(jià)’or‘評估’)”分別為主題詞和關(guān)鍵詞,進(jìn)行精確匹配檢索。結(jié)果顯示,去除重復(fù)論文,截至2019年12月31日,與教育信息化緊密相關(guān)的有效文獻(xiàn)331篇,其中,研究基礎(chǔ)教育信息化績效評價(jià)的文獻(xiàn)約有116篇,未分類型總體研究教育信息化績效評價(jià)的文獻(xiàn)約有137篇。
在論述基礎(chǔ)教育信息化和總論性教育信息化指標(biāo)體系中統(tǒng)計(jì)高頻次指標(biāo),選取指標(biāo)核心詞為統(tǒng)計(jì)點(diǎn),類似含義指標(biāo)合并處理。歷年研究文獻(xiàn)中高頻次一級指標(biāo)核心詞主要有:信息化應(yīng)用(88次)、信息化基礎(chǔ)設(shè)施(74次)、信息資源建設(shè)(64次)、信息化人才(45次)、信息化組織與管理(45次)、經(jīng)費(fèi)投入(43次)、教育信息化效果或效益(30次)、信息素養(yǎng)(30次)、信息化主體發(fā)展(28次)、信息網(wǎng)絡(luò)(28次)等。高頻次的二級指標(biāo)核心詞如表1所示。
表1 基礎(chǔ)教育信息化績效評價(jià)二級指標(biāo)核心詞出現(xiàn)頻次
從表1可知,信息化教學(xué)相關(guān)二級指標(biāo)一直是多年來的評估重點(diǎn)所在,主要包括信息技術(shù)和信息資源在教學(xué)上的應(yīng)用、應(yīng)用學(xué)科覆蓋率等;信息素養(yǎng)(包括教師與學(xué)生)、信息化培訓(xùn)(主要指教師)、信息化教學(xué)資源建設(shè)相關(guān)二級指標(biāo)緊隨其后。其次是經(jīng)費(fèi)投入和基礎(chǔ)建設(shè),基礎(chǔ)建設(shè)中又以網(wǎng)絡(luò)建設(shè)(如學(xué)校入網(wǎng)率、校園網(wǎng)建設(shè)等)和信息化終端(生機(jī)比、師機(jī)比等)的研究最為常見。信息化管理和信息化管理者、信息化人力資源或信息化隊(duì)伍、信息化規(guī)劃與標(biāo)準(zhǔn)、學(xué)生信息化學(xué)習(xí)(包括學(xué)習(xí)方法、學(xué)習(xí)效果和學(xué)習(xí)認(rèn)知)、教師對信息化教學(xué)的認(rèn)知和教研科研、信息化組織等相關(guān)二級指標(biāo)也較為重要。這些高頻次指標(biāo)核心都可作為構(gòu)建二級或三級指標(biāo)(主要觀測點(diǎn))的參考。
自我國提出教育信息化目標(biāo)以來,國家和各級政府陸續(xù)出臺了一系列政策文件作為指導(dǎo),選取最為適宜湖北省實(shí)際情況和最為貼近時(shí)代的政策是構(gòu)建適時(shí)合理的評價(jià)指標(biāo)體系的關(guān)鍵,尤其是一級指標(biāo)的選取不應(yīng)偏離相關(guān)政策?;诖?,我們以《湖北省教育信息化發(fā)展規(guī)劃(2014—2020年)》為主要參考政策,同時(shí),考慮時(shí)代性的要求,以新時(shí)代的新發(fā)展方向——教育部《教育信息化2.0行動計(jì)劃》和《湖北省教育信息化2.0行動計(jì)劃》為補(bǔ)充。
《湖北省教育信息化發(fā)展規(guī)劃(2014—2020年)》階段性目標(biāo)和發(fā)展任務(wù)相輔相成,綜合起來可概括為基礎(chǔ)設(shè)施建設(shè)、信息資源開發(fā)、信息化應(yīng)用、信息化人才隊(duì)伍、信息化管理與保障體系幾大方面,這與文獻(xiàn)研究中的高頻次核心指標(biāo)趨于一致,可作為一級指標(biāo)的主體內(nèi)容?!督逃畔⒒?.0行動計(jì)劃》和《湖北省教育信息化2.0行動計(jì)劃》的具體內(nèi)容可作為二三級指標(biāo)或主要觀測點(diǎn)、以及權(quán)重分配的參考。
由于不同時(shí)期有不同趨勢導(dǎo)向,因此,在指標(biāo)體系研究中,也應(yīng)根據(jù)近年不同情況增加新興指標(biāo)。尤其是2018年“教育信息化2.0”的提出,促使指標(biāo)構(gòu)建時(shí)應(yīng)當(dāng)對2018年以后的研究指標(biāo)單獨(dú)考量,例如:以“滿意度”為基礎(chǔ)的評估指標(biāo),關(guān)于“特色功能室”的研究(如:錄播教室、智慧教室等),“信息化交互”“教育公平”等指標(biāo)的研究。這些新興指標(biāo)與“教育信息化2.0”提出的“數(shù)字資源服務(wù)普及行動”“網(wǎng)絡(luò)扶智工程攻堅(jiān)行動”“教育治理能力優(yōu)化行動”“智慧教育創(chuàng)新發(fā)展行動”[2]等實(shí)施行動密切相關(guān),也是構(gòu)建指標(biāo)體系時(shí)的重要參考。
綜上所述,構(gòu)建湖北省基礎(chǔ)教育信息化績效評價(jià)指標(biāo)體系時(shí),應(yīng)當(dāng)既參考長期以來作為評估標(biāo)準(zhǔn)存在的指標(biāo),又兼顧發(fā)展趨向。同時(shí)要考慮區(qū)域評價(jià)的特點(diǎn),“區(qū)域基礎(chǔ)教育信息化超越了單個學(xué)校、班級、教師和學(xué)生的評價(jià)范圍,它有利于從更廣闊的視角評價(jià)基礎(chǔ)教育信息化發(fā)展和建設(shè)的效益。區(qū)域基礎(chǔ)教育信息化是從區(qū)域的層面出發(fā),更全面的視角對基礎(chǔ)教育信息化展開研究,這樣會對所要研究的問題有一個更深入、更宏觀的認(rèn)識[3]”,例如:教育的公平性與均衡性、地方政府和地方環(huán)境都是區(qū)域評價(jià)的重要方面。
教育信息化績效評價(jià)總體目標(biāo)在于優(yōu)化教育投入產(chǎn)出效益、引領(lǐng)教育改革與發(fā)展。結(jié)合具體的區(qū)域教育信息化實(shí)際水平,可以將教育信息化效益理解為“教育信息化目標(biāo)實(shí)現(xiàn)的程度”[4]。其內(nèi)涵是“教育信息化實(shí)踐活動所產(chǎn)生的、與信息化投入有對比關(guān)系的對人們有益的結(jié)果”[5]。因此,此次指標(biāo)構(gòu)建還依據(jù)產(chǎn)出效益原則分別從投入與產(chǎn)出角度體現(xiàn)績效。
結(jié)合專家團(tuán)隊(duì)賦值,形成最終指標(biāo)體系如表2所示,共有6個一級指標(biāo)、28個二級指標(biāo),下設(shè)若干三級指標(biāo)或觀測點(diǎn)(注:某些指標(biāo)既是經(jīng)費(fèi)投入的產(chǎn)出結(jié)果,又是信息化應(yīng)用的投入基礎(chǔ))。
表2 湖北省基礎(chǔ)教育信息化績效評價(jià)指標(biāo)體系
指標(biāo)體系的權(quán)重設(shè)置主要采用Delphi法,由專家團(tuán)隊(duì)分別對每一個三級指標(biāo)的重要性進(jìn)行評判后,賦予1-9級不同重要程度等級,再通過兩兩比較,構(gòu)造指標(biāo)重要程度矩陣,并基于該矩陣計(jì)算出各指標(biāo)的權(quán)重值,在此基礎(chǔ)上,再結(jié)合文獻(xiàn)調(diào)研和其他省份的評價(jià)經(jīng)驗(yàn),對照本省實(shí)際,對各指標(biāo)權(quán)重的精度進(jìn)行適當(dāng)取舍。
績效評價(jià)的計(jì)算方式擬采取絕對值與相對值并行的方式。對于國家或湖北省政策文件中有具體考核值的指標(biāo)或者是否型指標(biāo),均采取絕對評價(jià)方式,有考核值的直接以文件中指定水平進(jìn)行達(dá)標(biāo)賦值,達(dá)到水平的其效益均認(rèn)為已最大化,是否型則采取“是”得滿分、“否”不得分;對于國家或湖北省政策文件中沒有具體考核值的指標(biāo),采取相對評價(jià)的方式,利用平均值與標(biāo)準(zhǔn)偏差,從統(tǒng)計(jì)學(xué)角度評價(jià)。對于一個包含多個評估子項(xiàng)的指標(biāo),先對不同評估子項(xiàng)分配對應(yīng)權(quán)重系數(shù),再按以上方法評價(jià)。在此基礎(chǔ)上,還應(yīng)考慮投入與產(chǎn)出的比例計(jì)算。
本文通過文獻(xiàn)分析和政策分析,結(jié)合專家團(tuán)隊(duì)意見,遵循投入產(chǎn)出的效益原則,構(gòu)建了湖北省基礎(chǔ)教育信息化績效評價(jià)指標(biāo)體系。值得注意的是,該指標(biāo)體系的構(gòu)建主要基于理論基礎(chǔ),在實(shí)地調(diào)研中,可能會發(fā)現(xiàn)有指標(biāo)不符合實(shí)際情況或數(shù)據(jù)采集難以實(shí)現(xiàn)的現(xiàn)象、或是無法量化的情況,需要根據(jù)實(shí)際情況對指標(biāo)體系進(jìn)一步優(yōu)化。