李 芬 王戰(zhàn)軍
基于大數(shù)據(jù)的研究生教育監(jiān)測(cè)評(píng)估研究
李芬王戰(zhàn)軍
提出基于大數(shù)據(jù)技術(shù)開展研究生教育評(píng)估工作,認(rèn)為基于大數(shù)據(jù)的研究生教育監(jiān)測(cè)評(píng)估,是利用現(xiàn)代信息技術(shù)持續(xù)收集和深入分析研究生教育系統(tǒng)中的有關(guān)數(shù)據(jù),直觀呈現(xiàn)研究生教育狀態(tài),為多元主體價(jià)值判斷和科學(xué)決策提供客觀依據(jù)的過程。研究生教育監(jiān)測(cè)評(píng)估具有依賴數(shù)據(jù)驅(qū)動(dòng)、強(qiáng)調(diào)狀態(tài)描述、關(guān)注價(jià)值多元需求的特征,能增加評(píng)估的精確性、即時(shí)性、開放性,強(qiáng)化評(píng)估的預(yù)警與預(yù)測(cè)功能。
研究生教育;大數(shù)據(jù);監(jiān)測(cè)評(píng)估
研究生教育信息化產(chǎn)生了海量數(shù)據(jù),在全面提高研究生教育質(zhì)量、注重研究生教育內(nèi)涵式發(fā)展的大背景下,結(jié)合并研究大數(shù)據(jù)技術(shù)在研究生教育評(píng)估工作中的作用,更多地依靠大數(shù)據(jù)技術(shù)開展研究生教育監(jiān)測(cè)評(píng)估,是持續(xù)改進(jìn)研究生教育質(zhì)量保障和監(jiān)督體系、全面提升研究生教育質(zhì)量的內(nèi)在需要?!秶?guó)家中長(zhǎng)期教育改革和發(fā)展規(guī)劃綱要(2010~2020年)》提出的“完善監(jiān)測(cè)評(píng)估體系,定期發(fā)布監(jiān)測(cè)評(píng)估報(bào)告”[1]以及《關(guān)于加強(qiáng)學(xué)位與研究生教育質(zhì)量保證和監(jiān)督體系建設(shè)的意見》提出的建立全國(guó)研究生教育質(zhì)量信息平臺(tái)[2],則為開展研究生教育監(jiān)測(cè)評(píng)估提供了制度保障。
大數(shù)據(jù)是以容量大、類型多、存取速度快、應(yīng)用價(jià)值高為主要特征的數(shù)據(jù)集合[3]。對(duì)于大數(shù)據(jù)技術(shù),國(guó)際數(shù)據(jù)公司 IDC(International Data Corporation)下的定義為“通過使用高效的采集、發(fā)現(xiàn)和分析,從超大容量的多樣數(shù)據(jù)中經(jīng)濟(jì)地提取價(jià)值”[4]。業(yè)界普遍用“4V”來表征大數(shù)據(jù)特征,即大量(Volume)、多樣(Variety)、高速(Velocity)、價(jià)值(Value)。
我國(guó)研究生教育是一個(gè)多層次、多類型的教育系統(tǒng)。截至2015年8月,全國(guó)在校研究生人數(shù)共計(jì)184.77萬人,培養(yǎng)單位包括571所高校、217所研究機(jī)構(gòu)。研究生教育信息數(shù)據(jù)量龐大、類型多樣、結(jié)構(gòu)復(fù)雜、富含價(jià)值,具備大數(shù)據(jù)的特征。
研究生教育領(lǐng)域數(shù)據(jù)量巨大,包括各類研究生生源、導(dǎo)師隊(duì)伍、選修課程、學(xué)業(yè)成績(jī)、學(xué)科選擇、圖書館文獻(xiàn)借閱、學(xué)術(shù)報(bào)告、科研活動(dòng)、論文發(fā)表、獎(jiǎng)學(xué)金評(píng)定、品德發(fā)展、社交活動(dòng)等各類數(shù)據(jù),這些數(shù)據(jù)時(shí)時(shí)刻刻都在變化,且呈迅猛增長(zhǎng)態(tài)勢(shì)。隨著互聯(lián)網(wǎng)、移動(dòng)互聯(lián)網(wǎng)等新媒體的普及和傳播平臺(tái)的多樣化,研究生教育產(chǎn)生的數(shù)據(jù)除了可以用二維表結(jié)構(gòu)進(jìn)行邏輯表達(dá)的結(jié)構(gòu)化數(shù)據(jù),如數(shù)據(jù)庫中的數(shù)據(jù)文件、檔案,還包括課堂討論記錄、教學(xué)視頻、學(xué)術(shù)報(bào)告、網(wǎng)絡(luò)社交、往來郵件、鏈接信息等大量半結(jié)構(gòu)或非結(jié)構(gòu)化數(shù)據(jù)。相較于本科生,研究生具有多樣化、個(gè)性化的特征。研究生生源結(jié)構(gòu)多樣化,包括多種類型,而且研究生培養(yǎng)過程中更多的是研究生與導(dǎo)師、課題組成員之間的互動(dòng)交流,以個(gè)人研究和小組學(xué)習(xí)討論為主,集體學(xué)習(xí)為輔,集體行為少,伴隨其行為產(chǎn)生的數(shù)據(jù)都是碎片化的、零散的、動(dòng)態(tài)性的、多樣化的。伴隨著研究生學(xué)習(xí)與生活產(chǎn)生的多樣化原始數(shù)據(jù)真實(shí)準(zhǔn)確,蘊(yùn)含巨大的價(jià)值,需要全面識(shí)別、系統(tǒng)集成、高度融合各類原始數(shù)據(jù),才能挖掘出有價(jià)值的信息。建立在云計(jì)算技術(shù)基礎(chǔ)上的智能處理技術(shù)能夠快速地從多源、異構(gòu)、多模態(tài)、不連貫語法或語義的多樣化數(shù)據(jù)中,快速提煉出有價(jià)值的信息,傳統(tǒng)的信息處理技術(shù)難以勝任這些工作。
當(dāng)前,監(jiān)測(cè)評(píng)估在基礎(chǔ)教育領(lǐng)域已實(shí)現(xiàn)應(yīng)用,而專門針對(duì)研究生教育的監(jiān)測(cè)活動(dòng)較少,有部分研究者就研究生教育監(jiān)測(cè)問題進(jìn)行了探討,提出了將技術(shù)監(jiān)測(cè)手段引入研究生教育質(zhì)量管理領(lǐng)域的思想[5]。還有研究者等構(gòu)建了研究生教育質(zhì)量監(jiān)測(cè)指標(biāo)和指數(shù)模型,并利用34所教育部直屬理工農(nóng)醫(yī)類高校2000~2011年的統(tǒng)計(jì)數(shù)據(jù)進(jìn)行了實(shí)證分析[6]。美國(guó)研究生教育委員會(huì)提出,開展監(jiān)測(cè)評(píng)估可以適時(shí)解決研究生學(xué)習(xí)研究方式分散化和復(fù)雜化的問題,通過網(wǎng)絡(luò)監(jiān)控研究生的學(xué)術(shù)進(jìn)步,管理系統(tǒng)以學(xué)期為周期伴隨式收集學(xué)生的學(xué)業(yè)成績(jī)、課堂出勤、提交作業(yè)等相關(guān)數(shù)據(jù),進(jìn)行評(píng)估,并把結(jié)果通知給導(dǎo)師和管理部門。美國(guó)杜克大學(xué)、布朗大學(xué)的研究生院都對(duì)研究生的“研究行為責(zé)任(RCR)”這門課程的學(xué)習(xí)情況進(jìn)行監(jiān)測(cè),并貫穿于研究生整個(gè)學(xué)術(shù)研究過程中[7]。美國(guó)全國(guó)學(xué)習(xí)效果評(píng)估研究所基于“學(xué)歷資格檔案”框架(Degree Qualifications Profile,DQP),探索實(shí)施在線“任務(wù)圖書館(Assignment Library)”項(xiàng)目,以定期、實(shí)時(shí)評(píng)估教師、學(xué)生輔導(dǎo)員為實(shí)現(xiàn)“學(xué)歷資格檔案”框架的五部分標(biāo)準(zhǔn)而設(shè)計(jì)的任務(wù)以及學(xué)生完成情況。該項(xiàng)目的特色在于研究所有學(xué)生的數(shù)據(jù)[8]。這些文獻(xiàn)均提出了開展研究生監(jiān)測(cè)評(píng)估的概念,并進(jìn)行了實(shí)踐,但是并未引入大數(shù)據(jù)理念與技術(shù)。
最早關(guān)于監(jiān)測(cè)評(píng)估的討論,是麥克勞克林在1987年提出的,他認(rèn)為評(píng)估重點(diǎn)應(yīng)從尋找項(xiàng)目整體結(jié)果的結(jié)論轉(zhuǎn)移到強(qiáng)調(diào)短周期控制與糾正,采用“定期收集和分析信息”的方法提供關(guān)于執(zhí)行情況、有效證據(jù)、改進(jìn)建議等方面的信息[9]。目前,在國(guó)內(nèi)外關(guān)于監(jiān)測(cè)評(píng)估的文獻(xiàn)中,研究者對(duì)監(jiān)測(cè)評(píng)估主要有三種理解:①將監(jiān)測(cè)、評(píng)估看作處于前后階段的兩種行為[10,11];②將二者視為并列的兩個(gè)行為,如世界經(jīng)濟(jì)合作組織、世界銀行、世界衛(wèi)生組織等研究報(bào)告中都分別對(duì)“監(jiān)測(cè)”“評(píng)估”進(jìn)行定義,英文表述為M&E;③將監(jiān)測(cè)評(píng)估理解為一個(gè)獨(dú)立活動(dòng),認(rèn)為是一個(gè)整體概念,更強(qiáng)調(diào)“監(jiān)測(cè)”的含義[12,13],英文則用monitoring evaluation表示。
筆者認(rèn)為:研究生教育監(jiān)測(cè)評(píng)估是利用現(xiàn)代信息技術(shù)持續(xù)收集和深入分析研究生教育系統(tǒng)中的有關(guān)數(shù)據(jù),直觀呈現(xiàn)研究生教育狀態(tài),為多元主體價(jià)值判斷和科學(xué)決策提供客觀依據(jù)的過程。
研究生教育監(jiān)測(cè)評(píng)估能夠提供關(guān)于培養(yǎng)單位教育教學(xué)、科學(xué)研究等辦學(xué)運(yùn)行狀況的準(zhǔn)確信息,反映其辦學(xué)和研究的效率和效益,對(duì)培養(yǎng)單位自身改進(jìn)辦學(xué)實(shí)踐具有重要的意義,還能使政府對(duì)研究生教育工作的決策更加科學(xué),同時(shí)也能滿足向社會(huì)提供質(zhì)量信息和決策咨詢的需求。理念上,研究生教育監(jiān)測(cè)評(píng)估從較重視行政控制和問責(zé)轉(zhuǎn)為重視持續(xù)改進(jìn)研究生教育質(zhì)量;實(shí)施方法上,從倚重專家經(jīng)驗(yàn)到依靠信息技術(shù)和專家經(jīng)驗(yàn)相結(jié)合;時(shí)間維度上,從周期性評(píng)估向常態(tài)化監(jiān)測(cè)轉(zhuǎn)變;價(jià)值判斷方式則從終結(jié)性結(jié)論向多元主體根據(jù)需求自我進(jìn)行價(jià)值判斷轉(zhuǎn)變。
1.研究生教育監(jiān)測(cè)評(píng)估依賴技術(shù)驅(qū)動(dòng)
搜集數(shù)據(jù)、挖掘信息是開展評(píng)估活動(dòng)的基礎(chǔ)?;诖髷?shù)據(jù)的研究生教育監(jiān)測(cè)評(píng)估從數(shù)據(jù)采集、錄入、上傳、分析到結(jié)果呈現(xiàn)都突出強(qiáng)調(diào)利用大數(shù)據(jù)管理平臺(tái)與技術(shù)。如在數(shù)據(jù)收集環(huán)節(jié),是在信息管理系統(tǒng)中常規(guī)地、連續(xù)地與制度化地采集信息、同步數(shù)據(jù);在數(shù)據(jù)分析環(huán)節(jié),則是運(yùn)用統(tǒng)計(jì)建模、數(shù)據(jù)挖掘等方法對(duì)數(shù)據(jù)進(jìn)行多尺度、深層次的挖掘,快速提取有效信息,探索客觀數(shù)據(jù)間的內(nèi)在關(guān)聯(lián);在結(jié)果呈現(xiàn)環(huán)節(jié),主要是通過技術(shù)手段,用具有象征性、隱喻性類型的圖形符號(hào)來表征、輸出監(jiān)測(cè)評(píng)估分析報(bào)告,讓利益相關(guān)方更加迅速、有效地理解信息、發(fā)現(xiàn)規(guī)律,作出價(jià)值判斷。
目前,我國(guó)研究生教育信息化程度已經(jīng)達(dá)到較高水平,各培養(yǎng)單位的研究生教育管理信息系統(tǒng)基本涵蓋了招生報(bào)名、學(xué)籍管理、課程設(shè)計(jì)與管理、成績(jī)錄入及查詢、教學(xué)評(píng)價(jià)、學(xué)位申請(qǐng)及審核等研究生教育全過程的數(shù)據(jù)。除了這些時(shí)時(shí)更新的信息數(shù)據(jù)庫,學(xué)位與研究生教育數(shù)據(jù)中心的數(shù)據(jù)庫、開放在線課程、在線問卷調(diào)查、媒體報(bào)道等相關(guān)公開數(shù)據(jù),都是研究生教育監(jiān)測(cè)評(píng)估的數(shù)據(jù)來源。
需要指出的是,監(jiān)測(cè)評(píng)估強(qiáng)調(diào)應(yīng)用信息技術(shù)處理數(shù)據(jù)的能力,但并不否認(rèn)專家的作用,應(yīng)該既基于數(shù)據(jù)挖掘技術(shù)的定量算法,又依賴于專家經(jīng)驗(yàn)的定性分析,要防止陷入數(shù)據(jù)叢林,就數(shù)論數(shù)。
2.研究生教育監(jiān)測(cè)評(píng)估強(qiáng)調(diào)狀態(tài)描述
研究生教育監(jiān)測(cè)評(píng)估注重對(duì)教育教學(xué)、學(xué)術(shù)進(jìn)展、學(xué)科建設(shè)等狀態(tài)進(jìn)行直觀呈現(xiàn)和深度描述,價(jià)值判斷由利益相關(guān)方依據(jù)一定的價(jià)值標(biāo)準(zhǔn)進(jìn)行。狀態(tài)是指“表征物質(zhì)系統(tǒng)所處的狀況的范疇,指在一定時(shí)間內(nèi)、一定物質(zhì)系統(tǒng)的存在方式或表現(xiàn)形態(tài)”[14]。研究生教育狀態(tài)則是研究生教育系統(tǒng)的質(zhì)量、結(jié)構(gòu)、規(guī)模、水平等運(yùn)行狀態(tài)在一定時(shí)間、空間范圍的表現(xiàn)形式。
研究生教育監(jiān)測(cè)評(píng)估是對(duì)研究生教育狀態(tài)階段性的動(dòng)態(tài)描述。發(fā)揮大數(shù)據(jù)的多樣性、高速性特點(diǎn),通過研究生教育質(zhì)量監(jiān)控信息平臺(tái),系統(tǒng)、實(shí)時(shí)地采集招生、選課、開題、答辯、課題申報(bào)、科研獎(jiǎng)勵(lì)、論文發(fā)表、應(yīng)用研究開發(fā)成果轉(zhuǎn)化、就業(yè)等研究生教育教學(xué)活動(dòng)中的有關(guān)數(shù)據(jù),經(jīng)過數(shù)據(jù)分析、可視化技術(shù),對(duì)全國(guó)、省域、培養(yǎng)單位的在校研究生規(guī)模、師資隊(duì)伍、學(xué)術(shù)研究、學(xué)科建設(shè)、德育工作、教學(xué)管理等方面的質(zhì)量狀態(tài)進(jìn)行連續(xù)、直觀的客觀描述,實(shí)現(xiàn)評(píng)估的連續(xù)性和常態(tài)化。
重慶示范推廣的插秧機(jī),如東洋2ZS-2型(P28)手扶式插秧機(jī)、井關(guān)PS15型兩行獨(dú)輪插秧機(jī),其質(zhì)量分別為73,70kg。相對(duì)普通的小型插秧機(jī),質(zhì)量減輕了許多,但是仍需兩人以上才能轉(zhuǎn)移,不適合丘陵山區(qū)廣泛的應(yīng)用推廣。丘陵山區(qū)地形比較復(fù)雜,在基礎(chǔ)設(shè)施建設(shè)不足的條件下,體積小、質(zhì)量輕的插秧機(jī)才具有獨(dú)特優(yōu)勢(shì)。因此,對(duì)于丘陵山區(qū),要打破傳統(tǒng)思路,向順應(yīng)農(nóng)業(yè)機(jī)械產(chǎn)品小型輕便、多功能化的方向發(fā)展 [15]。
研究生教育監(jiān)測(cè)評(píng)估的最終目的不是為了獲得某種結(jié)論或價(jià)值判斷,而是形象、直觀地呈現(xiàn)國(guó)家、區(qū)域、培養(yǎng)單位的研究生教育實(shí)時(shí)特征與模式,重點(diǎn)解決“實(shí)際是什么”的實(shí)然問題[15]。
3.研究生教育監(jiān)測(cè)評(píng)估關(guān)注價(jià)值多元需求
評(píng)估結(jié)果的應(yīng)用處理是整個(gè)質(zhì)量保障過程的重要環(huán)節(jié),是保證教育質(zhì)量改進(jìn)和評(píng)估活動(dòng)有效性的基礎(chǔ)。在研究生教育大規(guī)模、多元化發(fā)展的今天,研究生教育領(lǐng)域的利益相關(guān)方呈現(xiàn)多元態(tài)勢(shì),涉及包括中央政府、省級(jí)政府、培養(yǎng)單位、導(dǎo)師、研究生、用人單位、社會(huì)組織等的價(jià)值取向與利益需求。同時(shí),利益相關(guān)方對(duì)研究生教育質(zhì)量的關(guān)注度越來越高,對(duì)研究生教育的信息需求越來越多。
研究生教育監(jiān)測(cè)評(píng)估強(qiáng)調(diào)將評(píng)估結(jié)果的價(jià)值判斷權(quán)交給政府、培養(yǎng)單位、社會(huì)機(jī)構(gòu)等多元利益主體?;诖髷?shù)據(jù)技術(shù)的研究生教育監(jiān)測(cè)評(píng)估可以讓利益相關(guān)方根據(jù)需求有選擇地選取評(píng)估指標(biāo)體系,對(duì)存儲(chǔ)于數(shù)據(jù)庫中的相關(guān)數(shù)據(jù)進(jìn)行抓取、挖掘、處理及解釋分析,通過可視化技術(shù)生成針對(duì)性強(qiáng)、易于理解的評(píng)估報(bào)告。如政府希望研究生教育培養(yǎng)更多更好的高素質(zhì)人才,創(chuàng)造更多的新知識(shí)和技術(shù)來促進(jìn)國(guó)家和區(qū)域的進(jìn)步與發(fā)展,就可通過對(duì)全國(guó)、省域研究生教育規(guī)模、結(jié)構(gòu)、水平等整體狀況進(jìn)行宏觀監(jiān)測(cè)評(píng)估。培養(yǎng)單位的導(dǎo)師、研究生、管理人員等是研究生教育的直接參與者,他們對(duì)研究生教育質(zhì)量的價(jià)值判斷標(biāo)準(zhǔn)為研究生教育滿足學(xué)術(shù)發(fā)展以及促進(jìn)學(xué)生個(gè)人發(fā)展的程度。導(dǎo)師、指導(dǎo)小組通過對(duì)研究生學(xué)術(shù)訓(xùn)練、能力提升情況進(jìn)行評(píng)估,掌握對(duì)學(xué)生能力提高起關(guān)鍵作用的因素,從而提升教學(xué)與科研水平;研究生關(guān)注自己所學(xué)專業(yè)的現(xiàn)狀,規(guī)劃自己的學(xué)術(shù)和職業(yè)發(fā)展道路;管理人員對(duì)研究生教育管理、教學(xué)科研現(xiàn)狀等進(jìn)行客觀分析,以改進(jìn)教育管理手段,提高管理水平。社會(huì)主體包括用人單位、行業(yè)協(xié)會(huì)、學(xué)術(shù)團(tuán)體等,用人單位根據(jù)行業(yè)需要選取指標(biāo)體系,查看相關(guān)培養(yǎng)單位和學(xué)科的教育狀態(tài)從而有針對(duì)性地開展科研合作與人員招聘工作;行業(yè)協(xié)會(huì)、學(xué)術(shù)團(tuán)體、科研機(jī)構(gòu)等要求研究生教育培養(yǎng)本專業(yè)所需高層次創(chuàng)新人才,從研究生教育滿足社會(huì)各利益團(tuán)體發(fā)展需要的程度來進(jìn)行價(jià)值判斷。
基于大數(shù)據(jù)的研究生教育監(jiān)測(cè)評(píng)估可以實(shí)現(xiàn)動(dòng)態(tài)監(jiān)測(cè)、行為矯正、預(yù)警預(yù)測(cè)、群體或個(gè)人行為分析等其他評(píng)估類型難以完成的工作,使研究生教育評(píng)估更加準(zhǔn)確和科學(xué),提升政府和高校的科學(xué)決策與管理水平,持續(xù)提高研究生教育質(zhì)量。
1.增強(qiáng)評(píng)估的精確性
準(zhǔn)確有效的信息是評(píng)價(jià)的基礎(chǔ)性工作,信息是從數(shù)據(jù)中獲取的有價(jià)值的內(nèi)容。為了保證信息的一致性和可靠性,目前研究生教育評(píng)估以培養(yǎng)單位根據(jù)評(píng)估指標(biāo)提供的數(shù)據(jù)為主要信息來源,因此導(dǎo)致了部分信息的不一致與滯后性。同時(shí)研究生教育的多樣性、層次性、復(fù)雜性決定了數(shù)據(jù)采集來源的多樣性和評(píng)估標(biāo)準(zhǔn)多維度的必要性。
基于大數(shù)據(jù)的研究生教育監(jiān)測(cè)評(píng)估除了從培養(yǎng)單位收集關(guān)于學(xué)術(shù)隊(duì)伍、獲獎(jiǎng)專利、論文專著、科研項(xiàng)目等指標(biāo)的結(jié)構(gòu)化數(shù)據(jù),還可以從國(guó)家教育、科技、人事等主管部門網(wǎng)站、培養(yǎng)單位官方網(wǎng)站、權(quán)威媒體報(bào)道、報(bào)紙雜志書籍、網(wǎng)絡(luò)博文等渠道獲得大量的文字、圖像、音頻、視頻的非結(jié)構(gòu)化數(shù)據(jù)。利用大數(shù)據(jù)管理平臺(tái)持續(xù)、快速、多層次、多維度地收集研究生與導(dǎo)師個(gè)體產(chǎn)生的數(shù)據(jù),全面客觀記錄信息,這些數(shù)據(jù)真實(shí)記錄了研究生的學(xué)術(shù)活動(dòng)、科研參與、生活軌跡、心理發(fā)展等狀態(tài)。通過關(guān)聯(lián)分析技術(shù)有針對(duì)性地挖掘這些數(shù)據(jù)中蘊(yùn)含的信息以及相互關(guān)系,獲得對(duì)研究生教育質(zhì)量有顯著影響的行為指標(biāo),從而增強(qiáng)研究生教育評(píng)估的精確性。
2.促進(jìn)評(píng)估的即時(shí)性
囿于方法和成本等方面的限制,目前我國(guó)的學(xué)位授權(quán)審核、學(xué)位點(diǎn)定期評(píng)估、學(xué)科評(píng)估等評(píng)估項(xiàng)目的周期一般為3~5年,這些評(píng)估類型都存在著周期長(zhǎng)、反饋滯后等缺陷,不能及時(shí)準(zhǔn)確地反映事物的發(fā)展?fàn)顟B(tài),在此基礎(chǔ)上提出的改進(jìn)建議對(duì)提升教育質(zhì)量的作用有限[16]。在美國(guó)評(píng)估學(xué)會(huì)成立25周年紀(jì)念大會(huì)關(guān)于“評(píng)估發(fā)展趨勢(shì)”的主題研討中,研究者提出隨著技術(shù)的發(fā)展、社會(huì)對(duì)高等教育關(guān)注度的提高,教育項(xiàng)目評(píng)估報(bào)告的“保質(zhì)期”會(huì)越來越短,這就要求大量使用周期短、成本低的“最新評(píng)估”[17]。
大數(shù)據(jù)不僅強(qiáng)調(diào)數(shù)據(jù)巨量,更強(qiáng)調(diào)從海量數(shù)據(jù)中快速獲得有價(jià)值的信息?;诖髷?shù)據(jù)的研究生教育監(jiān)測(cè)評(píng)估除了強(qiáng)大的數(shù)據(jù)獲取及集成功能,同時(shí)根據(jù)評(píng)估主體需求快速處理、關(guān)聯(lián)分析數(shù)據(jù),直觀呈現(xiàn)質(zhì)量狀態(tài),極大地縮短數(shù)據(jù)采集與結(jié)果反饋周期,使原來需要在全部工作結(jié)束后進(jìn)行的追憶性評(píng)價(jià)轉(zhuǎn)換為過程進(jìn)行中的即時(shí)性評(píng)價(jià)。監(jiān)測(cè)評(píng)估收集的是平時(shí)教學(xué)和管理工作中積累的數(shù)據(jù),不需要大量的人工投入,甚至不需要被評(píng)估對(duì)象提供評(píng)估材料,降低了數(shù)據(jù)收集的時(shí)間與成本,極大地提高了評(píng)估效益。
研究生教育監(jiān)測(cè)評(píng)估并不是為了取代周期性評(píng)估,而是針對(duì)3~5年一輪的周期性評(píng)估其反饋滯后性的不足,在信息化背景下提出的一種新的評(píng)估類型,讓研究生教育評(píng)估從過分倚重周期性評(píng)估向周期性評(píng)估與常態(tài)性評(píng)估相結(jié)合方向轉(zhuǎn)變。
3.實(shí)現(xiàn)評(píng)估的開放性
研究生教育監(jiān)測(cè)評(píng)估強(qiáng)調(diào)評(píng)估過程與結(jié)果的開放性,構(gòu)建多元利益相關(guān)方平等協(xié)商、共同參與的新機(jī)制,包括評(píng)估主體的合作互動(dòng)、信息渠道的多元、基于共識(shí)的共同改進(jìn)等內(nèi)涵。不同于其他評(píng)估類型中評(píng)估主體處于主導(dǎo)地位、評(píng)估對(duì)象處于被動(dòng)狀態(tài)的單向過程,多元利益相關(guān)方的共同參與是監(jiān)測(cè)評(píng)估實(shí)施的核心理念[13]。
研究生教育有關(guān)數(shù)據(jù)的產(chǎn)生是政府、高校、社會(huì)、研究生、導(dǎo)師等主體共同參與的結(jié)果,讓相關(guān)利益者參加評(píng)估活動(dòng)過程,并結(jié)合價(jià)值取向和利益需求對(duì)直觀呈現(xiàn)的研究生教育質(zhì)量狀態(tài)進(jìn)行價(jià)值判斷,提高評(píng)估過程的參與度與透明度,增加評(píng)估結(jié)果的有效性,全面準(zhǔn)確地反映研究生教育的整體質(zhì)量狀態(tài),更為客觀公正。
以培養(yǎng)單位研究生教育質(zhì)量監(jiān)測(cè)評(píng)估為例,充分吸納培養(yǎng)單位的管理者、研究生導(dǎo)師、在校研究生、校友、校外有關(guān)行業(yè)專家參與監(jiān)測(cè)評(píng)估指標(biāo)的選取、評(píng)估方案的設(shè)計(jì)、數(shù)據(jù)采集與分析、報(bào)告呈現(xiàn)等環(huán)節(jié),不僅可以縮短數(shù)據(jù)收集時(shí)間,降低成本,還可以建立彼此合作與互動(dòng)的伙伴關(guān)系,能夠更加客觀全面地反映培養(yǎng)單位研究生教育的質(zhì)量狀態(tài),推動(dòng)本單位研究生教育質(zhì)量的改進(jìn)和提高。管理者是研究生教育政策與制度具體實(shí)施者,導(dǎo)師和研究生是檢驗(yàn)和評(píng)價(jià)研究生教育質(zhì)量的重要信息反饋渠道,這三類主體的充分參與還能夠增強(qiáng)他們對(duì)評(píng)估報(bào)告建議的接受認(rèn)可程度以及實(shí)施的動(dòng)力和積極性。同時(shí),校友及校外專家的加入有益于培養(yǎng)單位與社會(huì)有效溝通,在吸引社會(huì)關(guān)注研究生教育質(zhì)量的同時(shí)促使培養(yǎng)單位主動(dòng)適應(yīng)社會(huì)發(fā)展需求。
4.強(qiáng)化評(píng)估的預(yù)警與預(yù)測(cè)功能
潘懋元先生認(rèn)為,對(duì)高等教育發(fā)展作出預(yù)測(cè)和預(yù)警是高等教育理論研究者的重要職責(zé)[18]。監(jiān)測(cè)評(píng)估注重過程控制,通過持續(xù)、動(dòng)態(tài)地收集與分析研究生課程教學(xué)、學(xué)術(shù)訓(xùn)練、科研活動(dòng)等相關(guān)數(shù)據(jù),客觀呈現(xiàn)實(shí)際運(yùn)行狀態(tài),對(duì)運(yùn)行狀態(tài)是否按照預(yù)定計(jì)劃發(fā)展、是否向預(yù)定目標(biāo)靠近等進(jìn)行監(jiān)控、預(yù)警,建立起一套反應(yīng)及時(shí)、措施得當(dāng)、改進(jìn)務(wù)實(shí)的新機(jī)制。研究生教育運(yùn)行狀態(tài)如接近臨界值的指標(biāo),則發(fā)出預(yù)警信息,幫助研究生教育管理部門及時(shí)發(fā)現(xiàn)診斷教學(xué)、學(xué)術(shù)開展、管理中存在的問題,剖析原因,加以改進(jìn),以修正活動(dòng)目標(biāo)偏差,保證其朝著預(yù)定的或更高的目標(biāo)發(fā)展。
同時(shí),基于大數(shù)據(jù)的研究生教育監(jiān)測(cè)評(píng)估將突破現(xiàn)有的評(píng)估體系注重對(duì)過去和現(xiàn)在進(jìn)行總結(jié)和描述的局限,實(shí)現(xiàn)研究生教育教學(xué)的發(fā)展和動(dòng)態(tài)趨勢(shì)預(yù)測(cè),為多元主體決策提供更有價(jià)值的信息。大數(shù)據(jù)預(yù)測(cè)技術(shù)通過把數(shù)學(xué)算法運(yùn)用到海量的數(shù)據(jù)上來發(fā)現(xiàn)以往難以察覺的教育教學(xué)規(guī)律,并據(jù)此預(yù)測(cè)可能發(fā)生的事情,甚至可視化地展現(xiàn)出教育教學(xué)運(yùn)行未來的“真實(shí)”場(chǎng)景。
[1]國(guó)家中長(zhǎng)期教育改革和發(fā)展規(guī)劃綱要(2010-2020年)[M].北京:人民出版社,2010.
[2]國(guó)務(wù)院學(xué)位委員會(huì),教育部.關(guān)于印發(fā)《關(guān)于加強(qiáng)學(xué)位與研究生教育質(zhì)量保證和監(jiān)督體系建設(shè)的意見》的通知.學(xué)位〔2014〕3號(hào),2014-03-17.
[3]國(guó)務(wù)院.促進(jìn)大數(shù)據(jù)發(fā)展行動(dòng)綱要的通知.國(guó)發(fā)〔2015〕50號(hào),2015-08-31.
[4]GANTZ J,REINSEL D.IDC iView:extracting value from chaos[EB/OL].(2011-06).http://www.emc.com/collateral/ analyst-reports.
[5]蔡婷婷,齊春萍,朱東華.技術(shù)監(jiān)測(cè)在研究生教育質(zhì)量管理中的應(yīng)用[J].遼寧教育研究,2003(11):28-30.
[6]李江波,王戰(zhàn)軍.研究生教育質(zhì)量監(jiān)測(cè):模型建構(gòu)與實(shí)證分析[J].學(xué)位與研究生教育,2015(6):50-54.
[7]美國(guó)研究生教育委員會(huì)[EB/OL].[2015-12-07].http://cgsnet. org/cgs-occasional-paper-series.html.
[8]HUTCHINGS P,JANKOWKI N A,EWELL P T.Catalyzing assignment design activity on your campus:lessons from NILOA’s assignment library initiative[R].National Institute for Learning Outcomes Assessment(NILOA),2014.
[9]MCLAUGHLIN M W.Implementation realities and evaluation design[J].Evaluation Studies Review Annual,1987(12):73-97.
[10]田德錄,方衍.《科學(xué)素質(zhì)綱要》實(shí)施的監(jiān)測(cè)評(píng)估理論框架研究[J].科普研究,2008(3):18-23.
[11]HONDEGHEM A,VAN DORPE.Performance management systems for senior civil servants:how strong is the managerial public service bargain?[J].International Review of Administrative Sciences,2013(79):9-27.
[12]王紅.我國(guó)高等教育評(píng)估分類與現(xiàn)實(shí)選擇初探[J].中國(guó)高等教育,2011(7):44-45.
[13]王戰(zhàn)軍,王永林.監(jiān)測(cè)評(píng)估:高等教育評(píng)估發(fā)展的新圖景[J].復(fù)旦教育論壇,2014(2):5-9.
[14]高海清.文史哲百科辭典[M].長(zhǎng)春:吉林大學(xué)出版社,1988:385.
[15]王戰(zhàn)軍,喬偉峰,李江波.數(shù)據(jù)密集型評(píng)估:高等教育監(jiān)測(cè)評(píng)估的內(nèi)涵、方法與展望[J].教育研究,2015(6):29-37.
[16]王戰(zhàn)軍,李明磊,李江波.研究生教育評(píng)估新思維[J].清華大學(xué)教育研究,2012(1):17-22.
[17]YARNALL L,SMITH L N.Looking ahead:the future of evaluation on 2036[J].American Journal of Evaluation,2011 (32):565-576.
[18]王琪.預(yù)測(cè)與預(yù)警:高等教育理論研究者的社會(huì)責(zé)任[J].中國(guó)高等教育評(píng)論,2011(2):366-372.
(責(zé)任編輯周玉清)
李芬,北京理工大學(xué)教育研究院博士研究生,北京100081;王戰(zhàn)軍,北京理工大學(xué)教育研究院教授,北京100081。
10.16750/j.adge.2016.07.004
國(guó)家自然科學(xué)基金面上項(xiàng)目“高等教育監(jiān)測(cè)評(píng)估理論與方法研究”(編號(hào):71273029)