張俊飛+畢志升+吳小玲
摘 要:教學評價作為現(xiàn)代教育科學研究三大領域之一,對其研究熱點和主題分析十分必要。文章以中國知網(wǎng)數(shù)據(jù)庫2014-2016年核心期刊、CSSCI期刊收錄的840篇教學評價研究相關的學術論文為研究對象,利用可視化技術,結(jié)合詞篇矩陣、共現(xiàn)矩陣、聚類分析、多尺度分析、社會網(wǎng)絡化分析等技術探究我國教學評價領域近3年研究現(xiàn)狀和發(fā)展趨勢。結(jié)果顯示,教學評價研究主要圍繞九個主題展開研究,當前研究主要集中在教學模式改革、教學過程和要素、評價方式等;未來需要關注教學模式改革效果評價、有意義學習等領域。
關鍵詞:詞篇矩陣;共現(xiàn)矩陣;聚類分析;知識圖譜;社會網(wǎng)絡化分析
中圖分類號:G434 文獻標志碼:A 文章編號:1673-8454(2018)01-0017-05
引言
《國家中長期教育改革和發(fā)展規(guī)劃綱要(2010-2020年)》明確提出了“改革考試評價制度和學??己宿k法,建立科學的教育質(zhì)量評價體系,改進教育教學評價”的總體發(fā)展目標。教學評價被譽為現(xiàn)代教育科學研究的三大領域之一,其意義不言而喻。教育評價思想開始于我國古代教育,早在西周時代已經(jīng)形成比較完備的考試選拔制度,在歷代的封建王朝時代,“分科舉人”、“開科納士”等考試制度,正是教育評價思想的淵源。
本研究利用社會網(wǎng)絡化分析、多維尺度分析和聚類分析等多元分析方法,將“教學評價”領域內(nèi)的重要關鍵詞進行提取、分類、關系分析操作,從而總結(jié)歸納出該領域研究的熱點和主題,以進一步掌握“教學評價”研究路線以及未來研究方向,為后續(xù)科研提供參考。
本研究同樣秉承可視化分析的思路,結(jié)合多元分析方法??梢暬治鍪侵笇⒂嬎銠C進行科學計算的中間數(shù)據(jù)和結(jié)果數(shù)據(jù),以某種容易理解的視覺方式展示出來的方法。[1]可視化分析利用計算機數(shù)據(jù)表示、處理技術實現(xiàn)數(shù)據(jù)可視化,[2]使數(shù)據(jù)用圖表、曲線顯示,并能對數(shù)據(jù)的相互關系和模式進行分類、組合、可視化呈現(xiàn)。在大數(shù)據(jù)時代,數(shù)據(jù)可視化已經(jīng)逐漸成為主流。
一、數(shù)據(jù)來源與處理
1.數(shù)據(jù)來源
本研究以中國知網(wǎng)CNKI為搜索引擎,采用高級檢索功能,檢索2014-2016年在核心期刊、CSSCI期刊中發(fā)表的包含“教學評價”主題的文章,共847篇,過濾掉與主題無關的7篇文獻,共得到840篇樣本文獻,并以NoteFirst格式導出。
2.提取高頻關鍵詞
利用BICOMB2.0書目共現(xiàn)分析軟件,創(chuàng)建項目,選擇“cnki..
3.構建詞篇矩陣、共現(xiàn)矩陣與相異矩陣
采用Ucinet6和SPSS22軟件對66個高頻關鍵詞做矩陣分析,首當其沖的是準備分析數(shù)據(jù)——高頻關鍵詞的詞篇矩陣(見表2)、高頻關鍵詞的相異矩陣(見表3)、高頻關鍵詞的共現(xiàn)矩陣(見表4)。首先在BICOMB2.0軟件中設置閾值條件為5≤頻次≤148,生成詞篇矩陣和共現(xiàn)矩陣;利用SPSS22軟件對詞篇矩陣進行相似矩陣距離分析處理,設置度量標準為二分類Ochiai系數(shù),生成相似矩陣。為了消除由于關鍵詞共現(xiàn)次數(shù)差異所帶來的影響,相異矩陣由相似矩陣導出到Excel中,并利用數(shù)字“1”與相似矩陣中的相似值相減生成。[5]
二、研究熱點及其關系
為了獲取教學評價研究熱點及其關系,需要將先前統(tǒng)計出的高頻關鍵詞共現(xiàn)矩陣導入到Ucinet6軟件中,生成二維社會網(wǎng)絡關系圖譜。將共現(xiàn)矩陣導入到Ucinet6軟件中,對高頻關鍵詞進行節(jié)點中間度分析,如表5所示,并生成可視化高頻關鍵詞社會網(wǎng)絡關系圖譜,在圖譜的基礎上進行中間中心度(Betweenness)操作和K-cores分析操作,得圖1。
通過Ucinet6菜單項“網(wǎng)絡-中心度-Freeman中間度-節(jié)點中間度”操作統(tǒng)計節(jié)點中間度。從表5中可以看出,教學評價主要圍繞評價體系、教學模式、教學改革、實踐教學、課堂教學、教學質(zhì)量等主題展開研究的。在社會網(wǎng)路關系圖譜中可以看出,通過中間中心度和K-cores分析,各個節(jié)點在網(wǎng)絡中作用大小有不同大小顯示和顏色變化。節(jié)點正方形大小標識占據(jù)網(wǎng)絡核心位置,紅色表示該領域的研究熱點,其他研究基本都是圍繞這些熱點主題展開的。在社會網(wǎng)絡關系圖譜中,除了可以看出研究的熱點,還可以通過熱點間連線的粗細和緊密程度,說明熱點研究的成熟度。除了核心關鍵詞外,其他節(jié)點聯(lián)系較為松散,說明沒有形成明顯的研究主題。
三、主流研究領域結(jié)構及其關系
1.高頻關鍵詞聚類分析
關鍵詞聚類分析的原理是以關鍵詞兩兩在同一篇文章中出現(xiàn)的頻率(共詞)為分析對象,利用聚類的統(tǒng)計學方法,把關聯(lián)密切的關鍵詞聚集在一起形成類團。[6]在SPSS22中,把詞篇矩陣導入,進行系統(tǒng)聚類分析,聚類方法采用組之間的鏈接,以二分類Ochiai系數(shù)為測量標準,得到圖2所示的主題譜系圖。聚類結(jié)果顯示,教學評價領域的研究熱點主要集中在九類主題——教學評價指標、教學評價方式、教學模式改革、教學評價體系、學生評價、教學評價的意義、課程評價、教師評價、教學過程與要素。
種類一涉及教學評價指標的設計。高校開設科目眾多,課程性質(zhì)多樣,如實驗課、雙語課、討論課、體育課、見習課等,不能采用單一教師評價指標全面覆蓋所有教師。另外評價對象除了教師以外,還有學生和課程等教學過程要素,應該針對學生和課程根據(jù)不同的標準提出不同的評價指標。只有建立多維度的教學評價指標體系才能符合教學情況,才能更具有針對性。魏翼飛[7]等通過研究大學生評教心理因素,設計了分階段的教學質(zhì)量評價指標,提出多元評價方式和以教學質(zhì)量綜合指數(shù)為標準的評教手段。
種類二是評價方式。隨著信息化的發(fā)展,教學評價方式呈現(xiàn)多樣化趨勢。韋文榮[8]等結(jié)合移動學習的特征對思政課進行教學改革,構建基于移動學習的評價方式。徐鎮(zhèn)凱[9]等綜合應用大數(shù)據(jù)多層變權云計算方法優(yōu)化教學質(zhì)量評價體系機制。信息化評價軟件的出現(xiàn)促進了評價方式的革新,學生群體作為教學評價的主體,從自身實踐經(jīng)驗出發(fā)帶有很強的主觀性,因此需要信息化技術應用到評價中對數(shù)據(jù)清洗,剔除無效數(shù)據(jù)。
種類三是教學模式改革。信息化的發(fā)展,促進了網(wǎng)絡課程的開設,“微課”、“慕課”、“CDIO”、“移動學習”等教學新名詞井噴出現(xiàn)。王冠軍[10]等基于翻轉(zhuǎn)課堂與MOOC的嵌入式軟件工程實踐教學促進了學生對理論知識的掌握與理解。
種類四是評價體系。教學評價體系研究近年來日益豐富。從總體上分析,主要研究內(nèi)容包括兩部分:①多視角研究教學體系的結(jié)構,包括教學課程設置、教學模式、人才培養(yǎng)等;②教學質(zhì)量監(jiān)控與評價體系,包括相關軟硬件的設計、開發(fā)與使用,師資保障以及制度建設。這些對高校教學發(fā)展、人才培養(yǎng)等都有重要指導和促進作用。
種類五是學生評價。建構主義學習觀認為:學習是學習者利用已有知識經(jīng)驗了解構建新知識的過程。當前,對學生的評價主要是改善學生的學習和甄別學生學習水平。通過學生評價數(shù)據(jù),教師可以了解教學得失從而改進教學方法,同時也可以及時了解學生學習和身心發(fā)展狀況,方便給予引導和幫助。
種類六是教學評價意義。教學評價作為一個獨立的研究領域始于20世紀初,其發(fā)展經(jīng)歷了四個時期,由最初的測量、測驗評價階段,到是否達到教學目標描述時期,再到確定評價是價值判斷、具有過程性的判斷時期,直到最終認為評價是共同建構的成熟期。教學評價反饋被視為評價者和被評價者“協(xié)商”進行的共同心理建設過程。學生評價,是授課教師對學生學習的一個反饋,讓學生獲得自己的學習水平層次,知曉在學習中取得的進步和存在的不足,有益于學生學習及成長。教師評價的兩大基本目的,就是保證教學質(zhì)量和推動教師的專業(yè)發(fā)展,[11]使教師在完成業(yè)績目標的同時也成為實現(xiàn)自我發(fā)展及完善的過程。[12]課程評價的主體是學生,真實地反映課程開設情況,及時反映給教學管理者,為教學管理者的科學決策及工作方針的制訂提供依據(jù)。簡言之,教學評價反饋具有教學診斷、激勵、調(diào)控功能。
種類七是課程評價。課程評價是事實與價值判斷的合體,是課程價值的發(fā)現(xiàn)和創(chuàng)造。[13]課程的發(fā)展是伴隨著時代的要求,對課程的評價更能體現(xiàn)課程是否符合現(xiàn)實,是否促進學生對科學文化的掌握。楊燁[14]依據(jù)美國“概念體育”課程理論,構建了基于體育生活方式的學校體育課程,使學生形成科學、健康的體育生活方式,掌握熟練的運動技能和知識。
種類八是教師評價。教育大計,教師為本,《關于深化教育改革全面推進素質(zhì)教育的決定》要求教師評價機制作為一項全面推進素質(zhì)教育的重要措施。教師評價研究是建立教師管理制度的重要方面和首要環(huán)節(jié),教師對自身的教育活動進行自我評價,實際上是一個反思、修正的過程,可以促進教師的專業(yè)成長。
種類九是教學過程與要素。教學過程是學生認知身心發(fā)展的過程,在教學過程中,教師按照教學計劃引導學生進行有意義的認知活動,學生自覺調(diào)整自己的認知結(jié)構,提高自己的智力、體力、品德等方面。對教學過程的研究是對教學本質(zhì)的研究、對教學更深入的認識。教學基本要素有多種研究說法,如三要素說、四要素說、五要素說、六要素說、七要素說和三三構成說等。無論是哪種說法教學要素就是在教學過程中對教學產(chǎn)生影響的因子,對因子的研究有助于教學的順利開展。
2.高頻關鍵詞知識圖譜分析
知識圖譜主要用于科學文獻中知識發(fā)現(xiàn),用以揭示領域知識結(jié)構和領域的研究重點。[15]多維尺度分析生成的知識圖譜是一個二維坐標圖,其中橫坐標表示某個研究領域的向心度,描述了該領域在整個領域中的地位,值越大說明該研究領域越重要;縱坐標表示某個領域研究的密度,衡量該領域中內(nèi)部知識研究的聯(lián)系強度,值越大表示該領域研究的框架結(jié)構越完整,該領域研究現(xiàn)狀很成熟前景良好。圖中的圓點代表高頻關鍵詞在知識圖譜中所處的位置。各個領域的不同位置在知識圖譜中表示不同的含義。第一象限包含的高頻詞組具有較高的向心度和緊密的密度,說明這些詞組代表的研究領域是整個領域的核心地位,并且研究的層次結(jié)構完善。第二象限關鍵詞組的向心度低但密度緊密,這說明其代表的研究領域雖然不占據(jù)整個領域的重要地位,但是其具有較完整的框架結(jié)構、系統(tǒng)的體系。第三象限關鍵詞組具有較低的向心度和密度,這說明其代表的研究領域在整個領域的邊緣,且之間關聯(lián)疏松,結(jié)構不完整、不系統(tǒng)。第四象限關鍵詞組的向心度高但是密度低,這說明其代表的研究領域在整個領域中還很重要,但是內(nèi)部研究不系統(tǒng),結(jié)構松散。
知識圖譜由SPSS22ALSCAL多維尺度分析生成。將先前準備的高頻關鍵詞相異矩陣輸入到SPSS22軟件中,以區(qū)間為測量級別并設置Eudidean距離為度量模型,輸出數(shù)據(jù)矩陣,得到熱點知識圖譜如圖3所示。
第一象限呈現(xiàn)大部分種類一、三、九高頻關鍵詞,這說明在教學評價領域評價指標、教學模式、教學過程與要素在該領域中處于研究重要地位,并且研究趨于完整成熟。但是,在第四象限還有部分種類三、九部分高頻關鍵詞,如“翻轉(zhuǎn)課堂”、“學習過程”等,這說明種類三、九還有些領域雖然具有研究價值,但是還沒有形成完整體系。第二象限呈現(xiàn)大部分種類二、四、六、八高頻關鍵詞,這說明教學評價方式、評價體系、評價意義、教師評價,雖然研究得比較系統(tǒng)化,研究的層次很完善,但是研究的熱度處于該領域的邊緣。第三象限呈現(xiàn)大部分種類五、七高頻關鍵詞,這說明學生評價、課程評價兩個領域研究熱度不夠、處于該領域邊緣,并且研究的框架結(jié)構也不完善,是個比較薄弱的環(huán)節(jié)。endprint
四、結(jié)論與反思
教學評價作為學校教育活動體系中不可缺少的組成部分,對優(yōu)化教育管理、提高教育質(zhì)量等具有重要的作用。教學評價是教學活動的重要因素之一,是修改和完善教學的基礎。在教學活動實施過程中,評價活動也始終貫穿其中。本研究對我國教學評價的未來發(fā)展提出以下幾個意見,供其他學者參考。
1.評價主體、客體要全
只對一個或者幾個教學要素進行評價,必將導致評價指向偏離,評價結(jié)果價值降低。評價主體必須包含如下方面:①教學督導、領導。一般由在職的資深教授組成,旨在利用他們豐富的教學經(jīng)驗,發(fā)現(xiàn)課堂教學中的問題,規(guī)范教學秩序,監(jiān)督教學行為,并對授課教師提供必要的建議和引導,提升他們的教學能力。②學生。依據(jù)自身的聽課感受及其認知進行主觀價值判斷。③教師。教師參與評價的形式應是教師在日常工作中對自身工作持續(xù)不斷的反思、改進的記錄。
弗·鮑良克[16]認為:“教師、學生、教學內(nèi)容是教學的三個基本要素,它被稱為教學論的三角形?!眲⒖颂m[17]認為:“教學過程是教師的教和學生的學以教材為中介的共同活動過程?!北狙芯繄猿纸虒W過程三要素觀點,教學評價應該圍繞對學生評價、對教師評價、對課程評價三個維度,來詮釋教學質(zhì)量評價。然現(xiàn)代教學評價對象更多的是教師,僅從教師角度去評價教學無疑管中窺豹。學生、教師、課程作為教學活動三要素,對教學效果都有著重要的影響,都應成為被評價的客體。
2.多種評價方式
形成性評價強調(diào)教學過程,使教學成為一個自我糾正系統(tǒng);總結(jié)性評價強調(diào)績效責任,檢驗教學目標達標程度;發(fā)展性評價實現(xiàn)評價者和評價對象共同商定發(fā)展目標,以促進被評價者不斷地發(fā)展。當前,教學模式的多種化、教學方法的多樣化都需要多種評價方式并存,更好地對教學過程、效果進行評估與監(jiān)控。
3.評價指標要具有信度和效度
信度和效度是教育評價指標體系實施的前提條件,是衡量教育評價指標體系構建質(zhì)量的重要尺度。信度是指評價指標要貼合實際、能評出真實情況;效度指評價指標的準確性和代表性。針對不同的評價對象,要設計不同的評價指標體系,體現(xiàn)評價指標的多維化特性。如對教師的評價指標可以按照課程性質(zhì),設置不同的評價標準。
4.評價數(shù)據(jù)處理要具有科學性
按照數(shù)據(jù)類型,評價數(shù)據(jù)可以分為量化數(shù)據(jù)和質(zhì)性數(shù)據(jù)。針對兩種類型數(shù)據(jù)可采取兩種方法:①教育評價信息的定量分析評判法,如加權平均法、模糊綜合評判法、集體綜合評價法等。②教育評價信息的定性分析描述法,如等級評價法、評語鑒定法、寫實分析法等。隨著信息化技術的發(fā)展,數(shù)據(jù)可視化也逐漸成為一種成熟的科學處理方法,增強了數(shù)據(jù)的可讀性。
參考文獻:
[1]張家華,鄒琴,祝智庭.國內(nèi)近五年學習分析研究現(xiàn)狀的可視化綜述[J].浙江師范大學學報(社會科學版),2017(1):117-124.
[2]高玥.大數(shù)據(jù)時代背景下的數(shù)據(jù)可視化概念研究[J].電子技術與軟件工程,2014(19):216.
[3]王佑鎂,陳慧斌.近十年我國電子書包研究熱點與發(fā)展趨勢——基于共詞矩陣的知識圖譜分析[J].中國電化教育,2014(5):4-10.
[4]梁樂明,曹俏俏,張寶輝.微課程設計模式研究——基于國內(nèi)外微課程的對比分析[J].開放教育研究,2013(1):65-73.
[5]郭文斌,方俊明.關鍵詞共詞分析法:高等教育研究的新方法[J].高教探索,2015(9):15-21,26.
[6]王敏,郭文斌.我國近十年情緒調(diào)節(jié)研究熱點知識圖譜[J].心理研究,2011(5):56-59.
[7]魏翼飛,王鐵軍.教學質(zhì)量評價心理因素研究與評價體系設計[J].北京郵電大學學報(社會科學版),2016(6):103-110.
[8]韋文榮,黃振宣.基于移動學習的思政課學習效果評價體系[J].教育與職業(yè),2016(24):101-103.
[9]徐鎮(zhèn)凱,溫勇兵,魏博文,谷明晗.基于大數(shù)據(jù)多層變權云計算的高校工科教師授課質(zhì)量綜合評價[J].現(xiàn)代教育管理,2016(9):93-96.
[10]王冠軍,周勇,江海峰,趙瑩,李向群.基于翻轉(zhuǎn)課堂與MOOC的嵌入式軟件工程實踐教學研究[J].實驗技術與管理,2016(4):176-178,185.
[11]唐善梅,裴育.美國教師評價研究對我國高校教師評價制度的啟示[J].繼續(xù)教育,2010(6):127-129.
[12]朱志良.建立發(fā)展性教師評價體系芻議[J].高等工程教育研究,2005(6):38-41.
[13]蔣雅俊.課程評價:課程價值的創(chuàng)造與實現(xiàn)[J].華南師范大學學報(社會科學版), 2014(3):63-68,162.
[14]楊燁.基于體育生活方式的學校體育課程評價標準[J].上海體育學院學報,2014(2): 74-77.
[15]任紅娟,張志強.基于文獻計量的科學知識圖譜發(fā)展研究[J].情報雜志,2009(12):86-90.
[16]Bacic, B..Computer at the university: opportunities for tailoring automated marking and digital feedback, F,2003[C].IEEE.
[17]劉克蘭.現(xiàn)代教學論[M].重慶:西南師范大學出版社,1998:41-44.
(編輯:王天鵬)endprint