基于工程教育專業(yè)認(rèn)證的學(xué)生評(píng)教數(shù)據(jù)探索

西北民族大學(xué) 左曉薇

自從我國加入華盛頓協(xié)議組織，表示我國工程學(xué)歷認(rèn)證已與國際接軌，逐漸邁入國際化軌道。這是對(duì)我國工程教育重視程度的不斷提升，還在一定程度上提升了對(duì)于工程教育的要求，對(duì)工程教育的持續(xù)改進(jìn)可以為其提供一定的基礎(chǔ)理念。這一理念主要表示借助內(nèi)部質(zhì)量監(jiān)控、跟蹤及評(píng)價(jià)等方式為工程教學(xué)進(jìn)程準(zhǔn)確把控，為工程教育專業(yè)建設(shè)發(fā)展奠定基礎(chǔ)。

一、工程教育專業(yè)認(rèn)證下學(xué)生評(píng)教數(shù)據(jù)概述

學(xué)生評(píng)教主要指的是學(xué)生可以結(jié)合教師的教學(xué)風(fēng)格、教學(xué)方式、教學(xué)節(jié)奏等多方面教學(xué)表現(xiàn)進(jìn)行評(píng)價(jià)，還可以根據(jù)自身理解程度有無進(jìn)步、專業(yè)能力是否得到提升等方面進(jìn)行評(píng)教。學(xué)?？梢越Y(jié)合多方面設(shè)置相應(yīng)的評(píng)價(jià)指標(biāo)，從而為學(xué)生對(duì)教師進(jìn)行評(píng)教提供便捷。學(xué)生對(duì)于教師教學(xué)方式的評(píng)價(jià)可以為學(xué)校提供參考，準(zhǔn)確判斷教師教學(xué)效果。學(xué)生對(duì)于教師教學(xué)過程的評(píng)價(jià)最早來自發(fā)達(dá)國家，自評(píng)教方式誕生以后，經(jīng)過了多個(gè)時(shí)期的發(fā)展和更新，我國在引入評(píng)教方式后，一些學(xué)校內(nèi)部先行采用了評(píng)教方式來掌握教師教學(xué)情況。在獲得一定成果后，便不斷對(duì)其進(jìn)行完善和優(yōu)化，進(jìn)而使評(píng)教方式更加公開、公平、規(guī)范。本次研究分析了當(dāng)前學(xué)院內(nèi)部學(xué)生在評(píng)教過程中存在的問題及評(píng)教對(duì)學(xué)生學(xué)習(xí)產(chǎn)生的影響。

目前，學(xué)生在進(jìn)行教學(xué)評(píng)教的過程中存在著較為濃重的主觀色彩，這也導(dǎo)致評(píng)教無法收到應(yīng)有的效果。一些學(xué)生無法理性評(píng)價(jià)，甚至對(duì)一些課堂要求較高的教師打低分，出現(xiàn)這種情況的原因主要是評(píng)教數(shù)據(jù)后續(xù)處理缺乏科學(xué)性和合理性。在學(xué)生結(jié)束對(duì)教師課堂教學(xué)評(píng)教后，按照規(guī)定的比例去除一些偏差較大的分值，取中間值并不能將所有不客觀分值有效篩除。學(xué)院內(nèi)部傳統(tǒng)評(píng)教數(shù)據(jù)的分析主要是借助李克特量表（Likert scale)，是評(píng)分加總式量表最常用的一種，屬同一概念的這些項(xiàng)目是用加總方式來計(jì)分，單獨(dú)或個(gè)別項(xiàng)目是無意義的。它是由美國社會(huì)心理學(xué)家李克特于1932 年在原有的總加量表基礎(chǔ)上改進(jìn)而成的，對(duì)學(xué)生評(píng)分展開討論與研究。

結(jié)合教學(xué)內(nèi)容、教學(xué)方式、課堂管理、課程考核等內(nèi)容了解學(xué)生對(duì)于教師的評(píng)分，借助加權(quán)平均的方式進(jìn)行。這種數(shù)據(jù)處理方式可以為學(xué)生評(píng)教提供便捷，便于后續(xù)人員進(jìn)行評(píng)教數(shù)據(jù)處理，但還是會(huì)使教師評(píng)教分?jǐn)?shù)受到學(xué)生主觀色彩的影響。學(xué)生在隨意評(píng)教的時(shí)候，傳統(tǒng)評(píng)教數(shù)據(jù)無法對(duì)學(xué)生評(píng)分真實(shí)性進(jìn)行確定，因此這時(shí)需要通過分析學(xué)生評(píng)教評(píng)論文本了解實(shí)際評(píng)分?jǐn)?shù)據(jù)，掌握學(xué)生在評(píng)教過程中存在的其他參考信息，便于掌握學(xué)生評(píng)教形式。

二、評(píng)教文本分析方式

（一）實(shí)施數(shù)據(jù)清理

結(jié)合自然語言處理背景，對(duì)學(xué)生評(píng)教評(píng)論文本展開分析處理可以更好地實(shí)現(xiàn)數(shù)據(jù)清理，收集相應(yīng)的目標(biāo)意見，促使主題匹配的實(shí)現(xiàn)。其中還包含教師畫像步驟，使學(xué)生在了解評(píng)教文本分析方式的基礎(chǔ)上實(shí)現(xiàn)評(píng)教。學(xué)生的評(píng)教數(shù)據(jù)主要來自A 學(xué)校2020 年某專業(yè)評(píng)教記錄。在開展評(píng)教文本分析之前可以對(duì)數(shù)據(jù)中存在的學(xué)生學(xué)號(hào)，教師工號(hào)采取脫敏處理。共有百余名學(xué)生對(duì)10 門課程進(jìn)行評(píng)教，其中涉及10 名教師，如表1 所示。

表1 學(xué)生評(píng)教文本分析示例

因?yàn)閷W(xué)生可以在評(píng)論文本中自由填充評(píng)論內(nèi)容，所以學(xué)院應(yīng)該對(duì)學(xué)生評(píng)教記錄中存在的評(píng)論文本進(jìn)行數(shù)據(jù)清理，促使一些參與數(shù)據(jù)分析的評(píng)論文本發(fā)揮其應(yīng)有的作用。學(xué)院內(nèi)部在實(shí)施數(shù)據(jù)清理的時(shí)候應(yīng)該對(duì)一些與評(píng)教無關(guān)的內(nèi)容進(jìn)行清除，其中包括一些無意義評(píng)論、純數(shù)字評(píng)論等。另外，對(duì)于一些泛泛而談的評(píng)教內(nèi)容也應(yīng)該及時(shí)清除。例如，一些字眼為“很好”的評(píng)價(jià)內(nèi)容不但無法表述教師的教學(xué)質(zhì)量，還無法使教師教學(xué)與教學(xué)評(píng)教相契合，無法使評(píng)論文本和教師教學(xué)的某一教學(xué)方面相對(duì)應(yīng)。因此，針對(duì)一些評(píng)教中的短評(píng)論也需要及時(shí)清理。

（二）對(duì)評(píng)教評(píng)論文本進(jìn)行意見提取和主題匹配

1.目標(biāo)意見元組提取

為了從當(dāng)前評(píng)教內(nèi)容中將與教師有關(guān)的教學(xué)信息意見進(jìn)行充分收集，需要將評(píng)教信息中評(píng)論文本所包含的目標(biāo)意見提取出來。在評(píng)教信息中，目標(biāo)意見屬于學(xué)生對(duì)課程教學(xué)活動(dòng)中某一環(huán)節(jié)的評(píng)價(jià)。本次分析采取了自然語言處理工具包進(jìn)行評(píng)價(jià)文本分析，掌握詞語之間的依賴關(guān)系，隨后使用雙向傳播算法將目標(biāo)意見元組提取出來，表2 為意見元組提取示例。

表2 目標(biāo)意見元組提取示例

2.主題匹配

文章使用目前被廣泛采用的IDEA 評(píng)教模型（IntelliJ IDEA）對(duì)教師課堂教學(xué)活動(dòng)進(jìn)行評(píng)價(jià)，也可以稱為教師畫像。教師畫像中包含教師基本信息、學(xué)校屬性、授課信息、授課關(guān)系、成果信息、評(píng)教信息等。教師畫像可以幫助評(píng)教順利進(jìn)行。本次評(píng)教從課程組織、課堂交流溝通、師生互動(dòng)、課程教學(xué)難度、考試以及學(xué)生自我評(píng)價(jià)等方面開展。為了實(shí)現(xiàn)合理評(píng)教，需要將提取出的目標(biāo)意見元組匹配到IDEA 評(píng)教模型中的某個(gè)主題，進(jìn)而形成教師畫像。將提取出的目標(biāo)詞和主題詞使用相同的詞向量表示出來，隨后使用余弦相似度對(duì)目標(biāo)詞向量和主題詞向量相似度進(jìn)行計(jì)算，取其中相似度最高的主題詞作為目標(biāo)詞對(duì)應(yīng)的主題。

三、評(píng)教文本數(shù)據(jù)分析應(yīng)用

（一）對(duì)學(xué)生評(píng)教文本內(nèi)容進(jìn)行分析

當(dāng)前，目標(biāo)意見主要是將評(píng)教內(nèi)存在的評(píng)論文本提取出來，這也屬于文本方式的主要路徑。為了對(duì)評(píng)論文本有效性進(jìn)行合理驗(yàn)證可以借助設(shè)備提取的方式與人工提取相對(duì)比，在對(duì)評(píng)教文本信息進(jìn)行驗(yàn)證的時(shí)候可以使驗(yàn)證人員與設(shè)備驗(yàn)證同步進(jìn)行，假如其中存在對(duì)相同內(nèi)容的不同意見，則可以借助對(duì)其進(jìn)行深入探討獲得一致意見，進(jìn)而降低人工標(biāo)記的隨意性。借助人工驗(yàn)證方式對(duì)于評(píng)教文本進(jìn)行收集，需要相關(guān)人員針對(duì)一些相同的評(píng)價(jià)內(nèi)容以文本方式提取意見得到設(shè)備的提取結(jié)果，將人工提取內(nèi)容和設(shè)備提取內(nèi)容對(duì)比，對(duì)準(zhǔn)確率、召回率及F1 值進(jìn)行計(jì)算。經(jīng)過對(duì)人工提取內(nèi)容與設(shè)備提取內(nèi)容的對(duì)比可以得知，當(dāng)前設(shè)備提取內(nèi)容與人工提取內(nèi)容相似性較高。

（二）針對(duì)評(píng)教弱點(diǎn)進(jìn)行分析

通過分析學(xué)生評(píng)教弱點(diǎn)可以對(duì)評(píng)教方式進(jìn)行優(yōu)化，學(xué)生評(píng)教中評(píng)論文本對(duì)教師的評(píng)價(jià)主體分為教師的教學(xué)活動(dòng)和教學(xué)主題，因此借助對(duì)主題的評(píng)論文本可以統(tǒng)計(jì)出主題所包含的評(píng)論文本。在對(duì)評(píng)教記錄進(jìn)行分析后可以得知，目前學(xué)生對(duì)于教師的表達(dá)交流技巧和課程難度方面的評(píng)價(jià)占比較高，這也表示學(xué)生對(duì)于教師課堂教學(xué)中與學(xué)生之間的溝通交流及教學(xué)難易的重視程度較高，因此可以將課堂師生交流和教學(xué)難易度作為學(xué)生感受最多的內(nèi)容。學(xué)生的自我評(píng)價(jià)占比較低，這也屬于課堂評(píng)教的薄弱環(huán)節(jié)，究其原因主要是評(píng)教環(huán)節(jié)主要是針對(duì)教師課堂教學(xué)展開評(píng)價(jià)，大部分學(xué)生沒有認(rèn)識(shí)到評(píng)教內(nèi)容中自我分析環(huán)節(jié)對(duì)于教師課堂教學(xué)評(píng)價(jià)的意義，因此大部分學(xué)生都沒有進(jìn)行自我評(píng)價(jià)。所以在日后課堂教學(xué)過程中，教師需對(duì)教學(xué)目標(biāo)進(jìn)行明確，進(jìn)而強(qiáng)化學(xué)生對(duì)于自我評(píng)價(jià)環(huán)節(jié)的意識(shí)，對(duì)評(píng)教過程起到優(yōu)化作用。

綜上所述，采取自然語言處理技術(shù)對(duì)學(xué)生評(píng)教數(shù)據(jù)文本內(nèi)容進(jìn)行分析的方式，可以作為評(píng)分分析手段的有效補(bǔ)充，進(jìn)而為工程教育專業(yè)內(nèi)部持續(xù)改進(jìn)理念的實(shí)現(xiàn)提供支撐。相關(guān)數(shù)據(jù)研究?jī)?nèi)容表示，一些新型手段的出現(xiàn)也為評(píng)教方式的提升和完善起到了輔助作用。這就要求學(xué)校在日后的發(fā)展過程中不斷融合評(píng)教分析結(jié)果，對(duì)教學(xué)方式進(jìn)行改進(jìn)，從而更好地對(duì)新方式在教學(xué)持續(xù)改進(jìn)過程中產(chǎn)生的作用進(jìn)行合理驗(yàn)證。