葉汝軍
摘 要:本文參考教育部提出的教育質(zhì)量綜合評(píng)價(jià)的理論框架,結(jié)合地區(qū)高職學(xué)校的實(shí)際情況及學(xué)生的心理特點(diǎn),開(kāi)發(fā)出具有科學(xué)性和實(shí)操性的中國(guó)高職學(xué)生的教育質(zhì)量綜合評(píng)價(jià)的測(cè)量工具,為更好地了解高職學(xué)生的發(fā)展情況,促進(jìn)學(xué)生健康成長(zhǎng),全面提高教育質(zhì)量提供依據(jù)。
關(guān)鍵詞:高職學(xué)生 教育質(zhì)量綜合評(píng)價(jià) 量表 信度
課 題:本文系課題《職業(yè)教育質(zhì)量監(jiān)測(cè)與綜合評(píng)價(jià)平臺(tái)關(guān)鍵技術(shù)研究》(編號(hào)2015C33070)的研究成果。
目前,我國(guó)高職教育學(xué)習(xí)評(píng)價(jià)現(xiàn)狀不容樂(lè)觀。在評(píng)價(jià)理念上注重學(xué)生對(duì)系統(tǒng)知識(shí)的積累和掌握,忽視學(xué)生實(shí)踐和動(dòng)手能力的訓(xùn)練;在評(píng)價(jià)方式上,閉卷考試居多,開(kāi)卷考試少,筆試方式多,口試、答辯形式少;在評(píng)價(jià)內(nèi)容上,理論考試居多,技能、操作實(shí)踐能力考察少;在評(píng)價(jià)組織上,統(tǒng)一考試多,因材施考少。
一、我國(guó)高職教育評(píng)價(jià)背景
實(shí)踐證明,諸如此類的評(píng)價(jià)方式不僅無(wú)法有效、科學(xué)地評(píng)價(jià)學(xué)生所學(xué)知識(shí)和所獲得的技能,還歪曲了學(xué)習(xí)評(píng)價(jià)引領(lǐng)教學(xué)改革的作用,抑制了學(xué)生的個(gè)性化發(fā)展。當(dāng)今教育改革過(guò)程中離不開(kāi)教育質(zhì)量的監(jiān)測(cè),這個(gè)環(huán)節(jié)是學(xué)校發(fā)展的生命線。開(kāi)展教育質(zhì)量監(jiān)測(cè)是建設(shè)教育質(zhì)量管控體系與提高教育治理能力的重要內(nèi)容。因此,教師應(yīng)該從關(guān)注學(xué)業(yè)成績(jī)轉(zhuǎn)變到關(guān)注教育質(zhì)量綜合評(píng)價(jià)。
二、研究方法及過(guò)程
1.文獻(xiàn)研究
主要用于對(duì)教育部發(fā)布的《中小學(xué)教育質(zhì)量綜合評(píng)價(jià)指標(biāo)框架(試行)》進(jìn)行深入解讀,對(duì)國(guó)家相關(guān)教育政策或制度(如《國(guó)家基礎(chǔ)教育質(zhì)量監(jiān)測(cè)實(shí)施方案》等)及已有文獻(xiàn)和實(shí)踐案例進(jìn)行梳理和分析,為構(gòu)建本地高職教育質(zhì)量綜合評(píng)價(jià)指標(biāo)體系提供了理論基礎(chǔ)。
2.訪談法
以半結(jié)構(gòu)化訪談的形式,面向相關(guān)利益群體(學(xué)校、教師、學(xué)生、家長(zhǎng)等)就某區(qū)高職教育質(zhì)量現(xiàn)狀以及特點(diǎn)等進(jìn)行深入討論交流,據(jù)此來(lái)細(xì)化評(píng)價(jià)指標(biāo),確保構(gòu)建的評(píng)價(jià)指標(biāo)體系全面系統(tǒng)且符合實(shí)際。
3.調(diào)查法
以抽樣調(diào)查的形式獲取區(qū)域高職教育質(zhì)量綜合評(píng)價(jià)數(shù)據(jù),用于對(duì)初步設(shè)計(jì)開(kāi)發(fā)的評(píng)價(jià)工具的有效性和可靠性進(jìn)行檢驗(yàn)和修正。
4.數(shù)據(jù)分析方法
數(shù)據(jù)分析方法主要用于對(duì)隱沒(méi)在一大批看來(lái)雜亂無(wú)章的數(shù)據(jù)中的信息,集中、萃取和提煉出來(lái),并形成定量結(jié)論。
1.文獻(xiàn)研究初步構(gòu)建指標(biāo)
教育部發(fā)布的《指標(biāo)框架(試行)》給出了五大評(píng)價(jià)內(nèi)容、20個(gè)關(guān)鍵指標(biāo)等主要監(jiān)測(cè)依據(jù)。根據(jù)高職學(xué)生的年齡特點(diǎn),其包含和對(duì)應(yīng)不同的指標(biāo)內(nèi)容。如身心發(fā)展,包括情緒行為調(diào)控、人際溝通、健康生活方式、對(duì)行為的自我約束情況等;品德發(fā)展,包括行為習(xí)慣、公民素養(yǎng)、在文明交往、遵紀(jì)守法方面的認(rèn)知和表現(xiàn)等;學(xué)業(yè)發(fā)展,包括學(xué)習(xí)品質(zhì)、實(shí)踐能力、關(guān)注現(xiàn)實(shí)生活、解決實(shí)際問(wèn)題等方面的情況;興趣潛能,包括創(chuàng)新能力、求知欲、愛(ài)好特獨(dú)立思考與鉆研探究,對(duì)某些知識(shí)和現(xiàn)象的專注、思考等情況;學(xué)業(yè)負(fù)擔(dān),包括潛能發(fā)展、在某些方面表現(xiàn)出的突出素質(zhì)和進(jìn)一步發(fā)展的能力等。
2.基于實(shí)際調(diào)研結(jié)果修訂指標(biāo)
為完善教育質(zhì)量綜合評(píng)價(jià)結(jié)構(gòu)設(shè)計(jì),為題項(xiàng)編制收集豐富的素材,本次研究針對(duì)理論構(gòu)建的教育質(zhì)量綜合評(píng)價(jià)的框架,編制學(xué)生版和教師版的《教育質(zhì)量綜合評(píng)價(jià)指標(biāo)重要性調(diào)查問(wèn)卷》。
3.題項(xiàng)編制
本研究編制的量表題項(xiàng)的來(lái)源主要包括:已有的國(guó)內(nèi)外的相關(guān)量表;修改前人量表的相關(guān)試題;基于前期訪談的資料,結(jié)合與學(xué)生學(xué)習(xí)、生活和社會(huì)工作相聯(lián)系的情景和事件自編題目。
4.施測(cè)過(guò)程
采取隨機(jī)抽樣的方法,將某地區(qū)四所高職學(xué)校的高職一年級(jí)學(xué)生作為施測(cè)對(duì)象,第一階段隨機(jī)抽取兩所高職學(xué)校的800名學(xué)生作為試測(cè)對(duì)象,用于探索性因素分析;第二階段選取了四所學(xué)校的1500名學(xué)生作為被試發(fā)放正式問(wèn)卷,用于驗(yàn)證性因素分析。兩次測(cè)試對(duì)象的具體情況如下。
預(yù)測(cè)對(duì)象(n=644):學(xué)校一,男47,女41,總?cè)藬?shù)88,占比13.66%;學(xué)校二,男185,女371,總?cè)藬?shù)556,占比人數(shù)86.43%;
正式測(cè)試對(duì)象(n=1292):學(xué)校一,男,480人,女,366人,總?cè)藬?shù),846人,占比65.48%;學(xué)校二,男19人,女15人,總?cè)藬?shù)34人,占比2.63%;學(xué)校三,男126人,女67人,總?cè)藬?shù)193人,占比14.94%
5.數(shù)據(jù)分析
本研究首先對(duì)收集的數(shù)據(jù)按照一定的規(guī)則和篩選數(shù)據(jù)的原則進(jìn)行整理,刪除具有規(guī)律性作答問(wèn)卷和具有缺失值的數(shù)據(jù),然后將有效數(shù)據(jù)的等級(jí)計(jì)分方式選項(xiàng)A、B、C、D、E分別編碼為1、2、3、4、5,同時(shí)將所有反向計(jì)分題目轉(zhuǎn)換。隨后基于整理后的數(shù)據(jù)進(jìn)行項(xiàng)目分析、信度檢驗(yàn)和效度檢驗(yàn)。
三、因素分析與結(jié)果
1.項(xiàng)目分析
將題總相關(guān)以及臨界比率(critical ration,CR)作為項(xiàng)目區(qū)分度的分析指標(biāo)。CR值的計(jì)算方法為將所有被試按照因子得分由高到低排列,因子得分前27%的被試(644×27%=173名)為高分組,因子得分后27%的被試(173名)為低分組,對(duì)高低兩組被試在因子上的每一個(gè)項(xiàng)目得分進(jìn)行獨(dú)立樣本t檢驗(yàn)。
2.探索性因素分析
本次研究主要采用主成分分析法,利用方差極大斜交旋轉(zhuǎn)法進(jìn)行結(jié)構(gòu)分析。
(1)身心發(fā)展——人與自身的互動(dòng)。KMO和Bartlett檢驗(yàn)結(jié)果是KMO=0.954,Bartlett球形檢驗(yàn)p<0.001,說(shuō)明數(shù)據(jù)適合進(jìn)行探索性因素分析。探索性因素分析結(jié)果表明,在身心發(fā)展分量表中,有9個(gè)項(xiàng)目具有雙重負(fù)荷,10個(gè)項(xiàng)目的載荷低于0.4,6個(gè)項(xiàng)目分屬于一個(gè)因子,
(2)品德發(fā)展——人與自身的互動(dòng)。KMO和Bartlett檢驗(yàn)結(jié)果是KMO=0.944,Bartlett球形檢驗(yàn)p<0.001,說(shuō)明數(shù)據(jù)適合進(jìn)行探索性因素分析。探索性因素分析結(jié)果表明,在品德發(fā)展分量表中,有3個(gè)項(xiàng)目具有雙重負(fù)荷,3個(gè)項(xiàng)目的載荷低于0.4,兩個(gè)項(xiàng)目分別屬于一個(gè)因子。
(3)學(xué)業(yè)負(fù)擔(dān)——人與工具的互動(dòng)。KMO和Bartlett檢驗(yàn)結(jié)果是KMO=0.914,Bartlett球形檢驗(yàn)p<0.001,說(shuō)明數(shù)據(jù)適合進(jìn)行探索性因素分析。探索性因素分析結(jié)果表明,在學(xué)業(yè)負(fù)擔(dān)分量表中,有10個(gè)項(xiàng)目具有雙重負(fù)荷,9個(gè)項(xiàng)目的載荷低于0.4,5個(gè)項(xiàng)目分別屬于一個(gè)因子。
(4)學(xué)業(yè)發(fā)展——人與社會(huì)互動(dòng)。KMO和Bartlett檢驗(yàn)結(jié)果是KMO=0.946,Bartlett球形檢驗(yàn)p<0.001,說(shuō)明數(shù)據(jù)適合進(jìn)行探索性因素分析。探索性因素分析結(jié)果表明,在學(xué)業(yè)發(fā)展分量表中,有5個(gè)項(xiàng)目具有雙重負(fù)荷,4個(gè)項(xiàng)目的載荷低于0.4,5個(gè)項(xiàng)目分別屬于一個(gè)因子。
(5)興趣潛能——人與社會(huì)的互動(dòng)。KMO和Bartlett檢驗(yàn)結(jié)果是KMO=0.949,Bartlett球形檢驗(yàn)p<0.001,說(shuō)明數(shù)據(jù)適合進(jìn)行探索性因素分析。探索性因素分析結(jié)果表明,在興趣潛能分量表中,有6個(gè)項(xiàng)目具有雙重負(fù)荷,8個(gè)項(xiàng)目的載荷低于0.4,3個(gè)項(xiàng)目分別屬于一個(gè)因子。
3.驗(yàn)證性因素分析
驗(yàn)證性因素分析結(jié)構(gòu),即潛變量與觀測(cè)變量的對(duì)應(yīng)關(guān)系參照探索性因素分析的結(jié)果,模型擬合采用最大似然法(ML),參考各題項(xiàng)的因子載荷與各統(tǒng)計(jì)指標(biāo),確定模型的擬合程度情況,各維度的驗(yàn)證性因素分析結(jié)果見(jiàn)表1。
根據(jù)驗(yàn)證性因素分析的結(jié)果發(fā)現(xiàn),各分量表的CFI和TLI指標(biāo)均在0.9以上,RMSEA指標(biāo)均小于0.08,符合心理測(cè)量學(xué)要求,說(shuō)明各分量表的模型擬合良好。
4.信度檢驗(yàn)
各分量表及因子的信度系數(shù)的具體結(jié)果見(jiàn)表2。
由上表可知,本研究量表的信度良好。
四、結(jié)論
本研究最終形成的問(wèn)卷結(jié)構(gòu)與教育部提出的內(nèi)容框架基本相同,仍包括“身心發(fā)展、品德發(fā)展、學(xué)業(yè)負(fù)擔(dān)、學(xué)業(yè)發(fā)展、興趣潛能”五個(gè)模塊,量表的信度和效度各項(xiàng)指標(biāo)良好。本研究為深刻揭示當(dāng)代教育質(zhì)量的本質(zhì)提供參考,為學(xué)生的全面發(fā)展提供了指導(dǎo),為轉(zhuǎn)變教育管理者、教師和家長(zhǎng)的觀念提供了依據(jù)。
參考文獻(xiàn):
[1]代其平.學(xué)校監(jiān)測(cè)中應(yīng)注意的幾個(gè)問(wèn)題[J].現(xiàn)代中小學(xué)教育,1990(3).
[2]傅永春,楊伊生.家長(zhǎng)教育方式的現(xiàn)狀及思考[J].內(nèi)蒙古教育學(xué)院學(xué)報(bào),1995(2).
[3]胡月琴,甘怡群.青少年心理韌性量表的編制和效度驗(yàn)證[J].心理學(xué)報(bào),2008(8).
(作者單位:浙江商業(yè)職業(yè)技術(shù)學(xué)院)