[摘要]研究生作為學(xué)術(shù)工作隊(duì)伍的后備力量,在學(xué)期間應(yīng)積累評(píng)審經(jīng)驗(yàn),發(fā)展評(píng)審能力。基于一項(xiàng)整合型學(xué)生發(fā)展理論,在七屆研究生課堂中實(shí)施同伴評(píng)審的教學(xué)方法,并采用混合研究方法探究教學(xué)效果。研究生在學(xué)期間評(píng)審?fù)榈膶W(xué)術(shù)作品,不僅可提升作品學(xué)術(shù)質(zhì)量和學(xué)術(shù)評(píng)審能力,還可促進(jìn)學(xué)習(xí)者在認(rèn)知、個(gè)人內(nèi)在和人際維度的發(fā)展:體會(huì)到知識(shí)的過(guò)程性、情境性和不確定性,提升了研究者的自我身份認(rèn)同,促進(jìn)了學(xué)術(shù)共同體的構(gòu)建。通過(guò)具象化、本土化實(shí)踐和效果檢驗(yàn),建議高校為研究生創(chuàng)造學(xué)術(shù)評(píng)審的機(jī)會(huì),并組織與評(píng)審相關(guān)的培訓(xùn)研討,在研究生培養(yǎng)中促進(jìn)學(xué)生的發(fā)展,使高校學(xué)生學(xué)習(xí)從“以學(xué)為本”轉(zhuǎn)向“以人為本”。
[關(guān)鍵詞]同伴評(píng)審;學(xué)生發(fā)展理論;學(xué)習(xí)評(píng)價(jià)理論;自我主導(dǎo)發(fā)展理論;研究生教育
[中圖分類號(hào)]G642.4? ?[文獻(xiàn)標(biāo)識(shí)碼]A? ?[文章編號(hào)]1005-4634(2023)06-0011-08
同行評(píng)審能力是科研工作者必備的學(xué)術(shù)能力之一,科研人員多在學(xué)術(shù)生涯的早期和中期發(fā)展評(píng)審能力。研究生作為學(xué)術(shù)工作隊(duì)伍的后備力量,在學(xué)期間參與科研評(píng)審可以提高對(duì)學(xué)術(shù)工作的興趣、促進(jìn)對(duì)學(xué)術(shù)職業(yè)的認(rèn)識(shí)?!堆芯可鷧⑴c同行評(píng)審指南》指出:“研究生需要獲得同行評(píng)審的經(jīng)驗(yàn),這樣才能更好地適應(yīng)未來(lái)學(xué)術(shù)生涯中更多的同行評(píng)審工作。另外,同行評(píng)審的經(jīng)歷也會(huì)為求職學(xué)生的履歷增色?!眹?guó)外不少學(xué)術(shù)期刊、學(xué)術(shù)會(huì)議、科研基金都為研究生提供了評(píng)審機(jī)會(huì),邀請(qǐng)有發(fā)表經(jīng)歷的研究生匿名評(píng)審論文稿件或研究計(jì)劃,如《美國(guó)教育期刊》(American Journal of Education)、《文化多樣性與少數(shù)族裔心理學(xué)》(Cultural Diversity and Ethnic Minority Psychology)、《社會(huì)問(wèn)題》(Journal of Social Issues)等高水平期刊編委會(huì)均有研究生席位。美國(guó)教育研究學(xué)會(huì)將研究生評(píng)審視為一項(xiàng)有意義的教育經(jīng)歷,每年邀請(qǐng)研究生擔(dān)任年會(huì)投稿的審稿人。2018年,《自然》雜志發(fā)表簡(jiǎn)訊,指出為研究生提供稿件評(píng)審機(jī)會(huì)并在教學(xué)中集體研討,能夠幫助研究生成長(zhǎng)為優(yōu)秀的同行評(píng)審。相比之下,我國(guó)研究生在學(xué)術(shù)期刊和專業(yè)學(xué)會(huì)中參與同行評(píng)審的機(jī)會(huì)較少。在外部評(píng)審條件有限的情況下,高??梢詾檠芯可鷦?chuàng)造評(píng)審機(jī)會(huì),比如在研究生課程中使用同伴評(píng)審的教學(xué)方法。本研究首先介紹同伴評(píng)審的國(guó)內(nèi)外研究進(jìn)展,闡釋所采用的理論視角,然后呈現(xiàn)研究生教學(xué)中實(shí)施同伴評(píng)審的過(guò)程,并通過(guò)一項(xiàng)混合研究探究其效果。
1學(xué)生發(fā)展視角下的研究生同伴評(píng)審
同伴評(píng)審(peer assessment)指學(xué)習(xí)者根據(jù)相關(guān)標(biāo)準(zhǔn)評(píng)價(jià)其他同學(xué)的作業(yè),可以是形成性評(píng)價(jià),也可以是終結(jié)性評(píng)價(jià)[5]。形成性評(píng)價(jià)中,評(píng)審者提出反饋意見(jiàn),幫助同伴進(jìn)一步提升作業(yè)質(zhì)量。終結(jié)性評(píng)價(jià)中,評(píng)審者通過(guò)打分評(píng)判同伴的作業(yè)質(zhì)量。全球范圍內(nèi),同伴評(píng)審被廣泛應(yīng)用在高等教育不同學(xué)科領(lǐng)域、不同教育層次(??啤⒈究坪脱芯可?、不同教學(xué)環(huán)境(傳統(tǒng)課堂和在線教育)、不同評(píng)價(jià)媒介(傳統(tǒng)方式與網(wǎng)絡(luò)平臺(tái))、不同文化背景中,且各項(xiàng)實(shí)證研究都發(fā)現(xiàn)其能對(duì)學(xué)習(xí)者產(chǎn)生積極的影響:包括提高作業(yè)質(zhì)量、投入更多時(shí)間完成作業(yè)、深入理解高質(zhì)量作業(yè)的要素、促進(jìn)高階學(xué)習(xí)、增強(qiáng)責(zé)任意識(shí)、提升學(xué)習(xí)動(dòng)機(jī)、激發(fā)學(xué)習(xí)自主性等。國(guó)外高等教育研究者對(duì)同伴評(píng)審不同方法、環(huán)節(jié)、場(chǎng)景、教學(xué)對(duì)象的效果作了庖丁解牛般的細(xì)致研究,比如維基在線合作環(huán)境中兩種同伴評(píng)審方法對(duì)大學(xué)生學(xué)術(shù)寫作的影響、某種同伴評(píng)審培訓(xùn)是否提高了營(yíng)養(yǎng)學(xué)研究生的反饋意見(jiàn)質(zhì)量、地理空間專業(yè)本科生田野工作中同伴評(píng)審的評(píng)分信效度研究等,不一而足。相比之下,我國(guó)對(duì)同伴評(píng)審(又譯作同伴評(píng)價(jià)、同儕互評(píng)、同伴反饋)的實(shí)踐與研究集中在本科生英語(yǔ)學(xué)習(xí)和遠(yuǎn)程教育領(lǐng)域。研究?jī)?nèi)容集中在互評(píng)活動(dòng)開(kāi)展的流程模型、促學(xué)效果以及評(píng)分準(zhǔn)確性的影響因素。作為培養(yǎng)未來(lái)學(xué)術(shù)工作者評(píng)審能力的教學(xué)方法,同伴評(píng)審在我國(guó)研究生教學(xué)中的實(shí)踐與研究尚未見(jiàn)諸文獻(xiàn)。
同伴評(píng)審如何促進(jìn)學(xué)生學(xué)習(xí)?學(xué)習(xí)評(píng)價(jià)理論界提供了一類視角。在傳統(tǒng)的學(xué)習(xí)評(píng)價(jià)實(shí)踐中,“關(guān)于學(xué)習(xí)的評(píng)價(jià)”(Assessment of Learning,AOL)是基礎(chǔ)性的經(jīng)典模型。20世紀(jì)90年代末期,基于形成性評(píng)價(jià)有效性研究,布萊克(Black)和威廉(Wiliam)合作提出了“促進(jìn)學(xué)習(xí)的評(píng)價(jià)”(Assessment for Learning,AFL)理念,成為了學(xué)本評(píng)估時(shí)代的中堅(jiān)理論。21世紀(jì)初,丹 (Dann)和厄爾(Earl)分別提出了“評(píng)價(jià)作為學(xué)習(xí)”(Assessment as Learning,AAL)的理論,主張?jiān)u價(jià)即教育、評(píng)價(jià)即學(xué)習(xí)、評(píng)價(jià)即改進(jìn)?!癆OL發(fā)現(xiàn)了學(xué)生在哪里,AFL告訴學(xué)生去哪里,而AAL則指導(dǎo)學(xué)生如何去那里?!爆F(xiàn)代學(xué)習(xí)評(píng)價(jià)制度中,AFL將成為主導(dǎo)型力量,新興的AAL則越來(lái)越重要。同伴評(píng)審作為“評(píng)價(jià)作為學(xué)習(xí)”(AAL)的教學(xué)實(shí)踐,通過(guò)讓學(xué)生參與評(píng)價(jià)標(biāo)準(zhǔn)研制、評(píng)審他人作品、撰寫形成性反饋等,提升評(píng)價(jià)過(guò)程的透明度,使學(xué)生對(duì)學(xué)習(xí)目標(biāo)有更深入的理解,從而更積極地投入到達(dá)成目標(biāo)的活動(dòng)中。
同伴評(píng)審又如何促進(jìn)人的發(fā)展?回答這一問(wèn)題,大學(xué)生發(fā)展理論界能為高等教育人本時(shí)代的同伴評(píng)審提供一種新的理論視角。學(xué)術(shù)能力提升和個(gè)體心智發(fā)展相輔相成:當(dāng)學(xué)生參與評(píng)價(jià)時(shí),他們應(yīng)能從這些評(píng)價(jià)中學(xué)到新東西,也能得到心智發(fā)展。結(jié)合大學(xué)生發(fā)展理論,研究生同伴評(píng)審也可能成為促進(jìn)學(xué)習(xí)者心智發(fā)展的教育實(shí)踐契機(jī)。大學(xué)生發(fā)展理論從發(fā)展心理學(xué)的視角出發(fā),關(guān)注學(xué)生在認(rèn)知、自我同一性、社會(huì)身份認(rèn)同等方面發(fā)展和完善的本質(zhì)與過(guò)程。眾多學(xué)生發(fā)展理論中,整合型發(fā)展理論在21世紀(jì)出現(xiàn)和興起,其代表是巴克斯特-瑪格達(dá)(Baxter Magolda)提出的自我主導(dǎo)發(fā)展理論。在該理論基礎(chǔ)上,巴克斯特-瑪格達(dá)通過(guò)長(zhǎng)期的追蹤訪談和研究,建構(gòu)了學(xué)習(xí)伙伴模型(Learning Partnership Model),總結(jié)了3條原則指導(dǎo)教育者如何支持學(xué)習(xí)者在認(rèn)識(shí)論維度、個(gè)人內(nèi)在維度和人際維度的發(fā)展。第一,肯定原則,肯定學(xué)習(xí)者認(rèn)知的能力;第二,情境原則,將學(xué)習(xí)置于學(xué)習(xí)者經(jīng)歷中;第三,互惠原則,視學(xué)習(xí)為共同的意義建構(gòu)。該模型被廣泛應(yīng)用在課程教學(xué)、社區(qū)服務(wù)、海外學(xué)習(xí)等情境以促進(jìn)學(xué)生整合性發(fā)展,也被簡(jiǎn)化為“3C”模型應(yīng)用在我國(guó)研究生教學(xué)、實(shí)驗(yàn)教學(xué)中。這3條原則落實(shí)在同伴評(píng)審中,即首先肯定研究生經(jīng)過(guò)系統(tǒng)學(xué)習(xí)后有能力評(píng)價(jià)同學(xué)的學(xué)術(shù)作品并提出建設(shè)性評(píng)審意見(jiàn),其次將同伴評(píng)審的每個(gè)環(huán)節(jié)都視為學(xué)習(xí)可能發(fā)生的過(guò)程,最后強(qiáng)調(diào)學(xué)術(shù)作品的完成是作者和評(píng)審者互動(dòng)下共同構(gòu)建的產(chǎn)物。學(xué)習(xí)伙伴模型強(qiáng)調(diào)知識(shí)是復(fù)雜的社會(huì)性建構(gòu)、學(xué)習(xí)者是知識(shí)建構(gòu)的主體、學(xué)習(xí)是分享權(quán)威和專長(zhǎng)的過(guò)程。對(duì)于習(xí)慣依賴外部權(quán)威獲取知識(shí)、建立身份認(rèn)同、定義人際關(guān)系的高校學(xué)生而言,尤其是對(duì)于在基礎(chǔ)教育階段甚至本科教育階段習(xí)慣標(biāo)準(zhǔn)答案追求高分的“優(yōu)秀”學(xué)生而言,這些都是個(gè)體心智發(fā)展過(guò)程中的挑戰(zhàn)。
2研究生教學(xué)中同伴評(píng)審的實(shí)踐
“教育研究方法論”是教育學(xué)碩士研究生的一年級(jí)必修課,是培養(yǎng)學(xué)生研究能力的基礎(chǔ)課程。課程要求學(xué)生結(jié)合自身興趣撰寫一份研究計(jì)劃書(shū),貫穿整個(gè)學(xué)期。開(kāi)學(xué)初自擬研究議題,結(jié)合課程進(jìn)度分3稿完成,期末遞交第三稿進(jìn)行同伴評(píng)審,獲得評(píng)審意見(jiàn),修改后提交終稿。該作業(yè)服務(wù)于研究生培養(yǎng)的長(zhǎng)期和短期目標(biāo)。長(zhǎng)遠(yuǎn)來(lái)看,撰寫研究計(jì)劃是科研工作的關(guān)鍵第一步,是學(xué)術(shù)工作者獲得基金、申請(qǐng)課題的必經(jīng)之路。就近期而言,研究計(jì)劃的構(gòu)思和撰寫關(guān)系到學(xué)位論文開(kāi)題,較早確定研究方向的學(xué)生希望將該作業(yè)發(fā)展為開(kāi)題報(bào)告,因此投入大量時(shí)間和精力完成,并期待得到多方反饋意見(jiàn)。
教學(xué)過(guò)程中實(shí)施形成性同伴評(píng)審,即評(píng)審人提出反饋意見(jiàn)、被評(píng)人根據(jù)評(píng)審意見(jiàn)修改研究計(jì)劃。同時(shí)也要求評(píng)審人為研究計(jì)劃打分,作為后續(xù)研究的數(shù)據(jù)來(lái)源。但同伴評(píng)分并不影響作業(yè)得分和課程成績(jī)。
根據(jù)形成性同伴評(píng)審的流程實(shí)施了以下步驟(如圖1所示)。
具體步驟如下:
第一步:學(xué)習(xí)與掌握課程相關(guān)知識(shí)。學(xué)生學(xué)習(xí)如何設(shè)計(jì)一項(xiàng)教育研究、撰寫研究計(jì)劃,包括提出研究問(wèn)題、開(kāi)展文獻(xiàn)回顧、選擇合適的研究設(shè)計(jì)、研究倫理和有效性保障等。
第二步:教師制定評(píng)審框架并開(kāi)展培訓(xùn)。參照已有評(píng)價(jià)標(biāo)準(zhǔn),教師制定評(píng)審框架并在課堂開(kāi)展培訓(xùn)和討論。參考標(biāo)準(zhǔn)包括上海市研究生優(yōu)秀成果(學(xué)位論文)評(píng)價(jià)意見(jiàn)表、美國(guó)教育研究學(xué)會(huì)年會(huì)論文評(píng)價(jià)標(biāo)準(zhǔn)、美國(guó)高等教育學(xué)會(huì)年會(huì)論文評(píng)價(jià)標(biāo)準(zhǔn)。評(píng)審框架共設(shè)12項(xiàng)內(nèi)容,包括:研究意義、研究問(wèn)題、文獻(xiàn)相關(guān)性、理論視角、研究創(chuàng)新性、研究設(shè)計(jì)、研究工具與數(shù)據(jù)收集方法、數(shù)據(jù)分析方法、研究效度、研究倫理、學(xué)術(shù)寫作水平、參考文獻(xiàn)格式。評(píng)審人需就上述方面提出修改建議并打分,每項(xiàng)賦分1~5分,滿分60分。培訓(xùn)方式包括評(píng)價(jià)標(biāo)準(zhǔn)和互評(píng)意義的講解、試評(píng)練習(xí)。
第三步:完成并提交作品。研究計(jì)劃的大作業(yè)貫穿整個(gè)學(xué)期,在前兩稿及教師反饋的基礎(chǔ)上,學(xué)生完善研究計(jì)劃。同伴評(píng)審培訓(xùn)約一周后,學(xué)生提交研究計(jì)劃第三稿。
第四步:作為評(píng)審人,評(píng)價(jià)同伴作品并提出反饋意見(jiàn)。為使修課學(xué)生受益最大化,并加強(qiáng)高低年級(jí)學(xué)生互動(dòng),課程邀請(qǐng)了高年級(jí)學(xué)生審稿。每份稿件隨機(jī)匿名分配給2位同年級(jí)和1位高年級(jí)評(píng)審人。為了降低互給“情面分”的可能,分配過(guò)程中提醒學(xué)生之間不要互相交流評(píng)審稿件的內(nèi)容。人均審稿2篇,評(píng)審時(shí)間為1周。
第五步:作為被評(píng)人,根據(jù)同伴反饋意見(jiàn)改進(jìn)作品。每位被評(píng)人收到3份審稿意見(jiàn)后修改研究計(jì)劃,1周后遞交修改稿。修改稿由3人打分:原來(lái)的高年級(jí)評(píng)審人、助教和教師。只有教師評(píng)分為該作業(yè)最終得分,高年級(jí)評(píng)審人和助教打分作為后續(xù)研究的數(shù)據(jù)來(lái)源。
2015~2021年7屆研究生課程實(shí)施上述教學(xué)方法,84位修課學(xué)生、43位高年級(jí)評(píng)審人、7位助教參與了同伴評(píng)審。除了第一年的5位高年級(jí)評(píng)審人外,其余38人均在一年級(jí)方法論課程擔(dān)任過(guò)評(píng)審。助教由博士生或高年級(jí)碩士生擔(dān)任。2015學(xué)年采用手動(dòng)分配作業(yè)方式并收集反饋;后6年使用Canvas平臺(tái)的“同儕評(píng)審”功能,使得分配流程更順暢、有效,給予和接收反饋更及時(shí),教師即時(shí)掌握學(xué)習(xí)者的評(píng)審進(jìn)度。
3研究生同伴評(píng)審的效果研究
3.1研究問(wèn)題和研究設(shè)計(jì)
研究生同伴評(píng)審的效果如何?是否提升了作品質(zhì)量?是否達(dá)到了促進(jìn)學(xué)生心智發(fā)展的效果?是否值得教師投入精力組織?學(xué)習(xí)伙伴模型為教育者實(shí)踐的方向提供了理論指引,而教學(xué)實(shí)踐的效果則需通過(guò)系統(tǒng)的教學(xué)研究檢驗(yàn)。具體而言,基于學(xué)習(xí)伙伴模型的三原則,本研究試圖回答如下問(wèn)題。
(1) 肯定原則:研究生是否具備評(píng)價(jià)同行學(xué)術(shù)作品的能力?同教師和助教相比,研究生作為評(píng)審人是否同等嚴(yán)格?高年級(jí)研究生的評(píng)審工作質(zhì)量是否高于同年級(jí)評(píng)審人的評(píng)審質(zhì)量?
(2) 情境原則:研究生對(duì)同伴評(píng)審的態(tài)度如何?研究生如何理解自己作為評(píng)審人和被評(píng)人的角色?
(3) 共同建構(gòu)原則:同伴評(píng)審是否提升了研究計(jì)劃的質(zhì)量?如何促進(jìn)學(xué)術(shù)共同體的構(gòu)建?
本研究采用混合研究方法,通過(guò)收集定量和質(zhì)性數(shù)據(jù)回答以上3組研究問(wèn)題。首先,教師、助教、高年級(jí)評(píng)審者依據(jù)評(píng)審框架分別給修改前和修改后的研究計(jì)劃打分。其次,研究者設(shè)計(jì)了“同伴評(píng)價(jià)工作質(zhì)量調(diào)查表”(表1),每位被評(píng)人對(duì)收到的評(píng)審意見(jiàn)進(jìn)行質(zhì)量打分,并指出每份意見(jiàn)中所有建議的數(shù)目以及有價(jià)值建議的數(shù)目。最后,助教采用最大差異抽樣法對(duì)學(xué)生進(jìn)行一對(duì)一訪談,訪談內(nèi)容圍繞同伴評(píng)價(jià)的過(guò)程和體驗(yàn)展開(kāi)。訪談時(shí)間在教師錄入成績(jī)以及學(xué)生網(wǎng)上評(píng)教之后,并對(duì)教師保持匿名,以減少被訪者的顧慮,盡可能真實(shí)地表達(dá)對(duì)同伴評(píng)審的看法。
2015~2021年選修“教育研究方法論”的84名一年級(jí)碩士研究生參與了研究,其中男性16人,女性68人。84篇研究計(jì)劃獲得252份反饋意見(jiàn),研究計(jì)劃修改前獲得420個(gè)評(píng)分?jǐn)?shù)據(jù)點(diǎn),修改后獲得252個(gè)評(píng)分?jǐn)?shù)據(jù)點(diǎn),評(píng)審工作質(zhì)量得分獲得252個(gè)數(shù)據(jù)點(diǎn)。共有17位學(xué)習(xí)者完成了訪談,訪談時(shí)長(zhǎng)為15~20分鐘。
3.2研究發(fā)現(xiàn)
3.2.1相比高年級(jí)研究生,同級(jí)評(píng)審人的評(píng)審能力稍遜且對(duì)自己的評(píng)審能力缺乏自信同級(jí)評(píng)審人對(duì)研究計(jì)劃的評(píng)分更為寬松。高年級(jí)評(píng)審人、助教和教師對(duì)同一份作業(yè)的評(píng)分均無(wú)顯著差異(修改前,p=0.636;修改后,p=0.458),但同級(jí)評(píng)審人的評(píng)分顯著高于上述三組評(píng)審人(p=0.014),具體見(jiàn)表2。
被評(píng)者人均收到37條評(píng)審意見(jiàn),包括2位同級(jí)評(píng)審人和1位高年級(jí)評(píng)審人的意見(jiàn),最高96條,最低10條;人均收到25條其認(rèn)為有價(jià)值的修改意見(jiàn),最高69條,最低6條。表3呈現(xiàn)了評(píng)審工作質(zhì)量得分,高年級(jí)研究生和兩組同級(jí)評(píng)審員得分無(wú)差異(p=0.635)。比較“提出有價(jià)值建議的比例”發(fā)現(xiàn),高年級(jí)評(píng)審人的建議更有價(jià)值(p<0.001):兩組同級(jí)評(píng)審提出有價(jià)值意見(jiàn)的比例約為67%,高年級(jí)研究生約為83%。訪談資料也印證了上述發(fā)現(xiàn):“感覺(jué)高年級(jí)同學(xué)更加針對(duì)研究設(shè)計(jì)、分析方法、理論框架等方面提出意見(jiàn),而同班同學(xué)的評(píng)審意見(jiàn)更多針對(duì)格式、語(yǔ)句或語(yǔ)言表達(dá)方面?!?/p>
一年級(jí)研究生均初次評(píng)審他人作品,雖然能夠提出建設(shè)性建議,但初次審稿的學(xué)生對(duì)掌握的知識(shí)和發(fā)表意見(jiàn)缺乏信心,“心情非常忐忑”:“我一開(kāi)始覺(jué)得(當(dāng)評(píng)審員)很有意思,特別新鮮,但真的收到他人的研究計(jì)劃,反而不知道怎么評(píng),盡管我們都有評(píng)審框架,但還是覺(jué)得很難。很多時(shí)候我對(duì)知識(shí)不確定,很怕誤導(dǎo)別人,給出錯(cuò)誤的評(píng)價(jià)。”相比之下,有過(guò)同伴評(píng)審經(jīng)歷的高年級(jí)研究生顯得更加自信,經(jīng)過(guò)學(xué)位論文開(kāi)題、中期報(bào)告的洗禮,在科研環(huán)境浸潤(rùn)下,高年級(jí)研究生具有了較高的評(píng)審能力。
3.2.2學(xué)習(xí)在評(píng)審和接受評(píng)審的全過(guò)程中發(fā)生,學(xué)習(xí)者體會(huì)到知識(shí)的過(guò)程性、情境性和不確定性
研究生對(duì)同伴評(píng)審普遍持肯定態(tài)度,認(rèn)為該過(guò)程不僅加深了對(duì)專業(yè)知識(shí)的理解,起到鞏固知識(shí)的作用,也促進(jìn)知識(shí)的應(yīng)用與實(shí)踐:“我覺(jué)得同伴評(píng)審活動(dòng)非常有意義,讓我獲益匪淺?!u(píng)審他人和收到反饋都是學(xué)習(xí)的過(guò)程,不僅鞏固了我們一個(gè)學(xué)期的課程知識(shí),也是對(duì)知識(shí)進(jìn)行應(yīng)用的過(guò)程,我很喜歡這個(gè)實(shí)踐的過(guò)程。在加深對(duì)知識(shí)理解的同時(shí),學(xué)會(huì)靈活運(yùn)用知識(shí)?!?/p>
評(píng)審工作讓學(xué)習(xí)者認(rèn)識(shí)到掌握知識(shí)并非一蹴而就,而是回顧再消化的過(guò)程:“我評(píng)審其他人時(shí),常常遇到不懂的地方,這時(shí)我不希望用模糊的知識(shí)給他人提出意見(jiàn),我會(huì)主動(dòng)回顧課程中學(xué)習(xí)的知識(shí),再把書(shū)拿出來(lái)看看,重新學(xué)習(xí)這一部分知識(shí),再給同學(xué)提意見(jiàn)?!贝送猓喿x和評(píng)價(jià)他人作品能夠開(kāi)拓自己的研究思路:“看到別人寫的東西,我會(huì)發(fā)現(xiàn)原來(lái)這個(gè)地方還可以這么寫,還可以這樣想,這讓我有新的思路,對(duì)我啟發(fā)很大。”
作為被評(píng)人,學(xué)習(xí)者批判地接受評(píng)審意見(jiàn),理解意見(jiàn)沒(méi)有絕對(duì)的好壞,而需結(jié)合自己研究的情境:“我覺(jué)得不是所有意見(jiàn)都要接受,我需要思考和權(quán)衡,對(duì)于可行的、適合我的研究,我就會(huì)結(jié)合他的意見(jiàn)進(jìn)行修改,如果不合適的意見(jiàn)就不予采納。”
學(xué)習(xí)者在評(píng)審過(guò)程中認(rèn)識(shí)到研究計(jì)劃結(jié)構(gòu)的靈活性和可變性,學(xué)會(huì)接受不確定性和差異性:“每個(gè)同學(xué)的研究計(jì)劃雖然框架大部分相同,但具體的組織方式各不相同,但這不代表不正確?!?/p>
3.2.3同伴評(píng)審提升了學(xué)術(shù)工作的質(zhì)量,促進(jìn)了研究生學(xué)術(shù)共同體的構(gòu)建
修改后的研究計(jì)劃質(zhì)量得到了顯著提升。教師、助教、高年級(jí)評(píng)審員對(duì)84份研究計(jì)劃進(jìn)行獨(dú)立評(píng)分,得到修改前后252對(duì)數(shù)據(jù)點(diǎn)。修改前平均分為44.68,標(biāo)準(zhǔn)差為6.37,修改后平均分為49.75,標(biāo)準(zhǔn)差為5.23(表2)。配對(duì)樣本t檢驗(yàn)的結(jié)果顯示p<0.001 ,效應(yīng)值(Cohen's d)為0.87,表明修改后的研究計(jì)劃質(zhì)量有了大幅度提升。訪談數(shù)據(jù)揭示了質(zhì)量提升的3種原因,第一,也是最普遍的,被評(píng)人汲取了有效的反饋意見(jiàn);第二,評(píng)審人借鑒了被評(píng)作品的優(yōu)點(diǎn),如“從他人研究計(jì)劃中發(fā)現(xiàn)了使用圖表可清晰表達(dá)研究邏輯,因此修改自己研究計(jì)劃時(shí)也加入圖表呈現(xiàn)研究脈絡(luò)”;第三,同伴評(píng)審帶來(lái)了約束和鞭策效應(yīng):“如果沒(méi)有這項(xiàng)工作,我可能就蒙混過(guò)關(guān),即使知道自己的研究計(jì)劃有明顯不足也不想修改了。但通過(guò)同伴評(píng)審,大家都針對(duì)某個(gè)漏洞提出問(wèn)題時(shí),我就會(huì)主動(dòng)修改?!?/p>
學(xué)習(xí)者在被評(píng)人和評(píng)審人兩個(gè)角色中切換,接受評(píng)價(jià)的同時(shí)審視自己的審稿表現(xiàn),促進(jìn)了學(xué)術(shù)責(zé)任意識(shí):“我收到的有的反饋意見(jiàn)非常多、很詳細(xì),也有的不是很詳細(xì),整個(gè)研究計(jì)劃都沒(méi)怎么評(píng),幫助就不是很大。對(duì)比這兩種對(duì)我有所啟發(fā):作為被評(píng)人,每個(gè)人都希望收到很多有價(jià)值、有意義的反饋意見(jiàn);作為評(píng)審員,應(yīng)該端正自己的態(tài)度,提高自己的專業(yè)精神,認(rèn)真對(duì)待每一個(gè)參與評(píng)審的作品。這也讓我反思自己作為評(píng)審員的表現(xiàn),要向這位很認(rèn)真的同學(xué)學(xué)習(xí),對(duì)他人要負(fù)責(zé)?!?/p>
學(xué)習(xí)者認(rèn)識(shí)到學(xué)術(shù)作品是作者和評(píng)審人互動(dòng)的產(chǎn)物,表達(dá)了往復(fù)交流的意愿:“其實(shí)我很希望這種評(píng)審與反饋不是一次性的交流,而應(yīng)該有互動(dòng),評(píng)審員和被評(píng)人可以針對(duì)作品往返幾次,相互交流自己的想法,這樣更有助于個(gè)人的思考和作品的完善?!钡拇_,在學(xué)術(shù)期刊論文的投稿過(guò)程中,作者、審稿人、編輯經(jīng)過(guò)數(shù)輪互動(dòng)和修改才能發(fā)表,學(xué)術(shù)作品是多方建構(gòu)的產(chǎn)物。
4結(jié)論與建議
研究生教學(xué)中的同伴評(píng)審促進(jìn)研究生的專業(yè)知識(shí)鞏固、學(xué)術(shù)作品質(zhì)量提高、學(xué)術(shù)評(píng)審的經(jīng)驗(yàn)積累。本研究中,學(xué)習(xí)伙伴模型指導(dǎo)下的同伴評(píng)審實(shí)踐發(fā)揮了課程教學(xué)促進(jìn)個(gè)體發(fā)展的功能:在認(rèn)識(shí)論維度,學(xué)習(xí)者體驗(yàn)到知識(shí)在理解和應(yīng)用的交互中上升,知識(shí)具有情境性、過(guò)程性、不確定性;個(gè)人內(nèi)在維度上,學(xué)習(xí)者以他人為鏡反思自己的表現(xiàn),提升學(xué)術(shù)自信和學(xué)術(shù)責(zé)任意識(shí);人際維度上,學(xué)習(xí)者認(rèn)識(shí)到學(xué)術(shù)作品的創(chuàng)作是發(fā)展的過(guò)程與共同的建構(gòu),認(rèn)識(shí)到學(xué)術(shù)共同體的作用。學(xué)習(xí)評(píng)價(jià)理論指導(dǎo)下的同伴評(píng)審以學(xué)為本,將學(xué)習(xí)新內(nèi)容作為目標(biāo);學(xué)生發(fā)展理論指導(dǎo)下的同伴評(píng)審以人為本,將發(fā)展新自我作為目標(biāo),視學(xué)習(xí)過(guò)程和目標(biāo)為心智發(fā)展的手段,以發(fā)展的自我再次投入下一輪的本領(lǐng)域或其他領(lǐng)域的有效學(xué)習(xí)。兩者并不沖突或排斥。引入學(xué)生發(fā)展理論指導(dǎo)同伴評(píng)審并非是對(duì)該教育實(shí)踐背后學(xué)習(xí)評(píng)價(jià)理論的否定或批判,而是將高校學(xué)生學(xué)習(xí)從“學(xué)本”轉(zhuǎn)向“人本”的具象化和本土化嘗試。
學(xué)生發(fā)展理論指導(dǎo)下的同伴評(píng)審有助于研究生學(xué)術(shù)成長(zhǎng)和個(gè)體發(fā)展,但并不能機(jī)械搬用到所有課程和作業(yè)評(píng)價(jià)中。該方法適用于沒(méi)有標(biāo)準(zhǔn)答案的寫作或設(shè)計(jì)類作品,且該作品與學(xué)習(xí)者的學(xué)業(yè)或職業(yè)發(fā)展相關(guān)。任課教師也要衡量互評(píng)過(guò)程中可能產(chǎn)生的創(chuàng)意或觀點(diǎn)剽竊甚至知識(shí)產(chǎn)權(quán)糾紛的風(fēng)險(xiǎn),在設(shè)計(jì)作業(yè)要求和評(píng)審環(huán)節(jié)時(shí)降低此類風(fēng)險(xiǎn)。本研究對(duì)同伴評(píng)審的教學(xué)實(shí)踐、我國(guó)研究生培養(yǎng)以及高校學(xué)生發(fā)展有如下啟示。
4.1使用成熟的評(píng)審框架并提供評(píng)審培訓(xùn),保證同伴評(píng)審的實(shí)施效果
首先,為了減少評(píng)審過(guò)程中過(guò)強(qiáng)的主觀性或不確定性,教師需要使用相對(duì)系統(tǒng)、成熟的評(píng)審框架,使評(píng)審人有章可循。清晰地表述評(píng)審標(biāo)準(zhǔn)可以提高同伴評(píng)審的有效性。其次,需要為學(xué)生提供培訓(xùn),通過(guò)課堂討論和試評(píng)促進(jìn)評(píng)價(jià)框架的理解和應(yīng)用。本研究中,教師用了1小時(shí)的課堂時(shí)間開(kāi)展評(píng)審的訓(xùn)練和試評(píng)。雖然提升同行評(píng)審能力的途徑是通過(guò)實(shí)際評(píng)審工作,而非短期的培訓(xùn),但基礎(chǔ)培訓(xùn)仍非常必要。再次,教師需提醒學(xué)生以批判的眼光看待評(píng)審意見(jiàn),評(píng)判評(píng)審意見(jiàn)的適切性并強(qiáng)調(diào)同伴評(píng)審的匿名性尤為重要。因?yàn)楣_(kāi)環(huán)境中,友誼、年齡、性別等帶來(lái)的偏見(jiàn)都可能影響學(xué)生對(duì)學(xué)術(shù)作品作出客觀公正評(píng)價(jià)。正如美國(guó)心理學(xué)會(huì)的建議:“審稿人不喜歡你的論文并不意味論文寫得不好。對(duì)建設(shè)性的批評(píng)意見(jiàn)要保持開(kāi)放和接納的心態(tài),但你要知道審稿人也可能說(shuō)得不對(duì)。”最后,教師應(yīng)該肯定研究生的學(xué)術(shù)評(píng)審能力,并向?qū)W習(xí)者傳達(dá)此信息以加強(qiáng)他們的學(xué)術(shù)自信,本研究為此提供了有力的證據(jù)。
4.2肯定研究生的學(xué)術(shù)能力,為研究生創(chuàng)造學(xué)術(shù)評(píng)審的機(jī)會(huì)
國(guó)外針對(duì)同伴評(píng)價(jià)結(jié)果與教師評(píng)價(jià)結(jié)果是否吻合開(kāi)展了眾多研究,不同研究情境下開(kāi)展的研究結(jié)果并不一致。一項(xiàng)元分析發(fā)現(xiàn)同伴評(píng)分和教師評(píng)分的相關(guān)系數(shù)為0.63;相比本科生,研究生教學(xué)中的同伴評(píng)分和教師評(píng)分相關(guān)性更高;相比傳統(tǒng)紙筆評(píng)分,計(jì)算機(jī)輔助的同伴評(píng)分和教師評(píng)分相關(guān)性更高。本研究發(fā)現(xiàn)研究生有能力為同伴的學(xué)術(shù)成果提出有價(jià)值的意見(jiàn)和建議,但其能力弱于高年級(jí)研究生、助教和任課教師,需要通過(guò)實(shí)際評(píng)審工作提高評(píng)審能力、增強(qiáng)學(xué)術(shù)自信。學(xué)生經(jīng)過(guò)評(píng)審訓(xùn)練,評(píng)分的可靠性越來(lái)越高。進(jìn)一步而言,為學(xué)術(shù)期刊審稿也可作為教學(xué)手段提升研究生學(xué)術(shù)寫作能力,作為教學(xué)手段的期刊審稿活動(dòng)也需要參考實(shí)施流程框架。除了課堂實(shí)踐,我國(guó)高校和學(xué)界可以為研究生搭建同行評(píng)審的平臺(tái),讓研究生從小型科研基金、會(huì)議論文評(píng)審起步,積累同行評(píng)審經(jīng)驗(yàn)。同時(shí)向?qū)W習(xí)者傳達(dá)對(duì)他們學(xué)術(shù)評(píng)審能力的肯定,增強(qiáng)他們的學(xué)術(shù)自信。我國(guó)學(xué)位與研究生教育學(xué)會(huì)、各學(xué)科領(lǐng)域?qū)I(yè)學(xué)會(huì)、高校研究生院、研究生聯(lián)合會(huì)等都可以發(fā)揮重要作用,培養(yǎng)學(xué)術(shù)后備力量。
4.3學(xué)生學(xué)習(xí)與個(gè)體發(fā)展相結(jié)合,在研究生培養(yǎng)中促進(jìn)學(xué)生發(fā)展
研究生學(xué)習(xí)的內(nèi)容和方式扎根于學(xué)習(xí)者如何看待自己和世界、和知識(shí)的關(guān)系。這一認(rèn)識(shí)與個(gè)體的自我認(rèn)知,以及對(duì)自我學(xué)習(xí)經(jīng)歷的意義建構(gòu)密切相關(guān)。同時(shí),個(gè)體對(duì)自我的理解、對(duì)學(xué)習(xí)經(jīng)歷的解讀也置于廣泛的人際網(wǎng)絡(luò),包括學(xué)習(xí)和學(xué)術(shù)共同體。換言之,“學(xué)什么”“怎么學(xué)”扎根于“我如何認(rèn)識(shí)”“我是誰(shuí)”“我如何與他人建構(gòu)關(guān)系”等個(gè)體發(fā)展的元問(wèn)題。一項(xiàng)成功的教學(xué)實(shí)踐不僅能促進(jìn)學(xué)生知識(shí)和技能的學(xué)習(xí),也應(yīng)當(dāng)點(diǎn)亮學(xué)生對(duì)元問(wèn)題的思考,推進(jìn)認(rèn)知發(fā)展、自我認(rèn)識(shí)和人際間成熟。教師不僅僅是學(xué)生學(xué)習(xí)的激勵(lì)者,也可以成為促進(jìn)學(xué)生發(fā)展的學(xué)習(xí)和成長(zhǎng)的伙伴,鼓勵(lì)學(xué)習(xí)者對(duì)知識(shí)、對(duì)自身、對(duì)人際關(guān)系發(fā)展自己的意義建構(gòu)。我國(guó)高等教育已邁入普及化階段,研究生教育也進(jìn)入快速發(fā)展的軌道。一方面,國(guó)家對(duì)高水平、創(chuàng)新型人才的需求日益迫切,研究生是推動(dòng)科研創(chuàng)新發(fā)展、促進(jìn)經(jīng)濟(jì)建設(shè)與社會(huì)發(fā)展不可或缺的人力資源。另一方面,社會(huì)對(duì)擁有研究生學(xué)歷的個(gè)體提出了更復(fù)雜和多元的要求,研究生也期望在將來(lái)的工作、家庭、公共生活中應(yīng)對(duì)多重挑戰(zhàn)、發(fā)揮自身能力、實(shí)現(xiàn)自我價(jià)值。課堂作為學(xué)生教育經(jīng)歷中重要的微觀環(huán)境,教師和同學(xué)作為影響個(gè)體成長(zhǎng)的關(guān)鍵人物,其促進(jìn)學(xué)生心智發(fā)展的效用應(yīng)得到進(jìn)一步體現(xiàn)和發(fā)揮。本研究以學(xué)生發(fā)展理論指導(dǎo)同伴評(píng)審實(shí)踐,通過(guò)教學(xué)研究揭示其促進(jìn)學(xué)生3個(gè)維度的個(gè)體發(fā)展,以期為我國(guó)研究生培養(yǎng)提供育才育人的思路。
參考文獻(xiàn)
[1] TAYLOR S E,MARTIN J. The academic marathon: controlling one’s career[C]// DARLEY J M,ZANNA M P,ROEDIGER III H L. The compleat academic: a career guide. 2nd ed. Washington,D.C.: American Psychological Association,2003: 363-392.
[2] Middle Grades Research Journal Editorial Board. A graduate students’ guide to involvement in the peer review process[J]. Middle Grades Research Journal,2014,9(3): VII-X.
[3] American Educational Research Association. 2022 Annual meeting call for volunteer reviewers [EB/OL]. (2021-05-24)[2022-05-07].https://www.aera.net/Events-Meetings/Annual-Meeting/2022-Annual-Meeting-Call-for-Volunteer-Reviewers.
[4] WALLKER T R. Help graduate students to become good peer reviewers[J].Nature,2018,561(7772): 177.
[5] FALCHIKOV N. Learning together: peer tutoring in higher education[M]. London: Routledge,2003: 2.
[6] TOPPING K. Peer assessment between students in colleges and universities[J]. Review of Educational Research,1998,68(3): 249-276.
[7] POPE N. An examination of the use of peer rating for formative assessment in the context of the theory of consumption values[J]. Assessment & Evaluation in Higher Education,2001,26(3): 235-246.
[8] SUNG Y T,LIN C S,LEE C L,et al. Evaluating proposals for experiments: an application of web-based self-assessment and peer assessment[J]. Teaching of Psychology,2003,30(4): 331-333.
[9] DOCHY F,SEGER M,SLUIJSMANS D M A. The use of self-,peer-,and co-assessment in higher education: a review[J]. Studies in higher education,1999,24(3): 331-350.
[10] FREEMAN M. Peer assessment by groups of group work[J].Assessment & Evaluation in Higher Education,1995,20(3): 289-300.
[11] XIAO Y,LUCKING R. The impact of two types of peer assessment on student’ performance and satisfaction within a Wiki environment[J]. The Internet and Higher Education,2008,11(3-4): 186-193.
[12] ANDERSON O S,EI HABBAL N,BRIDGES D. A peer evaluation training results in high-quality feedback,as measured over time in nutritional sciences graduate students[J]. Advances in Physiology Education,2020,44(2): 203-209.
[13] El-MOWAFY A. Using peer assessment of fieldwork to enhance students’ practical training[J]. Assessment & Evaluation in Higher Education,2014,39(2):223-241.
[14]許濤.慕課同伴互評(píng)模型設(shè)計(jì)研究[J].開(kāi)放教育研究,2015,21(2):70-77.
[15]劉興華,紀(jì)小凌,余繼英.以評(píng)促學(xué)——大學(xué)英語(yǔ)寫作有效同伴反饋模式構(gòu)建及促學(xué)效果研究[J].當(dāng)代外語(yǔ)研究,2017,17(5):9-15.
[16]李菲茗,李曉菲,黃亞平,等.訓(xùn)練對(duì)同伴互評(píng)評(píng)分準(zhǔn)確性的影響——以“三維動(dòng)畫(huà)設(shè)計(jì)與建?!闭n程為例[J].中國(guó)遠(yuǎn)程教育,2018(5):63-67+78.
[17] HARLEN W.Assessment of learning[M].London: Sage,2007: 11-24.
[18] BLACK P,WILIAM D.Assessment and classroom learning[J].Assessment in Education: Principles,Policy & Practice,1998,5(1): 7-74.
[19]DANN R.Promoting assessment as learning: improving the learning process[M].London: Routledge,2002: 1-7.
[20]EARL L M.Assessment as learning: using classroom assessment to maximize student learning[M].2nd ed.Thousand Oaks,Cal.: Corwin,2013: 25-34.
[21]Council for the Curriculum Examinations and Assessment.Assessment for learning: a practical guide[M].Belfast: CCEA Publication,2009.
[22] BAXTER MAGOLDA M B.Making their own way: narratives for transforming higher education to promote self-development[M].Sterling,VA: Stylus,2001: 37-70.
[23] BAXTER MAGOLDA M B.Authoring your life: developing an internal voice to navigate life’s challenges[M].Sterling,VA: Stylus,2009: 321-346.
[24] BAXTER MAGOLDA M B,KING P M.Learning partnerships: theory and models of practice to educate for self-authorship[M].Sterling,VA: Stylus,2004: 41.
[25]岑逾豪,孫曉鳳.寓學(xué)生發(fā)展于研究生教學(xué)——學(xué)習(xí)伙伴模型在碩士研究生課程中的應(yīng)用[J].學(xué)位與研究生教育,2014(9):35-39.
[26]蔣群,何麗明,祝新德,等.基于學(xué)生發(fā)展理論的“微生物發(fā)酵實(shí)驗(yàn)”教學(xué)改革與思考[J].微生物學(xué)通報(bào),2016,43(4):798-803.
[27] LI L.Effects of critical assessment training on quality of peer feedback and quality of students’ final projects in peer assessment [D].Lincoln,USA: University of Nebraska-Lincoln,2007.
[28]白麗茹.基礎(chǔ)英語(yǔ)寫作同伴互評(píng)反饋模式的可行性及有效性檢驗(yàn)[J].解放軍外國(guó)語(yǔ)學(xué)院學(xué)報(bào),2013,36(1):51-56,127-128.
[29] GUARDADO M,SHI L.ESL students’ experiences of online peer feedback[J].Computers and Composition,2007,24(4): 443-461.
[30] LILL,LIU X,STECKELBERG A L.Assessor or assessee: how student learning improves by giving and receiving peer feedback[J].British Journal of Educational Technology,2010,41(3): 525-536.
[31] O’DONNELL A M,TOPPING K.Peers assessing peers: possibilities and problems[C]// TOPPING K,EHLY S.Peer-assisted learning.Mahwah,NJ: Lawrence Erlbaum,1998: 255-278.
[32] BENOS D J,BASHARI E,Chaves J M,et al.The ups and downs of peer review[J].Advances in Physiology Education,2007,31(2): 145-152.
[33] KENDALL-TACKETT K.Writing for publication: an essential skill for graduate students with disabilities [EB/OL].(2008-01-01) [2022-05-07].http://www.apa.org/pi/disability/resources/writing.aspx.
[34] LI H,XIONG Y,ZANG X L,et al.Peer assessment in the digital age: a meta-analysis comparing peer and teacher ratings[J].Assessment & Evaluation in Higher Education,2016,41(2): 245-264.
[35]邵名莉.同伴評(píng)價(jià)在英語(yǔ)專業(yè)寫作教學(xué)中的運(yùn)用研究[J].外語(yǔ)教學(xué)理論與實(shí)踐,2009(2):47-53.
[36] CHITTUM J R,BRYANT L H.Reviewing to learn: graduate student participation in the professional peer-review process to improve academic writing skills[J].International Journal of Teaching and Learning in Higher Education,2014,26(3): 473-484.
[37]岑逾豪.大學(xué)生成長(zhǎng)的金字塔模型——基于實(shí)證研究的本土學(xué)生發(fā)展理論[J].高等教育研究,2016,37(10):74-80.
Using peer assessment in graduate education:from the perspective of student development
CEN Yu-hao
(School of Education,Shanghai Jiao Tong University,Shanghai200240,China)
AbstractGraduate students are future academic researchers,and they should be prepared for academic peer-review work.Informed by an integrative student development theory,this study implemented peer assessment in a graduate course for seven consecutive years and used a mixed-methods approach to assess its effects on student learning and development.Reviewing peers′ academic work contributes to graduate students′ academic progress,as well as promotes student growth in the epistemological,intrapersonal,and interpersonal dimensions.Graduate students learned that knowledge was contextual,uncertain,and developed in process,developed researcher identity,and worked toward building a learning community.Institutions should provide peer review opportunities for graduate students,and organize the activities in a way that maximizes student learning.
Keywords peer assessment;theories of student development;theories of learning assessment;theory of self-authorship development;graduate education
[責(zé)任編輯 孫菊]
[收稿日期]2022-05-07
[基金項(xiàng)目]上海市哲學(xué)社會(huì)科學(xué)規(guī)劃教育學(xué)課題(B1703)
[作者簡(jiǎn)介]*岑逾豪(1984—),女,上海人。博士,副教授,博士生導(dǎo)師,主要研究方向?yàn)榇髮W(xué)生發(fā)展、高校對(duì)學(xué)生的影響、研究生教育。