葉春莉 張鑫婕
摘要 采用內(nèi)容分析法,對2008-2018年我國14種外語類核心期刊上刊載的英語語言測試反撥效應(yīng)研究文獻進行了檢索與統(tǒng)計,結(jié)果顯示:(1)近十年來國內(nèi)對英語語言測試反撥效應(yīng)的研究呈波動式發(fā)展趨勢;(2)研究中實證研究的數(shù)量已略超過非實證研究;(3)實證研究涉及了8類英語測試,非實證研究涉及了反撥效應(yīng)理論探究與模型建構(gòu)、著作引介與研究概述以及經(jīng)驗性探討。通過對上述結(jié)果分析發(fā)現(xiàn),國內(nèi)對于測試反撥效應(yīng)的研究存在一些不足:研究主體過于局限;研究涉考類型不均,且重復(fù)研究較多;存在同樣熱門的英語測試(如研究生入學(xué)英語考試)無人問津的現(xiàn)象;另外,實證研究中大多采用問卷調(diào)查法與訪談法相結(jié)合的研究方法,方法較為單一。結(jié)合研究回顧,對未來反撥效應(yīng)的研究趨勢進行了預(yù)測。
關(guān)鍵詞 反撥效應(yīng)研究;英語語言測試;研究內(nèi)容;實證研究
中圖分類號 G420
文獻標識碼 A
文章編號 1005-4634(2020)02-0069-06
0引言
教育界把測試對教和學(xué)的影響稱為反撥效應(yīng)(washback或backwash),也可稱反撥作用或后效作用。語言測試反撥效應(yīng)是指語言測試對語言教學(xué)與語言學(xué)習(xí)的影響。早在1989年,國際教育測量專家Messick就指出反撥效應(yīng)是考試構(gòu)念效度不可分割的一部分,由此可見反撥效應(yīng)的重要性。近年來,反撥效應(yīng)的研究不斷深入,了解國內(nèi)反撥效應(yīng)研究現(xiàn)狀、已取得的成績以及存在的不足等,有助于促進反撥效應(yīng)的深入研究,更好地發(fā)揮測試的積極作用。筆者擬對2008~2018年國內(nèi)14種外語類核心期刊中反撥效應(yīng)研究文獻進行全面細致的分析,重點介紹此領(lǐng)域的最新進展和主要發(fā)現(xiàn),旨在探究當(dāng)前反撥效應(yīng)研究的主要不足以及未來發(fā)展方向。
1文獻檢索范圍
本文統(tǒng)一采用“反撥效應(yīng)”一詞。為了確保文獻檢索更加全面,筆者分別以“反撥”(包括“反撥效應(yīng)”和“反撥作用”)和“后效作用”為“主題”和“關(guān)鍵詞”對CNKI上2008-2018年發(fā)表的反撥效應(yīng)文獻進行分析和研究。發(fā)現(xiàn):盡管在此期間反撥效應(yīng)論文數(shù)量達146篇,但除去與英語語言測試無關(guān)篇數(shù),只余下84篇,且其中多數(shù)是重復(fù)研究,缺乏具創(chuàng)新力和有影響力的研究成果。因此,筆者將文獻范圍鎖定在國內(nèi)14種外語類核心期刊上,其中13種取自北大2017版外語類核心期刊來源目錄,另考慮到2011年建刊的《外語測試與教學(xué)》與語言測試息息相關(guān),也將此期刊含括在內(nèi)。后采用內(nèi)容分析法對14種期刊每篇論文的題目、摘要進行分析,并對部分主題不明確的論文進行略讀,最終篩選出47篇文獻作為本研究的數(shù)據(jù)樣本。
2我國英語語言測試反撥效應(yīng)研究的概況及趨勢
表1和圖1分別為2008-2018年關(guān)于英語語言測試反撥研究的文獻統(tǒng)計和研究趨勢。據(jù)張建珍對國內(nèi)9種外語類期刊的統(tǒng)計,2001-2010年間有關(guān)測試反撥效應(yīng)的研究只有17篇。從表1來看,近10年,刊登在14種外語類核心期刊的反撥效應(yīng)研究文獻共47篇,數(shù)量較先前有了大幅增長,但總體上國內(nèi)反撥效應(yīng)研究仍比較欠缺:各專業(yè)期刊年平均刊載約0.34篇,只有極少數(shù)外語專業(yè)期刊10年內(nèi)的刊載量超過5篇,且14種期刊均有過文獻空白的年份?!锻庹Z教學(xué)》和《外語教學(xué)與研究》近10年來未刊登過與反撥效應(yīng)有關(guān)的論文;《外國語》《外語與外語教學(xué)》《中國外語》和《外語研究》都只刊登過1篇相關(guān)研究論文??d反撥效應(yīng)研究較多的期刊有《外語測試與教學(xué)》《外語界》《外語教學(xué)理論與實踐》《外國語文》。值得一提的是,《外語測試與教學(xué)》作為以外語測試研究為主的刊物,創(chuàng)刊8年來刊登了20篇英語語言測試反撥效應(yīng)論文,為反撥效應(yīng)的研究作出了巨大的貢獻。
從論文發(fā)表趨勢(圖1)不難發(fā)現(xiàn),文獻的發(fā)文量呈波動式發(fā)展,時多時少,2014年的相關(guān)研究最多,共發(fā)表了8篇,而2008年和2017年最少,只刊登了1篇,研究數(shù)目并沒有隨時間的推移而增加。由此可見,我國英語語言測試反撥效應(yīng)研究仍有很大發(fā)展空間。
3反撥效應(yīng)研究現(xiàn)狀
高一虹將研究方法分為兩大類:材料性研究和非材料性研究。材料性研究又稱“實證研究”“經(jīng)驗研究”,以系統(tǒng)、有計劃的材料采集和分析為特點,包括“量化研究”和“質(zhì)化研究”;非材料性研究,亦稱非實證研究,指不以系統(tǒng)采集的材料為基礎(chǔ)的研究,包括個人感想、操作描述及理論反思等。根據(jù)上述對研究方法的分類,筆者將47篇文獻進行分類,結(jié)果如表2和圖2所示。
由表2可知,在47篇反撥效應(yīng)的文獻中,實證研究25篇,占總數(shù)的53.2%,非實證研究22篇,占總數(shù)的46.8%,非實證研究比重略低于實證研究。曾有學(xué)者對早年的反撥效應(yīng)文獻進行綜述,發(fā)現(xiàn)實證性研究與非實證性研究文獻篇數(shù)相差不大,但以非實證性研究為主。但從圖2可知,如今英語測試中反撥效應(yīng)的研究正在向?qū)嵶C化、定量化發(fā)展,實證研究數(shù)量已超過非實證研究。由此可見,近10年反撥效應(yīng)的實證研究取得了巨大的進步,這一發(fā)展趨勢也符合語言測試界對實證研究重要性的強調(diào)與關(guān)注。
本文將從實證研究和非實證研究兩個層面分析國內(nèi)英語測試反撥效應(yīng)的現(xiàn)狀。
3.1實證研究
對實證研究的分析包括考試類型、研究對象、研究內(nèi)容、數(shù)據(jù)收集方法4個方向。
1)考試類型。2008-2018年反撥效應(yīng)實證研究涉及的考試類型包括水平測試以及分級測試,具體分布如表3所示。在考試類型上,近10年國內(nèi)英語語言測試反撥效應(yīng)的實證研究集中在大規(guī)??荚嚿?,以大學(xué)英語四、六級考試(如辜向東,肖巍2013;石小娟2016),英語專業(yè)四、八級考試(如徐倩2012;顏靜蘭2012),高考英語考試(如張放2014;陳艷君,蔡金亭,胡利平2018)為主,此3類考試占比超過60%。針對這三類考試的研究多著眼于四、六級網(wǎng)考、四、六級改革、TEM對教師和學(xué)生的反撥作用、高考聽說測試以及高考改革等。
2)研究對象。2008-2018年反撥效應(yīng)實證研究涉及群體類型如表4。在研究對象上,國內(nèi)反撥效應(yīng)研究涉及單一群體共19篇,占比最大,約占實證研究的76%,其中以教師為單一研究對象的共7篇,以學(xué)生為單一對象的共12篇。涉及兩個群體的有“教師+學(xué)生”“學(xué)生+考官”“試卷設(shè)計者+教師”“外語專家+學(xué)科負責(zé)人”4種類型,其中以“教師+學(xué)生”類型為主,占實證研究總數(shù)的8%。研究涉及3個及以上群體的較少,近10年僅1篇,為顏靜蘭與楊慧敏(2011)關(guān)于英語專業(yè)四、八級測試對英語教學(xué)的互動與反撥作用的研究,其研究對象為教師、外語專家和試題設(shè)計者。
3)研究內(nèi)容。測試反撥效應(yīng)指的是測試對教和學(xué)的影響,因此反撥效應(yīng)實證研究內(nèi)容應(yīng)包含教師教學(xué)和學(xué)生學(xué)習(xí),具體數(shù)據(jù)見表5。
數(shù)據(jù)表明,國內(nèi)反撥效應(yīng)研究已從多關(guān)注教師及教學(xué)(鄒申,董曼霞2014)過渡到同時關(guān)注教與學(xué),且將學(xué)生學(xué)習(xí)放置到更高的地位,體現(xiàn)了對學(xué)生主體的關(guān)注。在教學(xué)方面,研究者多關(guān)注測試對教師的教學(xué)計劃、教學(xué)內(nèi)容、教學(xué)方法和教學(xué)效果的影響(如辜向東,楊志強,劉曉華2013);在學(xué)習(xí)方面,研究多集中在測試對學(xué)生學(xué)習(xí)動機、學(xué)習(xí)內(nèi)容、學(xué)習(xí)策略和考試策略等方面的反撥(如辜向東,肖巍2013)。由此發(fā)現(xiàn),教育不再僅僅關(guān)注于學(xué)生的學(xué)習(xí)成績,同時更關(guān)注學(xué)生在學(xué)習(xí)過程中的認知發(fā)展和策略使用。
4)數(shù)據(jù)收集方法。在數(shù)據(jù)收集方法上,研究者們大多采取調(diào)查問卷、訪談、課堂觀察中的一種或多種方式來進行數(shù)據(jù)收集。采用問卷+訪談收集數(shù)據(jù)的最多,共10篇,在實證研究中占比40%;采用單一研究方法的較少,如問卷調(diào)查、訪談,各占16%和4%:采用“問卷+訪談”和“問卷調(diào)查+課堂觀察+訪談”定性與定量相結(jié)合的研究共17篇,占比68%,可以看出在反撥效應(yīng)的實證研究中將定性與定量相結(jié)合的研究方法頗為主流。具體方法類型數(shù)據(jù)見表6。
3.2非實證研究
通過文獻分析法,筆者發(fā)現(xiàn)我國英語語言測試反撥效應(yīng)非實證研究主要分為以下3類:反撥效應(yīng)理論探究與模型建構(gòu)、著作引介與研究概述以及經(jīng)驗性探討,分類情況見表7。
1)反撥效應(yīng)理論探究與模型建構(gòu)。自國內(nèi)語言測試反撥效應(yīng)研究興起后,學(xué)者們多以國外反撥效應(yīng)理論模型為基礎(chǔ)進行研究,而較少提出具有創(chuàng)新性、廣泛適用的反撥效應(yīng)模式。近10年文獻檢索14種核心期刊僅發(fā)現(xiàn)1篇,占反撥效應(yīng)研究文獻總數(shù)的2.1%。肖巍、辜向東、倪傳斌發(fā)現(xiàn)Xie的結(jié)構(gòu)方程建模僅基于單一模型進行共時分析,他們根據(jù)Hughes的PPP模型,將問卷分為學(xué)生對CET的認識、教材學(xué)習(xí)、應(yīng)試備考和學(xué)習(xí)產(chǎn)出4個方面共11個因素,探討了這11個單因素的歷時變化,并采用多群組結(jié)構(gòu)方程建模,綜合分析了CET反撥效應(yīng)機制及其歷時變化。
2)著作引介與研究概述。2008-2018年,有關(guān)反撥效應(yīng)的著作引介和研究概述共9篇,其中著作引介3篇,如呂生祿、韓寶成評《語言評價與測試探索:行動中的語言》一書時提到該書“主要討論語言測評的基本原理和實踐操作。從語言測評的地位、目的、原則、多元測評方式以及發(fā)展現(xiàn)狀等方面,全面闡述語言測評的基本原理,討論將這些原理用于測評實踐的方法,并提出語言測評質(zhì)量控制的PRICE原則、測評循環(huán)系統(tǒng)、反撥效應(yīng)因果模式和語言測評六階段發(fā)展體系,為教師和測評工作者開展測評活動提供操作指南”。國內(nèi)一些研究者還從不同的視角對反撥效應(yīng)研究成果和發(fā)展動向進行概述,共6篇。其中亓魯霞、劉曉華、辜向東從語言測試中實證研究角度進行文獻綜述;鄒申、董曼霞認為張建珍對國內(nèi)反撥效應(yīng)研究現(xiàn)狀研究文獻檢索范圍相對窄小,分析維度也較為單一,在此基礎(chǔ)上,他們從實證研究和非實證研究兩大方面人手,對20年間的55篇文獻進行了分析。另外,亓魯霞還將重點聚焦于Green的反撥效應(yīng)模型和Xie的研究方法,討論了反撥效應(yīng)研究在理論探索和研究方法上的新進展。
3)經(jīng)驗性探討。非實證研究中大部分為研究者的經(jīng)驗性探討,共12篇,占非實證研究文獻數(shù)的54.5%,占論文總數(shù)的25.5%。經(jīng)驗性探討多針對語言測試設(shè)計,如丁黎明強調(diào)了主、客觀測試對英語專業(yè)教學(xué)反撥效應(yīng),通過分析主、客觀測試嚴重失衡的現(xiàn)狀以及由此產(chǎn)生的負面反撥效應(yīng),提出應(yīng)弱化測試及分數(shù)的作用,先保證效度,再提高信度,以及設(shè)計客觀試題時要注意的三原則,鼓勵并加強主觀測試。亓魯霞以考試風(fēng)險為切入點,在Madaus定義的基礎(chǔ)上拓展和細化風(fēng)險概念,認為風(fēng)險不僅有高低之分,高風(fēng)險中也有等級之分,風(fēng)險過高或過低的考試均難以實現(xiàn)期望反撥效應(yīng)。因此,她認為決策人和考試設(shè)計者應(yīng)該考慮如何調(diào)整才能使考試的風(fēng)險等級適度。還有部分學(xué)者主張利用測試的權(quán)威性改善教學(xué),如秦秀白通過闡述英語專業(yè)四、八級考試的權(quán)威性以及對教學(xué)的促進作用,提出應(yīng)充分利用四、八級考試的反撥效應(yīng)抑制教學(xué)質(zhì)量滑坡的主張。
4目前反撥效應(yīng)研究的不足
4.1研究發(fā)展呈波動式
從近10年文獻發(fā)表趨勢圖(圖1)可看出近10年相關(guān)文獻數(shù)量呈波動式發(fā)展,2011~2016年發(fā)表的論文數(shù)量較多,年均6篇;2017~2018年發(fā)表的論文數(shù)量較少,每年1-2篇,研究趨勢上并未隨著時間推移而上升。由此可見,我國英語語言測試反撥效應(yīng)的研究呈波動式發(fā)展趨勢,文獻數(shù)量起伏不定,分布不均。
4.2研究涉及的考試類型不平衡且缺乏創(chuàng)新
在對文獻內(nèi)容分析發(fā)現(xiàn),反撥效應(yīng)研究主要針對大學(xué)英語四、六級,專業(yè)四、八級和高考英語,在近十年的研究中3類占比近60%;其他英語測試,如教師資格證英語考試、全國公共英語等級考試各1篇,相當(dāng)熱門的研究生入學(xué)考試中的英語測試同樣無人問津,近10年來未有學(xué)者對其反撥效應(yīng)進行探究。此外,尚未有研究從其他學(xué)科視角研究反撥效應(yīng)現(xiàn)象,研究涉及的領(lǐng)域較為局限,缺乏創(chuàng)新。
4.3研究對象范圍過窄
近些年,研究主要集中在反撥效應(yīng)對教與學(xué)總體的影響上,細化到測試對教師專業(yè)發(fā)展、學(xué)生身心發(fā)展的研究較少,如學(xué)生的學(xué)習(xí)動機方面,有學(xué)者提出如果學(xué)生的英語學(xué)習(xí)環(huán)境或?qū)W習(xí)動機發(fā)生變化,教材和測試的內(nèi)容亦應(yīng)隨之改變。另一方面,文獻多以教師、學(xué)生作為研究對象,研究涉及對象范圍過窄,未將其他群體納入研究(如學(xué)生家長),不利于多維度了解反撥效應(yīng)。
4.4數(shù)據(jù)收集方法上存在不足
47篇文獻中,實證研究占25篇,雖然較10年前有了極大的發(fā)展,但25篇實證研究中,學(xué)者們多用問卷調(diào)查、課堂觀察、訪談相結(jié)合的方法對反撥效應(yīng)進行探究,研究方法多次重復(fù),不夠新穎。另外極個別學(xué)者(辜向東、張正川、劉曉華2014;詹穎2013)采用了學(xué)生日志的形式。因為基于問卷調(diào)查和訪談類的間接數(shù)據(jù)收集方法難以確保研究結(jié)果的可信度,所以數(shù)據(jù)收集方法還需更加多元化與科學(xué)化。此外,大多數(shù)研究沒有對研究工具的信度和效度進行驗證,或是驗證了但并未在文中提及驗證結(jié)果,從而顯得調(diào)查可信度不高。
5對未來發(fā)展的展望
10年來,國內(nèi)反撥效應(yīng)研究取得了較大進展,但仍存在一些不足和問題?;谏鲜龇治觯P者認為未來反撥效應(yīng)的研究將會呈現(xiàn)如下趨勢。
第一,研究主體將不僅局限于教師和學(xué)生,還要擴展到家長等與教育相關(guān)的角色上去。考慮到當(dāng)代家長的平均文化水平較過去有了提高,毫無疑問他們會更注重孩子的教育,在教育中擔(dān)任更重要的角色,因此家長對英語測試的看法及認識對測試的反撥效應(yīng)影響將會擴大。
第二,研究的考試類型及內(nèi)容涉及的范圍將越來越廣。從大學(xué)英語四、六級,英語專業(yè)四、八級,高考英語,過渡到高等學(xué)校英語應(yīng)用能力考試、全國教師資格等級考試、全國公共英語等級考試、研究生入學(xué)英語考試。隨著跨學(xué)科和多學(xué)科綜合研究的發(fā)展,不僅會在本學(xué)科內(nèi)研究發(fā)展,勢必會輻射到諸如社會心理學(xué)、認知心理學(xué)、教育心理學(xué)等其他學(xué)科領(lǐng)域。
第三,研究方法和手段將更具多樣性和科學(xué)性。隨著科學(xué)技術(shù)的進步,對測試軟件的研發(fā)將得到進一步加強,新開發(fā)的技術(shù)軟件將會運用于反撥效應(yīng)研究之中,同時,研究水平的提升也能促進反撥效應(yīng)研究向縱深發(fā)展。
責(zé)任編輯 馬曉寧