傳承性與創(chuàng)新性：基于證據(jù)的六級(jí)、雅思、托?？荚囆Ф葘?duì)比研究

主持人語(yǔ)

辜向東

本課題以“基于證據(jù)的社會(huì)-認(rèn)知效度驗(yàn)證框架”（Weir 2005）為理論指導(dǎo)，從情景效度、認(rèn)知效度、評(píng)分效度和后果效度四個(gè)方面，開(kāi)展了基于證據(jù)的六級(jí)、雅思、托?？荚囆Ф葘?duì)比研究。

一方面，本課題運(yùn)用語(yǔ)言測(cè)試效度研究普遍使用的研究方法（自動(dòng)文本分析、有聲思維、話語(yǔ)分析、問(wèn)卷調(diào)查和半結(jié)構(gòu)式訪談）做了八項(xiàng)傳承性研究，主題涉及三項(xiàng)考試閱讀文本詞匯復(fù)雜度、閱讀文本選擇與改編、聽(tīng)力長(zhǎng)對(duì)話和閱讀測(cè)試受試有聲思維認(rèn)知過(guò)程、口語(yǔ)測(cè)試樣本視頻考官與考生會(huì)話特征和主題發(fā)展、三項(xiàng)考試的口語(yǔ)和寫(xiě)作測(cè)試對(duì)考生的反撥效應(yīng)。其中四項(xiàng)傳承性研究已經(jīng)在《外語(yǔ)與翻譯》2020年第3期“語(yǔ)言測(cè)試對(duì)比研究”專(zhuān)欄中刊出。

另一方面，本課題也嘗試使用語(yǔ)言測(cè)試領(lǐng)域近年較新的跨學(xué)科研究方法（數(shù)據(jù)挖掘、眼動(dòng)技術(shù)、結(jié)構(gòu)方程模型）做了三項(xiàng)創(chuàng)新性研究，主題涉及文本自動(dòng)分類(lèi)、受試認(rèn)知加工過(guò)程、寫(xiě)作反撥效應(yīng)機(jī)制。其中兩項(xiàng)創(chuàng)新性研究：數(shù)據(jù)挖掘文本自動(dòng)分類(lèi)和眼動(dòng)技術(shù)認(rèn)知加工過(guò)程實(shí)證研究在本期專(zhuān)欄中刊出，以饗讀者。

本課題的這些研究使用了豐富的數(shù)據(jù)：測(cè)試文本900余篇，受試作答題目777項(xiàng)（聽(tīng)力和閱讀），口語(yǔ)測(cè)試樣本視頻7段；參與問(wèn)卷調(diào)查、訪談、有聲思維、眼動(dòng)的考生和受試共1,000余人次。這些豐富的數(shù)據(jù)充分體現(xiàn)了本課題的宗旨：基于證據(jù)的六級(jí)、雅思、托福考試效度對(duì)比研究。所有這些實(shí)證研究旨在回答一個(gè)總的研究問(wèn)題：六級(jí)、雅思、托?？荚嚨男Ф扔泻萎愅?/p>

本課題研究結(jié)果表明，六級(jí)、雅思、托福三項(xiàng)考試均具有良好的效度。換言之，根據(jù)三項(xiàng)考試的成績(jī)對(duì)考生英語(yǔ)語(yǔ)言能力做出的推論是可靠合理的。總體而言，雅思與托福的效度在各方面相同點(diǎn)較多，而六級(jí)的效度與二者相比差異性更大。

本研究探索、驗(yàn)證、豐富和發(fā)展了效度研究理論，充實(shí)、完善和建立了新的效度研究模型，尤其是三項(xiàng)考試效度對(duì)比研究的多個(gè)子框架或模型，比如聽(tīng)力長(zhǎng)對(duì)話測(cè)試構(gòu)念描述框架，三項(xiàng)閱讀測(cè)試分析框架，三項(xiàng)口語(yǔ)考試考生反撥效應(yīng)理論框架，寫(xiě)作考試考生反撥效應(yīng)理論框架等，為今后其他大規(guī)模、高風(fēng)險(xiǎn)考試的效度研究，尤其是效度對(duì)比研究，提供了理論和方法上的借鑒。本課題為考生的學(xué)習(xí)、教師的教學(xué)提供了富有建設(shè)性的意見(jiàn)和建議，為三項(xiàng)考試設(shè)計(jì)者/考試機(jī)構(gòu)/決策者進(jìn)一步提高命題質(zhì)量、施測(cè)環(huán)境、評(píng)分標(biāo)準(zhǔn)等提供了具有針對(duì)性和可操作性的方案與決策依據(jù)，為語(yǔ)言測(cè)試研究者和工作者以及對(duì)此感興趣的廣大讀者提供了思路和方法上的參考。

效度研究是一個(gè)持續(xù)收集多方面效度證據(jù)的過(guò)程，一項(xiàng)考試的效度驗(yàn)證已經(jīng)是一個(gè)系統(tǒng)工程，而考試效度對(duì)比研究涉及多項(xiàng)考試，其工作量更為龐大，需要強(qiáng)有力的團(tuán)隊(duì)，尤其是跨學(xué)科團(tuán)隊(duì)的通力合作與支持。課題研究是高等教育，尤其是碩士、博士研究生培養(yǎng)必不可少的一部分，是培養(yǎng)學(xué)生創(chuàng)新思維、實(shí)踐能力、團(tuán)隊(duì)精神和社會(huì)責(zé)任感的重要途徑；堅(jiān)持不懈加強(qiáng)團(tuán)隊(duì)建設(shè)，通過(guò)傳、幫、帶來(lái)提升團(tuán)隊(duì)的整體科研能力，培養(yǎng)團(tuán)隊(duì)不斷創(chuàng)新、無(wú)盡求索的科研精神。團(tuán)隊(duì)、團(tuán)隊(duì)精神和科研精神是出色完成考試效度對(duì)比研究，甚至任何學(xué)術(shù)研究的前提條件。因此，堅(jiān)持不懈提升團(tuán)隊(duì)能力，尤其是跨學(xué)科團(tuán)隊(duì)建設(shè)與合作是高等教育與研究的重中之重。