基于Rasch模型的英語(yǔ)閱卷人閱卷行為差異研究

摘 要：本研究對(duì)有無(wú)留學(xué)背景的英語(yǔ)閱卷人的閱卷行為進(jìn)行研究，目的在于找出其閱卷行為的差異。研究結(jié)果表明沒(méi)有英美留學(xué)背景的閱卷人在評(píng)閱英語(yǔ)口語(yǔ)樣本的過(guò)程中比有留學(xué)背景的閱卷人更加嚴(yán)格，在語(yǔ)法方面尤為突出。本研究采用Rasch模型，對(duì)兩組不同閱卷人的閱卷行為進(jìn)行分析，目的在于找出他們之間的差異，以更好地指導(dǎo)今后的教學(xué)和閱卷工作。

關(guān)鍵詞：Rasch模型；嚴(yán)厲度；行為差異

一、研究簡(jiǎn)介

最近幾年，英語(yǔ)口語(yǔ)技能越來(lái)越受到我國(guó)英語(yǔ)學(xué)習(xí)者的重視，越來(lái)越多的學(xué)生和家長(zhǎng)都把學(xué)習(xí)的重點(diǎn)放在英語(yǔ)口語(yǔ)上，并且參加了很多英語(yǔ)口語(yǔ)考試，如雅思、托福、大學(xué)英語(yǔ)四六級(jí)口語(yǔ)和英語(yǔ)專業(yè)四八口語(yǔ)考試等。在我國(guó)由于教育資源的限制，學(xué)生的口語(yǔ)大部分由中國(guó)老師教授，其中一部分老師有國(guó)外留學(xué)背景，另一部分老師沒(méi)有國(guó)外留學(xué)背景，在這種情況下，由于閱卷人存在留學(xué)背景差異，學(xué)生可能會(huì)在學(xué)習(xí)過(guò)程中得到不同的分?jǐn)?shù)。本研究正是運(yùn)用Rasch模型找出有無(wú)留學(xué)背景的閱卷人在閱卷行為上的差異。具體研究問(wèn)題如下：第一，就閱卷嚴(yán)厲度而言，有英美留學(xué)背景的閱卷人和沒(méi)有的閱卷人有無(wú)差異；第二，就閱卷標(biāo)準(zhǔn)而言，有英美留學(xué)背景的閱卷人和沒(méi)有的閱卷人有無(wú)差異；第三，就評(píng)分量表而言，有英美留學(xué)背景的閱卷人和沒(méi)有的閱卷人有無(wú)差異。

二、文獻(xiàn)綜述

McNamara曾指出閱卷者的多樣性主要體現(xiàn)在以下幾個(gè)方面：第一，閱卷人在整體的閱卷嚴(yán)厲度上存在差異；第二，閱卷人對(duì)于某一類群體的試卷表現(xiàn)出嚴(yán)厲或者寬松，例如卷面書(shū)寫(xiě)；第三，閱卷人對(duì)于評(píng)分標(biāo)準(zhǔn)的理解可能存在差異；第四，閱卷人的閱卷連續(xù)性可能存在差異。

對(duì)于閱卷人背景的研究大部分集中在本族語(yǔ)者和非本族語(yǔ)的研究上。有研究者發(fā)現(xiàn)：第一母語(yǔ)的差異對(duì)于閱卷行為不會(huì)產(chǎn)生差異，或者有細(xì)微的差異。同時(shí)也有研究者發(fā)現(xiàn)：閱卷者的第一母語(yǔ)對(duì)于閱卷行為存在顯著差異。先前的研究大都集中在本族語(yǔ)者和非本族語(yǔ)者，很少有研究針對(duì)有無(wú)英美留學(xué)背景的閱卷人的閱卷行為進(jìn)行研究，本研究希望填補(bǔ)此方面的空白。

三、研究方法

本研究選取了8名閱卷人（4名有英美留學(xué)背景，4名沒(méi)有英美留學(xué)背景）來(lái)評(píng)閱28名學(xué)生的口語(yǔ)錄音音頻。有英美留學(xué)背景是指在英語(yǔ)為本族語(yǔ)的國(guó)家至少留學(xué)或工作過(guò)3年，沒(méi)有英美留學(xué)背景是指從來(lái)沒(méi)有在英美等英語(yǔ)國(guó)家生活過(guò)。閱卷人的基本信息如表1所示。

參加本次研究的學(xué)生為濱州醫(yī)學(xué)院英語(yǔ)專業(yè)大二的學(xué)生，他們的口語(yǔ)任務(wù)是托?？谡Z(yǔ)的練習(xí)內(nèi)容。這份試題要求他們表達(dá)一下對(duì)于當(dāng)前中國(guó)房地產(chǎn)產(chǎn)業(yè)的觀點(diǎn)，評(píng)分標(biāo)準(zhǔn)為9分量表，并且包含有一個(gè)總分和四個(gè)分分，這4個(gè)部分分別為流利度、詞匯資源、語(yǔ)法范圍和語(yǔ)音語(yǔ)調(diào)。

四、結(jié)果和討論

從表2可以看出，閱卷人的嚴(yán)厲程度從Jiyan到Ada遞減，也就是說(shuō)Jiyan是最嚴(yán)厲的閱卷人，而Ada是最寬松的閱卷人，她們之間的差異為0.86（6.77-5.91=0.86），也就是說(shuō)對(duì)于同一份口語(yǔ)樣本，Jiyan將會(huì)比Ada少給0.86。同時(shí)可以看出最嚴(yán)厲的兩個(gè)閱卷人都是沒(méi)有英美留學(xué)背景的閱卷人，而最寬松的兩個(gè)閱卷人都是有英美留學(xué)背景的閱卷人。

從表3可以看出，除了語(yǔ)音語(yǔ)調(diào)外，沒(méi)有英美留學(xué)背景的閱卷人比有此背景的閱卷人更加嚴(yán)厲。在總分上他們的差距為0.14，在流利度上的差異為0.19，在詞匯量上的差異為0.18，差距最為明顯的為語(yǔ)法，差異為0.33，也就是說(shuō)，對(duì)于同一份口語(yǔ)樣本，就流利度而言，沒(méi)有留學(xué)背景的閱卷人會(huì)比有留學(xué)背景的閱卷人低0.14，在詞匯量上少0.19，在語(yǔ)法上少0.33，在語(yǔ)音語(yǔ)調(diào)上沒(méi)有差異。

從研究中發(fā)現(xiàn)，有留學(xué)背景的閱卷人在很多情況下打的分?jǐn)?shù)為7，占到總分?jǐn)?shù)的36%，沒(méi)有1這個(gè)分?jǐn)?shù)，分?jǐn)?shù)量表中只有8個(gè)分?jǐn)?shù)量表。而沒(méi)有留學(xué)背景的閱卷人在很多情況下打的分?jǐn)?shù)為6，占到總分?jǐn)?shù)的40%，包含1-9共9個(gè)分?jǐn)?shù)量表。

五、結(jié)論

卡方檢驗(yàn)結(jié)果為72.7，Significance（probability）為0.00，這意味著有留學(xué)背景和無(wú)留學(xué)背景的閱卷人在閱卷行為上沒(méi)有顯出差異的假設(shè)被否決了。他們之間存在著顯著的差異，而且無(wú)留學(xué)背景的閱卷人在總體分?jǐn)?shù)、流利度、詞匯范圍和語(yǔ)法等方面都比有留學(xué)背景的閱卷人更加嚴(yán)厲。

參考文獻(xiàn)：

[1]Brown A.Interviewer Variation and the Co-construction of Speaking Proficiency[J].Language Testing，2003（1）.

[2]TF McNamara.Measuring Second Language Performance[J].Modern Language Journal，2000（4）.