常新宇
文章以語言測試特別是外語測試期刊中的相關(guān)文獻(xiàn)為依據(jù),對英語語言測試的研究方法進行了分析和總結(jié),整理發(fā)現(xiàn)語言測試研究方法的發(fā)展主要有準(zhǔn)則參照測量、概化理論、項目反應(yīng)理論、結(jié)構(gòu)平衡模式以及定性研究等。很多語言測試研究都采用定性和定量相結(jié)合的研究方法,這兩種方法的結(jié)合使用能更好地體現(xiàn)和解釋語言測試的結(jié)果。
1 定量研究方法
常模參照測驗,是指以學(xué)生團體測驗的平均成績作為參照標(biāo)準(zhǔn),也即以個體的成績與同一團體的平均成績或常模相互比較,而確定其成績的適當(dāng)?shù)燃壍脑u價方法。常模即團體測驗的平均成績。學(xué)生在團體中的位置就是以學(xué)生個體成績與常模比較來確定的。該方法重在個人與個人之間的比較,主要用于選拔或編組、編班。
標(biāo)準(zhǔn)參照測量和常模參照測量是互補的。在標(biāo)準(zhǔn)參照測量中,測試結(jié)果是依據(jù)一個準(zhǔn)則或能力范圍,而不是其他考生的表現(xiàn)來解釋的。其中,考試的設(shè)計、開發(fā)和分析不依靠于考生之間的差異或分?jǐn)?shù)分布的一種常態(tài)。標(biāo)準(zhǔn)參照測驗重視測量學(xué)生對某項技能的掌握情況,而不必考慮其他學(xué)生的表現(xiàn)。
項目反應(yīng)理論也叫做潛在特性理論( latent trait theory ),它假設(shè)“一個受試者在某個測試題或測試項上的表現(xiàn)受測試項的難度和受試者的能力的影響”( Bachman, 1990)。它為人們研究測試項目的難度與受試者的能力之間的關(guān)系提供了理論依據(jù),成為人們研究大規(guī)模標(biāo)準(zhǔn)化語言能力測試的主要理論。它的不同模式,如Rasch模式以及Rasch多面模式( Rasch multi-facet model),被廣泛用在語言測試中調(diào)查多個測量面,尤其是評卷人和測試任務(wù)對考生的影響(Bachman, 2000)。
概化理論是種測試分析方法,旨在估計“不同的因素對測試分?jǐn)?shù)的影響” ( Bachman, 1990: 187)。在概化理論的應(yīng)用中,研究者們都非常仔細(xì)地說明可能影響考試成績的各種因素,包括要測試的能力、測試方法、個人屬性、以及其他隨機因素。它的應(yīng)用主要體現(xiàn)在口試和作文考試中評卷老師給分的一致性、試卷的考試項和語言的一致性等方面。
結(jié)構(gòu)平衡模式使我們能夠調(diào)查我們使用的測試方法的因素結(jié)構(gòu)和這些因素之間的關(guān)系。此外,它還可以用來調(diào)查自變量和依變量之間的關(guān)系。結(jié)構(gòu)平衡模式的應(yīng)用分為五個步驟: 1)模式說明; 2)模式辨認(rèn); 3)參數(shù)估計; 4)測試模式資料的合適性; 5)模式的重新說明。這種模式在語言測試中應(yīng)用主要體現(xiàn)在五個方面( Kunnan,1998): 一、研究測試的構(gòu)想效度以及改進測試設(shè)計的兩個方面: 構(gòu)想的代表性和研究范圍;二、研究測試行為或調(diào)查問卷的因素結(jié)構(gòu)以便更好地了解考試所測試的能力; 三、研究外語或二語受試者的特點或背景(或外部)因素、應(yīng)試技巧和測試行為之間的關(guān)系; 四、研究測試任務(wù)與測試行為之間的關(guān)系;五、研究受試者之間的差異。近幾年應(yīng)用結(jié)構(gòu)平衡模式進行的語言測試研究也主要集中于以上五個方面。
2 定性研究方法
除了定量研究方法,定性研究方法也越來越多地用于語言測試的研究中。其中使用較多的方法包括專家判斷、內(nèi)省法和回顧法、觀察法、問卷調(diào)查法、采訪法、以及話語分析和會話分析法。Bachman( 2000)把近來語言測試中定性研究方法應(yīng)用的特點歸納為三點: 一、定性研究不是一種單一的方法,人們經(jīng)常同時用多種定性研究方法進行一項研究; 二、隨著語言測試研究者在這方面的經(jīng)驗的增長,他們在不斷地改進用來評估他們所作的觀察的一致性和可重復(fù)性; 三、因為語言測試結(jié)果大多還是用定量的方法給予報告,所以還很有必要繼續(xù)研究一種互補性地使用定量和定性研究方法的方法。
3 結(jié)語
統(tǒng)計分析是幫助研究者探索真實世界的手段之一,但它永遠(yuǎn)都只能間接地反映現(xiàn)實世界中的真實關(guān)系,有的時候還可能是歪曲的反映,因此對統(tǒng)計分析結(jié)果的解釋必須結(jié)合專業(yè)知識,必須到真實的世界中去檢驗。我們注意到,越來越多的研究,在定量分析之后,還進行定性研究,很好地補充、論證甚至發(fā)展了定量研究的成果,是一種較為合理的研究方法。
(作者單位:蘭州城市學(xué)院)