葉貝貝
(長江大學外國語學院,湖北荊州434023)
基于TEM4聽力測試標準的英語專業(yè)期末聽力測試信度和效度分析
——以長江大學外國語學院為例
葉貝貝
(長江大學外國語學院,湖北荊州434023)
TEM4是國家認定的英語專業(yè)水平測試,有較高的信度和效度,英語專業(yè)各項專業(yè)技能教學以此為指導,自然就有較高的教學效果。文章在基于TEM4聽力測試標準上,對長江大學外國語學院英語專業(yè)學生的期末聽力測試進行信度和效度分析,不僅檢驗了教師制定的英語聽力測試的信度和效度問題,還對存在差異的聽力測試制定提出修改意見,以期望對英語專業(yè)聽力試卷的編制起到一定的積極作用,同時為英語專業(yè)學生提高TEM4中的聽力理解部分提供一定的借鑒。
TEM4;聽力測試;信度;效度
TEM4(TestforEnglishMajors,Level4)是一種測試英語專業(yè)學生的語言基礎知識,以評估學生的英語綜合技能的國家級水平測試。根據(jù)《高等學校英語專業(yè)英語教學大綱》(下文中簡稱《大綱》,2000)的規(guī)定,它對高校英語專業(yè)的學生在不同階段應達到的英語水平提出了具體要求。其中對專業(yè)四級的聽力水平要求是:A.聽懂英語國家人士關于日常生活和社會生活的談話;B.聽懂中等難度(如TOEFL中的短文)的聽力材料,理解大意,領會作者的態(tài)度、感情和真實意圖;C.聽懂VOA正常速度和BBC新聞節(jié)目的主要內容;D.能大體辨別各種英語變體(如美國英語、英國英語、澳大利亞英語);E.能在15分鐘內聽寫根據(jù)已學知識編寫或選用的詞數(shù)為200個左右、語速為每分鐘120個單詞的錄音材料,錯誤率不超過8%。與此對應的TEM4聽力測試結構包括聽寫和聽力理解兩個方面,聽寫就是《大綱》E部分的具體表現(xiàn)形式,這部分的錄音材料會播放四遍;聽力理解的這部分題型都是多項選擇題,通常分為三節(jié)即對話、篇章和新聞,此部分的錄音材料只播放一遍。鑒于此,TEM4對英語專業(yè)學生的英語聽力教學就有很重要的指導作用,那么如何正確利用它的指導作用是值得英語教師們研討的。為此,文章在基于TEM4聽力測試標準上,對長江大學外國語學院英語專業(yè)學生的期末聽力測試進行信度和效度分析,它不僅檢驗了教師制定的英語聽力測試的信度和效度問題,還對存在差異的聽力測試制定提出修改意見,以期望對英語專業(yè)聽力試卷的編制起到一定的積極作用,同時為英語專業(yè)學生提高TEM4中的聽力理解部分提供一定的借鑒。
1.測試信度
測試信度(testreliability)是指考試結果的可信度或者說可靠度。鄒申(2005)把它定義為考分的一致性(consistencyoftestscores)。信度通常是評價測試的其中一個重要標準,作為測量工具,一個測試要有效度,它首先必須可信。比如,如果相同的一部分學生無論在什么情況下參加某個測試,相同的學生在每次考試中取得的結果是相接近的,從理論上來說,這個測試具有較高的信度。
2.測試效度
測試效度(testvalidity)是指考試是否考查了原計劃需要被考查的內容,考試的結果能不能用來評判預定要測試的語言能力。作為評價測試的另外一個重要標準,它所反應的是測試與測試目標之間的一種相關性即關聯(lián)程度。如某教師編制了一套口語測試題目,主要是為了測試學生對校園生活中常見情形的對話表達能力,比如在圖書館與圖書館工作人員之間的常見對話、食堂排隊與他人之間的對話等,如果測試結果顯示這套試題確實測出了學生在規(guī)定方面的能力,從理論上來說,這套口語測試題目具有較高的效度。
長江大學外國語學院每年招收的英語專業(yè)學生大約為300名,學生要求在大二下學期即每年4月份第三個星期六參加全國英語專業(yè)四級(TEM4)考試,如果第一次沒有通過,僅有一次補考機會,畢業(yè)之前沒有通過就無法取得學位證書,由此可以看出TEM4對于該校英語專業(yè)學生的重要性。在平時的學習中,每個學期的期末聽力測試是評估學生聽力水平的重要方式,為了讓學生提前熟悉TEM4的聽力場景,這些期末聽力測試通常模仿TEM4的聽力出題標準,尤其是在題型這個方面,同樣設置了一篇聽寫和多篇短文、對話和新聞形式的聽力理解題目。期末聽力試卷通常是由擔任聽力學科教學的其中一名老師編制,分為AB平行試卷。為了大部分學生能夠通過考試,出題的內容主要以教材為主,一般要求試卷的60%內容來源于課本,并且還是教材中所學的內容,題目難度要求基本和教材一致,題量稍微比TEM4多一點,通常是會增加一道問答題或者填空題,以保證學校要求的測試的時間需為45分鐘左右。測試完成后,試卷都會分別交給每個班級的聽力任課老師批改。
1.期末聽力測試信度分析
對于長江大學所舉行的英語測試,在信度方面,由于是同一個老師負責整個試卷的編制,并且制定了AB平行卷,一定程度上保證了測試結果的信度。但是,針對閱卷這一過程,TEM4是考完之后以學校為單位寄到上海由上海外國語大學統(tǒng)一批閱,而該校則是交給任課老師分別批閱,由于每個老師的評閱標準不同,對于聽寫這一部分的評分尺度就會因人而異,再加上各個老師的個人時間、任務不同,也有可能不會按照統(tǒng)一的標準閱卷,這些因素都會降低測試的整體信度。
2.期末聽力測試效度分析
在效度方面,主要從表面效度和內容效度來分析該院系的英語聽力測試效度。該院系的英語測試題型結構基本與TEM4的聽力標準一致,其中增加題型與TEM4的聽寫效果相似,所以該測試看上去符合TEM4的聽力測試標準,具有表面效度。在內容效度方面,該院系的英語測試內容只有少部分與TEM4的《大綱》所提的標準一致,主要是指新聞材料基本來自于VOA和BBC的新聞節(jié)目,剩下的聽寫、篇章和對話大部分聽力材料則來源于教材。雖然老師提前不會透露聽力材料的來源,但學生們通過歷年高年級學生的反饋大概明白了考試內容,為了應對這樣的聽力測試,學生們在備考期間就會通過熟悉甚至背誦教材中的聽力材料,以求在測試中取得高分。不合理的測試方式導致不合理的聽力學習方法,不管是在測試內容的代表性和所選內容的充分性都不符合TEM4的聽力標準,因此該院系英語聽力測試在效度這方面做得有所欠缺。
通過對上面的現(xiàn)狀進行分析,基于TEM4的英語聽力測試標準,長江大學外國語學院英語專業(yè)聽力測試無論是在信度還是在效度這兩個方面都有待提高,現(xiàn)存的測試方式不能有效地衡量學生們的聽力水平,更無法幫助學生們提高TEM4的聽力這部分的得分。因此提出以下修改意見:
1.在測試內容的選擇上,不應該僅僅局限于教材,而應該更多地選擇符合《大綱》要求的聽力材料,而且選材的涉及面應該盡可能廣泛,減少學生僅僅通過死記硬背就能通過考試的幾率。這樣能迫使學生在課外主動去進行聽力練習,對學生們提高TEM4的聽力這一部分無疑有很大的幫助,更重要的是培養(yǎng)了學生們自主學習的能力,對于學生們的整個聽力水平提高起到了幫助作用。
2.在題型設置方面,像期末考試這種大型測試中最好與TEM4保持一致,可以通過增加客觀題的數(shù)量來保證學校要求的45分鐘考試時間。學生通過平時這樣的測試熟悉TEM4的出題形式,在參加真正測試時可減少慌張。
3.在閱卷過程中,學院應組織所有該科目任課老師一起集中閱卷,對于聽寫部分的評閱提前制定一個評分標準,由其中的兩位老師負責所有試卷聽寫部分的評閱,這樣就保證了整個閱卷評分的可信度。
總之,英語專業(yè)TEM4的聽力部分是衡量英語專業(yè)學生聽力水平的基本標準,而平時進行的聽力測試作為對參加TEM4之前的一種階段性的評估,測試的信度和效度都應該得到重視。本文通過對長江大學外國語學院英語專業(yè)學生的期末聽力測試的信度和效度分析,旨在對教師進行聽力測試試卷的編制提出了一些建議,以期促進我校學生們的聽力水平及學生們對于TEM4聽力測試的備考能力。
[1]HeatonJB.WritingEnglishLanguageTests[M].Beijing: ForeignLanguageTeachingandResearchPress,2002:162-165.
[2]李旭奎,左金梅.TEM4聽力理解各部分難易程度分析及其對聽力教學的啟示[J].外語電化教學,2005(1).
[3]高等學校外語專業(yè)教學指導委員會英語組.高等學校英語專業(yè)教學大綱[M].上海:上海外語教育出版社,2000.
[4]武尊民.英語測試的理論與實踐[M].北京:外語教學與研究出版社,2002.
[5]鄒申,楊任明.簡明英語測試教程[M].北京:高等教育出版社,2005:34-41.
G642
A
1673-0046(2015)9-0135-02