微信中多模態(tài)英語語篇學(xué)習(xí)的實證研究

,

(海南外國語職業(yè)學(xué)院， 海南 文昌 571321)

隨著信息技術(shù)的普及和發(fā)展，教育手段和模式的多樣化結(jié)合，圖片、錄像、動畫、三維模型等含有多模態(tài)元素的學(xué)習(xí)方式被廣泛應(yīng)用在教育領(lǐng)域中。學(xué)習(xí)方式信息化和學(xué)習(xí)手段多樣化已成為一種趨勢。近年來，我國學(xué)者將多模態(tài)理論積極應(yīng)用于外語教學(xué)領(lǐng)域，不斷探索教育發(fā)展的新模式和語言學(xué)習(xí)的新路徑。英語語篇學(xué)習(xí)是培養(yǎng)學(xué)生英語閱讀能力提高的一種重要方式，因此基于信息技術(shù)的多模態(tài)英語語篇學(xué)習(xí)可以為意義的分析、知識的建構(gòu)、能力的提升提供一個更為系統(tǒng)、更多維度的視角。2018年6月，《中國英語能力等級量表》的出臺為英語閱讀教學(xué)提供了語言文字規(guī)范上的范式，更加要求我們廣大教師應(yīng)結(jié)合新的信息技術(shù)載體，架構(gòu)起多模態(tài)英語語篇教學(xué)新模式。驗證一種教學(xué)模式是否行之有效，最為直接的方式就是通過教師設(shè)置多模態(tài)英語語篇，學(xué)生親身體驗和發(fā)揮元認(rèn)知能力獲取知識，最后以實證研究的數(shù)據(jù)來驗證教學(xué)模式的可行性。

1 視覺語法與非語言模態(tài)

國外一些學(xué)者已經(jīng)注意到語篇中圖像、字體、色彩和布局的功能意義。Kress & Van Leeuwen (1996)提出了較為系統(tǒng)的“視覺語法”理論視角。這種視角是將符號學(xué)理論與功能語言學(xué)理論相結(jié)合，認(rèn)為符號能夠?qū)崿F(xiàn)Halliday的三大元功能即概念功能、人際功能和語篇功能。在研究語篇過程中，系統(tǒng)功能語法中的三大元功能對應(yīng)為“視覺語法”中的再現(xiàn)功能、互動功能和構(gòu)圖功能?！耙曈X語法”概念的提出為非語言模態(tài)的研究創(chuàng)建了分析框架。在“視覺語法”中，意義的表達(dá)是由文字模態(tài)與圖像、色彩、字體、布局等非文字模態(tài)強化互補完成的。

人對世界的體驗和認(rèn)識受到事物的影響而變得千變?nèi)f化，要想準(zhǔn)確進(jìn)行內(nèi)心意圖表述和完成語言交際意圖這一過程的話，話語者經(jīng)常需要其他非語言模態(tài)輔佐補充語言模態(tài)(Norris, 2004；張德祿, 2010)。在Wittgenstein的“語言游戲觀”哲學(xué)中，語言是通過“游戲”進(jìn)行習(xí)得。字母歌是通過音樂模態(tài)傳送英文字母語言模態(tài)供初學(xué)者學(xué)習(xí)，幼兒園教師手中的卡片是通過圖像模態(tài)教授兒童習(xí)得語言模態(tài)，父母用實物模態(tài)水果啟發(fā)子女認(rèn)知語詞語言模態(tài)。因此，在多模態(tài)語篇中，不僅僅是文字，包括圖像、色彩、聲音、音樂、實物等都參與了意義的構(gòu)建，正是這些非語言模態(tài)協(xié)同合作構(gòu)建使多模態(tài)語篇意義遠(yuǎn)遠(yuǎn)超過單模態(tài)文字所表達(dá)的意義效果。Kress & Van Leeuwen (2001)、Ventola & Moya(2009)甚至認(rèn)為在對語篇的分析中，尤其要對獨立和相互依賴的非語言符號資源進(jìn)行研究。對于模態(tài)的范疇，F(xiàn)orceville和Urios-Aparisi(2009)根據(jù)人類身上5種感官的感知分為了視覺、聽覺、嗅覺、味覺和觸覺模態(tài)。在此基礎(chǔ)上，他為了使上述的模糊劃分更為多層次性，又細(xì)分了9種模態(tài)：圖像、書面、口頭、聲音、手勢、氣味、味道、接觸、音樂。由此可見，非語言模態(tài)僅僅使用“視覺語法”理論進(jìn)行研究是遠(yuǎn)遠(yuǎn)不夠的，可能還需要“聽覺語法”、“動作語法”等等。

2 多模態(tài)語篇與微信

每種模態(tài)都會有自己的模態(tài)語篇，并且與其他模態(tài)語篇有著明顯的語篇界限(淮艷梅 2014)。在意義信息整合過程時，多種模態(tài)又產(chǎn)生組合、融合、間化和轉(zhuǎn)化的現(xiàn)象，沖破原有的語篇界限構(gòu)建成為多模態(tài)語篇。有學(xué)者(Norris 2004)提出“所有的交際都是多模態(tài)的，不存在單模態(tài)的語篇?！笔芤曈X語法和非語言模態(tài)的啟發(fā)，多模態(tài)語篇應(yīng)該是由語言模態(tài)和非語言模態(tài)協(xié)同配合共同建構(gòu)一類整體意義信息的語篇。

Ellestrom (2010)從多模態(tài)現(xiàn)象中詳細(xì)分析出較為系統(tǒng)的媒體、媒介、模態(tài)概念、特征和它們之間的關(guān)系。他認(rèn)為隨著傳統(tǒng)媒體、自媒體、網(wǎng)絡(luò)媒體的發(fā)展和應(yīng)用，物質(zhì)、感官、時空、符號、藝術(shù)等將會在媒介之中需求多種模態(tài)進(jìn)行詮釋和體現(xiàn)。多模態(tài)信息在具有多模態(tài)技術(shù)的媒介上進(jìn)行多重感覺傳播。雷茜(2018)在對多模態(tài)語篇的界定中，強調(diào)了時間的維度對多模態(tài)語篇屬性的重要性?，F(xiàn)代高科技技術(shù)應(yīng)用產(chǎn)生的網(wǎng)頁、廣告、電影等具有時間動態(tài)多模態(tài)語篇的屬性。多模態(tài)語篇分析即通過多種媒體和各種模態(tài)資源在各類語篇中系統(tǒng)組合生成和建構(gòu)交際意義，從而實現(xiàn)互動意義的有效生成和最優(yōu)化傳播。

微信是最近10年中最重要的自媒體之一。在微信公眾平臺上，個人和企業(yè)都可以打造一個微信公眾號，主要有實時交流、消息發(fā)送和素材管理功能。教學(xué)中不少教師已經(jīng)開始使用微信公眾平臺的主要功能開展各類教學(xué)實踐，成果顯著。根據(jù)5種感官模態(tài)的感知能效性，微信中的多模態(tài)語篇可視為是語言模態(tài)、視覺模態(tài)、聽覺模態(tài)3種模態(tài)的動態(tài)集合。這些模態(tài)在微信中有著鮮明的表征功能，同一語篇中不同模態(tài)之間互動關(guān)系顯著，意義在不同模態(tài)的轉(zhuǎn)化中得而生成，因此微信公眾號是實施多模態(tài)語篇推送的最佳信息技術(shù)平臺之一。綜上可知，教師在微信開展多模態(tài)英語語篇教學(xué)具有語言學(xué)理論的指導(dǎo)性、先進(jìn)媒體的技術(shù)性和實際應(yīng)用的可行性。

3 多模態(tài)在微信英語閱讀中的應(yīng)用與實證研究

多模態(tài)教學(xué)主張，在學(xué)習(xí)條件允許的情況之下，課外應(yīng)充分利用多種媒體，在多種模態(tài)的聯(lián)合作用下，調(diào)動起學(xué)生的學(xué)習(xí)主觀能動性，使英語學(xué)習(xí)隨時隨地都可以展開。多模態(tài)在微信英語閱讀中的應(yīng)用與實證研究將從多模態(tài)語篇的實際應(yīng)用、多模態(tài)語篇的問卷分析和多模態(tài)語篇的效果評估三個方面展開。

3.1 多模態(tài)語篇的實際應(yīng)用

在《中國英語能力等級量表》中，閱讀理解能力是語言學(xué)習(xí)者和使用者作為讀者閱讀并處理書面材料時，運用各種知識(包括語言知識和非語言知識)的策略，圍繞所讀材料建構(gòu)意義的能力，包括識別與提取書面信息的能力、概括與分析書面信息的能力、批判與評價書面信息的能力。閱讀理解能力分項量表中包括理解書面描述、理解書面敘述、理解書面說明、理解書面指示、理解書面論述、理解書面互動6個方面(國家語言文字工作委員會2018)。

教師以自媒體微信公眾號作為多元互動平臺，每天向?qū)W生推送一篇多模態(tài)英語語篇。這種嘗試性教學(xué)策略途徑意在通過課外補充自主學(xué)習(xí)提高學(xué)生們的閱讀理解能力，包括理解書面描述、敘述、說明、暗示、論述、互動6個知識層面；提升閱讀理解策略，包括規(guī)劃、執(zhí)行、評估/補救等方面。語篇中具有圖像、聲音、音樂、色彩等多種非語言模態(tài)。這些多模態(tài)語篇中非語言模態(tài)的字體、布局和色彩語法的主觀性較強，本著輔助語篇本身的概念意義、人際意義和語篇意義的功能實現(xiàn)進(jìn)行精心排版。語篇頁面背景顏色柔和，主要為淡綠、淺棕、淺黃等。色彩的適宜搭配為頁面營造出寧靜和高雅的氛圍，有利于提高學(xué)生們的專注度。語篇字體顏色與背景色要有反差，起到突顯作用。整體的布局、格式、間距能夠體現(xiàn)出語篇的可讀性和藝術(shù)性，吸引瀏覽者的眼球。因為自媒體公眾號平臺語篇自主學(xué)習(xí)模式還處于前期實驗階段，具有鮮明娛樂性特點的動畫元素沒有在語篇之中進(jìn)行設(shè)計，以防止學(xué)生們的學(xué)習(xí)注意力產(chǎn)生偏離。

教師以6個月作為時間參考維度，推送英語閱讀語篇共計178篇。每篇語篇都配有圖片作為輔助閱讀元素，共計398張圖片。圖文配比率約為1∶2.24。圖片的畫面內(nèi)涵豐富，實現(xiàn)高色彩調(diào)和度，具有高情態(tài)值。98篇語篇配有采自酷我音樂盒、網(wǎng)易云音樂、QQ音樂、酷狗音樂學(xué)習(xí)電臺情景下的純音樂，消減學(xué)生的緊張和煩躁情緒，營造舒緩學(xué)習(xí)環(huán)境。語篇配比純音樂比例約為1∶055首。語篇朗讀音頻為75個，與語篇總數(shù)比例約為1∶0.42個。視頻制作過程較為復(fù)雜，耗時較大，因此在語篇中使用的頻率較低，在此不做比例分析。按照中國英語能力等級量表，現(xiàn)將純文本語篇的體裁劃分，使用的多模態(tài)種類，實施的閱讀策略和建構(gòu)的意義能力之間的關(guān)系以圖1所示：

圖1 微信多模態(tài)英語語篇閱讀策略與能力關(guān)系

課堂常規(guī)教學(xué)與課外微信平臺兩種學(xué)習(xí)途徑的結(jié)合，經(jīng)過閱讀策略的加工進(jìn)入具體閱讀能力形成階段，形成后的具體閱讀能力對純文本語篇的學(xué)習(xí)也會更為行之有效。圖1中多模態(tài)語篇中的不同模態(tài)協(xié)同作用和配合充分體現(xiàn)了每篇語篇的整體意義。圖像、音樂、色彩、布局等非語言模態(tài)也具備前景化特征，能夠提升學(xué)生圍繞所讀材料構(gòu)建意義的能力和整體的英語閱讀能力。

3.2 多模態(tài)語篇的問卷分析

在微信公眾號多模態(tài)英語閱讀語篇自主學(xué)習(xí)6個月之后，對兩個班級85名同學(xué)(A班43名，B班42名)進(jìn)行微信多模態(tài)與英語語篇閱讀能力關(guān)系的滿意度正向調(diào)查。調(diào)查問卷根據(jù)李克特5級量表(Likert Scale)設(shè)計參數(shù)，參照中國英語能力等級量表中閱讀理解能力和閱讀理解策略中的等級規(guī)定，具體調(diào)查內(nèi)容以結(jié)構(gòu)式問卷為主, 利用SPSS17.0版本對問卷進(jìn)行Cronbach’s α信度量值分析，具體數(shù)值見表1。

表1 微信多模態(tài)英語語篇調(diào)查問卷信度分析

經(jīng)過如果項已刪除則進(jìn)行測量，問卷Cronbach’s α信度總值皆為0.732，在可以接受的范圍內(nèi)(0.7<α<0.8)。從表1可以得知通過精心設(shè)計多模態(tài)語篇，學(xué)生們對閱讀篇章的偏好趨于穩(wěn)定，閱讀體驗感強，閱讀興趣濃厚，色彩、字體、布局等非語言模態(tài)也一定程度上加快了學(xué)生們的閱讀速度，閱讀效果良好。

在問卷的最后一部分，教師設(shè)計了一項開放式問卷調(diào)查問題，讓學(xué)生們對微信中多模態(tài)英語語篇提出自己的意見和看法。雖然這種開放式問卷調(diào)查具有不固定的特征，但這種不固定性是積極的，并且也為以后的微信多模態(tài)語篇學(xué)習(xí)資源建設(shè)提供了參考價值。

3.3 多模態(tài)語篇的效果評估

多模態(tài)語篇效果評估使用SPSS(17.0)對兩組的前測、后測成績進(jìn)行獨立樣本T檢驗。從表2我們可以看出，在微信公眾號平臺多模態(tài)語篇學(xué)習(xí)實驗前期，兩個組別(A班和B班，C班和D班)的英語閱讀成績并無明顯差異(T=1.169，DF=165, P=0.822>0.05)，閱讀平均分都不高。

表2 A&B班和C&D班兩組的多模態(tài)閱讀語篇實驗前測成績差異

經(jīng)過半年的微信公眾號學(xué)習(xí)之后進(jìn)行英語語篇測試。按照中國英語能力等級量表中語篇體裁規(guī)定，描述型、敘述型、說明型、論述型、互動型語篇各1篇。A班、B班共85名同學(xué)為實驗組，C班、D班共82名同學(xué)為對照組。

表3 A&B班和C&D班兩組的多模態(tài)閱讀語篇實驗后測成績差異

通過表3可以總結(jié)出實驗組與對照組的成績有了顯著差異(T=6.98，DF=159, P=0.029<0.05)。使用微信公眾號進(jìn)行多模態(tài)英語語篇學(xué)習(xí)的學(xué)生測試成績明顯高于普通對照組的學(xué)生(MD=7.71)。這說明多模態(tài)的使用對學(xué)生的英語閱讀能力的影響是較大的。

配對樣本T檢驗(表4)顯示，經(jīng)過半年的學(xué)習(xí)，實驗組的前測和后測成績差異顯著(T=-8.84，DF=84，P=0.00<0.05)，后測平均成績高于前測平均成績(MD=6.23)。對照組的后測成績略低于前測成績(MD=0.04)，兩段成績的顯著性不高(T=0.082, DF=81, P=0.935>0.05)。在此可以推測微信公眾號多模態(tài)英語語篇作為課外補充閱讀學(xué)習(xí)或是翻轉(zhuǎn)課堂實踐對學(xué)生閱讀成績的提高和閱讀能力的提升都具有明顯的積極作用。

表4 實驗組和對照組的多模態(tài)閱讀語篇實驗前測、后測成績差異

4 結(jié) 語

中國英語能力等級量表的頒布是教師和學(xué)習(xí)者培養(yǎng)和形成各項英語能力的規(guī)范標(biāo)尺。學(xué)生們的英語語篇閱讀能力在新時代、新技術(shù)、新政策的引領(lǐng)下，應(yīng)該尋求更為全新有效的發(fā)展途徑。作為一種信息化的教學(xué)方法和學(xué)習(xí)途徑，微信多模態(tài)英語語篇學(xué)習(xí)不應(yīng)只增加學(xué)生的課外學(xué)習(xí)時間和教師的挑選語篇的投入，還應(yīng)從實證研究的角度具體去衡量和檢驗，從而修正教學(xué)模式和學(xué)習(xí)策略。通過以上研究發(fā)現(xiàn)，微信中多模態(tài)英語語篇的應(yīng)用學(xué)習(xí)有利于學(xué)生的英語閱讀能力水平的提高。自媒體信息平臺、多模態(tài)技術(shù)、中國英語能力等級量表和師生教學(xué)知識互動的良性銜接對英語閱讀能力以及其他各項能力的實現(xiàn)均具有實際意義。