英語(yǔ)語(yǔ)言教學(xué)中多模態(tài)話語(yǔ)的意義與構(gòu)建

梁 強(qiáng)

（滁州學(xué)院 外國(guó)語(yǔ)學(xué)院，安徽 滁州239000）

我國(guó)學(xué)界對(duì)于多模態(tài)（multimodality）的定義不同學(xué)者有不同的看法，多模態(tài)在社會(huì)符號(hào)學(xué)、系統(tǒng)功能語(yǔ)法、話語(yǔ)分析等領(lǐng)域較為集中，但其不局限于此，多模態(tài)跨越了學(xué)界中的大多數(shù)學(xué)科。多模態(tài)話語(yǔ)以多模態(tài)為基礎(chǔ)，多模態(tài)（multimodality）的詞根是模態(tài)（modality），進(jìn)而分析多模態(tài)需要了解模態(tài)的內(nèi)涵。［1］模態(tài)的定義分為幾種，Charles forceville代表符號(hào)系統(tǒng)說(shuō)，是指具體的感知過(guò)程，例如，文字符號(hào)、圖像符號(hào)、聲音、手勢(shì)、味道等。G.Kress代表交互方式論，他認(rèn)為模態(tài)是人類(lèi)通過(guò)感官跟外部環(huán)境之間的互動(dòng)方式，例如，視覺(jué)模態(tài)、聽(tīng)覺(jué)模態(tài)與嗅覺(jué)模態(tài)等。［2］交互方式論與符號(hào)系統(tǒng)說(shuō)表明模態(tài)的實(shí)現(xiàn)需要依靠媒介，僅依靠一種媒介得以實(shí)現(xiàn)的模態(tài)為單模態(tài)，而依靠多種媒介得以實(shí)現(xiàn)的模態(tài)則為多模態(tài)。隨著科技不斷發(fā)展，大數(shù)據(jù)、物聯(lián)網(wǎng)等信息化與現(xiàn)代科技主宰的社會(huì)，多模態(tài)已然成為人們生活不可或缺的一部分。

一、多模態(tài)話語(yǔ)的釋義

（一）多模態(tài)話語(yǔ)的界定

多模態(tài)話語(yǔ)是包含了兩種或兩種以上符號(hào)系統(tǒng)的話語(yǔ)。多模態(tài)話語(yǔ)分析相對(duì)其他話語(yǔ)分析脫穎而出之處在于，多模態(tài)話語(yǔ)分析打破了以往的局限性，以往大家提出的理論或研究，皆以語(yǔ)言為研究對(duì)象，這無(wú)疑是單一的研究模式，僅注意語(yǔ)言系統(tǒng)與語(yǔ)義結(jié)構(gòu)本身及其與社會(huì)文化和心理認(rèn)知之間的關(guān)系，為研究帶來(lái)一定的阻礙與局限，［3］多模態(tài)是基于圖像、文字、聲音、顏色的一種模式，在很大程度上幫助大家克服單一研究模式帶來(lái)的局限性。單模態(tài)下的話語(yǔ)，包含了多個(gè)符號(hào)系統(tǒng)，一種模態(tài)包含兩種或兩種以上的符號(hào)系統(tǒng)的典型例子——漫畫(huà)，漫畫(huà)包含了圖像與文字，雖然在模態(tài)上大家僅運(yùn)用了視覺(jué)模態(tài)進(jìn)行閱讀，但是其包含了兩種符號(hào)系統(tǒng)，我們也將其視為多模態(tài)話語(yǔ)，即我們可以理解為，單模態(tài)話語(yǔ)是絕對(duì)單一的模態(tài)。

李戰(zhàn)子認(rèn)為多模態(tài)是復(fù)合型的話語(yǔ)，如圖像、文本、圖表等符號(hào)系統(tǒng)。張德祿認(rèn)為多模態(tài)是人們通過(guò)多種感官符號(hào)資源實(shí)現(xiàn)交際的現(xiàn)象。O’Halloran綜合多位學(xué)者的觀點(diǎn)，認(rèn)為多模態(tài)是“綜合語(yǔ)言、視覺(jué)圖像、其他符號(hào)資源、構(gòu)建紙質(zhì)和數(shù)字媒體、日常生活文本、事物、事件的理論分析和實(shí)踐，總體而言，多模態(tài)話語(yǔ)代表了社會(huì)的進(jìn)步與社會(huì)的文明成果，同時(shí)多模態(tài)話語(yǔ)是打破多領(lǐng)域研究與發(fā)展局限的利刃，具有系統(tǒng)性與功能性；基于系統(tǒng)功能語(yǔ)言學(xué)，多模態(tài)話語(yǔ)分析認(rèn)為語(yǔ)言以外的其他符號(hào)也是意義的源泉”［4］，系統(tǒng)功能語(yǔ)言學(xué)的系統(tǒng)理念，以及純理功能假說(shuō)認(rèn)為，模態(tài)話語(yǔ)具有功能性。系統(tǒng)功能語(yǔ)言學(xué)的系統(tǒng)理論，認(rèn)定多模態(tài)話語(yǔ)具有系統(tǒng)性，同時(shí)還有系統(tǒng)功能語(yǔ)言學(xué)的純理功能假說(shuō)，認(rèn)定多模態(tài)話語(yǔ)具有功能性等性質(zhì)。

（二）多模態(tài)話語(yǔ)的內(nèi)涵

在我們進(jìn)行話語(yǔ)交際的過(guò)程中，語(yǔ)言不是唯一體現(xiàn)話語(yǔ)意義的方式與渠道，話語(yǔ)更多體現(xiàn)在非語(yǔ)言因素上，如聲音、聲調(diào)、語(yǔ)速、動(dòng)作、表情，是伴隨著語(yǔ)言一同出現(xiàn)的非語(yǔ)言因素，這些是體現(xiàn)話語(yǔ)意義的重要因素之一，屬于副語(yǔ)言特征；非語(yǔ)言因素現(xiàn)代智能教學(xué)電子設(shè)備，如音響、投影儀、電腦等屬于環(huán)境因素，在話語(yǔ)交際中也起到發(fā)揮話語(yǔ)意義的作用。換言之，交際不是一種簡(jiǎn)單的利用單一感官進(jìn)行的活動(dòng)，而是集合了多種模態(tài)進(jìn)行的活動(dòng)，這種交際方式產(chǎn)生的話語(yǔ)即是多模態(tài)話語(yǔ)。［5］最早研究多模態(tài)話語(yǔ)分析的是R.Barthes，他在《圖像的修辭》中探討了語(yǔ)言與圖像在表達(dá)意義上的相互作用；Kress，G.and van Leeuwen，T.研究了模態(tài)與媒體的關(guān)系，包括顏色語(yǔ)法、視覺(jué)圖象，以及報(bào)紙的版面設(shè)計(jì)和不同媒介的作用等；O’Halloran，K.L.專(zhuān)門(mén)研究了數(shù)學(xué)語(yǔ)篇中的多模態(tài)現(xiàn)象；［6］Royce，T.研究了不同符號(hào)在多模態(tài)話語(yǔ)中的互補(bǔ)性，以及在第二語(yǔ)言課堂教學(xué)中多模態(tài)的協(xié)同性等。另外，系統(tǒng)功能語(yǔ)言學(xué)將話語(yǔ)意義和功能放置于實(shí)現(xiàn)意義與功能的符號(hào)系統(tǒng)之前，這打破了研究的局限性，有益于我們?nèi)娴乩斫夂脱芯慷嗄B(tài)話語(yǔ)。

二、多模態(tài)話語(yǔ)運(yùn)用于英語(yǔ)語(yǔ)言教學(xué)中的意義

（一）增強(qiáng)英語(yǔ)語(yǔ)言實(shí)踐能力

多模態(tài)話語(yǔ)在英語(yǔ)語(yǔ)言教學(xué)中，可以增強(qiáng)學(xué)生的英語(yǔ)語(yǔ)言實(shí)踐能力。研究多模態(tài)話語(yǔ)對(duì)于英語(yǔ)教學(xué)的意義在于，開(kāi)創(chuàng)多模態(tài)的英語(yǔ)教學(xué)模式，可以培養(yǎng)學(xué)生的多樣性、全面性與系統(tǒng)性的能力。在英語(yǔ)教學(xué)中，多模態(tài)話語(yǔ)分析使學(xué)生對(duì)于語(yǔ)法的理解具有多樣性的特征，這是針對(duì)學(xué)生的思維而言的，多模態(tài)話語(yǔ)分析中的語(yǔ)法缺乏嚴(yán)格語(yǔ)法意義上的標(biāo)記與線性關(guān)系，帶有較強(qiáng)的主觀性，［7］如同系統(tǒng)功能語(yǔ)言學(xué)框架中的文化層面，由于每個(gè)人的文化背景、知識(shí)結(jié)構(gòu)以及意識(shí)形態(tài)的差異，會(huì)得出不同的結(jié)論，有些人認(rèn)為這是多模態(tài)話語(yǔ)分析的不足之處，但是置于英語(yǔ)教學(xué)的環(huán)境當(dāng)中，這是培養(yǎng)學(xué)生個(gè)性以及思維的一種方式。

英語(yǔ)語(yǔ)言教學(xué)以培養(yǎng)學(xué)生英語(yǔ)語(yǔ)言能力為基礎(chǔ)，對(duì)學(xué)生的英語(yǔ)語(yǔ)言實(shí)踐能力的培養(yǎng)尤為重要。目前英語(yǔ)教學(xué)的誤區(qū)是忽略了英語(yǔ)語(yǔ)言實(shí)踐的重要性，在英語(yǔ)教學(xué)中打破了專(zhuān)業(yè)知識(shí)與英語(yǔ)語(yǔ)言的平衡。傳統(tǒng)英語(yǔ)教學(xué)受到了科學(xué)技術(shù)等智能化設(shè)備的限制，教師難以為學(xué)生恢復(fù)真實(shí)的英語(yǔ)語(yǔ)言環(huán)境，學(xué)生無(wú)法體會(huì)最真實(shí)的人際交流，進(jìn)而無(wú)法通過(guò)已有課程提升自身的英語(yǔ)語(yǔ)言思維與英語(yǔ)語(yǔ)言交際能力。多媒體等現(xiàn)代化信息與智能技術(shù)的發(fā)展為英語(yǔ)教學(xué)提供了便利條件，但是英語(yǔ)教學(xué)長(zhǎng)期以來(lái)在教學(xué)改革上存在滯后性，教育信息化與教育信息化2.0并沒(méi)有對(duì)英語(yǔ)教學(xué)起到較大的推動(dòng)作用，學(xué)生需要具有國(guó)際化視野與思維，運(yùn)用多模態(tài)教學(xué)促進(jìn)英語(yǔ)教學(xué)的改革迫在眉睫。

換言之，在英語(yǔ)教學(xué)的環(huán)境下，多模態(tài)話語(yǔ)分析能滿足社會(huì)不斷發(fā)展對(duì)人才日益提升標(biāo)準(zhǔn)的需求，多模態(tài)話語(yǔ)的特征可以培養(yǎng)學(xué)生的多樣性、全面性與系統(tǒng)性，即學(xué)生在具有個(gè)性的同時(shí)，不缺乏共性，并且具有整體性?，F(xiàn)今教育領(lǐng)域正在提倡培養(yǎng)學(xué)生的全球勝任力，要求學(xué)生具有國(guó)際化視野、獨(dú)立的思維模式與較強(qiáng)的交際能力，而多模態(tài)話語(yǔ)本身是具有以上幾點(diǎn)特征的話語(yǔ)模式，因此，英語(yǔ)教學(xué)采取多模態(tài)話語(yǔ)的教學(xué)模式是培養(yǎng)人才的優(yōu)質(zhì)選擇。

（二）提升英語(yǔ)語(yǔ)言教學(xué)質(zhì)量

在英語(yǔ)語(yǔ)言教學(xué)中，多模態(tài)話語(yǔ)可以提升學(xué)生學(xué)習(xí)的積極性，幫助學(xué)生更全面地理解英語(yǔ)語(yǔ)言。英語(yǔ)教學(xué)在教育信息化與教育信息化2.0 時(shí)代的推動(dòng)下實(shí)施一些相應(yīng)的教學(xué)改革措施，使教學(xué)設(shè)備相對(duì)智能化，教學(xué)內(nèi)容更加多樣、豐富，但在人才培養(yǎng)模式與教學(xué)模式上無(wú)法滿足社會(huì)需求，換言之，教育信息化對(duì)英語(yǔ)教學(xué)的推動(dòng)僅局限在教學(xué)設(shè)備與教學(xué)環(huán)境領(lǐng)域，并沒(méi)有對(duì)教學(xué)內(nèi)容作出實(shí)質(zhì)性的改變，忽視了英語(yǔ)學(xué)習(xí)所需的基本原理；在教學(xué)模式上，教學(xué)方式存在枯燥單調(diào)的問(wèn)題，學(xué)生難以提升學(xué)習(xí)英語(yǔ)語(yǔ)言的積極性，英語(yǔ)課程呈現(xiàn)出傳統(tǒng)的教師講學(xué)生聽(tīng)的模式，在各高校各專(zhuān)業(yè)皆處在教育現(xiàn)代化轉(zhuǎn)型階段，多模態(tài)英語(yǔ)教學(xué)是提升英語(yǔ)教學(xué)質(zhì)量的重要手段。多模態(tài)教學(xué)的特點(diǎn)就是教師運(yùn)用多種符號(hào)表征，包括教師的聲音、語(yǔ)調(diào)、手勢(shì)、表情、情緒等最大限度地刺激學(xué)生的多種感官，讓學(xué)生處在一個(gè)多模態(tài)的學(xué)習(xí)環(huán)境中完成意義的構(gòu)建和知識(shí)的內(nèi)化。教師在教學(xué)設(shè)計(jì)過(guò)程中應(yīng)當(dāng)運(yùn)用多模態(tài)課程資源，促進(jìn)師生互動(dòng)或是人機(jī)互動(dòng)，提高學(xué)生對(duì)于英語(yǔ)語(yǔ)言學(xué)習(xí)的積極性，促進(jìn)學(xué)生對(duì)知識(shí)的建構(gòu)與內(nèi)化，挖掘?qū)W生的多模態(tài)交際能力。

三、多模態(tài)話語(yǔ)在英語(yǔ)語(yǔ)言教學(xué)中的構(gòu)建

（一）模擬現(xiàn)代化英語(yǔ)語(yǔ)言教學(xué)環(huán)境

多模態(tài)教學(xué)模式為英語(yǔ)語(yǔ)言教學(xué)提供現(xiàn)代化路徑。多模態(tài)教學(xué)模式是現(xiàn)代教育體系不可或缺的一部分，伴隨著教育現(xiàn)代化與教育信息化，多模態(tài)教學(xué)模式與現(xiàn)代信息技術(shù)及設(shè)備是相互聯(lián)系并不可分割的兩個(gè)范疇，教師在課程設(shè)置中需要充分融入現(xiàn)代化的教育元素與教學(xué)技術(shù)，將多媒體信息技術(shù)與多模態(tài)教學(xué)進(jìn)行融合，這不單純局限于教學(xué)設(shè)備具有信息化與現(xiàn)代化的教學(xué)模式，而是從教育內(nèi)容、教育模式與教育環(huán)境中體現(xiàn)出全方位的現(xiàn)代化。

在教學(xué)內(nèi)容上，教師可以針對(duì)多種符號(hào)的內(nèi)涵進(jìn)行教學(xué)，針對(duì)不同的符號(hào)模態(tài)設(shè)計(jì)相符的教學(xué)方式，使學(xué)生接受適宜的教學(xué)方法，在合理整合的英語(yǔ)教學(xué)資源中有所收獲。在教學(xué)過(guò)程中，教師應(yīng)提高對(duì)自身的教學(xué)要求，使符號(hào)模態(tài)與現(xiàn)代化的教學(xué)手段相融合，促進(jìn)英語(yǔ)實(shí)驗(yàn)教學(xué)質(zhì)量的提升。

在教學(xué)環(huán)境上，實(shí)驗(yàn)室通常配備較為先進(jìn)的現(xiàn)代化教學(xué)設(shè)備，這與常規(guī)課堂中的教學(xué)環(huán)境不同，英語(yǔ)實(shí)驗(yàn)室更注重學(xué)生在英語(yǔ)語(yǔ)言學(xué)習(xí)中的體驗(yàn)，英語(yǔ)實(shí)驗(yàn)室是學(xué)生自身對(duì)英語(yǔ)進(jìn)行資源整合的一個(gè)環(huán)境，能夠促進(jìn)學(xué)生自主學(xué)習(xí)能力的培養(yǎng)，多模態(tài)的教學(xué)模式需要對(duì)英語(yǔ)實(shí)驗(yàn)室進(jìn)行多模態(tài)方面的完善，這是英語(yǔ)教學(xué)中需要注重的地方。實(shí)驗(yàn)室中的計(jì)算機(jī)、網(wǎng)絡(luò)會(huì)議設(shè)施以及其他電子設(shè)備對(duì)于提升學(xué)生的語(yǔ)言適應(yīng)能力與交際能力十分重要，教師要充分考慮到實(shí)際應(yīng)用中對(duì)英語(yǔ)的要求，完善實(shí)驗(yàn)環(huán)境，打造與現(xiàn)實(shí)相近或相符的英語(yǔ)環(huán)境。比如，可以安排學(xué)生之間在不同地區(qū)進(jìn)行一次視頻會(huì)議，教師為會(huì)議設(shè)定主題，會(huì)議全程用英語(yǔ)交流，強(qiáng)化學(xué)生的英語(yǔ)思維和表達(dá)能力。

隨著科學(xué)技術(shù)的迅猛發(fā)展以及全球一體化進(jìn)程的加速，英語(yǔ)環(huán)境與教學(xué)對(duì)學(xué)生識(shí)讀能力的要求不斷提升，電子科技與網(wǎng)絡(luò)在生活中的普及使得顏色、圖像、聲音等非語(yǔ)言符號(hào)系統(tǒng)在交際與話語(yǔ)中的地位不斷提升，不斷挑戰(zhàn)著傳統(tǒng)語(yǔ)言在話語(yǔ)中的主導(dǎo)地位與學(xué)生的識(shí)讀能力，在多媒體與多模態(tài)不斷滲透至生活各個(gè)領(lǐng)域的前提下，識(shí)讀能力尤為重要，多模態(tài)教學(xué)對(duì)于識(shí)讀能力的提升在于幫助學(xué)生接觸到更豐富的英語(yǔ)環(huán)境，［8］學(xué)生通過(guò)適應(yīng)多模態(tài)教學(xué)模式可以在接觸更多英語(yǔ)環(huán)境的過(guò)程中，增加日常閱讀與瀏覽，體會(huì)與構(gòu)建復(fù)雜的英語(yǔ)學(xué)習(xí)環(huán)境，這種促進(jìn)學(xué)生自主學(xué)習(xí)的方式，可以使學(xué)生在多模態(tài)教學(xué)環(huán)境中快速適應(yīng)不斷變化的語(yǔ)言環(huán)境，提升語(yǔ)言實(shí)踐能力。

（二）完善現(xiàn)有英語(yǔ)語(yǔ)言教學(xué)模式

模擬視頻會(huì)議是鍛煉學(xué)生反映能力與英語(yǔ)思維的語(yǔ)言環(huán)境，教師可以在課程中為學(xué)生預(yù)留一定的模擬視頻會(huì)議時(shí)間，模擬視頻會(huì)議能夠考察學(xué)生的反映能力與英語(yǔ)語(yǔ)言習(xí)慣，是目前較為真實(shí)的人際交流方式，是學(xué)生學(xué)習(xí)英語(yǔ)語(yǔ)言的一個(gè)必經(jīng)階段，模擬視頻會(huì)議提升了學(xué)生對(duì)英語(yǔ)語(yǔ)言的運(yùn)用能力，打破以往學(xué)生只會(huì)做題不會(huì)交流的情形，是多模態(tài)話語(yǔ)的直接體現(xiàn)方式。學(xué)生可以運(yùn)用視覺(jué)、聽(tīng)覺(jué)以及話語(yǔ)進(jìn)行溝通，在此期間教師可以從中發(fā)現(xiàn)學(xué)生學(xué)習(xí)過(guò)程中存在的問(wèn)題以及其英語(yǔ)語(yǔ)言的弱項(xiàng)。

在開(kāi)設(shè)多模態(tài)英語(yǔ)課程后，教師可以考查學(xué)生在一學(xué)期內(nèi)的學(xué)習(xí)效果，考查學(xué)生在聽(tīng)說(shuō)讀寫(xiě)譯五方面是否有所提高，學(xué)生的自主學(xué)習(xí)能力是否增強(qiáng)。除此之外，多模態(tài)英語(yǔ)語(yǔ)言的學(xué)習(xí)提升了學(xué)生的英語(yǔ)語(yǔ)言思維，擴(kuò)展了學(xué)生的國(guó)際視野，對(duì)學(xué)生理解知識(shí)以及對(duì)自身未來(lái)發(fā)展有很大幫助。具體而言，關(guān)于多模態(tài)英語(yǔ)課程的考查，教師可以采用聽(tīng)音練習(xí)、復(fù)述、對(duì)話、文章片段翻譯、小組活動(dòng)、自由發(fā)言、寫(xiě)作訓(xùn)練等多種形式，讓學(xué)生多模態(tài)地輸出英語(yǔ)，以此全面考查學(xué)生的英語(yǔ)語(yǔ)言技能。課后考查時(shí)，教師可以在每單元課程完成后，布置開(kāi)放性作業(yè)與任務(wù)型作業(yè)，要求學(xué)生每周利用一定的時(shí)間進(jìn)行自主學(xué)習(xí)，［9］并將其納入期末成績(jī)考核當(dāng)中，此種模式包含教師運(yùn)用多模態(tài)手段對(duì)學(xué)生的表現(xiàn)進(jìn)行評(píng)估，如學(xué)生互評(píng)、網(wǎng)絡(luò)學(xué)習(xí)平臺(tái)系統(tǒng)記分等，充分調(diào)動(dòng)學(xué)生的學(xué)習(xí)興趣和積極性。

多模態(tài)與多媒體等現(xiàn)代技術(shù)的融合是教育發(fā)展的必然結(jié)果，多模態(tài)一直以來(lái)在不斷擴(kuò)展其涉及的領(lǐng)域與學(xué)科。多模態(tài)結(jié)合了一定的文化背景、社會(huì)發(fā)展以及人際交流模式，具有一定的現(xiàn)實(shí)性、全面性與系統(tǒng)性。多模態(tài)教學(xué)模式可以推動(dòng)英語(yǔ)教學(xué)向現(xiàn)代化教學(xué)模式轉(zhuǎn)型，這種模式區(qū)別于僅在教學(xué)設(shè)備上進(jìn)行現(xiàn)代化建設(shè)的外在教學(xué)模式，將教學(xué)內(nèi)容和教學(xué)思路進(jìn)行現(xiàn)代化建設(shè)與構(gòu)建，在此基礎(chǔ)上結(jié)合多媒體等現(xiàn)代智能教學(xué)設(shè)備，在最大限度上滿足社會(huì)對(duì)于人才的需求，推動(dòng)教育領(lǐng)域全球化進(jìn)程。