程錦（洛陽師范學(xué)院外國語學(xué)院，河南洛陽471022）

?

反觀視覺語篇分析框架探析

程錦
（洛陽師范學(xué)院外國語學(xué)院，河南洛陽471022）

摘要：視覺語篇分析框架是Kress和van Leeuwen于1996年提出的，雖然該框架獨(dú)特的優(yōu)越性為多模態(tài)語篇分析開辟了道路，但其中仍存在兩個問題：視覺語篇中的多種元素并不是都可以置于該框架中進(jìn)行多模態(tài)分析；該框架僅限于視覺模態(tài)，這就導(dǎo)致現(xiàn)代化的多模態(tài)語篇中經(jīng)常伴隨出現(xiàn)的聽覺模態(tài)在此框架中無處安放。因此應(yīng)以“依次分析，對號入座”的方式嘗試排除上述兩個問題對多模態(tài)語篇解讀的干擾。

關(guān)鍵詞：視覺語篇分析框架；多模態(tài)；語篇分析

自從話語分析（discourse analysis）被Harris在上世紀(jì)50年代提出后，該研究方向引起全世界各地研究者的極大興趣，各種各樣的分析方法和理論不斷被提出，同時(shí)話語活動、認(rèn)知模式和意識形態(tài)之間的關(guān)系以及話語活動內(nèi)在的規(guī)律也被大量的實(shí)例進(jìn)行了較為詳盡的分析。但是我們從中不難發(fā)現(xiàn)一個問題，那就是他們將那些理論和方法僅僅運(yùn)用于以語言為研究對象的語篇，卻忽視了以其他形式出現(xiàn)的表義單位。

隨著科學(xué)技術(shù)的飛速發(fā)展以及多媒體信息時(shí)代的到來，人們不再滿足使用傳統(tǒng)的單一模態(tài)進(jìn)行表達(dá)、認(rèn)知和溝通交流。符號和模態(tài)的多樣化以及交際媒體和模態(tài)的多元化使得人與人之間的日常交際日趨豐富和便利。與此同時(shí)，交際的多模態(tài)性使得語篇的構(gòu)成呈現(xiàn)類似的性質(zhì)。因此，傳統(tǒng)上文字在交際領(lǐng)域的中心地位受到了多模態(tài)話語的強(qiáng)烈沖擊，對話語全方位深入研究和分析的最佳方法不再是傳統(tǒng)的單模態(tài)方法，且該方法的單一性也使其在分析現(xiàn)代化多模態(tài)語篇中受到極大的限制。通過研究我們發(fā)現(xiàn)，語言和其他符號資源能夠共同完成構(gòu)建，且不同模態(tài)和符號可以組合成一個有機(jī)整體從而為交際服務(wù)。

上世紀(jì)90年代，多模態(tài)語篇分析理論在西方語言學(xué)界逐漸興盛。R.Barthes作為在多模態(tài)話語分析領(lǐng)域最早研究者之一，其在1977年發(fā)表的論文《圖像的修辭》（Rhetoric of the image）中首次探討了圖像在表達(dá)意義上與語言的相互作用；O’Halloran，K.L.（2004）對多模態(tài)理論做了探析和建構(gòu)，并將其應(yīng)用于數(shù)學(xué)語篇分析當(dāng)中；在多模態(tài)話語中，Royce，T.分析了不同符號的互補(bǔ)性，并且在第二語言課堂教學(xué)實(shí)踐中進(jìn)行了實(shí)際應(yīng)用。國外從事多模態(tài)語篇分析的學(xué)者以Kress與van Leeuwen最為突出，他們深入探討了多模態(tài)現(xiàn)象如何表達(dá)意義等，并提出了著名的視覺語法(the grammar of visual design)，由此將拓展了Halliday的語言元功能理論，為視覺語篇提供了分析框架。

一、多模態(tài)語篇分析的理論基礎(chǔ)及視覺語篇分析框架

人體有視覺、聽覺、觸覺、嗅覺和味覺五種不同的感官通道（sensory channel），由此可衍生出視覺（visual）、聽覺（auditive）、觸覺（tactile）、嗅覺（olfactory）和味覺（gustatory）模態(tài)（modality)。[1]由于人們將模態(tài)作為一種交流的媒介或途徑，所以多模態(tài)話語其實(shí)質(zhì)就是結(jié)合多種模態(tài)的語篇。

語篇被Halliday定義為在情境語境中起作用的任何一個語言實(shí)例，因此語篇是能夠涉及多模態(tài)或者多符號系統(tǒng)的。Halliday更明確指出，語篇既可以是口頭的或者書面的，也可以是其他的表達(dá)媒介。

1.模態(tài)語篇分析的理論基礎(chǔ)

首先，多模態(tài)語篇分析吸收了皮爾斯的符號理論中的對象、媒介和解釋三位一體的思想；其次，從Halliday創(chuàng)建的系統(tǒng)功能語言學(xué)中吸收了許多理論構(gòu)成其主要的理論基礎(chǔ)：（1）沿用了“語言是社會符號和意義潛勢”的觀點(diǎn)，同時(shí)認(rèn)為不能忽略語言之外的其他符號系統(tǒng)或模態(tài)等意義源泉。（2）沿用了系統(tǒng)理論，指出語言之外的其他符號系統(tǒng)或模態(tài)也同樣具有系統(tǒng)性。（3）接受了三大純理功能，認(rèn)為除了語言之外，其他符號系統(tǒng)和模態(tài)也分別具有人際功能、概念功能和語篇功能。（4）吸收了語域(register)理論，指出語境因素在多模態(tài)的解讀之中發(fā)揮著至關(guān)重要的作用。由此我們可以看出多模態(tài)語篇分析的理論基礎(chǔ)主要是Halliday的系統(tǒng)功能語言學(xué)，它將主要用于分析語言符號系統(tǒng)的系統(tǒng)功能理論拓展到了多模態(tài)語篇的分析之中。

2.視覺語篇分析框架

綜上所述，多模態(tài)話語分析是以Halliday系統(tǒng)功能語言學(xué)為基石，從而將功能語法拓展到多模態(tài)語篇中。Kress和van Leeuwen[2]依此提出大名鼎鼎的視覺語法（the grammar of visual design），該語法將Halliday的語言元功能理論擴(kuò)展到了視覺模式，由此建立了再現(xiàn)意義（representational）、互動意義（interactive）和構(gòu)圖意義（compositional）為核心內(nèi)容的視覺語篇分析框架。

上述的構(gòu)圖、互動和再現(xiàn)意義分別對應(yīng)著功能語法的語篇、人際和概念功能。其中構(gòu)圖意義可以體現(xiàn)多模態(tài)語篇的整體輪廓與布局，也就是讀者首先獲取的整體印象，包括三種資源：信息值、取景和顯著性。互動意義涉及情態(tài)、社會距離、接觸和態(tài)度四個要素，以此來表現(xiàn)圖像制作者、圖像表征的事物以及圖像觀看者三者之間的交際意義。再現(xiàn)意義可分為概念的和敘事的再現(xiàn)兩大類，概念的再現(xiàn)包含分類、分析和象征過程，相當(dāng)于及物系統(tǒng)里的關(guān)系過程和存在過程；敘事的再現(xiàn)則包含行動、反應(yīng)以及言語和心理三大過程。

二、反觀

自Kress和van Leeuwen于1996年提出視覺語篇分析框架以后，許多學(xué)者都將其運(yùn)用于多模態(tài)語篇分析當(dāng)中，其獨(dú)特的優(yōu)越性為多模態(tài)語篇分析開辟了道路。但是，我們認(rèn)為其中仍存在兩個問題：

a.視覺語篇中的各種元素并不是都可以置于該框架中進(jìn)行多模態(tài)分析；

b.該框架僅限于視覺模態(tài)，這就導(dǎo)致多模態(tài)語篇中經(jīng)常出現(xiàn)的聽覺模態(tài)在此框架中無處安放。

因此，我們認(rèn)為不考慮這兩個問題的多模態(tài)語篇分析方式都是不妥的。具體說來，視覺模態(tài)中經(jīng)常涉及到的符號系統(tǒng)有圖像、文字和顏色，而真正能用于視覺語篇分析框架的只有圖像符號系統(tǒng)；語言符號系統(tǒng)應(yīng)該依據(jù)Halliday的語言元功能理論進(jìn)行分析；顏色符號系統(tǒng)中，雖然有時(shí)根據(jù)特殊情況可以將語篇中顏色的選擇歸結(jié)于視覺語篇分析框架下的顯著度，但是也存在顏色的選擇不是為顯著度服務(wù)的情況，這時(shí)如果依然將其置于該框架下分析就不妥了。另外，若是語篇中不僅涉及視覺模態(tài)，還涉及聽覺模態(tài)，就更不能將整個語篇置于該框架下進(jìn)行解讀，因?yàn)樵谠摽蚣苤懈菊也坏铰犛X模態(tài)的“容身之地”。總之，應(yīng)該“依次分析，對號入座”。為了清晰可見，我們將上述分析以表1顯示如下：

表1　模態(tài)與分析方法對應(yīng)圖（√表示妥當(dāng)；○表示不妥當(dāng)）

通過表1，我們可以清晰地看到涉及不同模態(tài)或符號系統(tǒng)的語篇究竟用哪些理論或理論組合方式分析才是妥當(dāng)?shù)?。而縱觀近年來一些學(xué)者的相關(guān)文章，我們發(fā)現(xiàn)其中那些不妥的處理方式也均源自這兩個問題。例如研究視覺詩的王紅陽（2007），閆丹（2009），分析漫畫的魏曉茹（2009），分析圖畫的陳美足（2009）、李美霞、宋二春（2010）；分析廣告的艾小艷、嚴(yán)霞（2009）、孔亞楠（2009），分析音樂視頻的張平麗（2009）等等?，F(xiàn)將這些學(xué)者的相關(guān)文章以表1方式展示如下：

通過表1和表2，我們可以看到雖然艾小艷、嚴(yán)霞（2009）選用的分析方法和模態(tài)相一致，但是分析過于簡單，而且也沒有將顏色符號系統(tǒng)單獨(dú)列出討論；李美霞、宋二春（2010）的分析是妥當(dāng)?shù)?，因?yàn)樗嬍呛诎椎?，不牽涉其他顏色，因此主要就是靠筆墨的深淺來說明顯著度。而其他文章均或多或少存在上述兩個問題。

本文通過回顧之前學(xué)者的相關(guān)文章，發(fā)現(xiàn)視覺語篇分析框架雖具有獨(dú)特的優(yōu)越性，為多模態(tài)語篇分析

表2　與表1　中的對應(yīng)情況

開辟了道路，但將其用分析多模態(tài)語篇時(shí)仍存在兩個問題，唯有通過“依次分析，對號入座”的方式，分別從圖像、語言、聲音和顏色四個方面對集合多種模態(tài)和符號系統(tǒng)的語篇進(jìn)行解讀，方能繞過這兩個問題的阻礙。但是這樣的分析方法雖然可以解決問題，卻顯得有些復(fù)雜而凌亂，若能將涉及到的理論知識整合為一，則更能體現(xiàn)語篇整體意義的構(gòu)建。當(dāng)然這需要廣大學(xué)者的共同努力。多模態(tài)語篇分析是一門新興學(xué)科，同時(shí)也是跨學(xué)科的，因此我們需要不斷擴(kuò)充其他領(lǐng)域的理論知識，這樣才能使語篇的分析更具客觀性，更有說服力。

參考文獻(xiàn)：

[1]朱永生.多模態(tài)話語分析的理論基礎(chǔ)與研究方法[J].外語學(xué)刊，2007（5）：82-86.

[2]Kress，G. & van Leeuwen，T. Reading Images: The Grammar of Visual Design [C]. London: Routledge，1996.

[3]胡壯麟.語言學(xué)教程[M].北京大學(xué)出版社，2006.

[4]胡壯麟，朱永生，張德祿，李戰(zhàn)子.系統(tǒng)功能語言學(xué)概論[M].北京大學(xué)出版社，2005.

[5]朱永生.話語分析50年回顧與展望[J].外國語，2003（03）：43-50.

編輯朱榮華

作者簡介：程錦（1986-），女，河南洛陽人，洛陽師范學(xué)院外國語學(xué)院，碩士，研究方向?yàn)橛⒄Z教育、外國語言學(xué)及應(yīng)用語言學(xué)。

收稿日期：2015-03-06

文章編號：2095-8528（2015）04-075-03

文獻(xiàn)標(biāo)識碼：A

中圖分類號：H0-0