葉起昌　趙　新

(北京交通大學(xué),北京,100044)

論多模式話語(yǔ)分析中視覺(jué)素養(yǎng)的重要性

葉起昌趙新

(北京交通大學(xué),北京,100044)

摘要:從超鏈接文本作為網(wǎng)絡(luò)話語(yǔ)的范式、視覺(jué)素養(yǎng)的變革、視覺(jué)交流在多模式話語(yǔ)中的應(yīng)用以及圖像的主導(dǎo)地位等方面,本文強(qiáng)調(diào)視覺(jué)素養(yǎng)的重要性,并指出“以圖做事”應(yīng)理解為圖像統(tǒng)治屏幕的事實(shí)和用圖做事的能力。同時(shí),本文還指出,繼續(xù)學(xué)習(xí)能力是定義素養(yǎng)必須包含的主要內(nèi)容。

關(guān)鍵詞:多模式話語(yǔ),視覺(jué)素養(yǎng),超鏈接文本,圖像

[中圖分類號(hào)]H03

[文獻(xiàn)標(biāo)識(shí)碼]A

[文章編號(hào)]1674-8921-(2015)11-0036-04

[doi編碼] 10.3969/j.issn.1674-8921.2015.11.008

作者簡(jiǎn)介:葉起昌,北京交通大學(xué)語(yǔ)言與傳播學(xué)院教授。主要研究方向?yàn)樵捳Z(yǔ)分析。電子郵箱:yqcguist@163.com

1. 前言

在社會(huì)符號(hào)學(xué)產(chǎn)生之前,就有過(guò)三個(gè)符號(hào)學(xué)流派將語(yǔ)言學(xué)應(yīng)用于交流的非語(yǔ)言模式研究。第一是20世紀(jì)三四十年代的布拉格學(xué)派,該學(xué)派為分析視覺(jué)語(yǔ)篇留下了十分有用的觀念,如“前景”(foregrounding)、指稱與詩(shī)學(xué)功能(referential and poetic functions)等。第二是六七十年代的巴黎學(xué)派,這個(gè)流派主要將索緒爾的語(yǔ)言學(xué)理論應(yīng)用于視覺(jué)分析,其中最得力的實(shí)踐者與推廣者之一是Roman Barthes。第三學(xué)派源自兩個(gè)分支:70年代的批評(píng)語(yǔ)言學(xué)與80年代后期的澳大利亞學(xué)者以符號(hào)學(xué)為基礎(chǔ)研究文學(xué)、視覺(jué)符號(hào)學(xué)和音樂(lè)研究。這兩個(gè)分支均受益于韓禮德的系統(tǒng)功能語(yǔ)言學(xué)。

當(dāng)代網(wǎng)絡(luò)的發(fā)展將視覺(jué)素養(yǎng)推到了語(yǔ)篇理解與分析的前沿。網(wǎng)絡(luò)語(yǔ)篇以超鏈接文本為范式(paradigm)。超鏈接文本是信息和知識(shí)時(shí)代的統(tǒng)一語(yǔ)碼,是互聯(lián)網(wǎng)用以存貯、傳遞、提取、顯示與讀寫數(shù)據(jù)庫(kù)、智庫(kù)和各種文檔等的最主要途徑,還是文字、圖像、聲音、音樂(lè)、手勢(shì)、視頻等符號(hào)體系交互與產(chǎn)生意義的普遍場(chǎng)所。

2. 視覺(jué)素養(yǎng)的變革

視覺(jué)素養(yǎng)(visual literacy)并不是新事物,而是比文字要早得多的人之素養(yǎng)。圖像的應(yīng)用歷史悠久,古人就曾以圖像進(jìn)行交流。視覺(jué)交流的歷史可追溯到三萬(wàn)年前的洞穴壁畫,而對(duì)壁畫的描述則僅有二千五百多年的歷史,視覺(jué)素養(yǎng)作為術(shù)語(yǔ)則僅有四十多年的歷史。從語(yǔ)言教學(xué)角度重視“視覺(jué)素養(yǎng)”的培養(yǎng)始于1965~1966年(Fransecky & Debes 1972:20)。隨后,教育傳播與技術(shù)協(xié)會(huì)(The Association for Educational Communications and Technology,簡(jiǎn)稱AECT)1968年的休斯頓年會(huì)上,出現(xiàn)了第一批標(biāo)示著“視覺(jué)素養(yǎng)”這個(gè)名稱的論文。AECT這個(gè)名稱的正式確認(rèn)是在1969年3月在紐約的羅切斯特舉辦的第一屆美國(guó)國(guó)家視覺(jué)素養(yǎng)年會(huì)上。這之后,AECT每年舉辦一次年會(huì)。根據(jù)上世紀(jì)七八十年代談?wù)撘曈X(jué)交流的資料顯示,人們對(duì)視覺(jué)讀寫的認(rèn)識(shí)與重視還處在萌芽狀態(tài),因?yàn)楫?dāng)時(shí)人們接觸到的視覺(jué)媒介僅是電視機(jī)。下面是早期對(duì)視覺(jué)素養(yǎng)的定義。

趙新,北京交通大學(xué)語(yǔ)言與傳播學(xué)院副教授。主要研究方向?yàn)橛⒄Z(yǔ)語(yǔ)言文學(xué)。電子郵箱:xzhao@bjtu.edu.cn

*本文為北京市哲學(xué)社會(huì)科學(xué)規(guī)劃項(xiàng)目(編號(hào)13ZXB004)成果之一。

美國(guó)國(guó)家視覺(jué)素養(yǎng)大會(huì)成員達(dá)成下述定義:“視覺(jué)素養(yǎng)指一個(gè)人通過(guò)觀察產(chǎn)生其他感覺(jué),并將觀察與其他感覺(jué)經(jīng)驗(yàn)整合起來(lái)的一類視覺(jué)能力。這些能力的發(fā)展構(gòu)成正常人的學(xué)習(xí)基礎(chǔ)。當(dāng)這些能力得到發(fā)展,有視覺(jué)素養(yǎng)的人就可區(qū)分和解釋自己在周邊環(huán)境中看到的行為、事物,以及自然和人造符號(hào)。通過(guò)創(chuàng)造性地應(yīng)用這些能力,他就可以與別人交流。通過(guò)鑒賞性地應(yīng)用這些能力,他就可以理解與欣賞大師的視覺(jué)交流作品”(Fransecky & Debes 1972:7)。看來(lái),當(dāng)時(shí)專家們?cè)诙x視覺(jué)素養(yǎng)時(shí)頗費(fèi)周折,這種定義不僅讀起來(lái)佶屈聱牙,而且依據(jù)上述定義,視覺(jué)素養(yǎng)的最終目的是欣賞大師作品。

1976年,Lida Cochran邀請(qǐng)參加媒體峰會(huì)的代表就“視覺(jué)素養(yǎng)”進(jìn)行定義(Pettersson 2009:38)。在提交的62個(gè)定義中,界定形容詞“視覺(jué)”一詞有52個(gè)不同的短語(yǔ),從“素養(yǎng)”一詞中產(chǎn)生出3個(gè)主要含義:作為一類能力、作為教學(xué)法與教學(xué)過(guò)程以及作為一場(chǎng)運(yùn)動(dòng)。所有的代表都同意,視覺(jué)素養(yǎng)指三大不同的范疇:人之能力、教學(xué)策略和提升觀念?？傮w上,60至70年代的視覺(jué)素養(yǎng)教育是作為語(yǔ)言學(xué)習(xí)的輔助教學(xué)手段。

當(dāng)代的“素養(yǎng)”是個(gè)含義極廣的術(shù)語(yǔ):“‘素養(yǎng)’是組群,每一組由相互依存的社會(huì)實(shí)踐構(gòu)成,這些社會(huì)實(shí)踐將人、媒介客體和意義生產(chǎn)的策略相聯(lián)系。每一組都是某種文化必備的部分,或是這種文化的次文化。每一組承擔(dān)著維護(hù)和變革社會(huì)的角色,因?yàn)樗仞B(yǎng)為意義與做事之間提供根本的聯(lián)系。素養(yǎng)自身就是技術(shù),它們又為應(yīng)用更大范圍的技術(shù)提供秘訣。它們也為自我和社會(huì)之間建立主要通道:是我們作用、參與和被塑造的更大范圍的‘生態(tài)社會(huì)’系統(tǒng)和網(wǎng)絡(luò)的手段。素養(yǎng)在這個(gè)更大范圍的自組織體系的動(dòng)態(tài)中得到變革,人之感知、身份和可能性也隨之得到轉(zhuǎn)變”(Lemke 1998:283)。這段引言對(duì)理解什么是素養(yǎng)以及它與技術(shù)的關(guān)系具有啟發(fā)意義,但在實(shí)際研究中這種定義卻很難派上用場(chǎng)。

Pettersson(2002:68)列出了17種“素養(yǎng)”,這足以說(shuō)明其復(fù)雜性:計(jì)算機(jī)素養(yǎng)(computer literacy)、文化素養(yǎng)(cultural literacy)、圖表素養(yǎng)(diagrammatic literacy)、文獻(xiàn)素養(yǎng)(document literacy)、經(jīng)濟(jì)素養(yǎng)(economic literacy)、環(huán)境素養(yǎng)(environmental literacy)、電影素養(yǎng)(film literacy)、信息素養(yǎng)(information literacy)、數(shù)學(xué)素養(yǎng)(mathematical literacy)、媒介素養(yǎng)(media literacy)、音樂(lè)素養(yǎng)(music literacy)、政治素養(yǎng)(political literacy)、科學(xué)素養(yǎng)(scientific literacy)、技術(shù)素養(yǎng)(technical literacy)、電視素養(yǎng)(television literacy)、錄像素養(yǎng)(video literacy)和視覺(jué)素養(yǎng)。

上述各種“素養(yǎng)”實(shí)際上就是各個(gè)行業(yè)要求的基本素質(zhì),不同的行業(yè)還有各自不同的要求。當(dāng)然,也存在要求不明確的地方,如計(jì)算機(jī)素養(yǎng)是指需要程序設(shè)計(jì)員的素質(zhì)還是一般的電腦使用者?如此多的“素養(yǎng)”,一個(gè)人在某方面是“文盲”也就在所難免。

Erstad(1998)主張,我們必須放棄將“素養(yǎng)”定義為一整套無(wú)實(shí)體的“技巧”,而素養(yǎng)總是不可避免地處在特定的實(shí)踐與社會(huì)語(yǔ)境中。信息素養(yǎng)則是能為所有人增強(qiáng)能力的素養(yǎng)。我們不否定,獲取信息在這個(gè)時(shí)代具有與讀懂多模式話語(yǔ)同等的重要性,但獲取信息不等于理解語(yǔ)篇,多模式話語(yǔ)的理解與分析僅僅依賴信息的獲取是不夠的。

3. 視覺(jué)交流在多模式話語(yǔ)分析中的應(yīng)用

下面這張圖片(參見(jiàn)van Leeuwen 2004:8;White 2010:373)是談?wù)撘曈X(jué)交流經(jīng)常援引的例子。這是英軍在第一次世界大戰(zhàn)期間的征兵布告,有四個(gè)語(yǔ)言特征組合在一起構(gòu)成命令,實(shí)現(xiàn)了一個(gè)言語(yǔ)行為:直呼(YOU,大寫,字體粗大);公告;詞匯化為動(dòng)詞的要求(“need”需要);施事者的需要在這里變?yōu)橐环N可直接向被呼者索取的權(quán)力(基于愛(ài)國(guó)主義之上的一種道德權(quán)力)。然而,這則公告還實(shí)現(xiàn)了一個(gè)圖像行為,也是通過(guò)幾個(gè)特征相結(jié)合而成:手指指向讀者與嚴(yán)肅的面部表情實(shí)現(xiàn)了視覺(jué)指令,其他特征(如表情的霸氣本質(zhì)、軍裝和軍國(guó)主義式的八字胡,這兩者代表官方權(quán)威)則增強(qiáng)了視覺(jué)命令的直接性和權(quán)威性。

圖1　英軍在第一次世界大戰(zhàn)期間的征兵布告

但問(wèn)題是:圖中是一個(gè)還是兩個(gè)行為?是相同的命令被表達(dá)了兩次?一次是用視覺(jué)的直接方式表達(dá),另一次用言語(yǔ)的間接方式表達(dá)?還是這兩者相結(jié)合完成了一個(gè)單一的多模式的交流行為?社會(huì)符號(hào)學(xué)指出,這是一個(gè)單一的多模式交流行為。圖1中各元素的具體分析見(jiàn)圖2。

圖2　圖1的各元素分解

上述分析說(shuō)明,話語(yǔ)分析不能忽視多模式,單一模式的分析通常顧此失彼;同樣,多模式話語(yǔ)分析應(yīng)以視覺(jué)素養(yǎng)為基礎(chǔ),因?yàn)楫?dāng)代話語(yǔ)最重要的兩個(gè)模式就是文字和圖像,而文字在屏幕之中首先應(yīng)當(dāng)服從圖像規(guī)則。

對(duì)此,van Leeuwen(2004:8-18)提出了語(yǔ)言學(xué)家應(yīng)該重視視覺(jué)交流的十大理由。

(1) 言語(yǔ)行為不僅必須重新命名為交流行為,而且必須理解為是所有應(yīng)用于此行為的各種符號(hào)相組合所決定的交流意圖的微觀事件。

(2) 言語(yǔ)與書寫體裁事實(shí)上都是多模式的,言語(yǔ)體裁由語(yǔ)言與行為組合成整體,而書面體裁則由語(yǔ)言、圖像和插圖組合成整體。應(yīng)將言語(yǔ)體裁改為行為體裁,書面體裁改為題寫體裁,行為體裁與題寫體裁還可以有多種可能的組合方式。

(3) 界定為不同階段的行為體裁的交流行為可以包含或不包含言語(yǔ);同樣,界定為不同階段的題寫體裁可以包含或不包含書寫。

(4) 行為與題寫體裁之成份或階段之間的界線通常由視覺(jué)標(biāo)示。

(5) 甚至在單一“命題”內(nèi),視覺(jué)與言語(yǔ)可整合成一個(gè)單一的組合單位。

(6) 印刷字體與手寫不再只是語(yǔ)言意義的表達(dá)手段,它們自身就是符號(hào)模式。

(7) 批評(píng)話語(yǔ)分析不僅要描述話語(yǔ)的語(yǔ)言方面,也需描述非言語(yǔ)方面,要描述話語(yǔ)、圖像、語(yǔ)篇的各個(gè)層次,因?yàn)樗鼈兺ǔ１磉_(dá)富有差別甚至是對(duì)立的意義。

(8) 在研究語(yǔ)法與語(yǔ)篇中發(fā)展起來(lái)的許多概念并不只適用于語(yǔ)言。

(9) 將語(yǔ)言作為資源的結(jié)構(gòu)描述等概念和談話的“基礎(chǔ)”(footing)概念①均可用于多模式研究。

本研究結(jié)果表明，Danu具有較好的體外抗HCC效果，為下一步進(jìn)行體內(nèi)實(shí)驗(yàn)奠定了基礎(chǔ)。Danu引起的自噬起到了保護(hù)細(xì)胞的作用，提示聯(lián)合使用自噬抑制劑能夠增強(qiáng)AURK抑制劑的抗HCC效果。此外，Danu聯(lián)合索拉菲尼等現(xiàn)有的靶向藥物從而增強(qiáng)抗HCC效果可能是日后的研究方向。

(10) 研究視覺(jué)交流的學(xué)者也應(yīng)關(guān)注語(yǔ)言學(xué),因?yàn)檎Z(yǔ)言學(xué)的許多概念和語(yǔ)法可直接應(yīng)用于視覺(jué)交流研究,且生產(chǎn)性能強(qiáng)。

我們贊同van Leeuwen(2004)的第1和第2個(gè)理由。在當(dāng)今這個(gè)信息時(shí)代,從多種符號(hào)模式視角來(lái)重新審視言語(yǔ)行為的貢獻(xiàn)是必要的,甚至在不否定語(yǔ)言還是日常生活最重要的交流方式的前提下,“以言做事”已為“以圖做事”所替代。

上述第2個(gè)理由在漢文化中更為顯著。一方面,中國(guó)傳統(tǒng)語(yǔ)言學(xué)僅有兩個(gè)層面:一個(gè)是文字和訓(xùn)詁,一個(gè)是音韻,沒(méi)有西方語(yǔ)言學(xué)中的“語(yǔ)法”體系。語(yǔ)言學(xué)家韓禮德深受中國(guó)傳統(tǒng)文化熏陶,對(duì)此有深刻的認(rèn)識(shí)(Kress,Hasan & Martin 1992)。另一方面,漢語(yǔ)更多的是視覺(jué),從象形文字起源到書法藝術(shù),它本身就是圖像,書畫同源。在Mitchell(2007:11-13)看來(lái),漢字與其說(shuō)是文字不如說(shuō)是圖畫。要用漢語(yǔ)進(jìn)行閱讀與寫作,首先要“識(shí)”字,就是辨識(shí)和記住兩千多個(gè)常用漢字。

4.圖像占據(jù)交流的主導(dǎo)地位

探討讀寫(或“素養(yǎng)”)很難與廣泛的社會(huì)、經(jīng)濟(jì)和技術(shù)等因素分離開來(lái)。有兩個(gè)相互區(qū)別但又相互關(guān)聯(lián)的因素特別值得關(guān)注。一方面,就是大范圍的長(zhǎng)達(dá)幾個(gè)世紀(jì)的書面語(yǔ)(writing)統(tǒng)治轉(zhuǎn)向了圖像(image)統(tǒng)治;另一方面,紙質(zhì)媒介統(tǒng)治走向屏幕媒介統(tǒng)治。這兩個(gè)因素使得表征和交流的相關(guān)手段正經(jīng)歷著一次革命。在此語(yǔ)境下,社會(huì)符號(hào)學(xué)強(qiáng)調(diào)多模式話語(yǔ)分析的首要條件是超越語(yǔ)言,重視多種符號(hào)體系。“我們不能將語(yǔ)言看作是唯一的表征與交流手段,其他模式(即多種符號(hào)化模式)也同時(shí)存在,甚至在許多情況下,即使出現(xiàn)了書面語(yǔ),其他模式或許更突出,更富有意義。結(jié)果就是,語(yǔ)言學(xué)理論并不能完全解釋什么是讀寫,讀寫都做了什么;僅僅通過(guò)語(yǔ)言是無(wú)法理解多模式構(gòu)建的迅息,語(yǔ)言與讀寫只是意義的部分載體”(Kress 2003:35)。

圖3按照Bateman等(2002)以及Bateman(2008)的“體裁與多模式方法”(Genre and Multimodality Model),用高斯模糊處理原圖,目的是為了清楚辨識(shí)與標(biāo)注網(wǎng)頁(yè)的不同模塊,建構(gòu)多模式語(yǔ)料庫(kù)。

圖3　人民網(wǎng)英文網(wǎng)頁(yè)②

在255個(gè)劃分出的單位中,文字單位占151個(gè),圖像占104個(gè)。圖像在總比中接近41%。當(dāng)然這只是個(gè)別網(wǎng)頁(yè),而且是首頁(yè),理所當(dāng)然圖像要多些,所以還不足以說(shuō)明問(wèn)題,更何況現(xiàn)在上圖與錄入文字在技術(shù)上幾乎都是同樣簡(jiǎn)單的事。

盡管這種統(tǒng)計(jì)文字與圖像的比例數(shù)字在表層上有一定的說(shuō)服力,但是,“以圖做事”并不由此來(lái)決定,而應(yīng)理解為文字語(yǔ)篇必須服從圖像的邏輯方能在屏幕上顯示的事實(shí)。如現(xiàn)在的文字處理就是一個(gè)典型的例子,不管是以Word還是WPS格式處理文字,首先這些文字是以圖像的方式顯示的。即以空間分布為特征的數(shù)字語(yǔ)篇代替了以時(shí)間先后為序的口頭語(yǔ)篇和以線性排列為序的印刷語(yǔ)篇?！耙詧D做事”同時(shí)還指能以圖做事,就是視覺(jué)素養(yǎng)。

1900年在倫敦舉辦的第一屆泛非大會(huì)(The First Pan-African Conference)的閉幕式上,Du Bois作了題為《向全世界各民族的演說(shuō)》的演說(shuō)，其中有句名言:二十世紀(jì)的問(wèn)題是顏色線條的問(wèn)題(Du Bois 1970:125)。這里的“顏色”與“線條”是與種族身份相關(guān)的。Mitchell(1994:2)巧妙地引用此名言并指出:當(dāng)我們進(jìn)入一個(gè)“顏色”與“線條”(作為身份標(biāo)記)成為廣泛的仿真與大眾媒介技術(shù)可操縱的成分的時(shí)代,話語(yǔ)發(fā)生了“圖像轉(zhuǎn)向”,我們發(fā)現(xiàn)21世紀(jì)的問(wèn)題是圖像問(wèn)題。

5. 結(jié)語(yǔ)

從社會(huì)符號(hào)學(xué)的角度來(lái)看,我們要注意的是,“信息”一詞的動(dòng)詞是“inform”(意為:通知、知會(huì)),它所預(yù)設(shè)的交流模式是單向的(unidirectional),而非雙向,在這個(gè)意義上,信息僅僅只是人或機(jī)器接收到的數(shù)據(jù)。這種“中性”意義上的信息不足以說(shuō)明信息和意義是如何塑造并最終決定人們交流事件的本質(zhì)。因此,光有“信息”的獲取與量化分析是不夠的,社會(huì)符號(hào)學(xué)更重視的是“信息”之外的東西。

我們也贊同van Leeuwen前述的第8與第10個(gè)理由,語(yǔ)言學(xué)的許多概念當(dāng)然可以應(yīng)用于視覺(jué)分析,但僅憑語(yǔ)言學(xué)知識(shí)來(lái)推斷其他符號(hào)模式的應(yīng)用及其意義的多模式分析是片面和不完整的。多模式是一個(gè)寬廣的領(lǐng)域,在這個(gè)領(lǐng)域中,幾乎人文學(xué)科的所有知識(shí)都有發(fā)揮的余地。從事多模式研究的學(xué)者除自身專業(yè)知識(shí)之外還應(yīng)當(dāng)掌握至少一種其他模式的充足知識(shí),如運(yùn)用攝影(像)知識(shí)來(lái)解構(gòu)和闡釋圖像,這一點(diǎn)至關(guān)重要,而不是單純依靠某種語(yǔ)言學(xué)理論做間接解釋(Forceville 2007:1237)。

數(shù)字時(shí)代對(duì)素養(yǎng)的要求已經(jīng)與過(guò)去完全不同了,它包括下述內(nèi)容:“基礎(chǔ)、科學(xué)、經(jīng)濟(jì)和技術(shù)的素養(yǎng);視覺(jué)與信息素養(yǎng);多文化與全球意識(shí)”(Solomon & Schrum 2007:19)。上述定義中的各項(xiàng)無(wú)疑是重要的,但似乎還有一個(gè)方面未得到應(yīng)有的重視,那就是繼續(xù)學(xué)習(xí)的能力,樹立終身教育的理念。只有這種能力方能使我們擺脫“文盲”的境地。網(wǎng)絡(luò)的發(fā)展與語(yǔ)篇的變革也是依據(jù)人的這種能力,因?yàn)榫W(wǎng)絡(luò)和語(yǔ)篇是人的網(wǎng)絡(luò)和語(yǔ)篇,而不是遠(yuǎn)離塵世的“怪物”。

于是,今天的讀寫(素養(yǎng))應(yīng)涵蓋:習(xí)得新技巧,包含應(yīng)用技術(shù)、理解科學(xué)、擁有全球意識(shí),而最重要的是,擁有繼續(xù)學(xué)習(xí)的能力。同時(shí),我們還需要共同關(guān)注:讀寫的未來(lái)會(huì)怎樣?這種變革給社會(huì)和文化帶來(lái)什么效應(yīng)?

附注

① 此處原文有注釋:“footing源自Goffman(1981)”。

② 圖3由北京交通大學(xué)英語(yǔ)語(yǔ)言與文學(xué)專業(yè)2013級(jí)碩士研究生王雪同學(xué)所標(biāo)記,特致謝意。

參考文獻(xiàn)

Bateman, J., J. Delin & R. Henschel. 2002. A brief introduction to the GeM annotation schema for complex document layout [R/OL].Paperpresentedatthe2ndWorkshoponNLPandXML(NLPXML-2002)Taipei. [2015-06-21]. http:∥www.purl.org/net/gem.

Bateman, J. 2008.MultimodalityandGenre:AFoundationfortheSystematicAnalysisofMultimodalDocuments[M]. Basingstoke/New York: Palgrave Macmillan.

Du Bois, W.E.B. 1970.W.E.B.DuBoisSpeaks:SpeechesandAddresses1890-1919 (S. F. Philip ed.) [C]. New York: Pathfinder Press.

Erstad, O. 1998. Media literacy among young people: Integrating culture, communication and cognition [A]. In B. H?ijer & A. Werner (eds.).CulturalCognition:NewPerspectivesinAudienceTheory[C]. NORDICOM: G?teborg.85-101.

Forceville, C. 2007. Book review: Multimodal transcription and text analysis: A multimedia toolkit and course book [J].JournalofPragmatics39(6): 1235-38.

Fransecky, R. B. & J. L. Debes. 1972.VisualLiteracy:AWaytoLearn-AWaytoTeach[M]. Washington: Association for Educational Communications and Technology.

Goffman, E. 1981.FormsofTalk[M]. Philadelphia: University of Pensylvania Press.

Kress, G., R. Hasan & J. Martin.1992. An interview with M. A. K. Halliday [J].SocialSemiotics2(1): 176-96.

Kress, G. 2003.LiteracyintheNewMediaAge[M]. London/New York: Routledge.

Lemke, J. L. 1998. Metamedia literacy: Transforming meanings and media [A]. In D. Reinking,etal. (eds.).HandbookofLiteracyandTechnology:TransformationsinaPost-TypographicWorld[C]. Mahwah/London: Lawrence Erlbaum. 283-301.

Mitchell, W. J. T. 1994.PictureTheory:EssaysonVerbalandVisualRepresentation[M]. Chicago/London: The University of Chicago Press.

Mitchell, W. J. 2007. Visual literacy or literary visualcy? [A]. In J. Elkins (ed.).VisualLiteracy[C]. London/New York: Routledge. 11-30.

Pettersson, R.2002.InformationDesign:AnIntroduction[M]. Amsterdam/Philadelphia: John Benjamins.

Pettersson, R. 2009. Visual literacy and message design [J].TechTrends53(2): 38-40.

Solomon, G. & L. Schrum. 2007. Web 2.0:NewTools,NewSchools[M]. Eugene, OR./Washington, DC.: International Society for Technology in Education.

van Leeuwen, T. 2004. Ten reasons why linguists should pay attention to visual communication [A]. In Philip LeVine & Ron Scollon (eds.).DiscourseandTechnology:MultimodalDiscourseAnalysis[C]. Washington: Georgetown University Press. 7-19.

White, P. 2010. Grabbing attention: The importance of modal density in advertising [J].VisualCommunication9(4): 371-97.

(責(zé)任編輯甄鳳超)