陳風(fēng)華 弗朗西斯科·維勒索
摘要:運(yùn)用國(guó)際公認(rèn)的權(quán)威可視化解析工具CiteSpace,對(duì)國(guó)內(nèi)核心期刊(CSSCI和全國(guó)中文核心)與國(guó)際核心期刊(SSCI和A&HCI;)刊發(fā)的歷年多模態(tài)話語(yǔ)研究文獻(xiàn)作知識(shí)圖譜演化分析。研究認(rèn)為:首先,國(guó)內(nèi)和國(guó)際學(xué)界的多模態(tài)話語(yǔ)研究的領(lǐng)軍人物均為高校學(xué)者;其次,國(guó)內(nèi)學(xué)界在過(guò)去的10余年里不斷重視建構(gòu)適合中國(guó)國(guó)情的多模態(tài)話語(yǔ)理論框架,但是團(tuán)隊(duì)合作的研究現(xiàn)象較為匱乏;再次,國(guó)際學(xué)界在過(guò)去20多年里的多模態(tài)話語(yǔ)研究覆蓋更為廣泛的學(xué)科領(lǐng)域,取得的豐富研究經(jīng)驗(yàn)和精湛研究水平值得國(guó)內(nèi)學(xué)界參考,國(guó)內(nèi)學(xué)界需要在理論探索、學(xué)科合作以及內(nèi)涵構(gòu)成等方面加強(qiáng)對(duì)多模態(tài)話語(yǔ)的研究;最后,國(guó)內(nèi)和國(guó)際學(xué)界需要共同努力深化多模態(tài)話語(yǔ)研究的理論探索。
關(guān)鍵詞:多模態(tài)話語(yǔ);國(guó)內(nèi)核心期刊;國(guó)際核心期刊;CiteSpace;知識(shí)圖譜;可視化分析
作者簡(jiǎn)介:陳風(fēng)華,香港理工大學(xué)人文學(xué)院博士研究生,主要研究方向:多模態(tài)符號(hào)學(xué)及多模態(tài)話語(yǔ)分析。[巴西]弗朗西斯科·維勒索(Francisco Veloso),香港理工大學(xué)人文學(xué)院助理教授,博士生導(dǎo)師,主要研究方向:多模態(tài)符號(hào)學(xué)及多模態(tài)話語(yǔ)分析(中國(guó)香港 999077)。
基金項(xiàng)目:華僑大學(xué)中央高?;究蒲袠I(yè)務(wù)費(fèi)資助項(xiàng)目(14SKGC-QG05);福建省社會(huì)科學(xué)規(guī)劃項(xiàng)目“代際視野下海外華人學(xué)者的新詩(shī)批評(píng)研究”(FJ2016C186)
中圖分類(lèi)號(hào):H0-06 文獻(xiàn)標(biāo)識(shí)碼:A 文章編號(hào):1006-1398(2017)06-0154-13
一 引言
“多模態(tài)話語(yǔ)”概念首次由Kress & van LeeuwenKress.G,van Leeuwen.T.Reading Images:the Grammar of Visual Design.London & New York: Routledge, 1996. 提出。多模態(tài)話語(yǔ)包括語(yǔ)言、圖像、聲音、顏色和音樂(lè)等在內(nèi),運(yùn)用聽(tīng)覺(jué)、視覺(jué)、觸覺(jué)等多種感覺(jué)進(jìn)行交際的多元渠道和媒介,語(yǔ)言和其它符號(hào)資源在其中共同存在,一起建構(gòu)意義Kress.G,van Leeuwen.T.Multimodal Discourse:The Modes and Media of Contemporary Communication.London:Arnold,2001.朱永生:《多模態(tài)話語(yǔ)分析的理論基礎(chǔ)與研究方法》,《外語(yǔ)學(xué)刊》2007年第5期,第83頁(yè)。辛志英:《話語(yǔ)分析的新發(fā)展——多模態(tài)話語(yǔ)分析》,《社會(huì)科學(xué)輯刊》2008年第5期,第208頁(yè)。張德祿:《多模態(tài)話語(yǔ)分析綜合理論框架探索》,《中國(guó)外語(yǔ)》2009年第1期,第24頁(yè)。。多模態(tài)話語(yǔ)研究發(fā)軔于20世紀(jì)90年代的國(guó)際學(xué)界,該領(lǐng)域通過(guò)使用圖像、聲音、視頻等多元意義體現(xiàn)(Meaning-making)元素,彌補(bǔ)了傳統(tǒng)研究窠臼于語(yǔ)言單一類(lèi)型的缺陷。對(duì)非語(yǔ)言資源的關(guān)注使得話語(yǔ)研究更加充分和全面Van Leeuwen.T.& Kress,G.Discourse Semiotics.In van Dijk,T.A.Discourse Studies:A Multidisciplinary Introduction.London:Sage,2011,pp.108.。多模態(tài)話語(yǔ)研究已成為話語(yǔ)分析的一個(gè)重要研究領(lǐng)域代樹(shù)蘭:《多模態(tài)話語(yǔ)研究的緣起與進(jìn)展》,《外語(yǔ)學(xué)刊》2013年第2期,第17頁(yè)。。
20多年以來(lái),在國(guó)內(nèi)外學(xué)者的共同努力下,多模態(tài)話語(yǔ)研究取得了有目共睹的進(jìn)步和蔚然大觀的成績(jī),然而也存在一些值得關(guān)注的不足和亟待解決的問(wèn)題?;诖?,對(duì)過(guò)去及當(dāng)下學(xué)界在多模態(tài)話語(yǔ)研究取得的成就進(jìn)行總結(jié)和存在的問(wèn)題展開(kāi)反思很有必要。本研究旨在通過(guò)國(guó)際學(xué)界權(quán)威公認(rèn)的知識(shí)圖譜分析軟件CiteSpace,結(jié)合國(guó)內(nèi)CSSCI/全國(guó)中文核心期刊和國(guó)際SSCI/A&HCI;期刊上發(fā)表的論文探索多模態(tài)話語(yǔ)研究的客觀狀況,期冀為今后學(xué)界對(duì)多模態(tài)話語(yǔ)的深入研究提供一些參考和借鑒。
二 多模態(tài)話語(yǔ)計(jì)量研究回顧
通過(guò)計(jì)量方法能夠揭示語(yǔ)言現(xiàn)象的形成內(nèi)因、語(yǔ)言系統(tǒng)的適應(yīng)機(jī)制和語(yǔ)言演化的本質(zhì)動(dòng)因馮志偉:《〈計(jì)量語(yǔ)言學(xué)導(dǎo)論〉評(píng)介》,《外語(yǔ)電化教學(xué)》2017年第4期,第95頁(yè)。。國(guó)內(nèi)學(xué)者對(duì)多模態(tài)話語(yǔ)綜述展開(kāi)了系列的計(jì)量研究。羅永勝分析15種國(guó)內(nèi)外語(yǔ)類(lèi)CSSCI期刊發(fā)表的多模態(tài)話語(yǔ)研究論文,認(rèn)為就發(fā)展?fàn)顩r而言,刊發(fā)論文的數(shù)量在各期刊分布不均衡,多模態(tài)話語(yǔ)研究在外語(yǔ)界尚未成為主流,該領(lǐng)域呈現(xiàn)“慢速→快速→飛速”的發(fā)展態(tài)勢(shì);就研究方法而言,思辨性研究占主導(dǎo)地位,緊隨其后為描述性研究、評(píng)述性研究和追溯性研究;就研究?jī)?nèi)容而言,應(yīng)用性研究占主要比例,評(píng)介性研究集中于國(guó)際學(xué)者的多模態(tài)話語(yǔ)著作和國(guó)內(nèi)舉行的多模態(tài)話語(yǔ)會(huì)議,探討性研究大多從多模態(tài)話語(yǔ)分析和多模態(tài)隱喻研究視角開(kāi)展;就研究趨勢(shì)而言,國(guó)內(nèi)學(xué)者應(yīng)該建構(gòu)自己的多模態(tài)研究理論體系、加強(qiáng)驗(yàn)證性定量研究及豐富多模態(tài)研究?jī)?nèi)涵羅永勝:《近十年來(lái)中國(guó)多模態(tài)話語(yǔ)及其應(yīng)用研究述評(píng)》,《現(xiàn)代教育技術(shù)》2012年第4期,第62—66頁(yè)。。
國(guó)防對(duì)國(guó)際SSCI期刊近12年(2004—2015)刊登的多模態(tài)話語(yǔ)研究論文關(guān)鍵詞詞頻進(jìn)行文獻(xiàn)計(jì)量統(tǒng)計(jì),發(fā)現(xiàn)多模態(tài)研究領(lǐng)域存在10個(gè)熱點(diǎn)內(nèi)容,依次為言語(yǔ)、手勢(shì)語(yǔ)、視覺(jué)、互動(dòng)、身份、符號(hào)學(xué)、系統(tǒng)功能語(yǔ)法、計(jì)算機(jī)媒介、語(yǔ)境和隱喻,該領(lǐng)域的未來(lái)發(fā)展趨勢(shì)是由描述性的思辨研究轉(zhuǎn)為應(yīng)用性的實(shí)證研究,具體體現(xiàn)為語(yǔ)料庫(kù)、教學(xué)和協(xié)作關(guān)系國(guó)防:《多模態(tài)話語(yǔ)分析研究熱點(diǎn)及趨勢(shì)分析——基于文獻(xiàn)計(jì)量學(xué)方法》,《外語(yǔ)與外語(yǔ)教學(xué)》2016年第3期,第58—64頁(yè)。。程瑞蘭、張德祿考察國(guó)內(nèi)11種外語(yǔ)類(lèi)CSSCI期刊13年(2003—2015)的載文數(shù)據(jù),指出多模態(tài)話語(yǔ)研究成果存在分布不均衡、理論視角呈現(xiàn)多元化、研究類(lèi)型表現(xiàn)多樣化、研究方法定性主導(dǎo)化,該領(lǐng)域存在的問(wèn)題主要是理論發(fā)展不成熟、多學(xué)科適應(yīng)性差和定性研究亟待突破,由此未來(lái)的發(fā)展方向應(yīng)該聚焦于深化語(yǔ)篇多元化視閾分析、增加高科技數(shù)據(jù)軟件應(yīng)用、發(fā)展實(shí)證化研究規(guī)模、拓展個(gè)案與大數(shù)據(jù)分析數(shù)量、歷時(shí)研究與共時(shí)研究有效結(jié)合程瑞蘭、張德祿:《多模態(tài)話語(yǔ)分析在中國(guó)研究的現(xiàn)狀、特點(diǎn)和發(fā)展趨勢(shì)——以期刊成果為例》,《中國(guó)外語(yǔ)》 2017年第3期,第37—43頁(yè)。。潘艷艷、李戰(zhàn)子歸納以國(guó)內(nèi)外語(yǔ)類(lèi)為主的CSSCI期刊近15年(2003—2017)的文獻(xiàn),發(fā)現(xiàn)國(guó)內(nèi)多模態(tài)話語(yǔ)研究緊跟國(guó)際研究的步伐,主要體現(xiàn)在四個(gè)路徑:以系統(tǒng)功能語(yǔ)言學(xué)和社會(huì)符號(hào)學(xué)為理論基礎(chǔ)的多模態(tài)話語(yǔ)分析、多模態(tài)隱喻分析、多模態(tài)語(yǔ)料庫(kù)分析和多模態(tài)互動(dòng)分析,多模態(tài)話語(yǔ)研究的未來(lái)發(fā)展應(yīng)該融合視角和創(chuàng)新理論、擴(kuò)展領(lǐng)域及拓寬視野、探索其它可行路徑。潘艷艷、李戰(zhàn)子:《國(guó)內(nèi)多模態(tài)話語(yǔ)分析綜論(2003—2017)—以CSSCI來(lái)源期刊發(fā)表成果為考察對(duì)象》,《福建師范大學(xué)學(xué)報(bào)(哲學(xué)社會(huì)科學(xué)版)》2017年第5期,第54—59頁(yè)。
綜合上述學(xué)者的研究可以發(fā)現(xiàn):首先,對(duì)多模態(tài)話語(yǔ)計(jì)量研究的學(xué)者主要是國(guó)內(nèi)學(xué)者,國(guó)際學(xué)者尚不多見(jiàn),這表明中國(guó)學(xué)界比海外學(xué)界更注重縱向性的宏觀研究;其次,對(duì)CSSCI期刊的計(jì)量研究數(shù)量顯著多過(guò)SSCI期刊,這說(shuō)明國(guó)內(nèi)學(xué)界需要更多關(guān)注國(guó)際核心期刊的發(fā)展動(dòng)向;再次,國(guó)內(nèi)和國(guó)際學(xué)界綜合CSSCI期刊和SSCI期刊的系統(tǒng)研究較為少見(jiàn);然后,國(guó)內(nèi)學(xué)界對(duì)CSSCI期刊或SSCI期刊的歷時(shí)研究局限于某一固定的時(shí)間段,缺少對(duì)多模態(tài)話語(yǔ)自誕生伊始到發(fā)展至今全局性的系統(tǒng)研究;最后,目前學(xué)界對(duì)CSSCI和SSCI期刊的數(shù)據(jù)解碼缺乏融客觀性、可視性、科學(xué)性和權(quán)威性于一體的高科技研究工具。鑒于此,本研究通過(guò)使用CiteSpace研究多模態(tài)話語(yǔ)分析能夠在一定程度上彌補(bǔ)該領(lǐng)域研究中存在的一些不足。
三 多模態(tài)話語(yǔ)計(jì)量研究的可視化分析
多模態(tài)話語(yǔ)研究濫觴于OTooleOToole, M.The Language of Displayed Art.London:Leicester University Press,1994.研究展覽藝術(shù)的語(yǔ)言和其后不久Kress & van LeeuwenKress,G.Van Leeuwen.T.Reading Images:the Grammar of Visual Design.London & New York: Routledge,1996.研究視覺(jué)設(shè)計(jì)的語(yǔ)法。1990年以來(lái),多模態(tài)語(yǔ)篇研究逐步成為語(yǔ)言學(xué)和傳播學(xué)的研究熱點(diǎn)之一馮德正、張德祿、Kay OHallora:《多模態(tài)語(yǔ)篇分析的進(jìn)展與前沿》,《當(dāng)代語(yǔ)言學(xué)》2014年第1期,第88頁(yè)。。代樹(shù)蘭歸納多模態(tài)話語(yǔ)研究的緣起與進(jìn)展,認(rèn)為多模態(tài)話語(yǔ)起源于話語(yǔ)的多模態(tài)性,早期的話語(yǔ)研究窠臼于語(yǔ)言單一模態(tài),對(duì)話語(yǔ)多模態(tài)特征的系統(tǒng)研究從20世紀(jì)90年代開(kāi)始興起,涉及的主流學(xué)派有社會(huì)符號(hào)學(xué)、互動(dòng)社會(huì)語(yǔ)言學(xué)和認(rèn)知語(yǔ)言學(xué),多模態(tài)話語(yǔ)研究呈現(xiàn)領(lǐng)域廣泛化和視野開(kāi)闊化的特點(diǎn),主要體現(xiàn)在研究?jī)?nèi)容(多種模態(tài)的融合現(xiàn)象,模態(tài)之間的相互聯(lián)系)、研究對(duì)象(新型媒體,互動(dòng)話語(yǔ))、研究方法(批判性分析,多學(xué)科交叉)和研究領(lǐng)域(多模態(tài)語(yǔ)言教學(xué),多元讀寫(xiě)能力)代樹(shù)蘭:《多模態(tài)話語(yǔ)研究的緣起與進(jìn)展》,《外語(yǔ)學(xué)刊》2013年第2期,第18—22頁(yè)。。陳秀蘭提出多模態(tài)語(yǔ)篇研究的發(fā)展能很好地說(shuō)明,形如手勢(shì)、動(dòng)作和環(huán)境等一切幫助意義建構(gòu)的非語(yǔ)言符號(hào)均可視為非語(yǔ)言特征。陳秀蘭:《語(yǔ)類(lèi)結(jié)構(gòu)潛勢(shì)理論的局限性分析——以公司簡(jiǎn)介為例》,《華僑大學(xué)學(xué)報(bào)(哲學(xué)社會(huì)科學(xué)版)》,2013年第2期,第139—140頁(yè)。
張德祿等指出Kress & van Leeuwen于1996年出版的著作《閱讀圖像——視覺(jué)設(shè)計(jì)語(yǔ)法》(Reading Images: The Grammar of Visual Design)使得多模態(tài)話語(yǔ)研究蓬勃發(fā)展,該領(lǐng)域成為熱門(mén)話題的主要原因是語(yǔ)篇分析理論的發(fā)展、現(xiàn)代科學(xué)技術(shù)的進(jìn)步和現(xiàn)代交際手段的變化張德祿等:《多模態(tài)話語(yǔ)分析理論與外語(yǔ)教學(xué)》,北京:高等教育出版社, 2015年,第1—2頁(yè)。。Jewitt et al.提出多模態(tài)話語(yǔ)研究的領(lǐng)域主要包括系統(tǒng)功能語(yǔ)言學(xué)、社會(huì)符號(hào)學(xué)和話語(yǔ)分析,在這三個(gè)領(lǐng)域基礎(chǔ)上衍生出5個(gè)研究?jī)?nèi)容:地理符號(hào)學(xué)(語(yǔ)言人類(lèi)學(xué),社會(huì)符號(hào)學(xué),位置符號(hào)學(xué))、多模態(tài)互動(dòng)分析(媒介話語(yǔ),社會(huì)互動(dòng),社會(huì)符號(hào)學(xué))、多模態(tài)民族志(資料開(kāi)放,見(jiàn)解定位,研究反思)、多模態(tài)語(yǔ)料庫(kù)分析(線性數(shù)據(jù),非線性數(shù)據(jù))和多模態(tài)感知分析(社會(huì)符號(hào)學(xué)理論,認(rèn)知理論,追蹤和分析眼球運(yùn)動(dòng)的方法)Jewitt,C.Bezemer,J.OHalloran,K.Introducing Multimodality.London & New York:Routledge,2016,pp.6-128.。
(一) 研究問(wèn)題
研究目的是探索以下問(wèn)題的解答:
問(wèn)題1:國(guó)內(nèi)學(xué)界多模態(tài)話語(yǔ)研究呈現(xiàn)出怎樣的特征?
問(wèn)題2:國(guó)際學(xué)界多模態(tài)話語(yǔ)研究展現(xiàn)出怎樣的特征?
問(wèn)題3:國(guó)內(nèi)與國(guó)際學(xué)界的多模態(tài)話語(yǔ)研究給未來(lái)的進(jìn)一步研究帶來(lái)了怎樣的啟迪?
(二) 研究方法
學(xué)術(shù)論文能展示其所在學(xué)科的本質(zhì)及水平Gupta,B.Kumar,S.Citation Analysis of Theoretical Population Genetics Literature.Library Herald,2001(4),pp.208.。研究選取的語(yǔ)料來(lái)自于國(guó)內(nèi)廣泛認(rèn)可的核心期刊CSSCI(中國(guó)社會(huì)科學(xué)引文索引)與全國(guó)中文核心(亦稱為“北大核心”)(下文將此兩種期刊統(tǒng)稱為“國(guó)內(nèi)核心”)以及國(guó)際廣泛認(rèn)可的權(quán)威期刊SSCI(社會(huì)科學(xué)引文索引)與A&HCI;(藝術(shù)人文引文索引)(下文把這兩種期刊統(tǒng)稱為“國(guó)際核心”)刊發(fā)的論文。國(guó)內(nèi)核心數(shù)據(jù)來(lái)源于CNKI中國(guó)知網(wǎng)(http://www.cnki.net)、CSSCI官網(wǎng)(http://CSSCI.nju.edu.cn)和Google scholar官網(wǎng)(http://scholar.google.com),國(guó)際核心數(shù)據(jù)遴選自美國(guó)科學(xué)信息研究所(Institute for scientific information)研發(fā)的Web of Science(WoS)核心合集官網(wǎng)(http://www.webofknowledge.com)。
研究方法及步驟安排如下:首先,按照楊信彰的觀點(diǎn),語(yǔ)篇是話語(yǔ)的實(shí)例,屬于話語(yǔ)的具體體現(xiàn)楊信彰:《話語(yǔ)與語(yǔ)篇的研究:理論和方法》,《中國(guó)外語(yǔ)》2013年第4期,第1頁(yè)。。由此我們?cè)贑NKI官網(wǎng)上分別以“多模態(tài)話語(yǔ)”和“多模態(tài)語(yǔ)篇”為主題詞,“從—年”與“到—年”均選為“不限”,文獻(xiàn)“來(lái)源類(lèi)別”選擇“核心期刊”和“CSSCI”,結(jié)果得到220條國(guó)內(nèi)核心文獻(xiàn);其次,在WoS官網(wǎng)的主題欄依次填寫(xiě)“multimodal discourse”和“multimodal text”,時(shí)間跨度選取“所有年份”,“引文索引”框定“Social Sciences Citation Index(SSCI)——1970年至今”和“Arts & Humanities Citation Index(A&HCI;)——1975年至今”,“語(yǔ)種”和“文獻(xiàn)類(lèi)型”分別選為“English”與“Article”,從而析出877條國(guó)際核心文獻(xiàn);最后,綜合國(guó)內(nèi)與國(guó)際學(xué)者廣泛使用的軟件CiteSpace(5.1R6版本,官網(wǎng)http://cluster.ischool.drexel.edu/~cchen/citespace)對(duì)國(guó)內(nèi)核心和國(guó)際核心文獻(xiàn)進(jìn)行的可視化計(jì)量分析數(shù)據(jù)和CNKI與WoS官網(wǎng)的自動(dòng)統(tǒng)計(jì)數(shù)據(jù)展開(kāi)研究及反思。以上數(shù)據(jù)都經(jīng)過(guò)去重處理,檢索時(shí)間為2017年10月11—12日。
(三)研究發(fā)現(xiàn)
CiteSpace是美國(guó)Drexel university學(xué)者陳超美(英文名:Chaomei Chen)基于java語(yǔ)言開(kāi)發(fā)的計(jì)量分析科技軟件。該款工具的工作原理是對(duì)特定研究領(lǐng)域的文獻(xiàn)進(jìn)行共引分析與尋徑計(jì)算,以期呈現(xiàn)該領(lǐng)域知識(shí)演化的知識(shí)圖譜路徑,包括對(duì)演化動(dòng)力機(jī)制的解析、知識(shí)單元之間的共現(xiàn)和領(lǐng)域發(fā)展前沿的探測(cè)。該軟件用戶分布遍及世界各地,用戶數(shù)量十分龐大李杰、陳超美:《CiteSpace:科技文本挖掘及可視化(第二版)》,北京:首都經(jīng)濟(jì)貿(mào)易大學(xué)出版社, 2017年,第7頁(yè)。。
1.高引文獻(xiàn)與作者
結(jié)合CNKI、CSSCI和Google scholar的官網(wǎng)數(shù)據(jù),我們統(tǒng)計(jì)出在國(guó)內(nèi)核心期刊上被引排名前十位的文獻(xiàn)。根據(jù)表1統(tǒng)計(jì)數(shù)據(jù)可知:其一,從文獻(xiàn)標(biāo)題上看,位居排名前兩條的是關(guān)于理論推介和框架建構(gòu)。其二,從第一作者上看,10名作者均為高校一線教師,其他類(lèi)型的研究人員如行政管理人員和實(shí)驗(yàn)研究人員沒(méi)有出現(xiàn),說(shuō)明國(guó)內(nèi)研究多模態(tài)話語(yǔ)的學(xué)者類(lèi)型相對(duì)固定,也預(yù)示著該領(lǐng)域的研究群體比較狹隘。其三,從期刊和著作類(lèi)型上看,8條文獻(xiàn)來(lái)自國(guó)內(nèi)外語(yǔ)類(lèi)核心期刊,2篇來(lái)出自非外語(yǔ)類(lèi)核心。同時(shí),這些文獻(xiàn)都是以論文形式存在,專著尚未發(fā)現(xiàn),這預(yù)示國(guó)內(nèi)學(xué)界具有廣泛影響力的多模態(tài)話語(yǔ)研究專著比較欠缺。其四,從發(fā)表時(shí)間上看,10條文獻(xiàn)的發(fā)表時(shí)期在2003年—2012年之間,反映出該段時(shí)期國(guó)內(nèi)學(xué)者對(duì)多模態(tài)話語(yǔ)研究的熱衷程度。最后,從被引頻次上看,朱永生、李戰(zhàn)子和張德祿的論文位居前茅,意味著高校語(yǔ)言學(xué)科的博導(dǎo)和教授群體是國(guó)內(nèi)多模態(tài)外語(yǔ)研究的先行者和引路人。
彭宣維指出An Introduction to Functional Grammar是Halliday語(yǔ)言學(xué)思想的集中體現(xiàn),系統(tǒng)功能語(yǔ)言學(xué)是整個(gè)語(yǔ)言學(xué)研究傳統(tǒng)的“集大成者”彭宣維:《An Introduction to Functional Grammar 的“集大成”地位》,《中國(guó)外語(yǔ)》2009年第1期,第109頁(yè)。。這充分說(shuō)明國(guó)際學(xué)者比國(guó)內(nèi)學(xué)者更重視通過(guò)專著而不是論文著書(shū)立說(shuō)、傳道授業(yè),也揭示出多模態(tài)話語(yǔ)與系統(tǒng)功能語(yǔ)法之間的密切聯(lián)系。多模態(tài)話語(yǔ)研究是系統(tǒng)功能語(yǔ)言學(xué)由語(yǔ)言之內(nèi)向語(yǔ)言之外其他符號(hào)系統(tǒng)的延伸張淑杰、張德祿:《系統(tǒng)功能語(yǔ)言學(xué):發(fā)展及應(yīng)用——張德祿教授訪談錄》,《山東外語(yǔ)教學(xué)》2015年第4期,第7頁(yè)。。
第四,就出版時(shí)間而言,10部著作的出版階段是1978—2010年。相比國(guó)內(nèi)學(xué)者而言,國(guó)際學(xué)者從事多模態(tài)話語(yǔ)研究的時(shí)間提前了10余年,表明國(guó)際多模態(tài)研究存在一定的學(xué)術(shù)優(yōu)勢(shì)值得國(guó)內(nèi)學(xué)者學(xué)習(xí)和借鑒。最后,就被引頻率而言,位列前三位的文獻(xiàn)作者均為Kress,彰顯出他在國(guó)際多模態(tài)話語(yǔ)研究領(lǐng)域中杰出的學(xué)術(shù)水準(zhǔn)和公認(rèn)的領(lǐng)軍地位。值得注意的是,國(guó)內(nèi)排名前列10條文獻(xiàn)的被引指數(shù)遙遙領(lǐng)先于國(guó)際前10條文獻(xiàn),大概是因?yàn)閲?guó)內(nèi)領(lǐng)軍學(xué)者的巨大影響力所致,也證明國(guó)內(nèi)學(xué)界在多模態(tài)研究領(lǐng)域取得顯著成就。
2.熱點(diǎn)領(lǐng)域與前沿
在CiteSpace的共現(xiàn)網(wǎng)絡(luò)圖片中,節(jié)點(diǎn)的大小表示論文主題(Term)、關(guān)鍵詞(Keyword)及類(lèi)別(Category)的出現(xiàn)頻次,它們之間的連線表示共現(xiàn)強(qiáng)度。頻次(Frenquency)和中介中心度(Centrality)參數(shù)是關(guān)鍵詞的重要指標(biāo),關(guān)鍵詞頻次與光環(huán)的大小、節(jié)點(diǎn)連線粗厚度與節(jié)點(diǎn)關(guān)系緊密度、中介中心度與圓環(huán)外層年齡的寬度成正比。大節(jié)點(diǎn)、厚光環(huán)的關(guān)鍵詞表示很高的顯著性,其所表征的就是多模態(tài)話語(yǔ)研究的熱門(mén)課題。突現(xiàn)(Bursts)也是橫向網(wǎng)絡(luò)節(jié)點(diǎn)的重要指標(biāo),突現(xiàn)值體現(xiàn)突現(xiàn)的強(qiáng)度。
共詞分析先驅(qū)Law & Whittaker指出,論文被引的關(guān)鍵詞是反映研究主題及研究重點(diǎn)的核心術(shù)語(yǔ)Law,J.Whittaker,J.Mapping Acidification Research:A Test of the Co-word Method.Scientometrics,1992(3),pp.418.。把國(guó)內(nèi)核心期刊的220篇論文導(dǎo)入CiteSpace,得到圖1解析數(shù)據(jù),剔除與多模態(tài)話語(yǔ)研究含義重復(fù)的課題如多模態(tài)、多模態(tài)話語(yǔ)、多模態(tài)話語(yǔ)分析、多模態(tài)話語(yǔ)分析理論,可以看出,從2007年迄今,國(guó)內(nèi)多模態(tài)話語(yǔ)研究排名前10位的引發(fā)關(guān)注的熱點(diǎn)話題依次為話語(yǔ)分析、多模態(tài)隱喻、社會(huì)符號(hào)學(xué)、電影海報(bào)、圖文關(guān)系、視覺(jué)語(yǔ)法、模態(tài)、外語(yǔ)教學(xué)、互動(dòng)意義、課堂教學(xué)??茖W(xué)文獻(xiàn)引文和共引軌跡是研究前沿的知識(shí)基礎(chǔ)Chen,C.CiteSpace II:Detecting and Visualizing Emerging Trends and Transient Patterns in Scientific Literature.Journal of American Society for Information Science and Technology,2006(3),pp.359.。通過(guò)選取聚類(lèi)(Cluster)中的“Indexing terms”選項(xiàng),我們可以獲取軟件自動(dòng)生成的15個(gè)研究前沿聚類(lèi)主題,排除與多模態(tài)話語(yǔ)研究含義重復(fù)的主題之后,依次為話語(yǔ)、話語(yǔ)分析、語(yǔ)言學(xué)理論、話語(yǔ)分析理論、多模態(tài)隱喻、課堂教學(xué)、語(yǔ)言學(xué)者、語(yǔ)言性、電影主題、全球本土化、評(píng)價(jià)理論。從中可以看出,多模態(tài)話語(yǔ)分析的熱門(mén)話題與前沿主題出現(xiàn)些許重疊現(xiàn)象,如話語(yǔ)分析、多模態(tài)隱喻和課堂教學(xué),這說(shuō)明一些熱門(mén)話題本身就是前沿主題,多模態(tài)話語(yǔ)研究需要同時(shí)兼顧二者的基本特征和發(fā)展趨勢(shì)。國(guó)內(nèi)核心論文尚未發(fā)現(xiàn)突顯節(jié)點(diǎn),這或許是因?yàn)閲?guó)內(nèi)學(xué)界研究多模態(tài)話語(yǔ)的歷史不夠長(zhǎng)久和廣度不夠深入所致。
最近十幾年來(lái)國(guó)際多模態(tài)話語(yǔ)研究主要有9個(gè)研究路徑:系統(tǒng)功能語(yǔ)言學(xué)多模態(tài)話語(yǔ)分析,社會(huì)符號(hào)學(xué),多模態(tài)隱喻分析,多模態(tài)互動(dòng)分析,會(huì)話分析,地理符號(hào)學(xué),多模態(tài)民族志,多模態(tài)語(yǔ)料庫(kù)分析,多模態(tài)感知分析潘艷艷、李戰(zhàn)子:《國(guó)內(nèi)多模態(tài)話語(yǔ)分析綜論(2003—2017)——以CSSCI來(lái)源期刊發(fā)表成果為考察對(duì)象》,《福建師范大學(xué)學(xué)報(bào)(哲學(xué)社會(huì)科學(xué)版)》2017年第5期,第50—52頁(yè)。。我們通過(guò)凸顯查詢,發(fā)現(xiàn)從2015年到現(xiàn)在,國(guó)際核心突現(xiàn)術(shù)語(yǔ)(按照重力值大?。┓謩e為online news(在線新聞,重力值:6.7694)、picture books(圖畫(huà)書(shū),重力值:5.3263)、health(健康,重力值:5.2766)及identity text(身份語(yǔ)篇,重力值:3.7309),2013年來(lái)2017年的突現(xiàn)術(shù)語(yǔ)依次為corpus(語(yǔ)料庫(kù))、higher education(高等教育)、framework(框架)、text-making(文本制作)、middle school(中學(xué))、identities(身份)、affordances(可供性)和responses(反應(yīng))。把國(guó)內(nèi)與國(guó)際多模態(tài)話語(yǔ)研究的焦點(diǎn)領(lǐng)域和前沿話題作比較,可以發(fā)現(xiàn):首先,國(guó)內(nèi)與國(guó)際研究焦點(diǎn)都包括社會(huì)符號(hào)學(xué),國(guó)內(nèi)更重視對(duì)多模態(tài)教學(xué)的研究,如外語(yǔ)教學(xué)和課堂教學(xué),國(guó)際更強(qiáng)調(diào)對(duì)多模態(tài)符號(hào)的探索,如social semiotics和semiotics。其次,國(guó)內(nèi)學(xué)界傾向于把語(yǔ)言話題作為前沿選題,如語(yǔ)言學(xué)者和語(yǔ)言屬性,國(guó)際學(xué)界傾向于將識(shí)讀話題當(dāng)成前沿論題,如媒介識(shí)讀和推特。再次,國(guó)際學(xué)界的研究領(lǐng)域及前沿相比國(guó)內(nèi)學(xué)界更為廣泛,不僅包括教育與媒介,而且包含心理學(xué)和新聞傳播等范疇。
然后,國(guó)內(nèi)和國(guó)際學(xué)者都使用多元研究方法推進(jìn)多模態(tài)話語(yǔ)研究。馮德正將多模態(tài)話語(yǔ)的研究方法分為理論建構(gòu)、定性和定性語(yǔ)篇分析以及通用語(yǔ)專用語(yǔ)料庫(kù)探索馮德正:《多模態(tài)語(yǔ)篇分析的基本問(wèn)題探討》,《北京第二外國(guó)語(yǔ)學(xué)院學(xué)報(bào)》2017年第3期,第7頁(yè)。。張德祿在理論建構(gòu)方面為國(guó)內(nèi)學(xué)界樹(shù)立了光輝榜樣,可謂是功勛卓著的開(kāi)拓人物和領(lǐng)軍學(xué)者:他先后率先建立多模態(tài)話語(yǔ)分析綜合框架張德祿:《多模態(tài)話語(yǔ)分析綜合理論框架探索》,《中國(guó)外語(yǔ)》2009年第1期,第28頁(yè)。、適用社會(huì)符號(hào)學(xué)框架張德祿:《適用性社會(huì)符號(hào)學(xué)的理論與實(shí)踐研究》,《外語(yǔ)與外語(yǔ)教學(xué)》2010年第5期,第9頁(yè)。、多模態(tài)外語(yǔ)教材編寫(xiě)原則框架張德祿、張淑杰:《多模態(tài)外語(yǔ)教材編寫(xiě)原則探索》,《外語(yǔ)界》2010年第5期,第32頁(yè)。、動(dòng)態(tài)多模態(tài)話語(yǔ)分析框架張德祿、袁艷艷:《動(dòng)態(tài)多模態(tài)話語(yǔ)的模態(tài)協(xié)同研究——以電視天氣預(yù)報(bào)多模態(tài)語(yǔ)篇為例》,《山東外語(yǔ)教學(xué)》2011年第5期,第10頁(yè)。、多模態(tài)話語(yǔ)設(shè)計(jì)的操作模式張德祿:《論多模態(tài)話語(yǔ)設(shè)計(jì)》,《山東外語(yǔ)教學(xué)》2012年第1期,第15頁(yè)。、多模態(tài)功能文體學(xué)分析框架張德祿、穆志剛:《多模態(tài)功能文體學(xué)理論框架探索》,《外語(yǔ)教學(xué)》2012年第3期,第3頁(yè)。、外語(yǔ)教學(xué)多模態(tài)選擇框架張德祿、丁肇芬:《外語(yǔ)教學(xué)多模態(tài)選擇框架探索》,《外語(yǔ)界》2013年第3期,第46頁(yè)。、多元讀寫(xiě)設(shè)計(jì)學(xué)習(xí)綜合框架張德祿、張時(shí)倩:《論設(shè)計(jì)學(xué)習(xí)——多元讀寫(xiě)能力培養(yǎng)模式探索》,《解放軍外國(guó)語(yǔ)學(xué)院學(xué)報(bào)》2014年第2期,第6頁(yè)。、多模態(tài)話語(yǔ)轉(zhuǎn)譯變化理論框架張德祿、瞿桃:《多模態(tài)話語(yǔ)中的轉(zhuǎn)譯現(xiàn)象研究——以從大學(xué)英語(yǔ)課本到英語(yǔ)課堂教學(xué)的轉(zhuǎn)譯為例》,《外語(yǔ)電化教學(xué)》2015年第06期,第21頁(yè)。 、多模態(tài)互動(dòng)分析框架張德祿、王正:《多模態(tài)互動(dòng)分析框架探索》,《中國(guó)外語(yǔ)》2016年第2期,第57頁(yè)。和多模態(tài)論辯修辭分析框架張德祿:《多模態(tài)論辯修辭框架探索》,《當(dāng)代修辭學(xué)》2017年第1期,第4頁(yè)。。馮德正建立了圖像互動(dòng)意義與構(gòu)圖意義隱喻模型以及文字-圖像隱喻模型馮德正:《多模態(tài)隱喻的構(gòu)建與分類(lèi)——系統(tǒng)功能視角》,《外語(yǔ)研究》2011年第1期,第27—28頁(yè)。、基于誘發(fā)條件的態(tài)度意義系統(tǒng)、態(tài)度誘發(fā)條件的多模態(tài)表征模型和態(tài)度意義的行為反應(yīng)體系馮德正、亓玉杰:《態(tài)度意義的多模態(tài)建構(gòu)——基于認(rèn)知評(píng)價(jià)理論的分析模式》,《現(xiàn)代外語(yǔ)》2014年第5期,第589—592頁(yè)。。在國(guó)際核心期刊舞臺(tái)上,馮德正也長(zhǎng)袖善舞,先后建立了廣告話語(yǔ)互文聲音模型、電視廣告的參與模型Feng,D.Wignell,P.Intertextual Voices and Engagement in TV Advertisements.Visual Communication,2011(4),pp.569-572.、圖像情感意義建構(gòu)框架Feng,D.OHalloran,K.L.Representing Emotive Meaning in Visual Images:A Social Semiotic Approach.Journal of Pragmatics,2012(44),pp.2071-2079.、再現(xiàn)結(jié)構(gòu)中的視覺(jué)不規(guī)則模型Feng,D.OHalloran,K.L.The Visual Representation of Metaphor:A Social Semiotic Approach.Review of Cognitive Linguistics,2013(2),pp.327.、電影觀眾的情感元功能模型Feng,D.Qi,Y.Emotion Prosody and Viewer Engagement in Film Narrative:A Social Semiotic Approach.Narrative Inquiry,2014(2),pp.356357. 和視覺(jué)轉(zhuǎn)喻意義建構(gòu)框架Feng,W.D.Metonymy and Visual Representation:Towards a Social Semiotic Framework of Visual Metonymy.Visual Communication,2017(4),pp.441-458.。類(lèi)似的香港學(xué)者還有Hu建立多模態(tài)音樂(lè)情緒分類(lèi)評(píng)估框架Hu,X.Choi,K.Downie,S.A Framework for Evaluating Multimodal Music Mood Classification.Journal of the Association for Information Science and Technology,2017(2),pp.276.。
國(guó)際學(xué)界建立的多模態(tài)話語(yǔ)分析框架包括視覺(jué)敘事的多模態(tài)話語(yǔ)理論Bateman,J.A.Wildfeuer,J.A Multimodal Discourse Theory of Visual Narrative.Journal of Pragmatics,2014,(74),pp.180-208.、新聞話語(yǔ)批評(píng)性話語(yǔ)分析的新方法框架Bednarek,M.Caple,H.Why do News Values Matter?Towards a New Methodological Framework for Analyzing News Discourse in Critical Discourse Analysis and beyond.Discourse & Society,2014(2),pp.135- 158. 、網(wǎng)站互動(dòng)多模態(tài)分析的社會(huì)符號(hào)框架Adami,E.Whats in a Click?A Social Semiotic Framework for the Multimodal Analysis of Website Interactivity.Visual Communication,2014(2),pp.142.、科學(xué)教育多模態(tài)意義再現(xiàn)的整體分析框架Tang,K.S.Delgado,C.Moje,E.B.An Integrative Framework for the Analysis of Multiple and Multimodal Representations for Meaning-Making in Science Education.Science Education,2014(2),pp.311.、科學(xué)博物館展覽的社會(huì)符號(hào)學(xué)分析框架Anyfandi, G. Koulaidis, V. Dimopoulos, K. A Socio-semiotic Framework for the Analysis of Exhibits in a Science Museum. Semiotica, 2014(200), pp.239-244.、在線新聞館藏多模態(tài)分析框架Caple,H.Knox,J.S.A Framework for the Multimodal Analysis of Online News Galleries: What Makes a “Good” Picture Gallery?.Social Semiotics,2015(3),pp.310.、辯論的認(rèn)知符號(hào)學(xué)理論探索Hoven,P.V.D.Cognitive Semiotics in Argumentation:A Theoretical Exploration.Argumentation,2015(29),pp.157-176.、多模態(tài)互動(dòng)認(rèn)知框架Cohn,N.A Multimodal Parallel Architecture:A cognitive Framework for Multimodal Interactions.Cognition,2016(146),pp.320.、視覺(jué)元話語(yǔ)分析模型Groot,E.D.Nickerson,C.Korzilius,H.Gerritsen,M.Picture This:Developing a Model for the Analysis of Visual Metadiscourse.Journal of Business and Technical Communication,2016(2),pp.179-180.和圖像框架的解碼理論Abdel-Raheem,A.Decoding Images:Toward a Theory of Pictorial Framing.Discourse & Society,2017(4),pp.327-352.。比較國(guó)內(nèi)與國(guó)際學(xué)者建構(gòu)的多模態(tài)話語(yǔ)研究的理論與框架不難斷定:雖然中國(guó)學(xué)者研究多模態(tài)話語(yǔ)的時(shí)間比國(guó)際晚10余年,但是以張德祿和馮德正為領(lǐng)軍的學(xué)者持續(xù)集中建立系列多模態(tài)話語(yǔ)研究理論框架,國(guó)際學(xué)者能夠做到這一點(diǎn)的寥寥無(wú)幾。同時(shí),國(guó)內(nèi)學(xué)者建立的框架與模型呼應(yīng)了中國(guó)發(fā)展的客觀實(shí)際,因而比國(guó)際相關(guān)理論與框架更具有針對(duì)性、操作性和實(shí)用性。
最后,國(guó)內(nèi)與國(guó)際學(xué)界的多模態(tài)話語(yǔ)研究都涉及跨學(xué)科領(lǐng)域??鐚W(xué)科性是多模態(tài)研究領(lǐng)域的天然屬性O(shè)Halloran,K.L.& Smith,B.A.Multimodal Studies.In OHalloran,K.L.& Smith,B.A.(eds.).Multimodal Studies:Exploring Issues and Domains.London:Routledge,2011,pp.2.。多模態(tài)研究的發(fā)展方向是跨學(xué)科與學(xué)科融合,發(fā)展動(dòng)力是理論與方法創(chuàng)新馮德正、Francis Low:《多模態(tài)研究的現(xiàn)狀與未來(lái)—第七屆國(guó)際多模態(tài)會(huì)議評(píng)述》,《外國(guó)語(yǔ)》2015年第4期,第111頁(yè)。。多模態(tài)話語(yǔ)研究推動(dòng)了語(yǔ)言學(xué)、美學(xué)、文學(xué)、修辭學(xué)和傳播學(xué)等學(xué)科潘艷艷、李戰(zhàn)子:《國(guó)內(nèi)多模態(tài)話語(yǔ)分析綜論(2003—2017)——以CSSCI來(lái)源期刊發(fā)表成果為考察對(duì)象》,《福建師范大學(xué)學(xué)報(bào)(哲學(xué)社會(huì)科學(xué)版)》2017年第5期,第49頁(yè)。。
3.研究成績(jī)與不足
我們?cè)贑iteSpace中的合作網(wǎng)絡(luò)“Node types”中選定“author”(作者)和“institution”(機(jī)構(gòu)),發(fā)現(xiàn)國(guó)內(nèi)多模態(tài)話語(yǔ)研究的核心期刊文獻(xiàn)中,發(fā)文數(shù)量居于前10的作者依次為張德祿、馮德正、劉曉斌、李戰(zhàn)子、劉秀麗、李妙晴、張宜波、孫毅、汪燕華和張維,機(jī)構(gòu)排名分別為同濟(jì)大學(xué)、廈門(mén)大學(xué)、中國(guó)海洋大學(xué)、中山大學(xué)、山東大學(xué)、華南師范大學(xué)、香港理工大學(xué)、西安外國(guó)語(yǔ)大學(xué)、廣東商學(xué)院及西南大學(xué)。
與上述選定方法相似,我們?cè)贑iteSpace中的“Node types”中選定“author”(作者)和“institution”(機(jī)構(gòu))之外,再選定“country”(國(guó)家)。數(shù)據(jù)顯示國(guó)際多模態(tài)話語(yǔ)研究的文獻(xiàn)中,發(fā)文數(shù)量名列前10的作者依次是Machin、Tan、OHalloran、Pantaleo、Archer、Tang、van Leeuwen、Harvey、Lirola和Ledin,機(jī)構(gòu)排名為Orebro University、National University of Singapore、University of Lancaster、Nanyang Technological University、University of Victoria、University of Hong Kong、Griffith University、University of Bremen、Macquarie University及Columbia University,國(guó)家排名分別是USA、England、Australia、Canada、Spain、Peoples Republic of China、Germany、Sweden、Netherlands與Singapore。
據(jù)此可見(jiàn),一方面,在過(guò)去的10多年里,國(guó)內(nèi)學(xué)者的發(fā)文總量世界排名第6位,說(shuō)明在國(guó)際多模態(tài)話語(yǔ)研究中,我國(guó)學(xué)者能夠奮起直追,從而擁有一席之地;另一方面,國(guó)內(nèi)和國(guó)際多模態(tài)話語(yǔ)研究的高被引作者及其所在機(jī)構(gòu)分布較為廣泛,這為有效提升多模態(tài)話語(yǔ)研究的影響力提供了便利的地理?xiàng)l件。雖然會(huì)給彼此之間的密切合作帶來(lái)一些不可避免的時(shí)空障礙,國(guó)際學(xué)界的眾多學(xué)者和機(jī)構(gòu)依然取得了定期、長(zhǎng)久的合作。從CiteSpace展示的作者與機(jī)構(gòu)之間的合作網(wǎng)絡(luò)可知(參見(jiàn)圖3),國(guó)內(nèi)學(xué)者之中張德祿的影響力最大,與他保持學(xué)術(shù)往來(lái)的學(xué)者有馮德正、劉秀麗、張宜波、程瑞蘭與張征。其他的學(xué)者學(xué)術(shù)合作網(wǎng)絡(luò)有馮德正與趙秀鳳、王艷,劉曉斌與張維。然而,除了這些學(xué)者和機(jī)構(gòu)之間存在合作聯(lián)系,其他排名前列的學(xué)者與機(jī)構(gòu)之間幾乎沒(méi)有顯示任何協(xié)同關(guān)系及跡象,這說(shuō)明國(guó)內(nèi)多模態(tài)話語(yǔ)研究單兵作戰(zhàn)、孤軍前進(jìn)的現(xiàn)象十分突出。
從圖4可以觀察到,中國(guó)高校在國(guó)際多模態(tài)研究領(lǐng)域擁有一定話語(yǔ)權(quán)的有香港大學(xué)、香港理工大學(xué)和中山大學(xué),但只有香港大學(xué)與美國(guó)伊利諾伊大學(xué)(University of Illinois)、香港理工大學(xué)與德國(guó)不萊梅大學(xué)(university of Bremen)學(xué)者Bateman、香港理工大學(xué)學(xué)者Feng D.Z.(馮德正)與比利時(shí)魯汶大學(xué)(Katholieke university of Leuven)存在學(xué)術(shù)交往。多模態(tài)話語(yǔ)研究是跨學(xué)科的前沿研究課題,需要多學(xué)科的協(xié)同研究張淑杰、張德祿:《系統(tǒng)功能語(yǔ)言學(xué):發(fā)展及應(yīng)用——張德祿教授訪談錄》,《山東外語(yǔ)教學(xué)》2015年第4期,第5—6頁(yè)。。這說(shuō)明國(guó)內(nèi)學(xué)界的多模態(tài)話語(yǔ)研究需要加快與國(guó)內(nèi)及國(guó)際學(xué)者和機(jī)構(gòu)之間的深入交流和協(xié)作。
(四)研究討論
多模態(tài)話語(yǔ)研究在國(guó)內(nèi)外語(yǔ)界尚未成為主流,還有很大的提升空間羅永勝:《近十年來(lái)中國(guó)多模態(tài)話語(yǔ)及其應(yīng)用研究述評(píng)》,《現(xiàn)代教育技術(shù)》2012年第4期,第63頁(yè)。。時(shí)至今日,這種狀況依然沒(méi)有得到顯著的改進(jìn)。一方面,我們的研究數(shù)據(jù)顯示,從2007年迄今,國(guó)內(nèi)影響力排名前5位的外語(yǔ)類(lèi)核心期刊刊登多模態(tài)話語(yǔ)/語(yǔ)篇研究的論文數(shù)量依次為:《外語(yǔ)教學(xué)與研究》(0篇)、《外國(guó)語(yǔ)》(1篇)、《外語(yǔ)界》(1篇)、《現(xiàn)代外語(yǔ)》(3篇)、《中國(guó)翻譯》(0篇),這既說(shuō)明多模態(tài)話語(yǔ)研究在國(guó)內(nèi)外語(yǔ)界沒(méi)有引起足夠的重視,也同時(shí)表明國(guó)內(nèi)研究多模態(tài)話語(yǔ)的整體水平需要上升到一定的高度。另一方面,CiteSpace可視化數(shù)據(jù)表明,從1994年至今,國(guó)內(nèi)學(xué)者在國(guó)際核心共發(fā)文46篇,與排名前三位的美國(guó)(230篇)、英國(guó)(110篇)和澳大利亞(102篇)相比,中國(guó)學(xué)者對(duì)國(guó)際核心表現(xiàn)出相當(dāng)?shù)呐d趣和熱忱,同時(shí)也表明我學(xué)者的多模態(tài)話語(yǔ)總體水準(zhǔn)與國(guó)際主流學(xué)者之間存在著較大的差距。基于此,我們認(rèn)為國(guó)內(nèi)學(xué)界需要從以下諸方面進(jìn)一步努力:
1.深化理論探索
多模態(tài)話語(yǔ)研究作為新興學(xué)科,至今仍然廣受質(zhì)疑馮德正:《多模態(tài)語(yǔ)篇分析的基本問(wèn)題探討》,第8頁(yè)。。Jewitt指出目前學(xué)界主要使用語(yǔ)言學(xué)的理論與方法研究多模態(tài),缺乏獨(dú)立、完整的理論儲(chǔ)備Jewitt,C.The Routledge Handbook of Multimodal Analysis.London:Routledge,2009,pp.26.。朱永生認(rèn)為多模態(tài)話語(yǔ)研究容易出現(xiàn)語(yǔ)法分析主觀性過(guò)強(qiáng)、模態(tài)之間的互動(dòng)關(guān)系和互補(bǔ)作用難以確定、研究群體主要是系統(tǒng)功能語(yǔ)言學(xué)者等不足朱永生:《多模態(tài)話語(yǔ)分析的理論基礎(chǔ)與研究方法》,《外語(yǔ)學(xué)刊》2007年第5期,第85頁(yè)。。程瑞蘭、張德祿強(qiáng)調(diào)多模態(tài)話語(yǔ)研究缺乏跨模態(tài)既統(tǒng)一又完善的多模態(tài)語(yǔ)法程瑞蘭、張德祿:《多模態(tài)話語(yǔ)分析在中國(guó)研究的現(xiàn)狀、特點(diǎn)和發(fā)展趨勢(shì)——以期刊成果為例》,《中國(guó)外語(yǔ)》 2017年第3期,第42頁(yè)。。因此,國(guó)內(nèi)與國(guó)際學(xué)界需要齊心協(xié)力、密切配合,共同開(kāi)發(fā)出覆蓋多種模態(tài)而又全面系統(tǒng)實(shí)用的多模態(tài)話語(yǔ)研究理論體系。對(duì)于中國(guó)學(xué)者而言,需要以張德祿和馮德正等領(lǐng)軍學(xué)者為榜樣,努力建構(gòu)出符合中國(guó)國(guó)情和時(shí)代發(fā)展、具有中國(guó)特色和指導(dǎo)作用的多模態(tài)話語(yǔ)研究理論框架和模型。多模態(tài)話語(yǔ)研究與符號(hào)類(lèi)型、社會(huì)活動(dòng)及社會(huì)文化聯(lián)系密切,因而需要關(guān)注符號(hào)系統(tǒng)在特定社會(huì)環(huán)境下、社會(huì)活動(dòng)中和價(jià)值體系上的運(yùn)行機(jī)制和嬗變過(guò)程李戰(zhàn)子、陸丹云:《多模態(tài)符號(hào)學(xué):理論基礎(chǔ),研究途徑與發(fā)展前景》,《外語(yǔ)研究》2012年第2期,第6頁(yè)。。
2.加強(qiáng)學(xué)科合作
學(xué)科間性的研究模式能使新知識(shí)成為共同應(yīng)對(duì)的主要目標(biāo)胡壯麟:《超學(xué)科研究與學(xué)科發(fā)展》,《中國(guó)外語(yǔ)》2012年第6期,第16頁(yè)。。多模態(tài)話語(yǔ)研究同時(shí)關(guān)注語(yǔ)言和非語(yǔ)言的符號(hào)資源,需要將不同的符號(hào)流派如人類(lèi)學(xué)、藝術(shù)學(xué)和民族志等學(xué)科融入系統(tǒng)功能語(yǔ)法、視覺(jué)設(shè)計(jì)語(yǔ)法、概念隱喻理論等體系進(jìn)行綜合研究。多模態(tài)話語(yǔ)涉及多種模態(tài)資源的協(xié)同,因而定性研究成為多模態(tài)話語(yǔ)研究的主導(dǎo)方法。van Leeuwen指出多模態(tài)研究的未來(lái)方向包括自我思辨、文化多元和技術(shù)應(yīng)用Van Leeuwen.T.Multimodality.In Simpson,J.(eds.).The Routledge Handbook of Applied Linguistics.New York: Routledge, 2001, pp.679.。馮德正等認(rèn)為近年來(lái)多模態(tài)話語(yǔ)研究開(kāi)始轉(zhuǎn)向?qū)Χ嗄B(tài)表意資源的跨學(xué)科系統(tǒng)闡釋與實(shí)證研究。認(rèn)知語(yǔ)言學(xué)與功能語(yǔ)言學(xué)之間的對(duì)話及融合是今后多模態(tài)語(yǔ)篇研究的發(fā)展方向馮德正、張德祿、 Kay O'Hallora:《多模態(tài)語(yǔ)篇分析的進(jìn)展與前沿》,《當(dāng)代語(yǔ)言學(xué)》2014年第1期,第88—90頁(yè)。。馮德正進(jìn)而指出,國(guó)內(nèi)未來(lái)的多模態(tài)話語(yǔ)研究可以分析中國(guó)形象、社會(huì)主義價(jià)值觀的多模態(tài)建構(gòu)、新媒體教學(xué)(如慕課、微課)、公益廣告(如反腐敗、普法教育、環(huán)境保護(hù))等具有重要社會(huì)意義的跨學(xué)科語(yǔ)篇馮德正:《多模態(tài)語(yǔ)篇分析的基本問(wèn)題探討》,第5頁(yè)。。形如傳播學(xué)、心理學(xué)、教育學(xué)和社會(huì)學(xué)的跨學(xué)科多模態(tài)研究理論體系亟待逐步完善,多模態(tài)話語(yǔ)研究要有學(xué)科融合意識(shí)來(lái)構(gòu)建跨學(xué)科的理論體系馮德正:《多模態(tài)語(yǔ)篇分析的基本問(wèn)題探討》,第6—8頁(yè)。。
3.完善研究?jī)?nèi)涵
在研究對(duì)象上,李戰(zhàn)子、陸丹云認(rèn)為話語(yǔ)秩序、意識(shí)形態(tài)、社會(huì)關(guān)系和社會(huì)實(shí)踐是多模態(tài)話語(yǔ)研究的發(fā)展路徑李戰(zhàn)子、陸丹云:《多模態(tài)符號(hào)學(xué):理論基礎(chǔ),研究途徑與發(fā)展前景》,《外語(yǔ)研究》2012年第2期,第6頁(yè)。。張淑杰、張德祿指出模態(tài)話語(yǔ)研究需要關(guān)注三個(gè)方面:多模態(tài)語(yǔ)篇符號(hào)系統(tǒng)的詞匯語(yǔ)法、不同符號(hào)系統(tǒng)的語(yǔ)法特點(diǎn)和不同符號(hào)系統(tǒng)在多模態(tài)語(yǔ)篇中的選擇特征張淑杰, 張德祿:《系統(tǒng)功能語(yǔ)言學(xué):發(fā)展及應(yīng)用——張德祿教授訪談錄》,《山東外語(yǔ)教學(xué)》2015年第4期,第6頁(yè)。。在研究方法上,胡壯麟強(qiáng)調(diào)多模態(tài)研究是有科技含量的新學(xué)科,需要語(yǔ)言以外的素養(yǎng)胡壯麟:《我讀系統(tǒng)功能語(yǔ)言學(xué)研究現(xiàn)狀和發(fā)展趨勢(shì)》,第十二屆全國(guó)功能語(yǔ)言學(xué)研討會(huì)大會(huì)發(fā)言,南京:南京師范大學(xué), 2011年。。羅永勝提出我國(guó)多模態(tài)話語(yǔ)研究主要停滯在對(duì)國(guó)外理論的消化和吸收上,缺乏驗(yàn)證性實(shí)驗(yàn)研究和理論溯源性研究羅永勝:《近十年來(lái)中國(guó)多模態(tài)話語(yǔ)及其應(yīng)用研究述評(píng)》,《現(xiàn)代教育技術(shù)》2012年第4期,第64頁(yè)。。其后不久,國(guó)防主張國(guó)際多模態(tài)話語(yǔ)研究已逐漸從描述性思辨研究轉(zhuǎn)向應(yīng)用性實(shí)證研究國(guó)防:《多模態(tài)話語(yǔ)分析研究熱點(diǎn)及趨勢(shì)分析——基于文獻(xiàn)計(jì)量學(xué)方法》,《外語(yǔ)與外語(yǔ)教學(xué)》2016年第3期,第64頁(yè)。。馮德正提醒多模態(tài)話語(yǔ)研究需要同時(shí)具備跨學(xué)科意識(shí)、實(shí)證意識(shí)和應(yīng)用意識(shí),不僅要立足于理論與方法創(chuàng)新,而且要著眼于解決多媒體時(shí)代傳播與交際中的實(shí)際問(wèn)題馮德正:《多模態(tài)語(yǔ)篇分析的基本問(wèn)題探討》,《北京第二外國(guó)語(yǔ)學(xué)院學(xué)報(bào)》2017年第3期,第1頁(yè)。。實(shí)際上,問(wèn)卷調(diào)查、面對(duì)面訪談、建立語(yǔ)料庫(kù)、運(yùn)用大數(shù)據(jù)分析軟件能有效提高實(shí)證化研究方法的可信度與說(shuō)服力,如對(duì)實(shí)證數(shù)據(jù)解析的軟件有SPSS胡永近、張德祿:《英語(yǔ)專業(yè)聽(tīng)力教學(xué)中多模態(tài)功能的實(shí)驗(yàn)研究》,《外語(yǔ)界》2013年第5期,第20—25頁(yè)。、Nvivo甘容輝、何高大:《大數(shù)據(jù)時(shí)代學(xué)習(xí)分析與外語(yǔ)教學(xué)研究展望》,《外語(yǔ)電化教學(xué)》2016年第3期,第40—45頁(yè)。、Wmatrix陳風(fēng)華、查建設(shè):《外宣語(yǔ)境多模態(tài)認(rèn)知視角國(guó)家領(lǐng)導(dǎo)人形象建構(gòu)——以習(xí)近平特稿為中心》,《外語(yǔ)教學(xué)理論與實(shí)踐》2017年第3期,第42—49頁(yè)。,對(duì)視頻數(shù)據(jù)解碼軟件有Elan顧日國(guó):《多模態(tài)感官系統(tǒng)與語(yǔ)言研究》,《當(dāng)代語(yǔ)言學(xué)》2015年第4期,第448—469頁(yè)。、Praat馮德正:《數(shù)字技術(shù)與多模態(tài)語(yǔ)篇分析》,《北京科技大學(xué)學(xué)報(bào)(社會(huì)科學(xué)版)》2010年第4期,第12—17頁(yè)。、Multimodal Analysis SoftwareLim-Fei,V. OHalloran,K.L.Tan,S.Marissa,K.L.E.Teaching Visual Texts with the Multimodal Analysis Software.Educational Technology Research and Development,2015(6),pp.915-935. 。
四 結(jié)語(yǔ)
本研究基于國(guó)內(nèi)外核心期刊運(yùn)用文本挖掘功能強(qiáng)大的知識(shí)圖譜可視化工具CiteSpace考察了學(xué)界多模態(tài)話語(yǔ)研究的整體狀況,并就國(guó)內(nèi)學(xué)界的未來(lái)研究提出了一些建議。研究發(fā)現(xiàn):首先,國(guó)內(nèi)高校的教授和博導(dǎo)群體是多模態(tài)話語(yǔ)研究的領(lǐng)航者,國(guó)內(nèi)學(xué)界比國(guó)際學(xué)界更善于建構(gòu)多模態(tài)話語(yǔ)分析研究框架;其次,國(guó)際學(xué)界和國(guó)內(nèi)學(xué)界都重視建構(gòu)及推介多模態(tài)話語(yǔ)理論以及對(duì)跨學(xué)科多模態(tài)話語(yǔ)的研究,國(guó)際學(xué)界的豐富經(jīng)驗(yàn)和精湛水準(zhǔn)值得國(guó)內(nèi)學(xué)界學(xué)習(xí)和借鑒;再次,國(guó)內(nèi)學(xué)者在今后的多模態(tài)話語(yǔ)研究中需要在理論探索、學(xué)科合作和研究?jī)?nèi)容等方面提高重視和付出努力;最后,多模態(tài)話語(yǔ)研究理論的深入探索有待國(guó)內(nèi)和國(guó)際學(xué)界的密切配合。本研究在時(shí)間、空間和內(nèi)容等維度拓寬了學(xué)界以往對(duì)多模態(tài)話語(yǔ)綜述研究的不足,為今后多模態(tài)話語(yǔ)研究提供了一定的參考價(jià)值。毋庸諱言,囿于研究語(yǔ)料所限,本研究獲取的結(jié)論或許存在不夠客觀與科學(xué)之處。展望未來(lái)研究,我們相信在更龐大的語(yǔ)料和更多維的視野基礎(chǔ)上的研究會(huì)進(jìn)一步完善我們現(xiàn)有的研究發(fā)現(xiàn)。
Abstract:Using the internationally recognized authoritative visualized analysis tool CiteSpace,this paper analyzes the evolution of the knowledge mapping of multimodal discourse research literature published in the domestic core journals (CSSCI and National Chinese Core) and international core journals (SSCI and A & HCI) over the years.The research holds that: First of all,the leading figures in the study of multimodal discourse in both the domestic and international academics are all university scholars. Secondly,the domestic academic circles have been paying attention to constructing a multi-modal discursive theoretical framework suitable for Chinas national conditions in the past 10 years or so,but the phenomenon of teamwork research is rather scarce.Thirdly,in the past period which lasts over twenty years,the international academic circle has covered more subject fields than domestic academic circle,and their abundant research experience and exquisite research level is well worthwhile for domestic academic circle to learn.Fourthly,it is quite necessary for domestic academic circle to strengthen research in terms of theoretic exploration,subject cooperation and content composition.Finally,domestic and international scholars need to work together to deepen the theoretical exploration of multimodal discourse research.This study is believed to be able to provide some reference value for the future research of multimodal discourse in academic circles.
Key words:multimodal discourse;domestic core journals;international core journals;CiteSpace;knowledge mapping;visualized analysis
華僑大學(xué)學(xué)報(bào)·哲學(xué)社會(huì)科學(xué)版2017年6期