■胡 勇

話語研究的多模態(tài)轉向成為當今語言學研究和話語分析的重點關注對象。其中，圖文關系是探討多模態(tài)之間協(xié)同互補機制中最為重要的一組關系。以系統(tǒng)功能語言學和視覺分析框架為理論方法，探究多模態(tài)敘事繪本中，圖文符號系統(tǒng)概念意義的創(chuàng)建以及圖文意義的跨符號互補機制，并在此基礎上，結合視覺敘事的有關概念，進一步挖掘圖文符號系統(tǒng)在語篇共同實例化過程中的概念意義投入以及圖文符號系統(tǒng)承載、激活和表達的意義總量，可為中國語境下多模態(tài)敘事語篇的圖文互補機制研究提供新的視角和啟示。

新媒體時代使人們的交際方式和生活方式發(fā)生巨大的變化，單一的語言模態(tài)已不再是意義創(chuàng)建和表征的唯一手段，而是逐漸由圖像、聲音、手勢等多種媒介組成的交際模式所替代。20世紀90年代以來，多模態(tài)話語研究者在系統(tǒng)功能語言學的基礎上開始探究語篇意義創(chuàng)建中語言之外的其他社會符號的語義、語法和描寫系統(tǒng)，諸如圖像、聲音、空間等。對模態(tài)的定義和理解，不同的研究領域和研究方法持有不同見解，主要可歸為三種：一是將模態(tài)定義為不同社會文化中所形成的創(chuàng)建意義的社會符號資源；二是將其視為諸如視覺、聽覺等感官模態(tài)及相應系統(tǒng)；三是將多模態(tài)視為信息呈現(xiàn)方式。日常交際和話語實例中存在大量的非語言符號/模態(tài)，語言只是表達意義的眾多社會符號之一，話語的多模態(tài)特征是當代話語研究的重點關注。近20年間，多模態(tài)研究發(fā)展如火如荼，已經(jīng)呈現(xiàn)出開放包容的跨學科性質(zhì)，不同學科間的相互融合、相互影響能有效推動多模態(tài)研究理論的發(fā)展。但國內(nèi)對多模態(tài)語篇中圖文互補關系的研究還屬起步階段，亟待發(fā)展，因此，筆者將在多模態(tài)話語研究的基礎上，對多模態(tài)敘事繪本這一典型話語形式進行分析，從系統(tǒng)功能語言學和多模態(tài)敘事框架的視角探討敘事繪本中的圖文互補關系和銜接機制，挖掘圖文符號系統(tǒng)在語篇共同實例化過程中的意義投入和語義賦值。

一、話語的多模態(tài)轉向：多模態(tài)語篇圖文關系的發(fā)展流變

多模態(tài)話語是當今人們社會交際活動的一種普遍的內(nèi)在特質(zhì)。話語研究的多模態(tài)轉向成為當今語言學研究的重點關注對象，而圖文關系是多模態(tài)協(xié)同、互補機制中最為重要的一組關系，近幾十年來受到越來越多學者的關注。

（一）多模態(tài)話語圖文關系研究的發(fā)展

近20年來，圖文關系逐漸受到學界關注，圖文關系研究主要從以下方面展開：

首先，考察多模態(tài)語篇中圖文符號系統(tǒng)間的邏輯語義關系。在巴特圖文關系的基礎上，馬丁內(nèi)克和薩爾韋兩位學者結合韓禮德的系統(tǒng)功能語法中小句邏輯語義系統(tǒng)的相關理論，進一步發(fā)展圖文邏輯關系，劃分了“邏輯語義”和“地位”兩種關系。［1］(P337-340)其中，圖文邏輯語義系統(tǒng)將圖文關系分為擴展關系和投射關系。圖文地位系統(tǒng)則涉及圖文關系中的等同和不等同關系。楊信彰以兩本雙解字典為分析對象，從邏輯語義關系的視角討論語言釋義與插圖之間關系，研究指出圖文之間存在著“例舉”“說明”和“澄清”三類關系，且“例舉型的插圖使用頻率最高”。［2］(P51)

其次，探究多模態(tài)語篇圖文模態(tài)間的隱轉喻關系。雖然以語言符號系統(tǒng)為基礎的隱喻研究得到了長足的發(fā)展，近年來，中國國內(nèi)隱喻研究更是百花齊放，例如，關注語言系統(tǒng)的隱喻理論研究，隱喻與翻譯方法及翻譯過程中的認知研究，隱喻對英語學習者認知和隱喻能力發(fā)展的影響等；但傳統(tǒng)經(jīng)典“認知隱喻一直以來只關注語言體現(xiàn)，這蘊藏某種偏見：意義只存于語言符號”［3］(P4)，而“語言只是創(chuàng)建意義的符號資源之一，只關注語言這一類社會實踐中的意義表達是不夠的”［4](P8)。作為一種思維認知方式，隱喻的體現(xiàn)方式可以是語言，也能是其他社會符號和交際媒介。福塞維爾明確地劃分了單模態(tài)隱喻和多模態(tài)隱喻，將多模態(tài)隱喻定義為“源域與目標域分別使用不同的符號資源來呈現(xiàn)或在不同符號資源中占主要地位?！保?］(P24)自此，中國國內(nèi)學者開始關注多模態(tài)語篇中基于圖文模態(tài)認知隱/轉喻，強調(diào)多模態(tài)在隱喻構建過程中的作用。

再次，挖掘多模態(tài)語篇圖文模態(tài)間的人際意義互動。克瑞斯和范·勒文在視覺語法建構的經(jīng)典著作中提出不僅語言能實現(xiàn)人際交往中的互動關系，圖像模態(tài)也能完成建構人際互動、表達情態(tài)意義等功能，他們將圖像分為兩種類型：即“提供”和“索取”圖像。［5］(P119-124)提供型圖像是指視覺構圖中參與者為讀者提供一定的信息/服務。反之，索取型圖像是指視覺構圖中參與者通過眼神聚焦和接觸等向讀者索取信息/服務。但這種將圖像簡單劃分的觀點引起了相關領域的爭議。為了更好地探討圖文系統(tǒng)構建的人際意義，羅伊斯從符際互補的視角考察圖文關系，指出不同的符號系統(tǒng)在創(chuàng)建讀者立場，形成互動意義方面存在“強化”與“否定”的關系。［6］(P65-71)多模態(tài)語篇中的圖文關系引起了學界的重視，而多模態(tài)敘事語篇實例化過程中圖文符號系統(tǒng)所表征的意義和彼此間的相互關系更值得多模態(tài)話語研究領域的重視。

（二）多模態(tài)敘事研究境遇

中國國內(nèi)的敘事學研究在半個世紀以來經(jīng)歷了由發(fā)端到鼎盛的巨大發(fā)展，涌現(xiàn)出大批學者，推動敘事學朝縱深方向發(fā)展。但國內(nèi)學者研究多聚焦于單模態(tài)文學作品的闡釋，對多模態(tài)敘事研究鮮有涉及，對多模態(tài)敘事繪本圖文互補機制的研究更是鳳毛麟角。多模態(tài)繪本，尤其是敘事繪本，是兒童生活、教育中的重要讀物，在兒童讀寫教育、意識形態(tài)塑造和社會文化價值培植等方面發(fā)揮作用。兒童繪本受到學界多方面的關注，但在多數(shù)關于繪本的研究中，圖像符號系統(tǒng)被視為次要方面，在意義建構層面上難以得到和語言符號系統(tǒng)同等重要的關注。近年來，國外已經(jīng)開始重視多模態(tài)繪本的研究，佩因特等人提出了一個基于系統(tǒng)功能語言學的視覺敘事框架，將“三個元功能理論應用到視覺敘事當中”，是視覺圖像分析理論的重大發(fā)展。［7］(P1-10)

反觀國內(nèi)，關于多模態(tài)敘事繪本的研究尚屬于起步階段。鑒于此，筆者從概念意義入手，以系統(tǒng)功能語言學和視覺語法為分析工具，探討多模態(tài)敘事繪本中圖文符號系統(tǒng)概念意義的跨符號協(xié)同機制。除了探討多模態(tài)敘事繪本中圖文概念意義如何互補，還進一步探討圖文符號系統(tǒng)在語篇共同實例化過程中的概念意義投入，從而分析不同符號資源在實例化過程中激活和表征的語義總量，以期為分析多模態(tài)敘事語篇圖文相互關系提供一個新的研究視角。

二、多模態(tài)敘事語篇中圖文概念意義的構建與互補

概念意義涉及人們使用語言來表征、識解和建構世界的功能，這樣的功能并非語言符號所特有，圖像符號、視覺空間符號和聲音符號等眾多的社會符號均具有此功能。在多模態(tài)敘事語篇中，概念意義具有通過不同社會符號來構建故事世界和故事人物，引導讀者進入故事世界，從而參與到繪本敘事并與其互動的功能。本文選取繪本《郵遞員叔叔的奇遇》①為研究對象?！多]遞員叔叔的奇遇》由13個雙面版面構成，講述了郵遞員大關叔叔在春節(jié)期間給村民送信途中發(fā)生的奇遇，主要故事人物為郵遞員大關和雪人。郵遞員大關在大年三十騎著自行車給村民送信，途中一個雪人在其疲憊的時候幫助推車送信，于是，大關叔叔送給雪人春節(jié)禮物，卻在晚上驚喜地發(fā)現(xiàn)雪人們將冰塊做成的發(fā)糕回贈予他作為新春祝福。整個繪本使用多元的敘事技巧，構建了流暢的故事情節(jié)，通過故事敘述告訴兒童讀者中國春節(jié)的種種特色，幫助兒童讀者了解春節(jié)的傳統(tǒng)習俗，感受中國新年蘊含的溫暖情懷?！多]遞員叔叔的奇遇》作為一本典型的敘事繪本，敘事結構清晰完整，在繪本敘事的開局、進展、評價和結尾部分均充斥著大量的概念意義，分析此繪本中圖文概念意義的創(chuàng)建以及兩者意義建構中存在的跨符號/跨模態(tài)機制有助于揭示和闡明敘事繪本中圖文關系，為系統(tǒng)闡釋多模態(tài)敘事語篇圖文相互關系提供新的分析視角。

（一）繪本語言文本概念意義的及物性分析

系統(tǒng)功能語言學區(qū)分語言所實現(xiàn)的三大元功能，分別是概念功能、人際功能和組篇功能。其中，概念功能是指人們通過語言“得以構建關于現(xiàn)實的心理圖景，從而識解內(nèi)在和外在世界的功能”。［8］(P170-172)在系統(tǒng)功能語法層面，及物系統(tǒng)是語言實現(xiàn)概念功能的重要維度，能夠將人類關于世界的經(jīng)驗組織切分成一系列的小句過程類型，換言之，通過小句的過程類型表達“周圍正在發(fā)生的事情、事物的屬性以及事物發(fā)生的背景細節(jié)，諸如時間、地點、方式等等”。［9］(P86)人們使用語言將經(jīng)驗模式化，并將現(xiàn)實世界（包括內(nèi)心世界和外在世界）切分成一個個模式化的過程類型。及物系統(tǒng)將經(jīng)驗劃分為六個主要過程，即物質(zhì)過程、心理過程、關系過程、言語過程、行為過程和存在過程。每一個小句過程類型能反映出人類經(jīng)驗的某一個特定方面，其中物質(zhì)過程強調(diào)動作的過程，“這個過程本身一般由動態(tài)動詞來表示，動作者和動作的目標一般由名詞或代詞來表示”。［10］(P75)心理過程表達作為經(jīng)驗的感知者對物質(zhì)世界現(xiàn)象的認知和識解。關系過程強調(diào)對客觀事物的描述和識別，又可次分為歸屬和識別兩類關系，前者對客觀實體的屬性、性質(zhì)等進行闡釋；后者凸顯對實體和實體間關系的限定。言語過程一般是指通過講話言說達到信息交互作用的過程，參與者為說話者、受話者和言語內(nèi)容。行為過程強調(diào)主體有意識的生理及心理行為，一般只涉及一個參與者。而存在過程聚焦物質(zhì)世界實體存在的狀態(tài)。

在多模態(tài)敘事繪本中，語言文本承載了構建和呈現(xiàn)故事世界的重要任務，需要通過大量的概念意義的表征推動敘事發(fā)展以及表達人物和人物之間關系。對《郵遞員叔叔的奇遇》的語言文本進行及物性分析可以勾勒出語言系統(tǒng)構建的概念意義，語言語篇中的小句類型過程劃分如表1。

表1 《郵遞員叔叔的奇遇》中語言系統(tǒng)及物性分析

通過上述分析發(fā)現(xiàn)，該多模態(tài)繪本語言符號系統(tǒng)使用的最多小句類型為行動過程，主要包括物質(zhì)過程和行為過程，兩者的使用超過整個語言語篇小句使用的60%。這是由敘事繪本的敘事性決定的，這兩種小句過程類型強調(diào)故事主要人物（郵遞員和雪人）所采取的行為和動作，如，對郵遞員的描述采用了大量的動詞：送、推、走、騎、坐、拿開、打開等。這樣的過程類型有益于推動敘事進展，讓讀者逐漸清楚故事世界、人物關系和敘事發(fā)展走向。在故事的開篇部分，語篇中使用了兩個物質(zhì)小句：“可是郵遞員大關叔叔還得工作”和“他必須把今天到達的信件給村民們送過去”。這兩個物質(zhì)小句凸顯了郵遞員的在敘事中必須完成的行為動作以及其作為主角的敘事身份，導入了即將要開始的奇遇情節(jié)，從而建構了敘事的“指向部分”。在語言文本中，物質(zhì)過程和行為過程的使用給予讀者一種行為感和動作感，這樣的小句過程突出動作的施為者，往往與故事中的主要參與者緊密相關，使讀者得以進入敘事世界，持續(xù)關注事件的發(fā)展和人物的行動，并且做出反饋和猜測。在繪本語言文本中，除了行動過程能夠模擬和建構敘事繪本中的故事現(xiàn)實，作者還應用了一系列關系過程來實現(xiàn)認同功能。小句的關系過程是強調(diào)“是”（be）的過程，為讀者提供小句參與者及其屬性的相關信息。例如，故事開局部分使用了兩個關系小句“今天是大年三十”和“明天就是新年了”。這兩個小句通過動詞“是”達到連接小句中載體和屬性之間的關系，提供故事發(fā)展的時間信息，充當了敘事發(fā)展的“背景”作用。

（二）多模態(tài)語篇概念意義的圖文互補機制

多模態(tài)語篇中不同模態(tài)之間的關系是多模態(tài)話語研究的焦點問題。羅伊斯提出了符際互補理論，并研究探討了基于頁面的多模態(tài)語篇中不同符號系統(tǒng)之間的銜接關系，尤其是語言符號系統(tǒng)和圖像符號系統(tǒng)之間的互補關系。在概念意義層面上，符際互補理論區(qū)分了圖文兩種符號信息的表征模式?；谙到y(tǒng)功能語法，符際互補理論設置了一系列參數(shù)信息來表達語言符號系統(tǒng)中的概念意義和經(jīng)驗意義，分別為“過程類型”“參與者”“屬性”和“環(huán)境”。［6］(P72-85)圖像符號系統(tǒng)中信息表達的關鍵概念則為視覺信息元素，主要分為等同（圖像參與者）、行動（行為動作）、屬性（參與者的品質(zhì)和特性）以及環(huán)境（呈現(xiàn)的語境）等。為了研究概念意義層面的符號間互補銜接關系，筆者選擇包含動作的敘事圖像作為分析對象，該圖像位于繪本的第6頁面（雙頁版面），語言文本內(nèi)容左圖為“送完最后一封信，大關叔叔準備回家了，他走到自行車旁，發(fā)現(xiàn)雪人坐到了前面，雪人指指后座，示意他坐上去”。右圖為“哇！雪人騎自行車比開摩托車還快，大關叔叔伸出手，抱住了雪人的腰：喲，好冰喲”（下文均用左圖、右圖代表第6頁面文本中的內(nèi)容）。通過定位和挖掘語言元素和視覺信息元素所建立的語義聯(lián)系能夠更細致探討概念意義的圖文銜接機制。

繪本《郵遞員叔叔的奇遇》第6頁面中的視覺信息元素需要界定，這是由于視覺信息元素能夠在很大程度上承載和表達作者/創(chuàng)作者通過一連串視覺手段來實現(xiàn)的語義屬性，同時視覺信息元素構成了探索雙模態(tài)文本語言方面的重要參考。視覺信息元素主要包括：（1）參與者視覺信息元素。參與者視覺信息主要涉及圖像中的誰/什么是圖像中的參與者以及它們和誰/什么存在交際互動。一般來說，視覺圖像中最突出的參與者是通過他們面部表情和身體姿勢的視覺表征明確地呈現(xiàn)給讀者的。在這兩張圖像中，讀者看到了兩個主要的人物：雪人和郵遞員，他們的面部表情都被清晰地描繪出來了。除了兩個描述的人物(從故事敘述中推斷出的主角)，視覺框架中還展示了兩個相關的參與者：一輛自行車和一個掛在后座上的綠色郵袋。因而，在這一視覺圖像中，參與者可識別為“大關叔叔”“雪人”“自行車”和“郵袋”。（2）行動視覺信息元素。行動視覺信息關注被描述的參與者和接受者（或對象）之間發(fā)生的動作和行為。在繪本第6頁面左圖中我們可以看到，雪人坐在自行車上，并邀請郵遞員（從前面的圖像推斷）乘坐。繪本第6頁面右圖描述了雪人騎著自行車，郵遞員則坐在后座。因此，該視覺圖像中的行動視覺信息可梳理為“坐”和“騎”。（3）環(huán)境視覺信息元素。環(huán)境視覺信息是指視覺呈現(xiàn)的語境，是不同參與者之間動作發(fā)生的環(huán)境，主要充當背景說明的作用。在該視覺構架中，圖像參與者以及動作發(fā)生的語境為雪天，而繪本第6頁面左圖采用了去語境化的視覺技巧將讀者的注意力由環(huán)境背景轉移到所描述的參與者身上。（4）屬性視覺信息元素。作為視覺圖像中信息元素表征的最后一個重要因素，屬性信息是表達視覺框架中所描述的參與者的任何重要特征、屬性或品質(zhì)。在該雙頁圖像版面中，環(huán)境背景被描繪為冬天的一個下雪的日子，雪人作為故事的主要人物在視覺框架中被突出，而這些背景信息都有利于讀者推斷關于“冷”的屬性。視覺構圖中的另一個屬性是速度維度上的“快”的屬性，這可以從騎著的自行車和視覺背景對比下相對較小的房屋和樹木中推斷出來。將這些視覺信息元素界定之后，筆者對雙模態(tài)文本的概念意義符號銜接機制進行分析。通過分析得出，圖文符號系統(tǒng)之間存在重復類銜接機制14處，如大關叔叔在圖文模態(tài)中均有詳細的符號表征；搭配類銜接機制為13處，除此之外還存在3例“整體—部分”關系以及1例反義類銜接機制。

通過研究發(fā)現(xiàn)，兩個符號系統(tǒng)之間最顯著的銜接關系是通過重復（共14處）和搭配（共13處）來實現(xiàn)的。在語義維度上，語言符號系統(tǒng)中存在大量的詞匯項與圖像符號系統(tǒng)中的視覺信息元素所表征的經(jīng)驗意義關聯(lián)。這兩種模態(tài)中人物刻畫的重復銜接機制可使讀者關心故事中的主要人物和他們之間發(fā)生的奇遇，從而起到元敘事作用，促使讀者聚焦故事情節(jié)。同時，繪本第6頁面左圖中作者采用了接觸聚焦的視覺人際技巧使讀者與雪人產(chǎn)生眼神接觸，促使讀者與故事人物形成互動，不但強化了元敘事的本質(zhì)，也對語言文本中的小句“發(fā)現(xiàn)雪人坐到了前面”進行了補充和支撐。根據(jù)圖像的視覺表征，作為主人公的郵遞員并沒有出現(xiàn)在左圖中，這與語言文本并不對應。但有經(jīng)驗的讀者可以很容易地從雪人的身體動作（如指向后座）和面部表情（如微笑）推斷出他是在邀請郵遞員坐在自行車后座，以便載他一程。因此，它建立了語言文本和視覺文本之間的跨符號銜接關系。同樣，符號系統(tǒng)間的重復機制也被應用于闡釋視覺框架中兩個參與者之間發(fā)生的活動。語言文本中一系列動詞被反復使用，這些動詞被用于識別和照應活動視覺信息，提醒讀者持續(xù)關注視覺構圖中發(fā)生在參與者之間的行為動作以及識解這些動作的順序關系。此外，繪本第6頁面左圖中雪人向郵遞員發(fā)出邀請，激發(fā)讀者關于郵遞員是否接受邀請的敘事期望。而緊接著的視圖描畫了郵遞員坐在自行車后座的場景。這樣的視覺技巧滿足了視覺敘事框架中實現(xiàn)化的順序間事件關系，隨著敘事的進展，該視覺選項又進一步增強了視覺圖像和語言文本之間的跨符號銜接關系，以便為讀者理解故事提供一個更好的視角。

視覺構圖中使用較多的另一種符際互補機制為搭配機制。在語言文本中出現(xiàn)的首個小句“送完最后一封信”與視覺圖像中的郵袋視覺信息構成了符號間的搭配關系，突出了郵遞員即將開始的春節(jié)奇遇。雪人是該構圖中的另一個主要參與者，他的出現(xiàn)與“下雪天”的環(huán)境設置以及“冷”的屬性視覺信息元素密切相關。同時，在環(huán)境設置描述中選擇去語境化的視覺選項將讀者的注意力從關注背景信息轉化到聚焦雪人的外觀，強化了雪人的屬性（在此實例中為“冷”），并激發(fā)了讀者對雪人的評價：雖然雪人的身體很冷，但他樂于助人，內(nèi)心炙熱，根據(jù)研究分析可以發(fā)現(xiàn)，概念意義上的圖文銜接機制主要包括重復、同義、部分—整體指代關系和搭配等機制。其中，圖文重復和搭配機制是實現(xiàn)兩個系統(tǒng)概念意義構建和互補最為有效、使用最頻繁的銜接機制。

三、多模態(tài)語篇實例化：圖文概念意義投入研究

系統(tǒng)功能語言學中實例化研究旨在探討語言系統(tǒng)和具體實例的語篇之間關系。韓禮德經(jīng)常使用氣候和天氣之間關系的隱喻來解釋實例化研究，天氣是氣候系統(tǒng)中的一個個具體實例，而氣候是作為實例天氣的整體概括。隨著實例化研究的發(fā)展，研究者逐漸將重點從語言語篇實例化過程轉移到多符號/多模態(tài)語篇的實例化過程，并探討不同符號系統(tǒng)在語篇生成和意義創(chuàng)建過程中實現(xiàn)的意義潛勢總量。采用視覺敘事框架中的模態(tài)間“投入”分析框架對繪本《郵遞員叔叔的奇遇》第6頁（雙版面）進行圖文實例化分析有助于深入探索圖文系統(tǒng)語義賦值的異同之處。投入分析是指語篇實例化過程中語義系統(tǒng)所構建的意義總量，多模態(tài)語篇則要考查語篇意義潛勢實例化中表達和創(chuàng)建意義的所有語義系統(tǒng)，如語言、圖像、聲音和空間系統(tǒng)等。模態(tài)間的投入分析框架聚焦三個系統(tǒng)，即行動系統(tǒng)、角色系統(tǒng)和環(huán)境系統(tǒng)。行動系統(tǒng)包含圖文兩種符號系統(tǒng)所實現(xiàn)的行動意義、認知意義和事件間關系等。角色系統(tǒng)則涉及圖文符號系統(tǒng)如何構建參與者屬性、參與者形象表征和出現(xiàn)方式以及參與者之間的關系等。環(huán)境系統(tǒng)考量語篇中圖文模態(tài)中事件發(fā)生的背景和環(huán)境信息以及環(huán)境之間的關系（如環(huán)境背景的轉換或維持）。筆者以投入分析框架為理論基礎，對多模態(tài)敘事語篇共同實例化進行了分析，表2為兩種符號系統(tǒng)概念意義投入的圖式表征。

表2 圖文系統(tǒng)概念意義投入分析

首先，從行動系統(tǒng)來看，視覺概念意義的構建主要通過一系列不同的動作描繪來實現(xiàn)，如在繪本第6頁面左圖中，雪人坐在自行車上發(fā)出邀請，這個視覺意義能夠通過他的手的位置和指向以及未表征的凝視矢量才得以識別。盡管設定的接收者（郵遞員）在視覺圖像中沒有出現(xiàn)，讀者可以依據(jù)動作的矢量（如凝視的方向）做出推斷，他正在邀請某人坐在自行車的后座。而在繪本第6頁面右圖中，讀者可以看到雪人正在騎自行車，郵遞員坐在后座上，他的胳膊摟著雪人的腰。面向讀者相鄰的兩幅圖像表明兩個行為序列之間存在一種時間上的事件之間關系，亦可被識別為一種完成的關系?；顒禹樞驅用妫x者對下一個動作發(fā)生的期望在連續(xù)的圖像中也得以實現(xiàn)。兩個視覺頁面中差異的動作表達增強了兩個主角之間的緊密聯(lián)系，迎合了讀者們對故事的期待，凸顯了他們在奇遇中的親密關系。就語言系統(tǒng)而言，與活動相關的概念意義的闡釋是通過多種類型小句過程實現(xiàn)的，例如，一些動詞被用于識別故事中發(fā)生的活動，這些動詞和小句完成了語言系統(tǒng)概念意義的投入，告訴讀者此刻發(fā)生了什么。在此層面上，語言系統(tǒng)投入的概念意義多于圖像系統(tǒng)。郵遞員所采取的行動（如走向自行車，看著一個雪人坐在自行車上）的語言表達在圖像系統(tǒng)中沒有相應的視覺補充表達，讀者必須從身體動作和目光向量來推斷這種概念意義。同理，在視覺意義表征中，語言文本并未描述不同動作之間的擴展關系，這些動作間的關系是通過視覺傳達和詮釋的。

其次，構建概念意義的角色系統(tǒng)中，郵遞員和雪人都被完整地描繪出來，后者在故事的下一個事件中重復出現(xiàn)，這些能讓兒童讀者最大程度地識別故事的主角。讀者可以根據(jù)人物的服裝屬性、穿著的顏色、大小等推斷出更多的人物信息（如年齡、種族、職業(yè)甚至社會階層）。對中國讀者來說，通過綠色的制服和帽子以及綠色的郵袋，很容易推斷出主角的職業(yè)。值得注意的是，對郵遞員和雪人的描繪采用了緊密相鄰的視覺布局，突出人物之間的友好關系，為接下來的敘述奠定基礎。

最后，就環(huán)境設定系統(tǒng)而言，視覺構成的繪本第6頁面左圖選取了去語境化的視覺表達，通過刪除背景設置以突出所描述的參與者。右圖中視覺重新語境化技巧的選用具有將讀者帶入故事世界并參與敘事事件的功能。故事環(huán)境背景的快速切換發(fā)揮了管理讀者注意力的作用，投入了不同程度的概念意義。與視覺圖像相比，語言文本中存在著概念意義投入差異。而語言文本對視覺參與者的人物形象描述基本沒有任何提及，僅有一個關于雪人屬性的隱性心理投射小句“喲，好冰哦”。這個投射小句是郵遞員在擁抱雪人時，為了分享他對雪人溫暖的感覺而發(fā)出的。而在視覺圖像中，讀者幾乎不可能推斷出這種心理投射，只能從郵遞員的凝視矢量及對雪人的經(jīng)驗認知中推斷出這種屬性。同樣，圖像系統(tǒng)中環(huán)境間關系在語言系統(tǒng)中沒有相同的闡述，讀者只能從視覺圖像中推斷出一系列不同動作之間的銜接關系以及在兩種不同語境下動作的銜接程度。

因此，就視覺系統(tǒng)和語言系統(tǒng)在概念意義層面上的投入而言，我們可以得出以下結論：在屬性、人物表征、關系、事件間關系和環(huán)境間關系等方面，圖像投入的概念意義比語言文本所投入的概念意義更多；同時，語言文本也投入了一定程度的概念意義，而這些在視覺文本中是無法表達的（如在行動和環(huán)境方面）。語言符號系統(tǒng)和視覺符號系統(tǒng)在概念意義投入層面上存在分歧，呈現(xiàn)出不均勻和差異化的語義賦值。

四、結語

探討多模態(tài)敘事語篇中圖文符號系統(tǒng)概念意義創(chuàng)建，采用功能語言學相關概念對多模態(tài)繪本《郵遞員叔叔的奇遇》中語言系統(tǒng)進行及物性分析，結合符際互補理論挖掘圖文系統(tǒng)間的跨符號互補機制，是圖文關系研究的一次積極話語實踐。本研究發(fā)現(xiàn)，圖文系統(tǒng)存在最為突出的概念意義銜接機制為重復機制和搭配機制。這是由兒童繪本這一特殊多模態(tài)語篇屬性及其預期讀者所決定的，通過詞匯項目/標簽與視覺信息表征的概念意義形成重復，達到提醒讀者故事世界和人物的敘事功能。同時結合語篇實例化的分析方法，探索圖文系統(tǒng)各自的語義賦值，是圖文互補研究的本土化嘗試，期望為探索多模態(tài)敘事話語提供新的視角和方法，為多模態(tài)作品創(chuàng)作、解讀和闡釋提供有益的啟示。

注釋：

①本文所選繪本《郵遞員叔叔的奇遇》，作者鄭春華，少年兒童出版社2013年版。