（浙江工商大學 外國語學院，浙江 杭州 310018）

引言

Lakoff和Johnson在《我們賴以生存的隱喻》一書中提出了概念隱喻理論（Conceptual Metaphor Theory），引發(fā)了隱喻的認知革命，人們對隱喻的研究開始從語言層面轉(zhuǎn)向認知層面，掀起了隱喻研究的一場認知熱潮。隱喻普遍存在于我們的話語、思維和行為之中，隱喻的實質(zhì)是以一種事物來理解另外一種事物[1]。隱喻認知不僅體現(xiàn)在語言模態(tài)，同時也是圖像、手勢、聲音等其他交際媒介背后的認知機制[2]。換言之，隱喻成為寓于視覺、聽覺、文字、圖片及其他媒介實現(xiàn)意義的傳達手段，多模態(tài)隱喻研究應運而生。Forceville&Urios-Aparisi[3]出版的專著《多模態(tài)隱喻》詳細地呈現(xiàn)了多模態(tài)隱喻領(lǐng)域的最新研究成果，昭示著多模態(tài)隱喻理論逐步走向成熟。

國內(nèi)也有學者對多模態(tài)隱喻研究的概況進行了一定的梳理，如陳彥瑞[4]曾對多模態(tài)隱喻的發(fā)展做了總結(jié)，指出了多模態(tài)隱喻研究的某些不足。馮德正和張德祿[5]對近20年來多模態(tài)語篇的研究視角、方法與內(nèi)容展開評述，指出多模態(tài)研究從語言學理論到多模態(tài)表意資源的跨學科系統(tǒng)闡釋與實證研究轉(zhuǎn)向。陳風華和胡冬梅[6]采用信息計量學CiteSpace可視化技術(shù)，分析了1998-2017年20年間國內(nèi)和國際期刊多模態(tài)隱喻文獻數(shù)據(jù)，系統(tǒng)考察了多模態(tài)隱喻研究的現(xiàn)狀與發(fā)展趨勢。研究表明，當前豐富多樣的多模態(tài)語篇研究融合各學科理論，結(jié)合數(shù)字技術(shù)等新型研究工具和方法，逐漸被應用于課堂教學、廣告?zhèn)髅健⒎ㄍマq論等各種社會行為和語篇的研究[5]。但上述研究都是有關(guān)多模態(tài)隱喻多個方面的宏觀梳理，針對多模態(tài)隱喻的理論問題和前景進行專門論述的文獻尚不多見。實際上，雖然多模態(tài)隱喻理論已經(jīng)提出多年，但至今，尚未形成完善的多模態(tài)隱喻理論框架[7]。

鑒于此，本文對多模態(tài)隱喻前沿理論進行梳理和述評，著重聚焦概念隱喻、視覺語法、關(guān)聯(lián)理論和概念整合四大前沿理論，對它們的優(yōu)勢與局限進行論證，并對多模態(tài)隱喻理論將來的發(fā)展趨勢作出理論預測，旨在為多模態(tài)隱喻理論研究提供參考。

一、多模態(tài)與多模態(tài)隱喻的界定及研究綜觀

模態(tài)是“由特定的感知過程所闡釋的符號系統(tǒng)”[8]22-23，多模態(tài)交際指的是“交流和表達總是依靠包括語言在內(nèi)的多種符號模態(tài)實現(xiàn)”[9]。隨著多模態(tài)研究的深入發(fā)展，其理論與應用研究日益呈現(xiàn)多學科、多領(lǐng)域相結(jié)合的發(fā)展態(tài)勢，產(chǎn)生了豐富的研究成果。如Jewitt[10]從視覺研究、人類學與社會語言學的多模態(tài)要素互動出發(fā)，對各領(lǐng)域的多模態(tài)理論和應用研究進行了總結(jié)。Ventola和 Moya結(jié)合了視覺和“媒體導向的世界”[11]1文本，來處理多模態(tài)文字圖像中系統(tǒng)和結(jié)構(gòu)的關(guān)系。文學文本中各多模態(tài)要素的角色和其產(chǎn)生的認知影響也受到了重視[12]，為文學文本的排版和插圖提供了更好的闡釋。近年來，社會符號學、認知詩學、心理語言學和神經(jīng)語言學等多個學科開始互相結(jié)合，都試圖把多模態(tài)研究置于更宏觀的視域下，從更廣泛的視角進行多模態(tài)意義構(gòu)建，為多模態(tài)跨學科研究提供新的分析框架與理論視野。在語言學的研究范式下，多模態(tài)隱喻的理論和應用層面研究都呈現(xiàn)出多元化的發(fā)展態(tài)勢。例如，Kress&Leeuwen[13]以韓禮德（Halliday）的系統(tǒng)功能語言學為基礎(chǔ)，建構(gòu)了一個較為系統(tǒng)的視覺圖像語法分析框架，為多模態(tài)話語分析提供了新的思路。

隱喻的多模態(tài)研究始于Charles Forcevill，他將概念隱喻理論延伸至非語言模態(tài)，提出了“多模態(tài)隱喻”，指出語言只是眾多交際符號中的一種，包括聲音、手勢、線條、音樂、圖像、顏色、文字視覺聯(lián)系、空間布局等在內(nèi)的其他的交際媒介或手段也可以用來構(gòu)建和表達概念[3]。之后，多模態(tài)隱喻研究日益專門化，涌現(xiàn)出一大批結(jié)合各種語類的多模態(tài)隱喻案例研究，包括廣告、漫畫、音樂、手勢語和電影等?？v觀文獻發(fā)現(xiàn)，這些研究運用的主要理論模型是概念隱喻理論、視覺語法理論、關(guān)聯(lián)理論以及概念整合理論?？傊?，與一般的多模態(tài)研究的發(fā)展趨勢一致，多模態(tài)隱喻的研究日益成為一個多學科關(guān)注的熱點課題，逐步超越了單純的現(xiàn)象描寫階段，逐步走向深入解釋層面，理論建構(gòu)的重要性日益凸顯[14]。下文詳析多模態(tài)隱喻四大理論研究及各自存在的問題。

二、多模態(tài)隱喻的主流理論模型及問題

多模態(tài)隱喻的主要前沿理論有概念隱喻、視覺語法、關(guān)聯(lián)理論以及概念整合四大理論模型[15]。

（一）概念隱喻理論框架下的多模態(tài)隱喻解釋思路及存在的問題

1.概念隱喻理論與多模態(tài)隱喻

認知語言學的概念隱喻理論開啟了一個全新的隱喻研究視角。隱喻被分為語言隱喻和概念隱喻。語言隱喻是人們頭腦中概念的隱喻性組織方式（即概念隱喻）的反映。概念隱喻是一種思維、經(jīng)驗和行為方式，普遍存在于人類的思想和行動中[1]3。概念隱喻主要包括源域和目標域，其中，目標域較為抽象，源域是人們比較熟悉的事物，隱喻認知過程就是從源域到目標域的系統(tǒng)映射過程[16]。Forceville[2]109-145基于平面廣告提出，圖像隱喻也是一種概念層面的隱喻，圖像隱喻分為源域替代目標域、源域和目標域融為一體以及源域與目標域并置（圖像明喻）三種類型，可以結(jié)合互動理論對圖像隱喻的構(gòu)成和分類進行闡釋。既然視覺隱喻可以以視覺圖像為實現(xiàn)形式，那么其它交際媒介如圖像、線條、顏色、手勢、聲音等都可以成為概念隱喻的傳達，隱喻研究逐漸走向多模態(tài)便成為必然。多模態(tài)隱喻理論將概念隱喻理論應用于闡釋視覺圖像中的隱喻現(xiàn)象并描述多模態(tài)語篇中出現(xiàn)的隱喻類型[17]，通過區(qū)分語言隱喻與多模態(tài)隱喻，使純語言學領(lǐng)域的概念隱喻研究拓展到跨學科的多模態(tài)研究平臺，彌補了認知語言學界單純依賴語言符號構(gòu)建概念隱喻理論的缺陷[14]，極大地拓寬了隱喻研究的范圍。

2.存在的問題

概念隱喻是多模態(tài)隱喻研究的前提，多模態(tài)隱喻的動態(tài)性和敘事性為多模態(tài)隱喻的系統(tǒng)研究奠定了基礎(chǔ)[14]，但完全依靠概念隱喻對多模態(tài)隱喻的闡釋是遠遠不夠的。

首先，在Forceville[2]148-161所論述的圖文隱喻中，他只是指出此類隱喻的存在并用三個例子說明源域、目標域與映射項，但個例分析并不能從抽象層面說明圖文多模態(tài)隱喻的工作機制，也未能概括圖文隱喻的類型[17]。其次，概念隱喻的映射具有單向性的特點，即從可及性較強的概念域向可及性較弱的概念域映射更為自然，認知主體通常是用更為熟悉的、更具體的概念去理解相對陌生的、較抽象的概念[18]，比如TIME IS MONEY，ANGER IS FIRE，LOVE IS A JOURNEY等概念隱喻都是通過具體的概念來解釋抽象的概念。另外，概念隱喻理論對心智的體驗性和認知的無意識性研究也表明，認知主體通過感覺運動系統(tǒng)對客觀世界直接體驗，進而建立字面（和模態(tài)）意義與隱喻意義之間的聯(lián)系，形成“具體到抽象”的概念映射。概念隱喻理論的這一解釋思路直接忽視了“具體到具體”類型的多模態(tài)隱喻映射。再次，概念隱喻理論將概念隱喻分為本體隱喻、結(jié)構(gòu)性隱喻和方位隱喻[1]。這種三分法簡潔易懂，但由于缺少統(tǒng)一的分類標準，以至于三類之間存在著重疊和交叉，隱喻的抽象程度也并不相同[19]。這種隱喻分類方法能否窮盡式地囊括多模態(tài)隱喻，還是一個懸而未決的問題。最后，概念隱喻理論本身也存在一些問題，如隱喻映射的單向性、持續(xù)的深層映射、隱喻到底是基于相似性還是具身經(jīng)驗、隱喻的唯一性、喻體的直接體驗性、經(jīng)驗和概念之間體驗性的證據(jù)等[20]，也對概念隱喻理論的多模態(tài)解釋力提出了質(zhì)疑。因此，概念隱喻視域下的多模態(tài)隱喻亟需結(jié)合更多理論模型，構(gòu)建出一個動態(tài)的、具有高度可操作性的多模態(tài)隱喻認知運作模式。

（二）視覺語法理論框架下的多模態(tài)隱喻研究及存在的問題

1.視覺語法與多模態(tài)隱喻

多模態(tài)話語是“一種融合文字、聲音、圖像、動畫等多種交流模態(tài)來傳遞信息的語篇”[21]。在真實的交際中，話語的一個重要特征是其多模態(tài)呈現(xiàn)[21]2，因此，話語分析不再局限于傳統(tǒng)語言學的分析方法。話語從本質(zhì)上說是多模態(tài)，而非單模態(tài)，因為話語意義構(gòu)建與傳遞是可通過多渠道和模態(tài)來交換信息和處理各種關(guān)系[22]4-8，而圖像作為一種社會符號，是非語言模態(tài)交換信息和處理關(guān)系常用的渠道之一。功能語言學中的系統(tǒng)功能思想可以延伸到視覺圖像模式，即圖像的視覺語法（The Visual-semiotic Model），包括再現(xiàn)意義、互動意義和構(gòu)圖意義，分別對應功能語言學中三大語言元功能——概念意義、人際意義和語篇意義[21]。視覺語法側(cè)重視覺話語中空間關(guān)系的解釋，而對背后的深層認知理據(jù)重視不足，這種僅在系統(tǒng)功能符號學框架內(nèi)的研究范式很難回答“空間關(guān)系如何構(gòu)建意義”這個問題[23]。與此同時，隱喻作為人類認知外部世界的有力認知工具，在人類的思維推理過程中發(fā)揮著重要作用[24]。因此，認知隱喻和視覺語法在多模態(tài)意義構(gòu)建上的理論整合就變得順理成章，也逐步成為國內(nèi)外視覺語法的研究熱點。

2.存在的問題

視覺語法理論為綜合、系統(tǒng)地闡釋多模態(tài)話語中的意義建構(gòu)與表意方式提供了有力的理論基礎(chǔ)和分析工具[25]，但同時也存在問題。首先，就圖像分類而言，Kress&van Leeuwen將圖像分為兩類：“索取”圖像和“提供”圖像。前者指圖像中描繪的人物通過眼神接觸或姿勢向讀者索取信息或服務；后者指圖像資源（面部表情和身體站位等）為讀者提供信息或服務[25]。但這兩類圖像對圖像與讀者之間關(guān)系復雜性的解釋過于簡單[26]，不能建構(gòu)明確的索取和提供關(guān)系，有眼神接觸的圖像與小句中的疑問語氣或祈使語氣也不是等同關(guān)系[27]9。其次，視覺語法本身也存在四大不足[28]：“敘述再現(xiàn)”的分類不具有互補性；“接觸”的結(jié)構(gòu)生搬硬套，實際應用性不強；“情態(tài)”的設(shè)計不具有系統(tǒng)性；判斷圖像元素重要性時忽略了元素本身的社會屬性。最后，除了依靠顯著性和信息值，視覺語法理論模型下的多模態(tài)隱喻話語分析尚需結(jié)合圖像的社會屬性與自身屬性，關(guān)注并探討敘述再現(xiàn)的動作、思維和言語過程。

（三）關(guān)聯(lián)理論框架下的多模態(tài)隱喻研究及存在的問題

1.關(guān)聯(lián)理論與多模態(tài)隱喻

關(guān)聯(lián)理論認為隱喻的理解是一種明示推理過程，隱喻義是一種弱隱義[29]。無論是運用語言符號還是其它非語言符號進行交際，人類交際的實質(zhì)是推理交際，即，發(fā)話方呈現(xiàn)其交際意圖的語言或非語言符號，受話方則依據(jù)這些符號并結(jié)合語境推導出發(fā)話方的交際意圖[30]，因此，隱喻交際和其他語言交際方式一樣，都受關(guān)聯(lián)原則指引[31]。在實際生活中,人們總是采用各種非語言模態(tài)來補充語言模態(tài)以更加準確和高效地傳遞交際意圖，所以將解釋人類交際的關(guān)聯(lián)理論應用到多模態(tài)分析,不僅會檢驗和拓展關(guān)聯(lián)理論的解釋力,同時可以充實現(xiàn)有理論,彌補現(xiàn)有理論的不足[32]。因此，國際上出現(xiàn)了大量用關(guān)聯(lián)理論來分析隱喻的研究文獻。國內(nèi)學者在這方面也逐漸與國際同步，例如孫小倩[33]論證了關(guān)聯(lián)理論對廣告中多模態(tài)隱喻的解釋力。廣告通過圖像、文字以多模態(tài)隱喻的形式呈現(xiàn)，尋求廣告信息和讀者認知的最佳關(guān)聯(lián)，促使讀者自發(fā)尋求多模態(tài)隱喻的最佳解釋，從而理解廣告意圖。再比如，孫煥橋[34]基于關(guān)聯(lián)理論構(gòu)筑了一個電影隱含多模態(tài)分析框架，并運用該框架對電影中的兩個隱含情節(jié)進行研究，指出兩個情節(jié)的懸念與喜劇敘事效果。

2.存在的問題

通過最佳關(guān)聯(lián)和明示推理模式，關(guān)聯(lián)理論在多模態(tài)隱喻的解讀過程中發(fā)揮了重要作用。但是，關(guān)聯(lián)理論過于籠統(tǒng),在實際運用中無法具體操作[35]。關(guān)聯(lián)理論只根據(jù)語境效果和認知投入來衡量多模態(tài)隱喻的關(guān)聯(lián)性,但沒有給出一個具體化的、容易操作或計算的標準[36]35。此外，在用關(guān)聯(lián)理論分析多模態(tài)隱喻時如何量化？受眾在理解多模態(tài)隱喻時的認知投入與語境效果之間如何取得平衡？標準是什么？如何斷定？這些都是關(guān)聯(lián)理論視域下多模態(tài)隱喻研究面臨的具體問題，也是未來需要攻克的難點課題。

（四）概念整合理論框架下的多模態(tài)隱喻研究及存在的問題

1.概念整合理論與多模態(tài)隱喻

Fauconnier[37]將隱喻機制與其他語言現(xiàn)象和認知現(xiàn)象打通，將概念隱喻提出的雙域映射模式升級為四空間模式，提出了概念整合理論，該理論已初步成為話語理解和話語管理的一個綜合性認知理論。它認為在話語理解過程中，大腦會激活關(guān)于人、事物和事件的各種語言和非語言的知識框架，并存儲在工作記憶中[38]。這些儲存在思維中臨時的、在線的話語信息的集合被稱為心理空間，是概念整合理論的基石。概念整合理論就是在探究話語展開過程中各種心理空間的構(gòu)建和它們之間的連接關(guān)系[39]。在模態(tài)符號的整合過程中，非語言符號的非線性特征使多模態(tài)符號在空間上向多維、多方向擴展[40]，在多模態(tài)隱喻中，由形狀、線條、構(gòu)圖、顏色、動作行為、角度等模態(tài)呈現(xiàn)出的始源域與目標域之間的映射路徑也需要運用概念整合運作機制。趙秀鳳[14]分析了Forceville關(guān)于模態(tài)分類、多模態(tài)隱喻界定及雙域映射模型的不足，在重新界定與分類的基礎(chǔ)上提出了多模態(tài)隱喻構(gòu)建的概念整合模型。她以一篇政治漫畫語篇為例，把符號表征空間、語用關(guān)聯(lián)空間、輸入空間內(nèi)部與跨空間之間的多層空間映射和互動整合納入到一個綜合體系，指出了多模態(tài)隱喻的概念意義、情感效果、審美或評價效果的動態(tài)生成過程。朱嫣然和鄭燕[41]在概念整合理論的框架內(nèi)，以政治漫畫為語料，探析了多模態(tài)隱喻在整合網(wǎng)絡(luò)中的意義構(gòu)建。他們指出，多模態(tài)隱喻意義的構(gòu)建并不是從源域到目標域的單向操作，而是具有多向性的動態(tài)建構(gòu)過程。孫毅和周婧[42]在多模態(tài)隱喻理論基礎(chǔ)上，將概念隱喻理論和概念整合理論相結(jié)合，選取了典型的國旗隱喻個案加以闡析，詮釋了多模態(tài)隱喻整體意義的構(gòu)建過程。

2.存在的問題

盡管概念整合理論能對多模態(tài)隱喻意義構(gòu)建過程中的認知機制進行相對細致的解釋，它也存在一定的問題。孟霞指出：“整合空間概念適用于整個語言意義的建構(gòu)而不僅僅是在具體的篇章之中，導致了該理論在很大程度上喪失了自己的獨創(chuàng)性和新意?！盵43]6另外，隨著研究不斷深入，概念整合理論應用研究的范圍可以更廣，研究方法可以更為系統(tǒng)，操作過程可以更加細化[44]。如，在多模態(tài)隱喻分析中，相關(guān)隱喻信息首先進入輸入空間，那么哪些隱喻信息會進入輸入空間？哪些隱喻信息不會進入輸入空間？隱喻信息篩選的標準是什么？進入輸入空間的隱喻信息成分又是如何相互映射、協(xié)調(diào)運作的？同樣，層創(chuàng)結(jié)構(gòu)（Emergent Structure）產(chǎn)生的合成空間也面臨著相似的問題。面對此類不可回避的問題，概念整合理論視域下的多模態(tài)隱喻研究尚需細化。

三、多模態(tài)隱喻的理論研究趨勢與展望

多模態(tài)隱喻的四大主流理論都既有各自的優(yōu)勢，又存在問題。綜合國內(nèi)多模態(tài)隱喻理論和應用研究現(xiàn)狀，未來的多模態(tài)隱喻理論研究可以考慮從下面幾個方面進行拓展和深化。

（一）理論框架的深入和完善趨勢

首先，多模態(tài)隱喻研究急需形成一套完整、系統(tǒng)的理論體系[4]。已有的相關(guān)研究大多是沿用概念隱喻理論、視覺語法理論、關(guān)聯(lián)理論、概念整合等理論范式，也有少數(shù)學者把轉(zhuǎn)喻和轉(zhuǎn)喻理論加以整合。如黃彬瑤[45]采用認知語言學的研究范式，以中國中央電視臺制作的公益廣告為例，分析廣告中所包含的多模態(tài)隱、轉(zhuǎn)喻，著重考察了隱、轉(zhuǎn)喻是如何通過圖像、聲音以及話語等多種方式動態(tài)呈現(xiàn)的。隨著研究的深入，傳統(tǒng)多模態(tài)隱喻理論研究將需要得到進一步強化。如概念隱喻理論在深化對多模態(tài)隱喻深層映射闡釋與動態(tài)認知運作模式的同時，需要闡釋如何通過結(jié)合圖像的社會屬性與自身屬性來闡釋圖像與讀者的關(guān)系、建構(gòu)明確的索取和提供關(guān)系；關(guān)聯(lián)理論中的關(guān)聯(lián)原則具體量化、采取何種操作標準；以及整合空間概念操作過程的細化等，這些都是目前多模態(tài)隱喻現(xiàn)有理論完善亟需解決的問題。其次，無論是傳統(tǒng)的還是新構(gòu)建的多模態(tài)隱喻模型，其理論應用范圍將需要拓展。語類多樣化是當今多媒體時代的必然趨勢，理論應用必將從傳統(tǒng)的廣告、漫畫、海報等語言-聽覺-視覺隱喻性表達到動畫、樂譜、繪本、電影、戲劇、雕塑，甚至有關(guān)味道、接觸等復雜模態(tài)語類中的隱喻研究。如陳嫻[46]從圖像、顏色、聲音和文字符號四種模態(tài)入手，透過臺州海洋民俗文化中的多模態(tài)隱喻現(xiàn)象，挖掘臺州人頑強拼搏的海洋精神及期盼海上作業(yè)風順興旺的海洋信念，闡釋了多模態(tài)隱喻呈現(xiàn)出的模態(tài)相輔、意義決定和信息傳遞三大特征，這是將多模態(tài)隱喻理論深化到民俗文化闡釋應用的典型案例。

（二）理論視角的開放性和多樣化趨勢

隨著多模態(tài)隱喻研究的不斷深入，多模態(tài)隱喻理論也將從追隨或沿用傳統(tǒng)模式轉(zhuǎn)變?yōu)楦矣谫|(zhì)疑和理論創(chuàng)新，打破原有的框架束縛與學科局限，從更開放、多元的視角進行理論構(gòu)建與細化，開啟新的研究范式。如體驗哲學、認知詩學、傳播學、心理學、信息科學、交互社會學等跨學科跨領(lǐng)域的多模態(tài)隱喻模型將不斷融合。如陳松云和楊勁松[47]從意義建構(gòu)的認知理據(jù)出發(fā)，指出多模態(tài)隱喻是身體、感知、體驗、大腦和心智的共同產(chǎn)物,是以體驗哲學為基礎(chǔ)研究人類心智和認知的哲學方法，意義、表達與結(jié)構(gòu)的三維統(tǒng)一，形成哲學的重要思辨，而多模態(tài)隱喻意義的建構(gòu)也在這個統(tǒng)一過程中完成。這是體驗哲學與多模態(tài)隱喻理論相結(jié)合的典范。但是在兩者的結(jié)合中，多模態(tài)隱喻與體驗、心智的具體關(guān)系、多模態(tài)語篇的轉(zhuǎn)、隱喻配置與哲學理論的配置、多模態(tài)隱喻體驗性表征形式與內(nèi)容等都是未來研究需要解決的問題。此外，未來多模態(tài)隱喻的跨學科理論范式中還面臨一些具體的課題，如，詩學象似性的多模態(tài)表征創(chuàng)造出何種閱讀和審美體驗模式？如何闡釋動態(tài)語篇等更復雜的符號與行為體系？多模態(tài)隱喻的媒介特性及其所肩負的輿論傳導功能如何實現(xiàn)？這些課題都是多模態(tài)隱喻理論創(chuàng)新和體系完善所要努力的方向。

（三）理論檢驗的科學性和多元化趨勢

近年來，在多媒體與信息科學技術(shù)的不斷發(fā)展下，認知語言學界從早期的內(nèi)省和思辨逐漸轉(zhuǎn)向?qū)嶒灪徒y(tǒng)計實證研究，開始采用實證法、類比法、比較分析法等對各語篇中的多模態(tài)隱喻類型及表現(xiàn)方式進行分析，涌現(xiàn)出大量實證研究成果。2003年，國際認知語言學會成立了認知語言學實證方法工作坊（EmpiricalMethodsinCognitive Linguistics，簡稱 EMCL），更是反映出實證研究在認知語言學界越來越重要的地位，推動了大量實證研究成果的誕生[4]。多模態(tài)隱喻研究可以借助事件相關(guān)電位（ERP）、功能性磁共振成像（fMRI）、多模態(tài)語料庫檢索等多樣化科技手段，使研究成果更具說服力。Baldry&Thibault（2008）建立了基于XML的在線多模態(tài)檢索器（Multimodal Corpus Authoring，簡稱MCA），實現(xiàn)了對多模態(tài)數(shù)據(jù)的搜索、注釋與定量分析。對有關(guān)多模態(tài)隱喻理解的理論模型進行實證檢驗也開始受到重視，如Ma,QG等人[48]探討了ERP與時頻成分（Time-Frequency Components）和多模態(tài)隱喻理解過程的相關(guān)性，實驗選用動物詞表示圖片中的車輛隱喻，根據(jù)腦電圖振幅數(shù)據(jù)判定隱喻使用是否恰當，揭示了多模態(tài)隱喻理解過程中delta和θ的功能作用及其對ERP成分的獨特貢獻。該研究指出，多模態(tài)隱喻理解的具體認知機制與言語隱喻的認知加工不同，它反映在多模態(tài)隱喻理解中，由ERP成分和時頻成分所標示的多個可分離過程所反映出來，大大豐富了多模態(tài)隱喻實證研究。

“多模態(tài)隱喻語篇分析是一個開放的、具有天然跨學科性質(zhì)的研究領(lǐng)域，允許從不同的層面與角度進行研究”[17]96。雖然當前多模態(tài)隱喻理論研究存在一定的問題，但其理論框架會不斷趨于深入和完善，理論視角也會更加開放和多樣，理論檢驗的科學和多元必然是未來的研究趨勢。總而言之，隨著各學科研究視角的融合以及實證研究的不斷深入，未來多模態(tài)隱喻跨學科理論體系會進一步完善，并結(jié)合實際各領(lǐng)域得到切實的運用。