現(xiàn)基于多模態(tài)話語分析中的視覺語法分析理論，以北京冬奧會開幕式短片《倒計時：立春》為語料，從多模態(tài)話語分析的三個方面——再現(xiàn)意義、互動意義和構(gòu)圖意義探討文字、圖像和顏色等多模態(tài)符號在其中的作用，挖掘各社會符號之間的互相補(bǔ)充功能，探討多模態(tài)話語分析模式在中國農(nóng)耕文化建構(gòu)中的作用和意義。建立多模態(tài)話語分析體系為分析各模態(tài)提供了理論框架和實(shí)踐工具，為跨文化傳播提供了更多可能性。

自20世紀(jì)90年代以來，數(shù)字時代蓬勃發(fā)展，當(dāng)代世界呈現(xiàn)出多元空間模式，傳統(tǒng)的文字載體已經(jīng)無法適應(yīng)時代的需要，人們需要通過整合符號資源達(dá)到建構(gòu)多維完整信息庫的目的。各種社會符號進(jìn)行融合構(gòu)成的多模態(tài)話語體系為思考事實(shí)、表達(dá)思想和抒發(fā)情感提供了新的啟發(fā)，其將世界進(jìn)行分類、構(gòu)建、縮放和著色。在全球化大環(huán)境下，全面敘述中華故事，讓中華文化“走出去”，建設(shè)具有中國特色的話語體系迫在眉睫。鑒于此，本文聚焦于2022年北京冬季奧運(yùn)會的數(shù)字動態(tài)視頻，以北京冬奧會開幕式短片《倒計時：立春》為語料，以視覺語法分析理論為框架，探討多模態(tài)話語分析模式在中國農(nóng)耕文化建構(gòu)中的意義和作用。

多模態(tài)話語分析

通過系統(tǒng)功能語言學(xué)建構(gòu)的理論框架和研究方法，多模態(tài)話語已經(jīng)成為語言符號和非語言符號的一種組合形式，包括文字、圖像、音效等表現(xiàn)形式。這種話語模式的逐步發(fā)展意味著從單模態(tài)到多模態(tài)的轉(zhuǎn)變。多模態(tài)話語對文字語言進(jìn)行了延伸，對文化內(nèi)涵進(jìn)行了拓展，并以全方位、多層次的方式來解構(gòu)再重構(gòu)現(xiàn)實(shí)世界的感知和實(shí)踐經(jīng)驗(yàn)的描述。

跨文化傳播離不開話語分析，傳統(tǒng)的話語分析聚焦于文字文本形式，而忽視了觀照多種媒介共存共榮的作用，忽略了從整體角度分析各類符號所組成的表意系統(tǒng)與話語意義。數(shù)字融媒體顛覆式改變了人類交往模式，縮短了虛擬與現(xiàn)實(shí)的社交距離，多模態(tài)話語分析系統(tǒng)正在借助其解構(gòu)、重建新的話語分析體系，逐漸跨越語言學(xué)的學(xué)科范疇，擴(kuò)展到社會學(xué)、人類學(xué)、政治學(xué)等領(lǐng)域。多模態(tài)話語研究對象也從文字逐步擴(kuò)展至配樂、圖像、字體字號等社會符號系統(tǒng)。人文與科技“水乳交融”、文化與技術(shù)動態(tài)交互轉(zhuǎn)述與描述了多維鏡像，不斷重塑現(xiàn)實(shí)世界的話語體系。

Kress和Van Leeuwen提出了多模態(tài)話語分析理論，該理論基于語言的社會象征意義，將Halliday系統(tǒng)功能語法中的元功能理論擴(kuò)展到視覺傳達(dá)模式。視覺語法可用于分析圖像的組合方式，包括再現(xiàn)功能、互動功能及構(gòu)圖功能。本文所研究的視頻短片是由多個符號組成的多模態(tài)話語文本，視覺語法可將語言及其他語義資源有機(jī)結(jié)合，構(gòu)建系統(tǒng)框架，這有助于整體解讀北京冬奧會奧運(yùn)動態(tài)語篇的話語意義，并實(shí)現(xiàn)綜合運(yùn)用多模態(tài)傳播中國農(nóng)耕文化的交際目標(biāo)。

本論文所探討的視頻短片是由多個符號組成的多模態(tài)話語文本。視覺語法將語言及相關(guān)的語義資源有機(jī)地結(jié)合在一起，構(gòu)建系統(tǒng)的框架。這為整體系統(tǒng)解讀該奧運(yùn)動態(tài)語篇的話語意義提供了理論基礎(chǔ)，有助于實(shí)現(xiàn)綜合運(yùn)用多模態(tài)傳播中國農(nóng)耕文化的交際目標(biāo)。

多模態(tài)話語分析視域下《倒計時：立春》對中國農(nóng)耕文化的建構(gòu)

視覺層面

再現(xiàn)意義是構(gòu)成多模式語篇的基礎(chǔ)，與Halliday的概念功能相對應(yīng)。再現(xiàn)意義注重圖像中各個符號之間的概念關(guān)系或交際關(guān)系，并以圖像是否含有矢量為標(biāo)準(zhǔn)將其分為敘事再現(xiàn)及概念再現(xiàn)。

在《倒計時：立春》中，敘事再現(xiàn)的行動過程的圖像較為顯著，主要用于視覺凸顯中國地大物博的自然風(fēng)光，通過賽場和民間兩個場景展現(xiàn)中國的文化形象。視頻短片中“00：02：41”處是典型的敘事過程中的行動過程，為一名教練在教導(dǎo)數(shù)名中國兒童練習(xí)滑冰。在該畫面中，數(shù)名兒童的軀干和頭部形成多條直線，與訓(xùn)練場館的房梁所形成的右斜線相呼應(yīng)，成為指向畫面外終點(diǎn)的矢量。結(jié)合文本“春種一粒粟，秋收萬顆子”來看，該畫面展示了中國民眾勤懇耕耘的勞作之美。

有別于敘事再現(xiàn)，概念再現(xiàn)中沒有矢量。視頻《倒計時：立春》中存在大量象征過程。譬如，“00：00：17”和“00：00：20”處的圖像分別通過“下雨”和“運(yùn)動員汗水滴落”的畫面與“隨風(fēng)潛入夜，潤物細(xì)無聲”的詩句相呼應(yīng)，隱喻運(yùn)動員在揮汗如雨的刻苦訓(xùn)練中提升自我，同時展現(xiàn)了春忙時農(nóng)民辛勤耕作的辛苦，也展示了中國文化中人們對自然的敬畏和對勞動的尊重。在概念再現(xiàn)的過程中，動作者與客體之間建立起聯(lián)系：“春天，雨水充沛，農(nóng)民們迎來了豐收和希望”。這是概念再現(xiàn)，而不是“直接”或“被動地反映世界——一種新的認(rèn)識。其在很大程度上是關(guān)于自然界及宇宙的新觀念”。通過這種聯(lián)系，視頻作者讓兩個主體同時參與到這個故事當(dāng)中，并借助兩個主體的互動推動了故事情節(jié)的發(fā)展?？梢姡撘曨l通過對概念再現(xiàn)中的動作者、主體進(jìn)行連接來構(gòu)建新關(guān)系并傳遞給受眾關(guān)于這一過程、事實(shí)以及結(jié)果的信息，在此基礎(chǔ)上完成一種新概念和新內(nèi)容之間的連接與傳遞。

在再現(xiàn)意義方面，視頻短片《倒計時：立春》以概念再現(xiàn)為主、敘事再現(xiàn)為輔對中國農(nóng)耕文化進(jìn)行宣傳。在敘事再現(xiàn)方面，宣傳片運(yùn)用行動過程隱喻中國農(nóng)民辛勤播種的場景，展現(xiàn)了中國人熱愛勞動和尊重勞動的傳統(tǒng)美德。從概念再現(xiàn)角度來看，該視頻短片以大量象征過程展現(xiàn)中國傳統(tǒng)農(nóng)耕文化，彰顯中華文化自信，達(dá)到了提升國家形象的目的。

互動意義主要由接觸、社會距離、態(tài)度和情態(tài)四個方面構(gòu)成。視頻“00：01：48”以及“00：00：52”處有許多穿著民族服飾的中國人在打鼓、舞龍，他們的臉上洋溢著笑容，體現(xiàn)出人們關(guān)系的密切。態(tài)度聚焦于視角，視頻中的鏡頭屬于全景，且為俯視視角，更加客觀地展示了人類與自然萬物和諧相處的景象，體現(xiàn)了中國人民敬畏自然的態(tài)度。此鏡頭出現(xiàn)在視頻短片的“春分”章節(jié)，體現(xiàn)了在中國人心目中，春分是農(nóng)業(yè)生產(chǎn)的重要節(jié)氣。情態(tài)具有建構(gòu)人際意義的功能，不管是文字符號還是色彩，都具有意義建構(gòu)功能。同時，情態(tài)也能反映話語意圖中受眾與話語作者兩者間的互動。情態(tài)通過圖像的亮度、色彩以及飽和度等來衡量。視頻“00：00：52”處將紅色作為主色調(diào)，加以黃色、橙色等暖色調(diào)襯托，整個畫面色彩明艷溫暖，同時煙花作為亮色點(diǎn)綴夜晚，讓人眼前一亮，這也展示了中國農(nóng)耕文化中的正能量。

構(gòu)圖體現(xiàn)即整體語篇意義的構(gòu)成。圖像的觀看者注重動態(tài)模型的空間布局，其優(yōu)點(diǎn)在于能夠協(xié)助確定宏觀構(gòu)圖思路。通過信息值、顯著性、取景等方式，可以實(shí)現(xiàn)各種含義之間的有機(jī)聯(lián)系。

信息值是由圖形要素的排列來表現(xiàn)的。在《倒計時：立春》中，大部分農(nóng)田鏡頭為上下構(gòu)圖，畫面上半部分為天空，下半部分為農(nóng)田。如“小滿”章節(jié)“00：02：29”處，畫面上半部分為落日浮云，下半部分為豐收的麥田。創(chuàng)作者通過“夕陽”和“麥田”把豐收的喜慶景象展示了出來。

顯著性即各要素對觀看者的吸引程度。從顯著性角度來看，視頻短片中“00：01：42”處首先將畫面切割為兩部分，整齊的水田占據(jù)畫面的三分之二，奪人眼球。此外，水田被切割成規(guī)整的長方形體現(xiàn)了中國農(nóng)民的農(nóng)業(yè)智慧。

聽覺層面

李戰(zhàn)子指出人際功能是音樂（聲音）最突出的意義?！兜褂嫊r：立春》的音樂體現(xiàn)在循序漸進(jìn)的過程中充分展現(xiàn)了人際功能。在視頻前半部分，背景音軌為單軌，只有幾聲強(qiáng)有力的鼓點(diǎn)，穿插女聲吟唱和弦樂聲。強(qiáng)有力的鼓點(diǎn)與節(jié)氣倒計時的畫面同時出現(xiàn)，在突出節(jié)氣變換的同時能夠使觀眾高度集中注意力。從“00：01：44”開始，視頻中的音軌變得豐富，加入了簫聲，與弦樂和吟唱相結(jié)合，增加了音樂體現(xiàn)的層次。在“00：02：15”處，音樂體現(xiàn)達(dá)到了第一個高潮，音樂節(jié)奏變快，加強(qiáng)的鼓點(diǎn)提升了觀眾的積極性。在此之后，音樂再次回歸平靜，一方面營造了與前段高潮的落差，另一方面為接下來的倒計時鋪墊情緒。最后十秒的倒計時通過人聲與背景音樂相結(jié)合的方式將觀眾情緒推到最高點(diǎn)。此外，《倒計時：立春》的聲音體現(xiàn)并沒有使用角色音來渲染畫面情緒。相反，創(chuàng)作者通過著重突出的地面音，如俯瞰山峰的風(fēng)聲、汗水滴落的水聲、故宮博物院的春雨聲等，加深了觀眾對二十四節(jié)氣的聲音印象。

基于多模態(tài)話語分析的中國農(nóng)耕文化對外話語體系建構(gòu)路徑

一種方式是利用視覺和聽覺元素來傳達(dá)消息和建構(gòu)話語體系。這種方法通常包括使用不同的符號強(qiáng)調(diào)關(guān)鍵信息，視覺元素有顏色、形狀、大小等，聽覺元素包括語音、音樂、聲效等，可以用來傳達(dá)不同的情感和意義，從而增強(qiáng)受眾的體驗(yàn)感。

另一種方式是將圖像、視頻、聲音等媒體元素結(jié)合起來建構(gòu)話語體系。這種方法通常要求創(chuàng)作者具備圖形設(shè)計和視頻制作技能，且需要在多個媒體平臺上進(jìn)行推廣。

在視覺層面，多模態(tài)傳播可以通過以下方式建構(gòu)話語體系。

（1）利用圖像和符號：使用圖像和符號來傳達(dá)信息和概念。比如，一張與消息相關(guān)的圖片可以加強(qiáng)受眾的認(rèn)知和記憶。

（2）使用顏色和排版：在視覺設(shè)計中，顏色和排版也可以用來傳達(dá)情感和意義。比如，使用紅色可以傳達(dá)緊急信息或重要信息，使用黃色可以傳達(dá)溫暖和親切的感覺。

（3）利用動畫和交互設(shè)計：動畫和交互設(shè)計可以用來增強(qiáng)體驗(yàn)感，讓受眾更加深入地理解信息。比如，在一個網(wǎng)站上，通過動畫展示產(chǎn)品功能可以加強(qiáng)受眾的理解。

在聽覺層面，多模態(tài)傳播可以通過以下方式建構(gòu)話語體系。

（1）使用音效和音樂：音效和音樂可以用來強(qiáng)調(diào)情感和意義。比如，在一個廣告中，使用快節(jié)奏的音樂可以增強(qiáng)廣告的動感和吸引力。

（2）利用語音和演講：語音和演講可以用來傳達(dá)信息和建構(gòu)話語體系。比如，在一場演講中，講者的語音可以傳達(dá)其情感和意圖，從而引發(fā)受眾共鳴。

（3）借助音頻技術(shù)實(shí)現(xiàn)立體聲和全景聲的效果：立體聲和全景聲技術(shù)可以讓受眾沉浸在音樂或聲效中，從而增強(qiáng)體驗(yàn)和記憶效果。

總之，多模態(tài)傳播的方式可以通過視覺和聽覺元素建構(gòu)話語體系，從而讓受眾更加深入地理解信息和產(chǎn)生共鳴。

多模態(tài)話語分析的發(fā)展符合媒體傳播發(fā)展的大趨勢，解讀了共通符號原則在不同交際模態(tài)中起到的作用，從而改善了話語分析方式，提高了文化概念的接受程度。因此，多模態(tài)話語分析體系的建構(gòu)是一個極具社會價值和發(fā)展?jié)摿Φ难芯款I(lǐng)域。本研究證實(shí)了多模態(tài)符號能生動地再現(xiàn)參與者的日常生活，激發(fā)觀看者了解中國農(nóng)耕文化的興趣，從而尋找更好的宣傳中國農(nóng)耕文化的路徑，以達(dá)到良好的宣傳效果和社會效應(yīng)?？傊?，對多模態(tài)話語分析的研究必將有助于社會文化的發(fā)展。

本文系2022年度國家級大學(xué)生創(chuàng)新創(chuàng)業(yè)訓(xùn)練計劃項(xiàng)目“多模態(tài)話語分析視角下中國農(nóng)耕文化對外話語體系的建構(gòu)——以‘北京冬奧會二十四節(jié)氣開場倒計時視頻’為例”（202210564074）的研究成果。

（作者單位：華南農(nóng)業(yè)大學(xué)外國語學(xué)院）