張嵋琳

(湖北理工學(xué)院 外國語學(xué)院，湖北 黃石 435003)

在信息技術(shù)時代，人們的交際是一種多種模態(tài)交互作用關(guān)系，主要表現(xiàn)為文字、圖表、語言、音樂、視頻、身姿、手勢等。多模態(tài)話語為視、聽、觸等多種感覺系統(tǒng)共同參與的，經(jīng)畫面、語言、聲音、姿勢等多種信息載體同時作用下完成的交際現(xiàn)象[1]。目前階段，對于多模態(tài)話語交際現(xiàn)象的研究進入一個嶄新階段，眾多學(xué)者的研究成果表明不僅語言符號在語篇意義表達過程中作用顯著，視覺符號承載的諸多信息同樣地位重要[2]。

目前大多數(shù)多模態(tài)話語分析主要集中在對圖像、符號、圖表等靜態(tài)語篇的研究上,對視頻、電視、電影等動態(tài)語篇的研究分析相對而言比較缺乏[3]。TED演講視頻是全球比較有影響力的公眾視頻，是一種典型的動態(tài)多模態(tài)話語語篇。本文將以張德祿提出的“動態(tài)多模態(tài)話語分析理論框架”為基礎(chǔ)，從文化語境和情景語境層面上展開對Richard St. John的《成功的八個秘訣》的分析，首先以語篇分析作為基礎(chǔ)，深度探析視、聽等各種模態(tài)間所存在的協(xié)同性與關(guān)系整合問題，探析在進行動態(tài)TED演講視頻的過程中不同模態(tài)間所存在的協(xié)同性問題。

1 動態(tài)多模態(tài)話語分析理論框架

圖1 動態(tài)多模態(tài)話語分析框架

在Halliday所建立的系統(tǒng)功能語言學(xué)基礎(chǔ)上，綜合了Lim建立的綜合性多符號模式框架研究成果，張德祿創(chuàng)造性提出動態(tài)多模態(tài)話語分析綜合理論框架，見圖1。該理論模型框架涵蓋了文化語境、情景語境、內(nèi)容及表達四個邏輯層面。在特定的文化語境中，講話者為達到一定的交際目的會根據(jù)不同的情景語境(語場、語旨和語示)選擇視覺模態(tài)(圖像意義)和聽覺模態(tài)(聲音意義)完成意義表達，這兩種模態(tài)之間既有協(xié)助，又能進行相互補充和轉(zhuǎn)換，從而保證了話語整體意境之完整。

這樣，受話者便能在整個交際過程中完整地接收和理解話語信息[4]。

本文選取動態(tài)TED演講視頻為研究對象，根據(jù)上述動態(tài)多模態(tài)話語分析框架，演講者在選擇表達意義模態(tài)過程中，主要選擇視、聽兩種模態(tài)之間的協(xié)調(diào)、補充，進而保證語境、語義上的完整。不同模態(tài)之間的關(guān)系在不同的時間段呈現(xiàn)不同的主次關(guān)系，是一個動態(tài)變化的視聽過程。如圖1所示，張德祿理論指明不同話語模態(tài)間存在著互補性與非互補性兩種基本關(guān)系。其中，互補關(guān)系即是交際完成過程中單一的模態(tài)話語并不能將語義完整表達，必須輔以另外模態(tài)進行補充，在進行補充的過程中其相互間存在著強化與非強化雙模式，強化模式下需指定一種主模態(tài)，非強化模式下各種模態(tài)所占據(jù)的地位是均等的，能夠分為聯(lián)合、協(xié)調(diào)及交叉三種形式；非互補關(guān)系總體來看存在著內(nèi)包、交疊以及語境交互三種核心關(guān)系。比如，多數(shù)模態(tài)下語言位于話語整體交際模式的核心，而身姿、手勢、顏色等則起到強化的作用。視、聽兩種模態(tài)間的變換與聯(lián)系成為話語建構(gòu)之關(guān)鍵。想要完整表達一個意義，需要不同模態(tài)之間的密切配合、補充及協(xié)調(diào)[4]。

2 TED演講視頻案例分析

2.1 語料的選擇和分析

TED來自技術(shù)(technology)、娛樂(entertainment)、設(shè)計(design)英文單詞各取首字母組合后的縮寫，是于1984年由美國建筑設(shè)計師理查德·沃曼創(chuàng)辦的一家私有非營利機構(gòu)，其宗旨是“用思想的力量來改變世界”，目的是向人們傳播“值得傳遞的新思想、新信息、新觀點”。每年，TED大會都會邀請各領(lǐng)域的杰出人物和專家分享關(guān)于科學(xué)技術(shù)、文學(xué)、環(huán)境、社會、人類哲學(xué)等各方面的觀點和信息。從2006年6月起，TED演講視頻上傳至互聯(lián)網(wǎng)，供全球的觀眾免費下載和觀看[3]。2009年成立的“TED開放翻譯計劃”使越來越多精彩的TED演講視頻被譯成一百多種語言在全球范圍內(nèi)播放?，F(xiàn)在，TED 大會舉行的過程中，綜合統(tǒng)計的全球性訪問總量超過40億，“互聯(lián)網(wǎng)+演講”模式已經(jīng)成為網(wǎng)絡(luò)交際之重要形式，這是電子信息技術(shù)時代演講模式創(chuàng)新的重要形式。

作為經(jīng)典的TED演講視頻之一的Richard St. John的《成功的八個秘訣》頗受歡迎，一般的TED演講視頻時長為18分鐘左右，但約翰在3分半鐘的時間里清楚透徹地向觀眾講解了成功的8個要點。視頻短小精悍，但觀點邏輯鮮明，深深打動了在場的所有觀眾并給其留下了深刻的印象。這段視頻涵蓋了PPT演示、視頻、音頻、身勢等多種動態(tài)多模態(tài)語料，包括了視、聽等多種模態(tài)之間的轉(zhuǎn)換、協(xié)同、補充，并且涉及到文字、姿勢、音響、色調(diào)、電腦等諸多符號信息的表達，從而將整個演講視頻統(tǒng)一成為一個連貫性、邏輯性的協(xié)調(diào)整體。尤其是其涉及到PPT演示、視頻、語言、手勢四種核心要素，將該語篇統(tǒng)一成為具有典型特征的動態(tài)多模態(tài)話語。

2.2 案例語篇切分

演講視頻的語篇發(fā)展具有一定的階段特征，通常包含起始、闡述主題、演講高潮與結(jié)束四個階段，各階段中自有特定情節(jié)結(jié)構(gòu)。本次研究依據(jù)張德祿提出的對動態(tài)多模態(tài)語篇切分的三個標準，即語篇結(jié)構(gòu)、經(jīng)驗意義、前景化的事物和特征對3分30秒的TED演講視頻《成功的八個秘訣》進行了語篇切分。一方面，語篇中各主題是進行話語切分之主要依據(jù)，每一個話題內(nèi)又可以細分成諸多部分與階段，更進一步講各階段中又充分包含了不同的次要單位；另一方面，隨著語篇內(nèi)容的進行，其主題發(fā)生轉(zhuǎn)化，其轉(zhuǎn)折點即可作為單位切分的界限，此后將開始展示新的語篇主題，涉及到參與者角色與具體情景的改變；再者，值得注意的是同語篇主題密切關(guān)聯(lián)的前景事物與特征將作為切分進行時的重點標識。從語篇整體上來看，層面、各圖像將呈現(xiàn)一個事件，而相互聯(lián)系、交叉的事件能夠構(gòu)成一個情節(jié)，多個情節(jié)最終構(gòu)成了一個故事或語篇[3]。

整體上看，該TED演講視頻由5個漸進性、相互關(guān)聯(lián)的階段組成，每階段又能夠細致劃分為8個細致步驟與情節(jié)，單步驟獨自形成一個語篇結(jié)構(gòu)，又可細分為14個事件與圖像。事件將以圖像的形式展現(xiàn)出來，圖像標均是一個獨立的語篇單位、語法過程及信息單位。

3 TED演講視頻案例語篇動態(tài)多模態(tài)話語分析

3.1 TED演講視頻的文化語境

文化語境最早被提出是在人類學(xué)家馬林諾夫斯基關(guān)于“語境”的闡釋中。文化語境即同言語交際進行密切關(guān)聯(lián)的社會文化背景，其主要構(gòu)成要素為社會規(guī)范、文化習(xí)俗。社會規(guī)范即當前社會交際中對各種活動制定的規(guī)則與限制；文化習(xí)俗則為人群在進行長期的交流、交換等社會群體生活過程中經(jīng)長期磨合形成規(guī)則并逐漸成為習(xí)慣的一種生存模式，這是人進行社會群體生活過程中心理、語言、行為等方面被普遍接受和適應(yīng)的默認規(guī)則。文化語境在多模態(tài)交際中處于極為關(guān)鍵的地位，語境中的諸多內(nèi)容如文化背景、人物情緒、特定時空等要素同語言符號相結(jié)合之后，便使復(fù)雜、多義的語言符號的諸多歧義被舍去，從而表達準確的含義，同時語境又能夠豐富語言符號自身本意上表達的不足，賦予語言符號更多層面上的含義。可以說，語境是語言交際的承載者，語篇交際之最終目的必須通過這樣的載體向外表達。演講是一種以聲、像為主的公共交際活動，多數(shù)在公眾場所進行，主要的手段為語言，輔助手段包括姿勢等，最終達到聲情并茂、準確無誤地向公眾闡述自身觀點的目的[5]。

以前的演講形式比較單一，主要以演講者的語言為主要信息傳遞方式，現(xiàn)而在當前信息技術(shù)極大普及的時代中，多媒體成為了演講能夠完成的重要輔助措施。其中，TED 推出的“互聯(lián)網(wǎng)+視頻”演講模式，受到廣大群眾的普遍歡迎。

本文選取的是Richard St. John的《成功的八個秘訣》中關(guān)于在當今社會中如何使人們具備成功的基本素質(zhì)的TED演講。著名的TED演講家Richard St. John在7年的時間里通過對500多位優(yōu)秀的成功者進行采訪，結(jié)合他們的成功經(jīng)歷提煉出成功的8個秘訣(Passion，Work， Good， Focus，Push，Serve， Ideas， persist)。之前他的這篇演講長達兩個小時，現(xiàn)在濃縮為短短的三分半鐘，并且整個演講配合幽默的語調(diào)和調(diào)侃式的語句，詼諧生動，堪稱演講精華范本。

John此篇演講結(jié)構(gòu)包括：起始階段、主題闡釋階段、高潮表達階段及結(jié)尾階段。

1.開始:演講者向觀眾致意,提示演講即將開始,要大家關(guān)注演講主題。

2.演講主題:演講者以七年前一名高中生“怎樣才能成功”的問題引發(fā)思考，繼而通過7年共500次對成功人士的調(diào)查訪談向觀眾總結(jié)真正的成功之道，并以成功的TED-ster 為例進行佐證。

3.演講高潮：用PPT課件圖片的形式一一向人們展示有效取得成功的八大秘訣：熱情(passion)、Work(努力)， Good(精通)， Focus(專注)，Push(強迫)，Serve(服務(wù))， Ideas(想法)， persist(毅力)。

4.結(jié)束: 演講者的祝愿和向觀眾致謝。

3.2 TED演講視頻的情景語境分析

情景語境包括語場(field))、語旨(tenor)和語式(mode)三個變項[6]。其中，語場指的是發(fā)生的事或正在被談?wù)摰氖拢唧w指語篇所涉及的具體內(nèi)容。Richard St. John的本次演講的語場是2015年在美國TED會議上結(jié)合采訪的500多位成功人士總結(jié)出的8個成功秘訣。語旨是指交際雙方的社會角色關(guān)系。視頻中的語旨是美國TED大會媒體、著名的TED演講專家Richard St. John和在場的觀眾。語式為具體性交際環(huán)境內(nèi)語言發(fā)揮的作用，是進行語言交際的媒介與渠道。案例中的語式是美國 TED大會采用互聯(lián)網(wǎng)技術(shù)對外免費傳播的著名TED演講專家Richard St. John所進行的精彩演講，其穿著得體，語言流利生動，語速適中且富有感染力，演講者整個演講通過語言模態(tài)配合幽默的語調(diào)和調(diào)侃式的語句結(jié)合PPT圖片展示，同時伴有多樣的非言語交際模態(tài)(手勢、姿態(tài)、副語言)和視頻的圖像模態(tài)等共筑多模態(tài)意義之基石。

3.3 TED演講語篇動態(tài)多模態(tài)模態(tài)間協(xié)同分析

前文詳細論述了TED演講視頻的語篇文化及情景語境，可知不同類型、種類符號組件之間的強化合作、協(xié)調(diào)、交叉、互補等能夠順利達到交際目的。在動態(tài)視頻語篇中，視覺模態(tài)和聽覺模態(tài)的協(xié)作相互依存，相互輔助。因此,只有充分利用互聯(lián)網(wǎng)上視頻的傳播優(yōu)勢,才能將視頻的視、聽雙模態(tài)系統(tǒng)實現(xiàn)統(tǒng)一，從而達到在3分鐘內(nèi)向觀眾準確傳達信息的目的，簡短而明確[7]。下文將依據(jù)TED視頻語篇探討各交際階段所采用的多模態(tài)話語交際模式中模態(tài)間的協(xié)同關(guān)系。

第一類：提示型交際模式。提示類型包括三個階段：提示演講開始、話題的引出和結(jié)束階段。首先，Rachard St. John站在演講臺右邊，隨意打開右邊的提示電腦，雙手打開，很自然地介紹了7年前偶遇一高中生并提出“怎樣做才能成功”的話題(第一階段)；接下來他通過PPT圖片向觀眾展示7年內(nèi)進行的500人次優(yōu)秀成功人士專訪：“現(xiàn)在我就要告訴你們是什么帶來了成功，是什么啟發(fā)了TED演講者們”(第二階段)；“這個問題的答案很簡單：付4000塊來TED會場。 如果不能來，就做到以上八點——相信我， 這重要的八點就是通向成功的秘訣。 謝謝TED講演者參與我的采訪!”(第五階段)。此種類型交際模式主要模態(tài)為聽覺，其PPT幻燈為一種視覺模態(tài)，并未參與實際交際進行程序，其主要作用僅為勾畫語境環(huán)境，與主模態(tài)間構(gòu)成了非互補關(guān)系。

第二類：信息提供型交際模式。第三階段為演講者向觀眾推出“成功的八個秘訣”信息時所采取的交際模式。在這一段視頻中，John用精簡的語言和得體的手勢語用語言向觀眾傳遞了熱情(passion)，Work(努力)， Good(精通)， Focus(專注)，Push(強迫)，Serve(服務(wù))， Ideas(想法)， persist(毅力)等成功的八個秘訣的意義和內(nèi)涵。這一階段有聽覺和視覺兩種模態(tài)。視覺模態(tài)(有關(guān)八個秘訣的文字PPT圖示和人手勢構(gòu)成的圖像)與聽覺模態(tài)(解說)是非強化類互補型關(guān)系，二者協(xié)調(diào)一致，目的是使觀眾能準確理解關(guān)鍵詞，抓住主要信息。兩種模態(tài)在共同構(gòu)建完整的意義表達上互為補充，缺一不可。同時，第四階段視頻中，John通過不斷觸摸手提電腦，用多媒體課件現(xiàn)場展示八個關(guān)鍵信息的圖示和詞匯信息。這一階段包括視覺、聽覺和觸覺三個模態(tài)，其中，聽覺為主模態(tài)，表現(xiàn)在演講者介紹八個關(guān)鍵詞的語言上；視覺模態(tài)由電腦上的PPT圖片和關(guān)鍵詞句的屏幕畫面，由人手觸摸提示電腦的畫面構(gòu)成；觸覺表現(xiàn)在演講者輕觸和滑動等動作中。該模式下，主模態(tài)為聽覺，視覺模態(tài)與其之間的關(guān)系為互補型。這種情況下，無論是視覺模態(tài)還是聽覺模態(tài)，其單一均不能保持整體意義的完整性，其與聽覺模態(tài)之間的關(guān)系則定為協(xié)調(diào)類非強化關(guān)系。

第三類：求取注意型交際模式。這是演講者通過聲調(diào)等變化的副語言產(chǎn)生幽默詼諧的反語形式吸引觀眾的注意力并引起思考所采取的交際模式。在視頻中，John 在描述Work(努力)舉了Rupert Murdoch 的一個例子：“他提到了樂趣？Rupert？是的！ TED講演者都有一份充滿樂趣的工作，而且他們都很刻苦。 我覺得，他們都不是工作狂，他們是享受工作狂！”(觀眾大笑)John在視頻中嘴角上揚，面帶自嘲的微笑，雙手攤開，目光直視觀眾，語調(diào)突然上揚，語言詼諧幽默，引起了觀眾的注意和思考，產(chǎn)生了很好的“笑果”。在這一類型里，演講者的視覺模態(tài)對主模態(tài)聽覺模態(tài)起強化作用。因此,此時兩種模態(tài)之間的關(guān)系為強化類互補[2]。背景圖所形成的視覺模態(tài)在對交際意義的體現(xiàn)上相對較弱，故對聽覺模態(tài)來說是語境交互類的非互補關(guān)系，見表1。

表1 TED演講視頻模態(tài)間協(xié)同關(guān)系

在Richard St. John演講視頻實例中，多模態(tài)之間的關(guān)系如下：聽覺和視覺兩種模態(tài)聯(lián)合表達演講的主題，構(gòu)成聯(lián)合非強化類型；視覺主要形式為形象鮮明的PPT幻燈片，此同演講者生動詼諧有力的聽覺模式共筑整體意義，聽覺模態(tài)和觸覺模態(tài)之間為互補型關(guān)系非強化型。通過觸覺模態(tài)所呈現(xiàn)的另一種視覺圖示在演講的過程中結(jié)合得體的身勢語則能更好補充聽覺所表達的意義。這個過程中動作的間斷的觸動和生動的語言通過互補來交叉體現(xiàn)話語的完整意義[7]。另外觸覺和視覺之間為強化關(guān)系。視覺圖片這種主模態(tài)通過不斷點擊和滑動電腦來進行階段性轉(zhuǎn)折生成，能更好地引起觀眾的注意并對視覺模態(tài)起著強化的作用。

4 結(jié)語

通過對TED演講視頻的語篇動態(tài)多模態(tài)間模態(tài)協(xié)同性的研究分析發(fā)現(xiàn)，提示型、信息類型、求取注意型此三類多模態(tài)話語交際模式為演講者最常選擇。為達到不同交際目的，在不同的交際過程和階段中，各種模態(tài)的選擇會不同，會有主模態(tài)和次模態(tài)之分，模態(tài)之間的關(guān)系總是相互協(xié)調(diào)、相互補充或者強化，從而實現(xiàn)演講者的整體講話意義。本文的研究目的在于三個方面：一是希望演講者們在交際中充分利用各種模態(tài)達到最佳語言表達效果，二是期待接收信息者們能通過了解動態(tài)多模態(tài)之間的協(xié)同關(guān)系更好地理解演講者的話語意圖，三是期望本文能起到拋磚引玉的作用，讓多模態(tài)協(xié)同性的研究能輻射到更多不同體裁篇章的多模態(tài)話語研究中。

[1] Kress,G.&T.van Leeuwen.MultimodalDiscourse:TheModesandMediaofContemporaryCommunication[M].London:Arnold, 2001.

[2] 張德祿,袁艷艷．動態(tài)多模態(tài)話語的模態(tài)協(xié)同研究：電視天氣預(yù)報多模態(tài)語篇為例[J].山東外語教學(xué)，2011(5)：9-16.

[3] 管 樂. 動態(tài)演講視頻的多模態(tài)話語分析[J]. 浙江理工大學(xué)學(xué)報，社會科學(xué)版，2017(1)：1-8.

[4] 張德祿. 多模態(tài)話語分析綜合理論框架探索[J].中國外語,2009(1)：24-30.

[5] 靳雅姝. 動態(tài)語篇的多模態(tài)分析[J].社會科學(xué)家，2012(10)：154-157.

[6] Halliday,M.A.K.&R.Hasan.CohesioninEnglish[M]. London: Longman, 1976.

[7] 劉福英. 論動態(tài)多模態(tài)話語模態(tài)之間的協(xié)同性: 以IPhone6S 產(chǎn)品發(fā)布會3DTouch 功能語篇為例[J]. 2016(4)：43-47.