⊙韓青玉［青海師范大學(xué)外語(yǔ)系， 西寧 810008］

⊙劉立華［北京交通大學(xué)語(yǔ)言與傳播學(xué)院， 北京 100044］

多模態(tài)話語(yǔ)研究的進(jìn)展

——兼評(píng)《定性研究中視覺(jué)資料的應(yīng)用》

⊙韓青玉［青海師范大學(xué)外語(yǔ)系， 西寧 810008］

⊙劉立華［北京交通大學(xué)語(yǔ)言與傳播學(xué)院， 北京 100044］

隨著多模態(tài)話語(yǔ)研究的不斷發(fā)展，人們對(duì)視覺(jué)研究的探索和訴求也越來(lái)越多。Marcus Banks所著的《定性研究中視覺(jué)資料的應(yīng)用》是對(duì)快速發(fā)展的視覺(jué)研究的積極回應(yīng)。該著作試圖證明視覺(jué)研究方法是一種有特色、有價(jià)值的研究方法，任何一個(gè)社會(huì)研究者，不論他的研究課題如何，都應(yīng)該考量該研究方法。本文試圖從主要內(nèi)容、理論基礎(chǔ)、歷史發(fā)展和應(yīng)用方法四個(gè)方面對(duì)以上著作進(jìn)行總結(jié)和介紹。

視覺(jué)資料 研究 方法

一、引言

研究方法是衡量一項(xiàng)研究是否有價(jià)值的重要尺度，因此，人們對(duì)研究方法的研究也越來(lái)越重視。SAGE出版公司在2007年推出《SAGE定性研究工具書(shū)系列叢書(shū)》，對(duì)定性研究的各種方法做了詳盡的介紹和說(shuō)明。《定性研究中視覺(jué)資料的應(yīng)用》（Using Visual Data in Qualitative Research）（以下簡(jiǎn)稱《視覺(jué)方法》）是其中的一本，作者M(jìn)arcus Banks是牛津大學(xué)社會(huì)和文化人類學(xué)學(xué)院教授，其教學(xué)和研究領(lǐng)域主要包括：視覺(jué)人類學(xué)和人種志學(xué)、電影、印度城市社會(huì)、耆那教、種族特點(diǎn)等。近年來(lái)，隨著多模態(tài)話語(yǔ)研究的逐漸興起，人們對(duì)語(yǔ)言文字以外的其他媒介途徑的研究也越來(lái)越重視。在這一研究背景和趨勢(shì)下，如何在定性研究中去分析視覺(jué)資料以及如何運(yùn)用攝像、攝影技術(shù)去獲取研究資料就顯得尤為重要?！兑曈X(jué)方法》一書(shū)對(duì)以上問(wèn)題做了詳細(xì)的問(wèn)答，全書(shū)共六章：引言、視覺(jué)資料在社會(huì)研究中的位置、視覺(jué)分析的方法、視覺(jué)方法與田野研究、視覺(jué)研究的呈現(xiàn)、結(jié)束語(yǔ)。下面我們擬從主要內(nèi)容、理論基礎(chǔ)、歷史發(fā)展、研究方法四個(gè)方面對(duì)該著作進(jìn)行簡(jiǎn)單介紹，以期幫助讀者快速了解該著作的主要內(nèi)容。

二、主要內(nèi)容

該書(shū)的目的在于證明視覺(jué)研究方法是具有一定特點(diǎn)（distinctive）和價(jià)值，而且應(yīng)該受到社會(huì)研究者的重視的研究方法；其主要內(nèi)容是在定性研究中如何處理和分析視覺(jué)資料。定性研究目的在于運(yùn)用不同的方法從個(gè)體內(nèi)部去接近外在的世界，是理解、描述或是解釋一些社會(huì)現(xiàn)象的一種方式。該研究方法通過(guò)分析個(gè)體或是群體的經(jīng)驗(yàn)，來(lái)建立與他們的人生經(jīng)歷或是實(shí)踐的聯(lián)系。經(jīng)驗(yàn)可以通過(guò)分析日常的知識(shí)、描述或是故事來(lái)獲取，可以通過(guò)記錄、分析正在進(jìn)行中的交際和互動(dòng)來(lái)獲取。我們記錄、收集的材料構(gòu)成了我們研究的資料，通過(guò)對(duì)研究資料的分析，我們可以達(dá)到進(jìn)一步認(rèn)識(shí)社會(huì)個(gè)體或是群體、社會(huì)事件、社會(huì)結(jié)構(gòu)的目的。很明顯，日常生活中存在的視覺(jué)資料構(gòu)成了我們洞察社會(huì)現(xiàn)象的一個(gè)重要的表征。在該著作中，視覺(jué)被界定為圖像、圖畫(huà)、照片、電影、錄像磁帶、繪畫(huà)、圖表以及其他圖像形式。

三、理論基礎(chǔ)

每一項(xiàng)研究都必然有自己的理論基礎(chǔ)，對(duì)于視覺(jué)研究來(lái)講也是如此。在該著作中，作者首先區(qū)分了實(shí)證主義（positivist）和闡釋主義（interpretivist）方法的主要差別。作者認(rèn)為，實(shí)證主義或是自然主義研究方法的建立以自然科學(xué)為模型：語(yǔ)料或是資料獨(dú)立存在于我們的觀察，研究者的任務(wù)就是去搜集、研究它們，而對(duì)提供這些資料或是研究對(duì)象的個(gè)體（subjects）對(duì)該語(yǔ)料的觀點(diǎn)不予理睬。對(duì)于實(shí)證主義的觀點(diǎn)來(lái)說(shuō)，真正的知識(shí)是建立在感官基礎(chǔ)上的知識(shí)，該知識(shí)只能通過(guò)嚴(yán)格的科學(xué)方法才能獲取。

與實(shí)證主義相對(duì)的是闡釋性的方法。作者認(rèn)為二戰(zhàn)以來(lái)發(fā)展起來(lái)的解釋/闡釋性的分析方法，其中包括反思性的方法和合作的方法，使得視覺(jué)研究方法重新引起人們的興趣。該理論范式認(rèn)為，人們的行為并不是屈從于像科學(xué)一樣的自然法則。闡釋主義的方法來(lái)源于社會(huì)建構(gòu)主義的理論主張。社會(huì)建構(gòu)主義者認(rèn)為，人們應(yīng)該采取一種對(duì)想當(dāng)然知識(shí)的批判性立場(chǎng)，對(duì)那種我們的觀察能毫無(wú)問(wèn)題地產(chǎn)生對(duì)世界本質(zhì)的認(rèn)識(shí)的觀點(diǎn)應(yīng)該持批評(píng)的態(tài)度。我們理解社會(huì)的方式，使用的范疇和概念都是與一定的歷史和文化相關(guān)的。我們理解社會(huì)的方式取決于我們生活的地點(diǎn)和時(shí)間。也就是說(shuō)，我們理解世界的方式是一種歷史和文化的相對(duì)主義。這種理解事物的方式特定于一定的文化和一定的歷史時(shí)期，它們是一定歷史和文化的產(chǎn)物，依賴于特定文化和時(shí)期中所盛行的社會(huì)和經(jīng)濟(jì)的配列方式。據(jù)此，闡釋主義的方法認(rèn)為，參加者或是社會(huì)研究者依據(jù)一定的語(yǔ)境和意義對(duì)一定的社會(huì)行為進(jìn)行闡釋。一定的社會(huì)行為，例如宗教儀式，不再簡(jiǎn)單的是社會(huì)中一種慣例化的行為，而是在講述它們自己的故事，正是因?yàn)樵搩x式是以行為的方式表現(xiàn)出來(lái)，而不僅僅是作為一定心理呈現(xiàn)來(lái)理解和保持，因此，社會(huì)研究者有必要對(duì)該行為的完全的表現(xiàn)形式（包括口頭的、視覺(jué)的，以及手勢(shì)），包括與該行為有關(guān)人員的感情和情感等進(jìn)行綜合的研究。

在實(shí)證主義看來(lái)，社會(huì)行為的表現(xiàn)形式，例如圖像、相片等在具體的研究中不會(huì)有什么大的作用。人們不可能去拍一張“階級(jí)”的照片，或是“親屬”或是“經(jīng)濟(jì)”的照片，因此，作者還是從很大程度上傾向于闡釋主義的方法。作者同時(shí)也告誡我們，任何一種絕對(duì)的主張都必須小心，實(shí)證主義和闡釋主義的區(qū)分也不是絕對(duì)的，例如在從事定量研究中的語(yǔ)料收集時(shí)，實(shí)證主義是往往被采取的一種方法。

四、視覺(jué)研究的歷史

（一）攝影在社會(huì)研究中的早期應(yīng)用

社會(huì)學(xué)或是人類學(xué)的發(fā)展是伴隨著照相技術(shù)的發(fā)展而發(fā)展起來(lái)的。早在19世紀(jì)，已經(jīng)有了人體測(cè)量學(xué)的照相的興起，在心理學(xué)領(lǐng)域已經(jīng)具有早期的試驗(yàn)來(lái)獲取人們的心理狀態(tài)；在20世紀(jì)中期，照相技術(shù)作為一種具有學(xué)科范式特征的手段開(kāi)始使用；在20世紀(jì)30年代，用照相來(lái)調(diào)查和記錄社會(huì)福利的研究開(kāi)始出現(xiàn)。

（二）電影在社會(huì)研究中的早期應(yīng)用

1898年出現(xiàn)了第一個(gè)人類學(xué)電影短片，由A.C.Haddon拍攝，主要記錄Torres Strait Islands（托雷斯海峽群島）人們的生活狀況。早在1901年以前，Baldwin Spencer對(duì)澳大利亞土著人的舞蹈用電影手段做了記錄，在接下來(lái)的二十多年中，一些人類學(xué)研究團(tuán)隊(duì)用攝像機(jī)對(duì)他們要研究的當(dāng)?shù)鼐用竦娘L(fēng)俗和習(xí)慣做了記錄。1922年，美國(guó)探險(xiǎn)家和電影制作者Robert Flaherty（羅伯特·弗拉哈迪）公開(kāi)了他的電影作品Nanook of the North（《北方的納努克》）。該片是一部無(wú)聲電影，主要講述了伊努伊特人Nanook及其家人在加拿大極地地區(qū)的斗爭(zhēng)。該片被認(rèn)為是第一部達(dá)到特寫(xiě)長(zhǎng)度的紀(jì)錄片。在以后的視覺(jué)方法研究中，出現(xiàn)了從實(shí)證主義到闡釋主義的轉(zhuǎn)變，隨著錄像或是攝影技術(shù)的發(fā)展，到20世紀(jì)80年代，攝像機(jī)開(kāi)始作為一種輕巧廉價(jià)的工具被社會(huì)研究者廣泛使用。

作者認(rèn)為，在人類學(xué)和社會(huì)演技中，視覺(jué)方法已經(jīng)有好幾十年的歷史，研究者應(yīng)盡量熟悉以前的有關(guān)視覺(jué)研究方法的例子，以便應(yīng)對(duì)研究中的各種可能性；圖像的意義由于時(shí)間和受眾的不同也會(huì)不同，同樣，研究者通過(guò)圖像試圖表達(dá)的意義也可能和觀眾解讀的意義不一樣。照片、電影以及錄像在社會(huì)研究者中具有不同的運(yùn)用，研究者應(yīng)該對(duì)自己的理論取向非常清楚：是采取闡釋性的研究方法還是采取自然主義的視角。

五、視覺(jué)研究的方法

（一）文化研究

文化研究關(guān)注的主要是文化的產(chǎn)生和消費(fèi)，特別是在歐美語(yǔ)境下的文化的產(chǎn)生和消費(fèi)。文化研究主要側(cè)重現(xiàn)代，以及作為同時(shí)代的文化形式的歷史事件。作者認(rèn)為文化研究主要受以下學(xué)者的影響：?？?、布迪厄、羅蘭·巴特、馬克思等。研究者認(rèn)為，僅僅依賴語(yǔ)言學(xué)領(lǐng)域發(fā)展起來(lái)的符號(hào)學(xué)交際模式是不夠的，有必要借鑒一定的文化理論來(lái)對(duì)一定的文化產(chǎn)品進(jìn)行闡釋。在有關(guān)視覺(jué)方法的文化研究中，語(yǔ)境是一個(gè)很重要的因素，圖像的意義和語(yǔ)境的意義相互建構(gòu)；視覺(jué)文化研究有些領(lǐng)域關(guān)注圖像的物質(zhì)特征。在所有有關(guān)視覺(jué)文化研究的視角中，圖像背后所蘊(yùn)含的權(quán)力因素也是文化研究關(guān)注的重點(diǎn)。

（二）形式主義方法

作者在該著作中認(rèn)為內(nèi)容分析是形式主義的一個(gè)重要方法。作者在這里把內(nèi)容分析（content analysis）看作是視覺(jué)分析的定向研究方法的一種。Iedema系統(tǒng)地觀察了電影中的幾個(gè)特征。例如電影中人物與攝像機(jī)的角度，作者認(rèn)為，不論電影所呈現(xiàn)的內(nèi)容如何，對(duì)電影潛在內(nèi)容的分析，醫(yī)師最具話語(yǔ)特權(quán)。

（三）民族方法學(xué)

Heath&Hindmarsh描述了他們?cè)鯓邮褂娩浵袢ビ涗涐t(yī)患之間的互動(dòng)。研究者使用擴(kuò)展的會(huì)話分析的形式來(lái)分析，對(duì)參加者的表情、手勢(shì)以及他們的言語(yǔ)都做了分析；Paul ten Have（2004）把錄像看作是在典型的民族方法學(xué)研究中語(yǔ)料獲取的一種方法。例如，研究者可以使用錄像來(lái)記錄人們?cè)诨疖?chē)上怎樣挑選座位，在經(jīng)過(guò)繁忙的步行路口時(shí)怎樣協(xié)商；Goodwin提供了一些案例說(shuō)明了圖像或是視覺(jué)個(gè)體在它們呈現(xiàn)某種權(quán)力特征時(shí)的流動(dòng)性特點(diǎn)，他同時(shí)也注意到了視覺(jué)個(gè)體的物質(zhì)特征的潛在重要性。作者在論述該部分時(shí)指出，研究者本身的反思很重要，要不斷審視自己在研究過(guò)程中或是在分析語(yǔ)料過(guò)程中的角色，同時(shí)要與自己的研究對(duì)象建立一種關(guān)系，要注意保護(hù)他們的隱私，獲取他們的理解和支持。在通過(guò)視覺(jué)方法獲取語(yǔ)料的過(guò)程中，我們可以通過(guò)觀察試驗(yàn)個(gè)體看電影，然后對(duì)他們進(jìn)行訪談，也可以通過(guò)對(duì)研究對(duì)象出示相片，讓他們對(duì)相片內(nèi)容進(jìn)行評(píng)論、記憶或是按事先假定好的訪談對(duì)他們進(jìn)行提問(wèn)。研究者在研究過(guò)程中要注意有關(guān)相片的法律或是隱私問(wèn)題，對(duì)研究對(duì)象的個(gè)人情感也應(yīng)當(dāng)予以照顧。

六、結(jié)論

該著作的主要內(nèi)容可以包括以下四個(gè)方面：第一，什么是社會(huì)研究的視覺(jué)研究方法；第二，視覺(jué)研究方法在社會(huì)學(xué)和人類學(xué)的發(fā)展歷史；第三，圖像研究和使用的分析方法；第四，與視覺(jué)研究方法有關(guān)的在田野工作中的具體實(shí)施方法；第五，視覺(jué)研究方法的成果呈現(xiàn)時(shí)應(yīng)考慮的因素，如觀眾因素以及呈現(xiàn)的不同模式等。作者在具體論述視覺(jué)研究方法時(shí)著重指出，二戰(zhàn)以后，特別是20世紀(jì)80年代以來(lái)，闡釋性分析策略，其中包括反思性的視角和合作意識(shí)的發(fā)展，逐漸形成了視覺(jué)研究方法的興起。那種天真地認(rèn)為圖像自動(dòng)編碼是證據(jù)性的真理被很快拋棄，取而代之的是更加抽象的定量的研究方法。但是，近幾十年來(lái)，人們發(fā)現(xiàn)，定量研究在揭示事物本質(zhì)的同時(shí)也隱瞞了更多的東西。在此背景下，定性的視覺(jué)研究方法重新回歸。在論述過(guò)程中，作者也強(qiáng)調(diào)，單獨(dú)的視覺(jué)研究方法在社會(huì)研究中也具有一定的局限性，訪談（interview）、小組調(diào)查（focus group）、會(huì)話分析（conversation analysis）等研究方法在具體的資料收集過(guò)程中也具有很高的價(jià)值。

[1]王凱.發(fā)展性校本學(xué)生評(píng)價(jià)研究[M].上海:華東師范大學(xué)出版社，2009.

[1]Banks,M.Using Visual Data in Qualitative Research[M].London:Sage,2007.

[2]Kress,G and T.van Leeuwen.Reading Images:The Grammar of Visual Design[M].London:Routledge,1996.

[3]van Leeuwen,T and C.Jewitt (eds).Handbook of Visual Analysis[C].London:Routledge,2001.

[4]Geertz，C.The Interpretation of Cultures:Selected Essays[M].New York:Baisc Books.1973.

[5]Bell,P.Content analysis of visual images[A].In:T.van Leeuwen and C.Jewitt.(eds.),Handbook ofVisual Analysis[C].London:Routledge,2001：10-34.

[6]Krippendorff,K.Content Analysis:An Introduction to Its Methodology （2nd edition）[M].Thousand Oaks,CA:Sage Publications,2004.

[7]Riffe,D,Lacy,S.& F.G.Fico.Analyzing Media Messages: Using Quantitative Content Analysis in Research[M].Mahwah,NJ:Lawrence Erlbaum,2005.

[8]Iedema,R.Analysing film and television:a social semiotic account of Hospital:an unhealthy business[A].In:T.van Leeuwen and C.Jewitt.(eds.),Handbook of Visual Analysis[C].London:Routledge,2001：183-204.

[9]Heath,C and J.Hindmarsh.Analysing interaction:video,ethnography and situated conduct[A].In T.May(ed.),Qualitative Research in Action[C].London:Sage,2002：99-121.

[10]Paul ten Have.Understanding Qualitative Research and Ethnomethodology[M].London:Sage,2004.

[11]Goodwin,C.Practices of seeing visual analysis:an ethnomethodological approach[A].In:T.van Leeuwen and C.Jewitt.eds.Handbook ofVisualAnalysis[C].London:Routledge,2001,157-182.

作 者：

韓青玉，碩士，青海師范大學(xué)外語(yǔ)系講師，北京外國(guó)語(yǔ)大學(xué)訪問(wèn)學(xué)者，研究方向：話語(yǔ)分析，跨文化傳播；劉立華，博士，北京交通大學(xué)語(yǔ)言與傳播學(xué)院教授，研究方向：話語(yǔ)分析，跨文化傳播。

編 輯：

魏思思 E-mail:sisi123_0@163.com