胡翩翩

【摘要】多模態(tài)語(yǔ)料庫(kù)以語(yǔ)境模型為驅(qū)動(dòng)的包含語(yǔ)言、聲音、圖像、動(dòng)作等的多媒體語(yǔ)料庫(kù)，它對(duì)實(shí)現(xiàn)大學(xué)英語(yǔ)教學(xué)的多樣性和生動(dòng)性，給學(xué)生創(chuàng)造多元的英語(yǔ)課堂和貼近現(xiàn)實(shí)的第二語(yǔ)言學(xué)習(xí)環(huán)境。本文從多模態(tài)語(yǔ)料庫(kù)的概念和理論基礎(chǔ)出發(fā)，繼而闡述了多模態(tài)語(yǔ)料庫(kù)的建立和針對(duì)大學(xué)英語(yǔ)的應(yīng)用，旨在推進(jìn)“以學(xué)生為中心”的大學(xué)英語(yǔ)教學(xué)改革。

【關(guān)鍵詞】多模態(tài)語(yǔ)料庫(kù);Elan;大學(xué)英語(yǔ)教學(xué)

一、引言

隨著現(xiàn)代信息技術(shù)的不斷更新，互聯(lián)網(wǎng)與各個(gè)領(lǐng)域的結(jié)合日益緊密，這也就意味著除了課堂，學(xué)生獲取各類學(xué)習(xí)資源的途徑也越來(lái)越多樣，自主學(xué)習(xí)的實(shí)現(xiàn)也將越來(lái)越容易。

在此背景下，在語(yǔ)言教學(xué)中使用多模態(tài)教學(xué)模式已經(jīng)逐漸成為一種趨勢(shì)?！岸嗄B(tài)手段能夠節(jié)省人力物力，能夠提高教學(xué)效果，在很多方面優(yōu)于傳統(tǒng)教學(xué)手段”。同時(shí)，為進(jìn)一步提高教師的教學(xué)效率與學(xué)生學(xué)習(xí)的方向性，自建多模態(tài)語(yǔ)料庫(kù)將成為大學(xué)英語(yǔ)教學(xué)的一個(gè)行之有效的輔助，不僅能推進(jìn)聽說(shuō)讀寫各種課堂活動(dòng)的展開，更能進(jìn)行課后的實(shí)時(shí)評(píng)價(jià)與反饋，對(duì)學(xué)生英語(yǔ)應(yīng)用能力的提高大有裨益。

二、多模態(tài)語(yǔ)料庫(kù)的概念及理論基礎(chǔ)

1.多模態(tài)語(yǔ)料庫(kù)的概念。語(yǔ)言是包含聲音、文字、圖像、符號(hào)等多種模態(tài)的。語(yǔ)料庫(kù)是將大量語(yǔ)言類資源通過(guò)科學(xué)化處理進(jìn)行有序存放的電子文本庫(kù)，語(yǔ)料庫(kù)的三個(gè)特點(diǎn)包括：首先，語(yǔ)料庫(kù)中存放的是在實(shí)際運(yùn)用過(guò)程中出現(xiàn)的語(yǔ)言材料;其次，語(yǔ)料庫(kù)是語(yǔ)言知識(shí)的載體，不是其等價(jià)物;最后，語(yǔ)料庫(kù)中包含的有效語(yǔ)料是在原始語(yǔ)料經(jīng)過(guò)加工處理后形成的。

多模態(tài)語(yǔ)料庫(kù)是建立在言語(yǔ)理論基礎(chǔ)之上，以言語(yǔ)活動(dòng)為研究對(duì)象，以從原始數(shù)據(jù)中抽取信息和知識(shí)為手段，以語(yǔ)境模型為驅(qū)動(dòng)的囊括整個(gè)言語(yǔ)活動(dòng)的語(yǔ)言、聲音、圖像和動(dòng)作的多媒體語(yǔ)料庫(kù)。與傳統(tǒng)語(yǔ)料庫(kù)相比，多模態(tài)語(yǔ)料庫(kù)的語(yǔ)料來(lái)源不局限于文本類材料或聽說(shuō)訓(xùn)練的原文，而是形式多樣的多媒體資料，如音頻或視頻等。新型多模態(tài)語(yǔ)料庫(kù)能為大學(xué)英語(yǔ)教學(xué)，特別是視聽說(shuō)教學(xué)提供豐富的語(yǔ)言資料并還原大量真實(shí)的語(yǔ)言場(chǎng)景，從而最大程度地激發(fā)學(xué)生的學(xué)習(xí)動(dòng)機(jī)，讓學(xué)生可以隨時(shí)隨地進(jìn)行自主學(xué)習(xí)不受時(shí)間和場(chǎng)地的限制，對(duì)他們自主學(xué)習(xí)能力的培養(yǎng)十分有利;在其輔助下，學(xué)生能總結(jié)出相應(yīng)的語(yǔ)言規(guī)律，成為學(xué)習(xí)的“主人”。

2.多模態(tài)語(yǔ)料庫(kù)的理論基礎(chǔ)。

（1）建構(gòu)主義學(xué)習(xí)理論。建構(gòu)主義學(xué)習(xí)理論認(rèn)為學(xué)生不是信息的被動(dòng)接受者，而是主動(dòng)的知識(shí)建構(gòu)者，教師也相應(yīng)地從教學(xué)的中心轉(zhuǎn)變?yōu)閷W(xué)習(xí)的指導(dǎo)者和學(xué)習(xí)環(huán)境的創(chuàng)設(shè)者。傳統(tǒng)英語(yǔ)教學(xué)中，由于受時(shí)間和空間的限制，教師總是苦于如何在教室里真實(shí)還原第二語(yǔ)言的語(yǔ)境。沒有原汁原味的語(yǔ)境，教學(xué)的重點(diǎn)往往集中于語(yǔ)言點(diǎn)的教學(xué)，學(xué)生語(yǔ)言應(yīng)用能力的培養(yǎng)效果會(huì)因此大打折扣。

多模態(tài)語(yǔ)料庫(kù)的建立能為教師提供了大量高質(zhì)量的地道語(yǔ)料，并可將其用于教學(xué)供學(xué)生學(xué)習(xí)，不管是課堂教學(xué)還是課后自主學(xué)習(xí)，教師和學(xué)生都變得有理可依，有據(jù)可循。這種模式與克拉申的“語(yǔ)言輸入”理論不謀而合，學(xué)生可根據(jù)自身英語(yǔ)水平檢索有效語(yǔ)料，所謂有效語(yǔ)料即對(duì)學(xué)習(xí)者而言在其學(xué)習(xí)水平之上適中難度的語(yǔ)言資料。

（2）情境認(rèn)知理論。情境認(rèn)知理論是在行為主義“刺激 - 反應(yīng)”學(xué)習(xí)理論與認(rèn)知心理學(xué)的“信息加工”學(xué)習(xí)理論后發(fā)展起來(lái)的一個(gè)理論派別。該理論認(rèn)為語(yǔ)言的學(xué)習(xí)必須是在一定情境內(nèi)完成的，所有的教學(xué)設(shè)計(jì)都應(yīng)圍繞學(xué)生展開，使學(xué)生在真實(shí)的場(chǎng)景中學(xué)會(huì)并應(yīng)用知識(shí)，大量的真實(shí)語(yǔ)境能極大地提高學(xué)生的自主學(xué)習(xí)意識(shí)及語(yǔ)言應(yīng)用能力。多模態(tài)語(yǔ)料庫(kù)的資源大多來(lái)源于現(xiàn)實(shí)生活，學(xué)生在碰到類似場(chǎng)景時(shí)則會(huì)更深層次的理解并且更自如的運(yùn)用所學(xué)語(yǔ)言知識(shí)。因此，情境認(rèn)知理論對(duì)多模態(tài)語(yǔ)料庫(kù)驅(qū)動(dòng)的語(yǔ)言學(xué)習(xí)極具指導(dǎo)意義。

（3）多元識(shí)讀教學(xué)理念。20世紀(jì)90年代，以一批語(yǔ)言學(xué)家為代表的新倫敦小組提出了“多元識(shí)讀”的概念，以重新認(rèn)識(shí)當(dāng)今教學(xué)的使命以及識(shí)讀教學(xué)的未來(lái)。他們認(rèn)為在社會(huì)文化相互滲透、科學(xué)技術(shù)變化迅速的今天， 這個(gè)概念的提出有兩個(gè)重要的理由： 一個(gè)是通訊渠道和多媒體的多重性， 二是文化和語(yǔ)言的多樣化日益突出。多元識(shí)讀理念提倡利用網(wǎng)絡(luò)、圖片、角色扮演等多種渠道和多種教學(xué)手段來(lái)調(diào)動(dòng)學(xué)習(xí)者的各種感官，使之協(xié)同運(yùn)作參與語(yǔ)言學(xué)習(xí)，即多模態(tài)教學(xué)。多模態(tài)語(yǔ)料庫(kù)驅(qū)動(dòng)的語(yǔ)言學(xué)習(xí)作為多元識(shí)讀教學(xué)的一種形式，讓學(xué)生能夠根據(jù)學(xué)習(xí)任務(wù)和自身興趣搜素多模態(tài)語(yǔ)料資源，引導(dǎo)學(xué)生自發(fā)地總結(jié)語(yǔ)言特征。這種學(xué)習(xí)模式突破了傳統(tǒng)被動(dòng)接受的學(xué)習(xí)方式，有利于培養(yǎng)學(xué)生的思辨思維和自主學(xué)習(xí)能力;同時(shí)，多模態(tài)語(yǔ)料庫(kù)驅(qū)動(dòng)式的語(yǔ)言學(xué)習(xí)能利用多模態(tài)語(yǔ)言資源充分調(diào)動(dòng)學(xué)生的各個(gè)感官進(jìn)行主動(dòng)學(xué)習(xí)。這種學(xué)習(xí)方式改變了“單純依賴詞語(yǔ)表達(dá)意思”的誤區(qū)，促進(jìn)學(xué)生進(jìn)行多模態(tài)語(yǔ)言輸出，讓學(xué)生接觸到真實(shí)的語(yǔ)境，體驗(yàn)文化差異。

三、大學(xué)英語(yǔ)多模態(tài)語(yǔ)料庫(kù)的建立

1.語(yǔ)料篩選標(biāo)準(zhǔn)。根據(jù)大學(xué)英語(yǔ)教育的要求和學(xué)生的學(xué)習(xí)興趣，在對(duì)語(yǔ)料庫(kù)數(shù)據(jù)進(jìn)行選擇時(shí)需遵循以下四個(gè)原則：（1）真實(shí)性：優(yōu)先考慮現(xiàn)代英語(yǔ)的使用和真實(shí)語(yǔ)言情境的再現(xiàn);（2）準(zhǔn)確性：語(yǔ)料庫(kù)數(shù)據(jù)的內(nèi)容需健康積極并符合大學(xué)生英語(yǔ)學(xué)習(xí)的難度;（3）綜合性：從詞匯、句法、語(yǔ)義、語(yǔ)用等方面選取不同題材的多媒體資源以反映語(yǔ)言學(xué)習(xí)的整體景象;（4）實(shí)用性：語(yǔ)料庫(kù)數(shù)據(jù)的主題應(yīng)具有實(shí)踐性，使學(xué)生有機(jī)會(huì)將所學(xué)用于實(shí)踐，感知東西文化差異。

依照以上原則，大學(xué)英語(yǔ)視聽說(shuō)多模態(tài)語(yǔ)料庫(kù)適宜選擇英語(yǔ)電影和電視劇作為音視頻材料，如《老友記》、《阿甘正傳》、《神探夏洛克》等，此類資源能真實(shí)地反映現(xiàn)實(shí)世界，并提供有吸引力的圖片來(lái)調(diào)動(dòng)學(xué)生的學(xué)習(xí)熱情。學(xué)生在學(xué)習(xí)過(guò)程中能模仿母語(yǔ)學(xué)習(xí)者的發(fā)音，讓其更重視語(yǔ)言的實(shí)際應(yīng)用，同時(shí)也讓他們有機(jī)會(huì)直接感受西方價(jià)值觀及文化習(xí)俗。

2.語(yǔ)料處理工具。目前常用的多模態(tài)語(yǔ)料庫(kù)標(biāo)注與檢索軟件主要包括 ANVIL、Elan、MacVisSTA、DRS、Exmeralda、MCA 等，其中 Elan （ EUDICO Linguistic Annotator） 的功能最為強(qiáng)大，其主要功能包括：（1）顯示語(yǔ)音或視頻信號(hào)，并附有注釋;（2）為媒體流等增加時(shí)間標(biāo)注;（3）根據(jù)使用者的不同需要進(jìn)行多層標(biāo)注;（4）不同種類的文字設(shè)定;（5）以不同形式進(jìn)行輸入或輸出以供進(jìn)一步的分析標(biāo)注。若將Elan用于教學(xué)，其標(biāo)注功能和對(duì)音視頻的控制功能則能完美體現(xiàn)。首先，它可以對(duì)音、視頻文件進(jìn)行多層標(biāo)注，在自建語(yǔ)料庫(kù)時(shí)需提前設(shè)置好不同層面的標(biāo)注信息，并根據(jù)每層的“語(yǔ)言學(xué)類型”以界定其層級(jí)屬性，Elan主要包含五種語(yǔ)言學(xué)類型，即：None（獨(dú)立層）、Time subdivision、Symbolic subdivision、Included in 以及Symbolic association.教師可根據(jù)需要選擇不同的標(biāo)記及檢索方式。其次，教師可對(duì)不同的語(yǔ)料進(jìn)行自定義標(biāo)注，特別是一些具個(gè)人特色的特殊文字和符號(hào)，這不僅方便后期檢索，更能大大降低標(biāo)注的錯(cuò)誤率。再次，Elan能對(duì)視頻片段的播放速度進(jìn)行控制，被標(biāo)注文件可呈現(xiàn)多重顯示方式并且可以任意的重播。這給教學(xué)帶來(lái)了極大的便利性。

3.語(yǔ)料處理過(guò)程。對(duì)多模態(tài)的語(yǔ)料處理主要分成以下五步。第一步，應(yīng)下載最新版的Elan軟件并根據(jù)電腦的操作系統(tǒng)選擇不同的安裝版本。第二步，雙擊進(jìn)入Elan并通過(guò)點(diǎn)擊其頁(yè)面的“文件”后進(jìn)入下拉菜單中的“新建”選定要處理的語(yǔ)料文件，如TED的演講等，然后雙擊“確定”對(duì)該多模態(tài)語(yǔ)料進(jìn)行導(dǎo)入。第三步，完成導(dǎo)入后應(yīng)立即保存文件，并將系統(tǒng)設(shè)置的語(yǔ)料層名“Default”進(jìn)行修改，如：英文字幕等;隨后選擇“選項(xiàng)”菜單中的“分割模式”將語(yǔ)料根據(jù)時(shí)間點(diǎn)進(jìn)行分割并標(biāo)記出來(lái)，如《神探夏洛克》中不同角色的對(duì)白;最后選擇“選項(xiàng)”菜單中的“轉(zhuǎn)寫模式”對(duì)劇中的字幕進(jìn)行改寫。第四步，選擇“選項(xiàng)”菜單中的“標(biāo)注模式”對(duì)語(yǔ)料進(jìn)行標(biāo)注，如字幕、詞匯、音標(biāo)、主題等。第五步，完成標(biāo)注后，點(diǎn)擊“搜索”便可檢索單個(gè)或多個(gè)語(yǔ)料文件，其后綴名為“.eaf”，使用者可以對(duì)語(yǔ)料進(jìn)行不同層名的分析比對(duì)并可對(duì)其播放速度和模式進(jìn)行隨意控制。

四、多模態(tài)語(yǔ)料庫(kù)針對(duì)大學(xué)英語(yǔ)教學(xué)的應(yīng)用

大學(xué)英語(yǔ)是高等學(xué)校非英語(yǔ)專業(yè)的學(xué)生所必修的公共基礎(chǔ)課，該課程的主要教學(xué)目標(biāo)是循序漸進(jìn)地培養(yǎng)學(xué)生英語(yǔ)綜合應(yīng)用能力，特別是聽說(shuō)能力，使他們?cè)诮窈蠊ぷ骱蜕鐣?huì)交往中能用英語(yǔ)有效地進(jìn)行口頭和書面的信息交流，同時(shí)增強(qiáng)其自主學(xué)習(xí)能力、提高綜合文化素養(yǎng)，以適應(yīng)我國(guó)經(jīng)濟(jì)發(fā)展和國(guó)際交流的需要。授課過(guò)程中，以多媒體教學(xué)設(shè)備為載體，通過(guò)音、視頻資源的播放使學(xué)生融入到第二語(yǔ)言的教學(xué)環(huán)境中，從而提高教學(xué)效率并增強(qiáng)學(xué)生的跨文化交際意識(shí)與能力。本文將以大學(xué)英語(yǔ)視聽說(shuō)教程為例探討多模態(tài)語(yǔ)料庫(kù)在教學(xué)上的應(yīng)用。該教程以聽說(shuō)能力培養(yǎng)為導(dǎo)向，在聽說(shuō)訓(xùn)練中強(qiáng)化學(xué)生對(duì)詞匯以及句法的掌握，以高頻輸入的方式帶動(dòng)輸出，使學(xué)生的詞匯量提升，口語(yǔ)交際能力增強(qiáng)，繼而提高英語(yǔ)綜合運(yùn)用能力。

大學(xué)英語(yǔ)視聽說(shuō)教程每一單元分為兩部分：listening and speaking 和video course. 每個(gè)部分的練習(xí)前都有詞匯作為鋪墊，進(jìn)而讓學(xué)生根據(jù)音頻或視頻完成相應(yīng)的口語(yǔ)或書面練習(xí)。以“Fashion”這個(gè)單元為例，在listening的這個(gè)部分，首先給出了fashion、makeup、hiphop等詞的雙語(yǔ)釋義。在教學(xué)時(shí)，教師可以嘗試把如“makeup”這樣容易激發(fā)起學(xué)生興趣的詞作為檢索關(guān)鍵詞，在語(yǔ)料庫(kù)里通過(guò)多層標(biāo)注匹配相關(guān)的關(guān)聯(lián)詞、圖片甚至視頻，讓單詞生動(dòng)起來(lái)，從而加深學(xué)生對(duì)該詞的理解;對(duì)于“fashion”這樣的多義詞，教師可在語(yǔ)料庫(kù)里開啟多窗口播放功能，讓學(xué)生自行對(duì)比在不同情況下該詞的使用情況，增強(qiáng)學(xué)生的詞匯運(yùn)用能力。在課后的自主學(xué)習(xí)任務(wù)布置方面，教師還可布置學(xué)生運(yùn)用多模態(tài)語(yǔ)料庫(kù)對(duì)詞匯進(jìn)行歸納總結(jié)，包括詞匯的不同發(fā)音、固定搭配、詞性變化等，讓學(xué)生自主學(xué)習(xí)能力得到充分鍛煉。Listening這個(gè)部分的聽力練習(xí)是以音頻為主，每個(gè)單元一般有三個(gè)音頻，難度逐級(jí)上升且沒有字幕。針對(duì)這個(gè)部分的特點(diǎn)，教師在制作語(yǔ)料庫(kù)時(shí)，可以用時(shí)間軸劃分音頻的播放速度，對(duì)于比較難的片段，對(duì)關(guān)鍵詞進(jìn)行檢索和定位，便可自動(dòng)放慢速度進(jìn)行精聽練習(xí)，這對(duì)糾正學(xué)生的語(yǔ)音語(yǔ)調(diào)及聽力水平都十分有用。另外，教師還可運(yùn)用多模態(tài)語(yǔ)料庫(kù)主題檢索功能，對(duì)相關(guān)主題的地道表達(dá)方式進(jìn)行對(duì)比，引導(dǎo)學(xué)生找到并歸納語(yǔ)言使用邏輯。Video course部分有兩個(gè)視頻供學(xué)生觀看并完成相應(yīng)練習(xí)。有些視頻的內(nèi)容過(guò)于陳舊且費(fèi)解，很多學(xué)生在觀看一會(huì)就會(huì)放棄，或者看完不知所云。多模態(tài)語(yǔ)料庫(kù)中的豐富的語(yǔ)料可以作為該部分的有力補(bǔ)充，如熱門電影電視劇、演講、新聞等，在這其中教師不僅可以對(duì)語(yǔ)言信息進(jìn)行標(biāo)注，還可對(duì)非語(yǔ)言信息進(jìn)行定位，如表情，動(dòng)作等，這些多模態(tài)信息能加深學(xué)生對(duì)中西文化的比較和理解，對(duì)提高學(xué)生的跨文化交際能力有非凡的意義。

五、結(jié)語(yǔ)

在大學(xué)英語(yǔ)教學(xué)中，多模態(tài)語(yǔ)料庫(kù)能夠利用技術(shù)手段為學(xué)生提供原汁原味且方便好用的二語(yǔ)習(xí)得資料，更有助于培養(yǎng)學(xué)生的自主學(xué)習(xí)能力，這對(duì)當(dāng)前大學(xué)英語(yǔ)改革的目標(biāo)高度吻合，能真正實(shí)現(xiàn)讓學(xué)生成為學(xué)習(xí)的主人，對(duì)推進(jìn)我國(guó)大學(xué)英語(yǔ)教學(xué)改革具有重大意義。

參考文獻(xiàn)：

[1]張德祿，丁肇芬.外語(yǔ)教學(xué)多模態(tài)選擇框架探索[J].Foreign Language World，2013（3）：39-56.

[2]張霄軍.多模態(tài)語(yǔ)料庫(kù)：搶救瀕危語(yǔ)言的有效途徑.民族語(yǔ)言文字信息技術(shù)研究——第十一屆全國(guó)民族語(yǔ)言文字信息學(xué)術(shù)研討會(huì)論文集[C].北京：中國(guó)中文信息學(xué)會(huì)，2007：35-41.

[3]溫彭年，賈國(guó)英.建構(gòu)主義理論與教學(xué)改革——建構(gòu)主義學(xué)習(xí)理論綜述教育理論與實(shí)踐，2002（22）：17-22.

[4]馬龍?jiān)?基于情境認(rèn)知學(xué)習(xí)理論的英語(yǔ)實(shí)踐教學(xué)改革探索[J].教育探索，2012（8）：45-46.

[5]韋琴紅.多模態(tài)化與大學(xué)生多元識(shí)讀能力研究[J].外語(yǔ)電化教學(xué)， 2009（3）：28-32

[6]張振虹，何美，韓智.大學(xué)公共英語(yǔ)多模態(tài)語(yǔ)料庫(kù)的構(gòu)建與應(yīng)用[J].山東外語(yǔ)教學(xué)，2014（3）：50-55.

[7]何美.大學(xué)英語(yǔ)多模態(tài)語(yǔ)料庫(kù)建設(shè)與應(yīng)用[M].天津大學(xué)，2014.