摘 要 現(xiàn)代多媒體技術(shù)在外語課堂中的應(yīng)用，將視聽雙重模式滲透于二語語義的教學(xué)中，從視頻對(duì)聽力的促進(jìn)作用中來探討視聽模式的有效性，特別是對(duì)于電視新聞報(bào)道中敘述性畫面與目標(biāo)詞匯詞義習(xí)得的研究，從構(gòu)建兩者的關(guān)系上，就聲畫關(guān)系與詞義猜測(cè)準(zhǔn)確率等問題進(jìn)行研究，并從畫面與目標(biāo)詞詞義理解上來探討促進(jìn)學(xué)生英語綜合能力的對(duì)策和方法。

關(guān)鍵詞 高校 英語教學(xué) 視聽模式 二語習(xí)得 關(guān)系對(duì)照

現(xiàn)代信息技術(shù)在外語課堂中的應(yīng)用，特別是原版視頻資料中視頻畫面與目標(biāo)語詞匯的字幕顯示，從兩者的相互作用中來促進(jìn)學(xué)習(xí)者語義習(xí)得。關(guān)于鏡頭的敘事表意功能，如對(duì)于新聞報(bào)道中某事件的發(fā)展記錄，同期音頻解說對(duì)學(xué)生二語習(xí)得的影響，多數(shù)學(xué)者從聚焦視聽雙重輸入模式中來探討外語學(xué)習(xí)效果，很少有學(xué)者針對(duì)視頻信息與聽力的理解關(guān)系進(jìn)行研究。為此，本文將從視頻畫面與詞匯習(xí)得關(guān)系入手，從新聞、紀(jì)錄、專題等報(bào)道視頻材料中，將敘事畫面與詞匯語義學(xué)習(xí)展開專門研究，試圖從視聽雙重模式研究中來衡量影響學(xué)生二語習(xí)得和詞匯掌握能力的因素，并提出建議和改進(jìn)對(duì)策。

一、視頻與聽力的關(guān)系研究

視頻屬于視覺性知識(shí)，聽力是人類接受外界知識(shí)的方式之一。從課題研究上，視頻與聽力關(guān)系是相互促進(jìn)的，視頻中對(duì)詞匯及視覺信息的展示，有助于學(xué)習(xí)者從中進(jìn)行理解和深化；但同時(shí)需要強(qiáng)調(diào)的是，視覺信息還有負(fù)面效應(yīng)，不可避免的對(duì)學(xué)習(xí)者的感知帶來誤解。因此，研究兩者的關(guān)系，絕非是從敘事表意畫面與詞匯聚焦的簡(jiǎn)單分析，而是從視聽雙重教學(xué)模式輸入中，來探討學(xué)習(xí)者對(duì)于二語習(xí)得的影響。

（1）視頻信息對(duì)聽力的促進(jìn)研究

從當(dāng)前學(xué)界的研究現(xiàn)狀來看，學(xué)者Lonergan提出視聽教學(xué)材料與純音頻材料在教學(xué)中，更有助于提升學(xué)習(xí)者的理解和聽力能力；學(xué)者Secules從音頻和視頻教學(xué)素材的班級(jí)調(diào)查中發(fā)現(xiàn)，視頻材料試者在受試后數(shù)周內(nèi)的聽力測(cè)試成績要高于單純的音頻材料。在國內(nèi)學(xué)者對(duì)視頻與聽力關(guān)系研究中，邱東林、李紅葉針對(duì)內(nèi)容視頻與場(chǎng)景視頻在相同試者中的對(duì)比研究發(fā)現(xiàn)，視頻信息受試結(jié)果要顯著高于場(chǎng)景視頻對(duì)象；孔文在內(nèi)容性視頻與語境性講座視頻對(duì)比中發(fā)現(xiàn)，以豐富圖像信息為主的新聞性視頻資料更有助于提升學(xué)生的聽力理解；Cross依據(jù)聲畫關(guān)系分類法，從5段BBC新聞視頻的不同聲畫關(guān)系中，讓20名學(xué)生從中進(jìn)行試驗(yàn)發(fā)現(xiàn)，結(jié)對(duì)討論方式更有助于學(xué)生對(duì)視頻信息的理解；通過對(duì)聲畫關(guān)系（視頻資源中包括同步解說）與間接聲畫關(guān)系（圖像和解說部分相關(guān)）都能夠促進(jìn)受試者的理解力，而當(dāng)圖像顯示人的頭部特寫或者畫面上有采訪者及被采訪者說話鏡頭時(shí)，以及畫面存在分立聲畫關(guān)系（圖像與解說不一致）時(shí)，則反而妨礙學(xué)生的理解力。

（2）視頻對(duì)詞匯習(xí)得的關(guān)系研究

視覺信息在詞匯習(xí)得研究中，學(xué)者Weyers通過實(shí)驗(yàn)發(fā)現(xiàn)，每天看外語片段的學(xué)生比每周看兩次短片的學(xué)生，在對(duì)相關(guān)詞匯的學(xué)習(xí)和詞義掌握上更具有優(yōu)勢(shì)；Tschirner通過對(duì)詞與詞組在反復(fù)呈現(xiàn)中，學(xué)習(xí)者能夠從中將詞匯與詞義建立對(duì)應(yīng)銜接；Verspoor通過對(duì)兩組學(xué)生進(jìn)行英語測(cè)試，第一組在課外通過多媒體方式來進(jìn)行聽說學(xué)習(xí)；另一組未開展多媒體視聽學(xué)習(xí)，則前者在寫作及詞匯掌握測(cè)試中成績顯著高于后者。

（3）視覺信息對(duì)語言習(xí)得的負(fù)面影響

從很多例證實(shí)驗(yàn)中發(fā)現(xiàn)，視聽信息有助于學(xué)生二語習(xí)得，但也有學(xué)者提出，對(duì)于視聽信息在運(yùn)用中也會(huì)產(chǎn)生負(fù)面效應(yīng)。主要表現(xiàn)：一是視聽信息更容易分散學(xué)生的注意力，特別視頻中動(dòng)態(tài)性信息，在偏離學(xué)習(xí)者自身注意力上，不利于二語習(xí)得；還有學(xué)生在看視頻或進(jìn)行其他任務(wù)測(cè)試時(shí)，他們的注意力會(huì)分散，一會(huì)看視頻，一會(huì)看筆記、一會(huì)寫答案等；從語言認(rèn)知上來看，對(duì)于視覺信息與聽覺信息的輸入，由于包含的信息量較多，既有語言類信息還有非語言類信息，如一些視頻采訪、報(bào)道、影視劇等，反而給學(xué)習(xí)者帶來過于密集的信息沖擊；有學(xué)者從注意資源的有限性上提出，對(duì)于視覺信息帶來的認(rèn)知超負(fù)荷影響是很大的；視覺信息本身的多義性或歧義性，在傳遞中視覺信息往往比語言信息更具有模糊性，容易致使學(xué)習(xí)者做出各種猜測(cè)，甚至?xí)a(chǎn)生與題旨無關(guān)的思維；視覺信息在詞匯詞義習(xí)得中還容易帶來干擾，視聽資料在提升聽力理解的同時(shí)，如果不注意詞匯的記憶，反而會(huì)干擾短期和長期記憶?？梢?，視聽信息在對(duì)二語學(xué)習(xí)和理解中的促進(jìn)與阻礙作用都是存在的，需要從各類因素間的關(guān)系研究中，合理優(yōu)化和組織，而不能泛泛地使用，避免對(duì)學(xué)習(xí)者帶來負(fù)面影響。

二、研究問題探討及方法

視聽雙重輸入模式研究的問題主要表現(xiàn)在三個(gè)方面，一是視頻畫面中敘事表意與學(xué)生對(duì)音頻同步解說的理解關(guān)系，有無促進(jìn)學(xué)生對(duì)目標(biāo)詞匯的理解和推斷；二是研究聲畫關(guān)系之間的銜接程度，并從詞義推斷正確率上來探討其相關(guān)性；三是基于視頻畫面與詞義推斷關(guān)系，就學(xué)生外語學(xué)習(xí)綜合水平的影響研究。對(duì)于圖像與音頻同步中目標(biāo)詞匯的關(guān)系，如新聞報(bào)道中“help prenent damage to the heart，arteries”，從視頻中的畫面影像與詞匯“artery”之間的對(duì)應(yīng)研究，并結(jié)合旁白“children are playing in the lagoon barefoot”，對(duì)于視頻中活潑的孩子在湖邊游玩，其目標(biāo)詞匯“l(fā)agoon”就能夠與之建立影像對(duì)應(yīng)。對(duì)于問題二中畫面與解說詞同步相關(guān)性問題，如果畫面與音頻解說詞匯存在意義關(guān)聯(lián)度，這種關(guān)聯(lián)有助于學(xué)習(xí)者從中加強(qiáng)詞義理解。如果圖像與解說詞對(duì)應(yīng)關(guān)系不明顯，旁白及解說又容易使得畫面信息過于聚集，目標(biāo)詞匯與同步畫面難以進(jìn)行連續(xù)對(duì)應(yīng)，在容易使學(xué)習(xí)者產(chǎn)生發(fā)散聯(lián)想，導(dǎo)致出現(xiàn)錯(cuò)誤理解。對(duì)于問題三中圖像與音頻解說詞匯之間沒有關(guān)聯(lián)，如“Those are the substances in food that oxidize cells”，對(duì)于圖像如果是超市貨架中的物品，而目標(biāo)詞匯“oxidize”與畫面不存在任何關(guān)系，則在詞義理解上難以銜接。

在本研究中通過對(duì)某校大學(xué)一年級(jí)新生進(jìn)行分班測(cè)試，借助于4段視頻資料來進(jìn)行試驗(yàn)，圍繞四個(gè)主題（巧克力對(duì)身體有益健康、海象的生存危機(jī)、風(fēng)能發(fā)電試驗(yàn)、廢棄食用油制造生物燃料研究），從同步視頻與目標(biāo)詞匯的聲畫對(duì)應(yīng)關(guān)系研究中進(jìn)行記錄和評(píng)測(cè)，當(dāng)目標(biāo)詞匯與圖像同步時(shí)為2分；目標(biāo)詞匯與同步視頻完全不相關(guān)則為0分；目標(biāo)詞匯與視頻同步信息介于兩者之間為1分；對(duì)各班學(xué)生進(jìn)行測(cè)試后匯總。整個(gè)實(shí)驗(yàn)過程是在視聽組、聽力組相同視頻素材基礎(chǔ)完成的，第一遍視頻不能記筆記，第二遍在視聽中猜測(cè)目標(biāo)詞匯的詞義；第三遍不能記筆記；第四遍進(jìn)行視頻內(nèi)容及目標(biāo)詞匯的詞義推測(cè)。通過對(duì)各測(cè)試小組的成績進(jìn)行統(tǒng)計(jì)匯總，受試者從視聽學(xué)習(xí)中獲得的評(píng)分結(jié)果進(jìn)行標(biāo)準(zhǔn)化，如當(dāng)“grease”的詞義為“油”得2分，當(dāng)“l(fā)agoon”的詞義本為“環(huán)礁湖”，寫作“湖”時(shí)記1分；當(dāng)“confection”本義為甜食而寫作“成分”時(shí)則與正確答案無關(guān)，標(biāo)記0分。

三、研究結(jié)果與分析

本課題在第一個(gè)問題研究中，從視頻畫面的敘事表意與音頻同步解說對(duì)應(yīng)關(guān)系上，結(jié)果表明視聽雙重輸入模式對(duì)于學(xué)生了解和提升生詞詞義的推斷具有積極作用。視聽信息可以幫助學(xué)生從視頻中來梳理整體意義，并能夠從上下文銜接中來促進(jìn)對(duì)語義的推斷，特別是當(dāng)音頻中的解說詞與視頻信息相關(guān)時(shí)，能夠有效降低學(xué)生的認(rèn)知負(fù)擔(dān)。如學(xué)生在新聞報(bào)道中，就報(bào)道的主題、以及相關(guān)背景信息的呈現(xiàn)，讓學(xué)生從中來判斷詞義的方向，從形成假設(shè)、確認(rèn)假設(shè)及在眾多假設(shè)中明確合適的假設(shè)時(shí)，具有較好的銜接作用。在對(duì)本課題第二個(gè)問題的總結(jié)中，將聲畫關(guān)系的結(jié)合度與詞義推斷正確率進(jìn)行探討，從聲畫關(guān)系緊密結(jié)合中，學(xué)生對(duì)詞義的推斷正確率較高，從而得出學(xué)生對(duì)目標(biāo)詞匯詞義的推斷，取決于視頻畫面與解釋同步的相關(guān)性；如果同步音頻與目標(biāo)詞匯詞義相關(guān)，則有助于提升正確率，如果聲畫關(guān)系疏遠(yuǎn)，也就是說圖像與目標(biāo)詞匯之間缺乏對(duì)應(yīng)關(guān)系，學(xué)生容易在視頻信息及解說干擾下背離語境。另外，對(duì)于新聞報(bào)道等視頻中存在較多生詞詞匯時(shí)，由于學(xué)生未能從目標(biāo)詞與相關(guān)詞匯之間建立匹配關(guān)系，因此會(huì)削弱學(xué)生對(duì)詞匯詞義的推斷正確率。如果某些畫面停留時(shí)間過長、旁白未能及時(shí)跟進(jìn)，學(xué)生在時(shí)間不一致下未能充分建立目標(biāo)詞匯與聲畫的關(guān)系，從而帶來推斷的模糊性。如有些畫面信息量過大，存在人物特寫或鏡頭動(dòng)作太倉促，短時(shí)間內(nèi)無法對(duì)目標(biāo)詞匯與聲畫進(jìn)行有效關(guān)聯(lián)，從而降低了生詞詞義的識(shí)別?？梢?，對(duì)于畫面與詞義推斷、詞義理解來說，在外語綜合水平中具有促進(jìn)作用，一方面來自學(xué)習(xí)者自身學(xué)習(xí)注意力的促進(jìn)，另一方面視聽雙重輸入模式，能夠讓學(xué)生從敘事表意及音畫關(guān)系中促進(jìn)對(duì)正確詞義的猜測(cè)。總之，在詞匯教學(xué)中，借助于視聽雙重輸入模式的積極作用具有一定的現(xiàn)實(shí)意義。當(dāng)同時(shí)，對(duì)于詞匯習(xí)得教學(xué)不能一蹴而就，要從不斷的教學(xué)實(shí)踐中進(jìn)行優(yōu)化，特別是在詞匯、畫面、音頻三者關(guān)聯(lián)度上，有意識(shí)的選擇目標(biāo)詞匯的復(fù)現(xiàn)率，讓學(xué)生從中建立和鞏固語音、圖像、詞義的銜接關(guān)系，提升學(xué)生對(duì)生詞詞義的有效習(xí)得。

參考文獻(xiàn)：

[1]季月，石玲.關(guān)于外語多媒體教學(xué)信息呈現(xiàn)中視聽干擾問題的探討[J].外語電化教學(xué)，2013（02）.

[2]董劍橋，周迓菁，劉桂如.英語多媒體視頻閱聽過程中的知覺負(fù)載與選擇性注意——以視頻字幕呈現(xiàn)量對(duì)閱聽理解的影響為例[J].外語電化教學(xué)，2013（05）.

（作者單位：河南財(cái)政稅務(wù)高等專科學(xué)校）