楊宏波
重慶郵電大學(xué)
辜向東
重 慶 大 學(xué)
黃妍琪
重慶第二師范學(xué)院
【提 要】 本研究通過對某考點的99 名BEC 中級口語考試(以下簡稱口試)考生進行問卷調(diào)查并輔以訪談,探討考生對BEC 中級口試的認識及BEC 中級口試對考生的影響。研究結(jié)果表明,考生對BEC 中級口試持肯定的態(tài)度;BEC中級口試對考生產(chǎn)生了積極的反撥效應(yīng)。本研究發(fā)現(xiàn)了考生在BEC 中級口試備考過程中遇到的一些問題,比如對口試評分標準不夠熟悉、備考時間不足、備考活動比較單一等。本研究期望為BEC 口試的實施與專門用途英語口試教學(xué)、測試及備考提供參考。
劍橋商務(wù)英語證書考試(Cambridge English:Business Certificates,簡稱BEC)是一項具有國際權(quán)威性的語言水平考試。該考試于1993 年由教育部考試中心和劍橋大學(xué)考試委員會兩個權(quán)威教育考試機構(gòu)聯(lián)合在中國推出,至今在中國的考生人數(shù)逾百萬,日益發(fā)展成為一項大規(guī)模、高風(fēng)險考試。該考試成為眾多知名跨國企業(yè)和國際高等院校評估應(yīng)聘者和申請者語言能力的標準。BEC 考試主要分為BEC 初級(B1 Business Preliminary)、BEC 中 級(B2 Business Vantage)和BEC 高級(C1 Business Higher)三個級別,包括筆試和口試兩個獨立部分,涉及聽、說、讀、寫四項技能以及英語實際運用能力。本研究是劍橋測試中心與重慶大學(xué)的國際合作項目“劍橋英語考試在中國的影響”的一部分。本文主要調(diào)查BEC 中級考試的口語測試對考生產(chǎn)生的反撥效應(yīng)。
反撥效應(yīng)(washback/backwash)又稱反撥作用,通常指考試對教師和學(xué)生以及教和學(xué)產(chǎn)生的影響(Alderson & Wall 1993; Bachman 1990, 2010; Hughes 2003; Messick 1996)。關(guān)于反撥效應(yīng)的理論研究,Alderson & Wall(1993)的“反撥效應(yīng)假設(shè)”提出從教師和學(xué)生兩個角度研究反撥效應(yīng)。Hughes(1993)提出了“PPP 模式”,即參與者(participants)——過程(processes)——結(jié)果(products)的反撥效應(yīng)模式。Bailey(1996)區(qū)分了測試對考生和其他考試參與者的反撥效應(yīng),而且還揭示了反撥效應(yīng)的復(fù)雜關(guān)系。Shih(2007)提出了關(guān)于學(xué)生學(xué)習(xí)的具體反撥效應(yīng)模型,探討了促成反撥效應(yīng)的各種影響因素。Green(2007)的模型涉及考試的特征和考試參與者的特征,而且還提出了反撥效應(yīng)的性質(zhì)(正面或負面效應(yīng))和強度(亓魯霞2010)。
現(xiàn)有反撥效應(yīng)的實證研究主要包括兩類,一類是全國或地區(qū)性考試,另一類是國際化考試,這些研究重點關(guān)注大規(guī)模、高風(fēng)險考試(劉曉華,辜向東2013)。與口語測試反撥效應(yīng)相關(guān)的實證研究主要涉及全國或地區(qū)性的考試(Andrews, Fullilove & Wong,2002;Ferman2004;Shohamy1993;Shohamy etc. 1996;金艷2000,唐耀彩等2004 等)。曹佳(2012)通過實證研究分析了中國民航飛行人員英語能力測試口語能力面試對學(xué)生英語學(xué)習(xí)的反撥效應(yīng)。沈燕(2018)調(diào)查了某高校的網(wǎng)絡(luò)英語口語測評軟件對考生口語學(xué)習(xí)的反撥效應(yīng)。但是這些研究對國際化的水平考試涉及較少,涉及專門用途英語口語的研究很少,涉及商務(wù)英語口語的研究也很缺乏。
王立非(2013)分析了我國商務(wù)英語十年(2002-2011)的研究現(xiàn)狀,發(fā)現(xiàn)涉及商務(wù)英語口語的研究不多,商務(wù)英語測試開始引起學(xué)者的關(guān)注。丁磊(2019)統(tǒng)計分析了我國商務(wù)英語口語研究15 年的(2002-2017)發(fā)展狀況和存在的問題。結(jié)果發(fā)現(xiàn),我國商務(wù)英語口語研究主要面向高職學(xué)生,大學(xué)本科口語習(xí)得研究較少;已有研究主要集中在教學(xué)方法上,商務(wù)英語口語評價研究和口語測試方面的研究嚴重不足,總體上實證研究比較缺乏??梢?,有必要對商務(wù)英語口語測試進行實證研究。
現(xiàn)有文獻中關(guān)于BEC 考試的研究不多,魏葆霖(1994)對BEC 考試進行了簡要介紹;郭麗(1999)分析了BEC 筆試和口試中交際性語言測試的特征;韋立(2006)通過實證研究分析了劍橋商務(wù)英語口語考試的構(gòu)念效度;魏亞妮(2010)通過分析BEC 考試的特點及重要性討論了高職商務(wù)英語如何進行教學(xué)改革;朱翊葭(2014)從題型和評分標準兩方面對比分析了商務(wù)漢語考試和劍橋商務(wù)英語考試,從而為商務(wù)漢語考試的國際推廣提出了建議。這些研究多集中在考試的效度和特征。黃妍琪(2015)調(diào)查了BEC 中級考試對中國三個不同地區(qū)的考生的反撥效應(yīng)。Gu &Saville(2016)從學(xué)生的角度對BEC 考試的影響進行了實證研究,但是這兩項研究都沒有專門針對口語考試進行調(diào)查。而現(xiàn)有BEC 口語考試相關(guān)的研究主要涉及考試改革的調(diào)查和介紹(Booth2003; O’Sullivan 2006),對BEC 口語考試的反撥效應(yīng)的實證研究很少。
為了彌補上述不足,本文從考生的角度,調(diào)查了職業(yè)類英語證書考試BEC 中級口語考試的反撥效應(yīng)。
本研究針對現(xiàn)有文獻中的不足,主要研究專門用途英語BEC 中級口試對考生產(chǎn)生的反撥效應(yīng),主要回答兩個研究問題:1)考生對BEC 中級口試的認識如何?2)BEC 中級口試的影響如何?
本文的研究對象為某BEC 中級口試考點的110名剛參加完BEC 中級口試的考生。在這些考生中,女生占83.8%,93.9%的考生為在讀學(xué)生,考生年齡集中在19-24 歲之間(占94%)。本科生占80.8%(見表1)。
表1 BEC 中級口試考生的背景信息
考生就讀的專業(yè)包含10 余種。以經(jīng)濟學(xué)和管理學(xué)為主,分別占31.1%和27.7%,文學(xué)專業(yè)考生占27.7%,工學(xué)占12.6%,此外還包括傳媒和人力資源、語言學(xué)、電子學(xué)等專業(yè)的考生(見圖1)。這些考生的求職意向排前三位的分別是外貿(mào)(39.6%),金融(19.5%)和教育(13.4%)(見圖2)。
圖1 考生專業(yè)背景
圖2 考生求職意向
本研究主要采用問卷調(diào)查輔之以訪談的研究方法。問卷包括三個部分:考生的基本信息,對BEC 中級口試的認識,BEC 中級口試對考生的影響。問卷的題項涉及三類:里克特五級量表問題、多項選擇題和填空題。調(diào)查問卷的設(shè)計主要參照《劍橋商務(wù)英語教師手冊》(2012)、與反撥效應(yīng)和考試影響相關(guān)的理論和實 證 研 究(Alderson and Wall 1993;Cheng 2005;Hawkey 2006;Green 2007;Saville 2010;Wall and Horák 2011;辜向東等2014)等。研究者多次對調(diào)查問卷進行了試做和修改,以確保其信度和效度。訪談內(nèi)容主要涉及考生對BEC 中級口試的認識以及考試的影響。
問卷調(diào)查在某考點BEC 中級口試結(jié)束后進行,共發(fā)放考生問卷110 份,回收105 份,回收率達95.5%。剔除無效問卷6 份,本研究有效問卷共99 份。調(diào)查問卷完成后,35 名考生參與了半結(jié)構(gòu)式訪談。問卷調(diào)查數(shù)據(jù)通過SPSS 21.0 進行統(tǒng)計分析。問卷的信度系數(shù)(Cronbach's alpha)為0.932,說明問卷的內(nèi)在一致性很好,信度很高。訪談數(shù)據(jù)主要通過多次標定、反復(fù)修改并進行分類分析。
本研究調(diào)查了考生對BEC 中級口語考試的考試時間、考試真實性、考試評分標準、考試難度的認識,以及考生對考試難度的熟悉程度。
1)口試時間
考生認為BEC 中級口試總體時長及各部分時長比較合理,總體時長、對話和話題討論的均值都在4以上,簡短發(fā)言的均值為3.88(見表2)。但是簡短發(fā)言和話題討論的標準差都大于1,說明考生對此的認識不一致。
表2 對BEC 中級口試整體和各部分時長的看法
2)口試真實性
真實性是指“語言測試任務(wù)的特征與目標語運用任務(wù)的特征之間的對應(yīng)程度”(Bachman & Palmer 1996:23)。關(guān)于口試題型的真實性,本研究側(cè)重于最能考查出職場英語水平的題型。61.2%的考生認為第三部分話題討論最能考查出職場英語水平,第二部分簡短發(fā)言次之,約占20%,第一部分對話占的比例最少,為16.3%(見圖3)??赡苁且驗榈谝徊糠謱υ捴饕顷P(guān)于個人情況或工作、學(xué)習(xí)情況等。第二部分簡短發(fā)言雖涉及商務(wù)話題,但考生發(fā)言時間僅一分鐘,考生可能認為無法在短時間內(nèi)充分展示自己的職場英語水平。而第三部分的話題與職場英語直接相關(guān),互動性強??忌枰獓@給定的商務(wù)話題進行討論、發(fā)表觀點、做出決策。
圖3 最能考查出職場英語水平的題型(%)
關(guān)于口試內(nèi)容的真實性,考生認為BEC 中級口試的內(nèi)容比較符合職場的真實情境。52.5%的考生認為二者比較一致或很一致,31.3%的考生認為一般,僅有16.1%的考生認為不太一致或很不一致(見圖4)。60.2%的考生認為BEC 中級口試比較能考察出考生的職場英語水平(見圖5)。在訪談中,考生表示BEC 中級口試不僅實用性強,而且考試很公平。
圖4 BEC 中級口試內(nèi)容與職場真實情境一致性(%)
圖5 BEC 中級口試多大程度上考察出考生的職場英語水平(%)
3)口試評分標準
評分標準是口語測試的重要組成部分,是衡量考生考試表現(xiàn)的標尺(Luoma2004)。一方面,口試評分標準是考官評分的依據(jù),另一方面,對于考生而言,對口試評分標準的了解程度,也直接關(guān)系到其備考活動和在口試中的表現(xiàn)。因此,本研究調(diào)查了考生對BEC中級口試評分標準的熟悉程度。調(diào)查數(shù)據(jù)顯示,考生對BEC 中級口試評分標準的了解程度一般,均值為2.85。由圖6 可見,僅有26.3%的考生對口試評分標準比較了解或很了解,38.3%的考生表示并不了解。
圖6 考生對BEC 中級口試評分標準的了解程度(%)
4)口試難度
關(guān)于口試的難度,考生認為BEC 中級口試的總體難度和各部分難度都比較合理,均值都在4 左右??忌恼J識比較一致,標準差都小于1(見表3)。在訪談中發(fā)現(xiàn),考生普遍認為口試話題難度合理??忌谋尘爸R在一定程度上影響考生對BEC 中級口試難度的認識。對于一些非商務(wù)相關(guān)專業(yè)的考生,口試中涉及的一些專業(yè)術(shù)語較難理解。
其實真正的話題還是比較簡單,比我們剛才練的都簡單。我覺得對我來說還是考了挺多商業(yè)知識的,就是以前完全都不知道的商業(yè)的東西,可能有些單詞是商務(wù)里專有的,這種反應(yīng)不過來(S4 德語專業(yè)本科生)。
我覺得BEC 中級口試考的專業(yè)知識不多,考的話題不難,我覺得比較常識的。據(jù)說BEC 中級口試主要注重英語表達,商業(yè)知識考的少。我第二專業(yè)學(xué)了會計,我覺得跟這個口試聯(lián)系蠻緊的(S3 英語專業(yè)商務(wù)方向本科生,第二專業(yè)為會計)。
表3 考生對BEC 中級口試難度的認識
5)口試熟悉程度
口試熟悉程度指考生對BEC 中級口試的考試流程的熟悉程度。調(diào)查數(shù)據(jù)顯示,考生對口試流程比較熟悉,均值為3.63。比較熟悉和很熟悉的比例占51.6%。認為一般熟悉的比例為43.4%(見圖7)。訪談中考生表示通過學(xué)校商務(wù)英語課堂教學(xué)、培訓(xùn)課、網(wǎng)上查詢或者購買的備考材料來了解BEC 口試流程,但是有些考生在網(wǎng)上查詢考試流程信息時,不了解如何借助考試的官方網(wǎng)站來獲取信息,僅通過百度瀏覽器搜索出現(xiàn)頻率最高的網(wǎng)站來查詢。
圖7 考生對BEC 中級口語考試的熟悉程度(%)
本部分主要分析BEC 中級口語考試對考生產(chǎn)生的影響。
1)對考生的影響
本研究調(diào)查了BEC 中級口試對考生的口語學(xué)習(xí)或應(yīng)用的影響。80.8%的考生認為BEC 中級口試對其口語學(xué)習(xí)和應(yīng)用產(chǎn)生了比較正面的影響(見圖8)。在訪談中,很多考生提到通過備考BEC 中級口試,他們不僅發(fā)現(xiàn)了自己在口語方面的不足,而且獲得了練習(xí)口語和鍛煉自己的機會。BEC 口語測試不僅能夠幫助他們提高口語水平,而且對以后的其他口語考試和英語學(xué)習(xí)都起到了積極的作用,對將來的職業(yè)發(fā)展會有幫助。
我覺得準備BEC 中級考試的過程比考的過程收獲更大,看那些教材的時候你就了解了很多商業(yè)的知識,還蠻有用的,好像有的時候?qū)ぷ髅嬖囘€挺有用的。(S12)
我學(xué)到很多商業(yè)方面的詞匯,發(fā)現(xiàn)跟日常英語中的用法不太一樣。通過備考能強制自己自覺學(xué)習(xí)英語,也帶動了英語口語水平的提高。我本身比較喜歡說話,然后經(jīng)常參加班級活動,借助ppt 做演講啊,用英語講話啊。(S16)
圖8 BEC 中級口試對考生的口語學(xué)習(xí)和應(yīng)用的影響(%)
本研究還從考生的備考時間、備考活動和備考中遇到的困難三方面來分析BEC 中級口試對學(xué)生學(xué)習(xí)過程的影響??傮w上,考生備考BEC 中級口試的總用時不足,44.4%的考生備考BEC 中級口試的總時間在半個月以內(nèi),即在考試前進行突擊式訓(xùn)練。27.3%的考生備考時間在一個月以內(nèi)。進行兩個月以內(nèi)備考訓(xùn)練的考生僅占15.2%??忌鷤淇糂EC 中級口試平均每天的用時也不足,46.9%的考生平均每天用在BEC 中級口語備考訓(xùn)練的時間為半小時以內(nèi),34.7%的考生平均每天備考時間在1 小時以內(nèi)(見表4)。因此,總體上看,考生BEC 中級口語備考投入的時間不足。在訪談中,考生認為自己備考時間投入不足,需要加強備考練習(xí),從而為口試做好充分準備。
我們那邊口語的話訓(xùn)練得很少,然后你知道本來看到書上覺得還挺簡單的,但是自己要說出來的話就覺得很難了。(S7)
我覺得我口語還是練得太少了,像這種高壓情況下有的時候有點說不出來。(S18)
表4 學(xué)生備考BEC 中級口試投入的時間
由表5 可見,備考活動頻率最高的是個人陳述練習(xí),均值為3.62,約占60%,可見,大部分考生通過個人陳述練習(xí)來備考BEC 中級口試。考生有時學(xué)習(xí)口語表達技巧和進行模擬口試,均值分別為3.27 和3.02。背誦口語句型與模板也是考生采用的備考活動之一,均值接近3??忌ㄟ^背誦模板來備考,可能是口試表現(xiàn)帶有應(yīng)試演練痕跡的原因之一。調(diào)查數(shù)據(jù)顯示,39.4%的考生認為BEC 中級口試的簡短發(fā)言部分有很明顯的應(yīng)試演練痕跡(見圖9)。此外,考生與同伴、與老師進行會話練習(xí)的頻率相對較低,均值都低于3??梢姡忌捎没有问降膫淇蓟顒宇l率較低??傮w上,考生進行備考活動的個體差異較大,因為標準差都超過1(見表5)。
關(guān)于備考中遇到的困難,有些考生認為商務(wù)表達很難掌握,備考缺乏指導(dǎo),不知如何準備BEC 中級口試。在訪談中,有考生提出開設(shè)考前輔導(dǎo)課的建議:
表5 考生進行以下備考活動的頻率
因為我們自己找那種培訓(xùn)班都找不到,而且如果有的話很少,而且很貴,一千左右。我覺得應(yīng)該派專門的人來給我們做個專項培訓(xùn),就一節(jié)課就好,大概考試流程告訴我們一下就可以,我覺得也挺值的(S11)
此外,訪談結(jié)果顯示,有些考生認為備考BEC 中級口試之后,口語水平提高較慢,看不到成效。多名考生認為心態(tài)和臨場發(fā)揮在BEC 中級口語考試中很重要。
圖9 BEC 中級口試有較明顯的應(yīng)試演練痕跡的環(huán)節(jié)(%)
2)影響因素
本研究主要調(diào)查了考官、考生、考生搭檔組合方式和其他非語言因素對BEC 中級口試的影響。考官是口試環(huán)節(jié)的重要參與者,是對口試考生口語表現(xiàn)的直接評判者,因此考官因素很可能會對考試產(chǎn)生很大影響。本研究通過考生對口試考官的評價來判斷考官對考試產(chǎn)生的影響。幾乎所有考生都認為考官基本素質(zhì)高,施考得當,各項均值都在4.5 以上。而且考生的評價一致,標準差都小于1(見表6)。
表6 考生對口試考官的評價
在訪談中,考生多次對考官的發(fā)音、口語水平和態(tài)度表示肯定??梢酝茢?,考官因素對BEC 中級口試產(chǎn)生了積極的影響。
考官挺親切的,他的語速放得挺慢的,挺清晰的。她的口語非常純正。(S5)
考官很不錯。我覺得語速挺好的,說得挺清楚,挺好理解的。兩個男考官的語音語調(diào)都很標準。(S13)
考官比較kind,一個男考官,一個女考官??脊俚恼Z速語調(diào)都合適,但是有時候用的句子有點長,我有單詞聽不懂,喊他再說了一遍。(S17)
BEC 中級口試第三部分為話題討論,主要考查考生與他人進行交際的能力??荚囆问綖閮蓚€考生圍繞給定的商務(wù)情景話題進行討論。本研究涉及的考生因素主要指考生與其搭檔的水平差異對考官評分的影響。數(shù)據(jù)顯示,57.1%的考生認為搭檔之間的水平差異對考官評分的影響比較小,42.9%的考生認為影響比較大或很大(見圖10)。可見,搭檔間的水平差異可能會對口試結(jié)果產(chǎn)生影響。
圖10 考生與其搭檔的水平差異對考官評分的影響(%)
BEC 中級口試較常見的搭檔組合方式是按照考號順序進行組合,本研究調(diào)查了考生對這種組合方式的看法。69.7%的考生認為按照考號順序組合搭檔比較合理或很合理(見圖11)。在訪談中,也有個別考生提出不喜歡按考號順序來組合搭檔,希望進行一對一的口語考試,由考官來擔任考生的搭檔。
圖11 考生對口試中按考號順序組合搭檔的看法(%)
口試中的非語言因素如手勢、眼神交流、面部表情、信心態(tài)度、臨場應(yīng)變等是否會影響考試評分也是本研究調(diào)查的內(nèi)容之一。67.3%的考生認為非語言因素對評分的影響較小、很小或沒有影響(見圖12)。
圖12 考生非語言因素對考官評分的影響程度(%)
本文分析了考生對BEC 中級口試的認識及BEC中級口試的影響??傮w上,考生比較認可BEC 中級口語考試,他們認為BEC 中級口試總體時長及各部分時長都比較合理,考試具有真實性,考生對考試的難度也比較認同。BEC 中級口試對考生口語學(xué)習(xí)或應(yīng)用也產(chǎn)生了積極的反撥效應(yīng)??忌鷮脊俚膫€人基本素質(zhì)、職業(yè)素養(yǎng)和施考經(jīng)驗持肯定的態(tài)度,考生認為搭檔組合的方式合理,但考生與搭檔的水平差異可能會對考試結(jié)果產(chǎn)生一定影響,非語言水平因素對BEC 中級口試評分的影響較小。
此外,本研究也發(fā)現(xiàn)了一些問題,例如考生對評分標準的了解程度不夠;一半以上的考生對考試流程不熟悉??忌贐EC 中級口語備考上的時間投入不足,備考活動主要依靠個人陳述,較少采用與同伴進行對話等互動式的備考活動等。
本文從考生的角度分析BEC 中級口試的反撥效應(yīng),揭示了BEC 中級口試對考生產(chǎn)生的影響,為BEC口試的實施和改進提供了參考,也為BEC 中級口試的備考提供了啟示。通過對此專門用途英語考試影響的研究為專門用途英語考試的口試反撥效應(yīng)研究奠定了基礎(chǔ),本研究系劍橋大學(xué)英語考評部與重慶大學(xué)的國際合作項目“劍橋英語考試在中國的影響”的一部分,該系列研究還包括BEC 中級口試對考官的反撥效應(yīng),考官和考生對BEC 中級口試的認識及影響的對比研究,考官對BEC 中級口試的認識及影響的歷時對比研究等。