陳　銘　章國建

(湖北理工學(xué)院 外國語學(xué)院，湖北 黃石 435003)

“綜合商務(wù)英語”課程考試效度實證研究*

陳銘章國建

(湖北理工學(xué)院 外國語學(xué)院，湖北 黃石 435003)

[摘要]商務(wù)英語專業(yè)作為一種全新的具有外國語言學(xué)與經(jīng)濟管理學(xué)交叉性質(zhì)的復(fù)合學(xué)科專業(yè)，它的人才培養(yǎng)模式與測試模式一直都在探索之中。《高等學(xué)校商務(wù)英語專業(yè)教學(xué)要求》與《商務(wù)英語專業(yè)考試大綱》對商務(wù)英語專業(yè)學(xué)生不同階段應(yīng)具備的能力提出了相應(yīng)的要求。文章以湖北理工學(xué)院外國語學(xué)院首屆商務(wù)英語本科專業(yè)學(xué)生“綜合商務(wù)英語”課程考試成績作為研究依據(jù)，分析該課程考試效度，整理出該課程能力考查范圍，對比商務(wù)英語專業(yè)四級測試要求，探討提升商務(wù)英語專業(yè)基礎(chǔ)課程考試質(zhì)量的方法，以期為商務(wù)英語專業(yè)課程建設(shè)提供參考。

[關(guān)鍵詞]商務(wù)英語專業(yè)；“綜合商務(wù)英語”課程；考試效度

[收稿日期]2015-09-25

章國建(1977—)，男，講師，碩士，研究方向：語言學(xué)，測試學(xué)。

*[基金項目]湖北理工學(xué)院校級科研項目“基于校本的商務(wù)英語學(xué)業(yè)測試研究”，項目編號：14xjr04Q；湖北理工學(xué)院校級重點學(xué)科“外國語言文學(xué)”，項目編號：0502。

[作者簡介]陳銘(1985—)，男，講師，碩士，研究方向：商務(wù)英語，國際商務(wù)。

DOI編碼:10.3969/j.ISSN.2095-4662.2015.06.016

[中圖分類號]G642.0

[文獻標(biāo)識碼]A

[文章編號]2095-4662(2015)06-0075-04

[Abstract]Integrating Economics, Management and Foreign Language Studies, Business English BA program is set up as a complement to the traditional English BA program. As a new program, many aspects such as the talent cultivation mode and assessment mode need to be explored. The Teaching Requirements of Business English Program in Colleges and Universities and Test Syllabus for Business English Majors set the requirements of competence for the Business English Majors in different stages. This paper analyzes the validity of Integrated Business English Achievement Test for the first Group of Business English Majors in Hubei Polytechnic University. Based on the data, the scope of ability testing for this course is analyzed. Comparing it with the requirements of Test for Business English Majors Band 4, the approaches for improving the test quality for the basic courses in Business English Program are discussed, aiming to provide some suggestions for further improvement of Business English Program.

An Empirical Study of Validity of "Integrated BusinessEnglish" Achievement Test

CHENMingZHANGGuojian

(School of Foreign Languages, Hubei Polytechnic University, Huangshi Hubei 435003)

[Key words]Business English Program;IntegratedBusinessEnglish;validity

引言

截至2015年，全國有超過200所高等院校開辦了商務(wù)英語專業(yè)。商務(wù)英語專業(yè)的發(fā)展目標(biāo)在于滿足市場對人才的需求，培養(yǎng)具備國際視野和跨文化商務(wù)溝通技能的外語人才[1]?！陡叩葘W(xué)校商務(wù)英語專業(yè)考試大綱》(試行)四級考試要求以及《全國商務(wù)英語專業(yè)英語四級考試能力量表》的頒布，填補了商務(wù)英語專業(yè)沒有單獨的標(biāo)準(zhǔn)參照性學(xué)業(yè)測試的空白，為檢驗商務(wù)英語辦學(xué)質(zhì)量提供了一個標(biāo)準(zhǔn)的尺度[2]。我校商務(wù)英語專業(yè)因為開辦時間較短，所以很多專業(yè)教師和學(xué)生對該考試的能力要求不是非常清楚。在商務(wù)英語專業(yè)4年教學(xué)過程中，開設(shè)“綜合商務(wù)英語”課程，就是為了提高學(xué)生英語基本功，讓學(xué)生具備基本的商務(wù)知識，為后續(xù)專業(yè)課程的開設(shè)奠定良好的基礎(chǔ)[3]。檢驗“綜合商務(wù)英語”考試效度，并將考試內(nèi)容與商務(wù)英語專業(yè)四級考試大綱進行對比，可以找到綜合商務(wù)英語考試在培養(yǎng)學(xué)生達到專業(yè)四級考試要求中存在的問題。語言測試專家Bachman等人認(rèn)為，測試的主要效度包括表面效度、內(nèi)容效度和結(jié)構(gòu)效度[4]。因此，本文基于“綜合商務(wù)英語”考試成績，對考試的基本情況、難度系數(shù)、表面效度、內(nèi)容效度、結(jié)構(gòu)效度進行分析，同時對考試能力范圍與商務(wù)英語專業(yè)四級測試進行對比研究。

一、“綜合商務(wù)英語”課程考試與商務(wù)英語專業(yè)四級考試相關(guān)情況

本文選取了湖北理工學(xué)院外國語學(xué)院2013級商務(wù)英語本科專業(yè)學(xué)生作為研究對象，該班共有40人，參加了4個學(xué)期的“綜合商務(wù)英語”學(xué)習(xí)與考試，最后一個學(xué)期因為3名同學(xué)辦理了緩考，所以人數(shù)為37人。每學(xué)期總體樣本數(shù)量大于30，能夠進行基本的測試學(xué)分析。4次考試的題型如表1所示，同時對比的還有商務(wù)英語專業(yè)四級考試相關(guān)題型，如表2所示。

表1　“綜合商務(wù)英語”考試題型

表2　商務(wù)英語專業(yè)四級部分考試題型

對比湖北理工學(xué)院外國語學(xué)院“綜合商務(wù)英語”考試大綱及考試題型與商務(wù)英語專業(yè)四級考試大綱及題型，可以發(fā)現(xiàn)，通過“綜合商務(wù)英語”的學(xué)習(xí)，學(xué)生能夠獲得參加商務(wù)英語專業(yè)四級測試“閱讀與寫作”、“商務(wù)知識與翻譯”兩個部分的基本能力。

二、研究內(nèi)容與方法

本文希望能夠解決以下幾個問題：1)湖北理工學(xué)院外國語學(xué)院“綜合商務(wù)英語”考試的成績總體分布情況、考試的難度系數(shù)如何？考試的效度能否滿足測試學(xué)基本要求？2)“綜合商務(wù)英語”考試的范圍、題型能否和商務(wù)英語專業(yè)四級測試中的“閱讀與寫作”、“商務(wù)知識與翻譯”兩個部分對接？3)根據(jù)分析結(jié)果，如何調(diào)整商務(wù)英語專業(yè)人才培養(yǎng)方案，提高商務(wù)英語專業(yè)基礎(chǔ)課程教學(xué)與考試質(zhì)量。

本文的數(shù)據(jù)分析利用SPSS軟件進行，包含以下3種定量分析：1)描述性統(tǒng)計分析；2)試題難度分析；3)效度分析。難度分析采取的是用每種題型的平均分除以每種題型的權(quán)重分的方法。難度系數(shù)值和試卷實際難易程度呈反比關(guān)系。效度分析采取的是通過計算題目得分與總分的相關(guān)性來測量單一維度，進行結(jié)構(gòu)效度的一致性分析。

三、研究結(jié)果與討論

(一)描述性統(tǒng)計分析結(jié)果

“綜合商務(wù)英語”4學(xué)期的平均分、標(biāo)準(zhǔn)差和每套試題不同題型的難度系數(shù)如表3、4所示。可以看出，從第1學(xué)期到第4學(xué)期，考試的平均分約為70分左右，標(biāo)準(zhǔn)差在6.1~7.6之間，整體測試的結(jié)果較好，學(xué)生的成績差異不大，反應(yīng)出較好的整體水平。同時，通過計算每次試卷不同題型平均分與每題權(quán)重分的比值，可以看出試卷的整體難度系數(shù)值較大，反映試卷的難度處于中等偏易的水平，特別是第2學(xué)期和第3學(xué)期的商務(wù)知識題以及第3學(xué)期和第4學(xué)期的漢譯英題，題目較為容易。

表3　描述統(tǒng)計量

表4　試題難度系數(shù)

(二)表面效度

統(tǒng)計分析結(jié)果顯示，“綜合商務(wù)英語”試卷出卷清晰，格式符合湖北理工學(xué)院期末試卷規(guī)范，試題編排從易到難，符合學(xué)生答題規(guī)律。每道題目指令明確，主觀題與客觀題分?jǐn)?shù)分配合理，試卷篇幅合理，試題量較充足，學(xué)生能夠在規(guī)定時間內(nèi)完成，試卷具備良好的表面效度。

(三)內(nèi)容效度

測量內(nèi)容效度的目標(biāo)在于判斷試卷是否達到了考試大綱的考核內(nèi)容要求。統(tǒng)計分析結(jié)果顯示，“綜合商務(wù)英語”考查了教學(xué)大綱及考試大綱所規(guī)定的內(nèi)容，側(cè)重于在實際商務(wù)環(huán)境中運用語言的能力，包括考查學(xué)生關(guān)注經(jīng)濟與商務(wù)動態(tài)相關(guān)信息，能夠撰寫不同體裁的商務(wù)類文章。因此該考試具備在內(nèi)容上的有效性。

(四)結(jié)構(gòu)效度

為了保證測試的有效性，需要考試具備較高的結(jié)構(gòu)效度。結(jié)構(gòu)效度分析能夠反映出一場考試的準(zhǔn)確性、有用性。本文采取計算題目得分與總分的相關(guān)性，使用Pearson簡單相關(guān)系數(shù)的方法來檢測測試的單維性[5]。同時檢測的還有不同題型間的相關(guān)性。表5所示為第1學(xué)期至第4學(xué)期結(jié)構(gòu)效度分析結(jié)果。

如表5所示，除了第2學(xué)期第IV題漢譯英和第V題商務(wù)知識題與總分的相關(guān)系數(shù)分別僅為0.141和0.293，未能顯著相關(guān)外，其他各個學(xué)期的題型的效度值都較高，說明大部分題型能充分反映學(xué)生在考試中所展現(xiàn)出的綜合能力。同時，本研究還檢測了不同題型間的相關(guān)性，發(fā)現(xiàn)詞匯題與漢譯英題的相關(guān)系數(shù)達到0.813的高水平，說明良好詞匯的積累對于提高綜合商務(wù)英語考試分?jǐn)?shù)有著顯著效果。另外，第2學(xué)期的寫作題僅在0.05水平上呈顯著相關(guān)，說明題目的體裁和內(nèi)容還存在改進的空間。

表5　結(jié)構(gòu)效度分析結(jié)果

注：**指在0.01 水平(雙側(cè))上顯著相關(guān)；*指在 0.05 水平(雙側(cè))上顯著相關(guān)。

四、結(jié)論與對策

通過對湖北理工學(xué)院外國語學(xué)院2013級商務(wù)英語專業(yè)學(xué)生“綜合商務(wù)英語”課程考試進行的測試學(xué)基本分析，可以得出以下結(jié)論：1)外國語學(xué)院“綜合商務(wù)英語”課程考試是一種成就測試，需要考查學(xué)生在課堂上所學(xué)的知識，因此難度不能過大，否則會影響學(xué)生的學(xué)習(xí)信心與動機。經(jīng)過統(tǒng)計分析，得到難度系數(shù)值在0.7左右，符合成就測試的難度要求；2)考試效度結(jié)果較好。從4個學(xué)期試卷不同題型得分與總分之間的關(guān)系可以看出，綜合商務(wù)英語考試有效測量了考生相關(guān)方面的能力，但是在部分學(xué)期漢譯英、商務(wù)知識、寫作題的相關(guān)性顯著水平比較低，在查閱相關(guān)學(xué)期的試卷后發(fā)現(xiàn)，試卷考察學(xué)生的翻譯及商務(wù)知識的內(nèi)容比較單一，不能夠完整反映出學(xué)生的真實水平，需要對這些題目進行替換或者修改。另外前兩學(xué)期寫作題結(jié)構(gòu)效度水平較低，說明了寫作題不能真實地反映出學(xué)生英語能力，問題來源于寫作題目比較簡單，體裁單一，需要進行修正或替換；3)外國語學(xué)院“綜合商務(wù)英語”考試內(nèi)容基本上對接了商務(wù)英語專業(yè)四級考試內(nèi)容中的閱讀理解與寫作、商務(wù)知識與翻譯部分，但是仍然有可以提升的地方。

首先，“綜合商務(wù)英語”考試中的商務(wù)信息解讀類型的題目難度較低，不能夠全面反映出學(xué)生的基礎(chǔ)商務(wù)知識能力，不利于學(xué)生順利通過商務(wù)英語專業(yè)四級考試。在現(xiàn)行人才培養(yǎng)方案中，前4個學(xué)期大多數(shù)高校都沒有安排商務(wù)專業(yè)課程，而對于湖北理工學(xué)院這一層次的普通二本院校，“綜合商務(wù)英語”課程的主要目標(biāo)是提升學(xué)生的語言基礎(chǔ)技能，商務(wù)知識的傳授是輔助性的。因此，在修訂新的人才培養(yǎng)方案中，筆者建議將“工商導(dǎo)論”這一商務(wù)知識類課程放在前4個學(xué)期中，可以更好地幫助學(xué)生達到商務(wù)英語專業(yè)四級考試要求；其次，因為課程開設(shè)的前后順序和考慮學(xué)生的接受程度，“商務(wù)翻譯”課程只能放在學(xué)生考完專業(yè)四級后進行，因此，在前4個學(xué)期的教學(xué)過程中，只有“綜合商務(wù)英語”課程能夠擔(dān)當(dāng)起培養(yǎng)學(xué)生基礎(chǔ)商務(wù)翻譯能力的任務(wù)。而在本次研究數(shù)據(jù)整理過程中筆者發(fā)現(xiàn)，“綜合商務(wù)英語”課程考試中商務(wù)翻譯內(nèi)容基本上都是短語與句子翻譯，沒有涉及到短文翻譯，與商務(wù)英語專業(yè)四級考試難度相比，存在著較大的差距，需要在今后的課程中加大短文翻譯的訓(xùn)練力度。最后，與“綜合商務(wù)英語”同期開設(shè)的還有“商務(wù)英語閱讀”、“商務(wù)英語寫作”、“商務(wù)英語聽說”等基礎(chǔ)課程，在本研究的基礎(chǔ)上，應(yīng)該進一步檢驗并提升相關(guān)課程考試的效度，同時對照《高等學(xué)校商務(wù)英語專業(yè)考試大綱》(試行)四級考試要求以及《全國商務(wù)英語專業(yè)英語四級考試能力量表》修訂相關(guān)課程考試大綱，期望通過這些措施，有效提高學(xué)生商務(wù)英語專業(yè)四級考試通過率。

隨著越來越多的高校開辦商務(wù)英語專業(yè)，商務(wù)英語專業(yè)四級考試將逐漸成為檢驗這個專業(yè)辦學(xué)情況的一個標(biāo)準(zhǔn)尺度。以“綜合商務(wù)英語”為代表的商務(wù)英語專業(yè)基礎(chǔ)課程，需要逐漸與專業(yè)四級考試能力要求、范圍對接，不斷提高課程考試的效度，才能滿足商務(wù)英語人才培養(yǎng)要求。

參 考 文 獻

[1]《高等學(xué)校商務(wù)英語專業(yè)本科教學(xué)要求》編寫組.高等學(xué)校商務(wù)英語專業(yè)本科教學(xué)要求(試行)[S].北京：高等教育出版社,2009.

[2]王立非.全國商務(wù)英語專業(yè)四級考試的測試學(xué)分析[J].廣東外語外貿(mào)大學(xué)學(xué)報，2015(1):5-11.

[3]王立非.國家標(biāo)準(zhǔn)指導(dǎo)下的商務(wù)英語專業(yè)建設(shè)的核心問題[J].中國外語教育，2015(1):3-8.

[4]Bachman L,Palmer A.Language Testing in Practice [M].0xford: Oxford University Press,1996.

[5]陳禮丹.高職英語語言測試信效度的實證分析——以廣東青年職業(yè)學(xué)院《外貿(mào)函電》期末考試為例[J].廣東青年職業(yè)學(xué)院學(xué)報，2014(2):57-60.

(責(zé)任編輯尹春霞)