葉梅

【摘要】本文對(duì)上海工商外國(guó)語(yǔ)職業(yè)學(xué)院首屆職場(chǎng)英語(yǔ)水平考試，從正態(tài)性、信度效度、難度和區(qū)分度等方面進(jìn)行了試卷質(zhì)量分析，在此基礎(chǔ)上對(duì)試卷各題型的設(shè)置及分值分配進(jìn)行反思，以期編制出更好的職場(chǎng)英語(yǔ)水平考試試卷。

【關(guān)鍵詞】職場(chǎng)英語(yǔ) 考試分析 反思

教育部高職高專英語(yǔ)教指委頒布的《高等職業(yè)教育英語(yǔ)課程教學(xué)要求》（試行）（2010年6月）中明確提出“高職英語(yǔ)課程以培養(yǎng)學(xué)生實(shí)際應(yīng)用英語(yǔ)的能力為目標(biāo)，側(cè)重職場(chǎng)環(huán)境下語(yǔ)言交際能力的培養(yǎng)，使學(xué)生逐步提高用英語(yǔ)進(jìn)行交流和溝通的能力”。在教學(xué)中，我們要遵循外語(yǔ)學(xué)習(xí)規(guī)律，結(jié)合高職教育特點(diǎn)，在打好語(yǔ)言基本功的基礎(chǔ)上，以職場(chǎng)崗位需求為主線開發(fā)和構(gòu)建教學(xué)內(nèi)容體系，著力培養(yǎng)學(xué)生職場(chǎng)環(huán)境下的英語(yǔ)口頭和書面交際能力。因此，我們提出并實(shí)施了“三五”教改方案，就是將大學(xué)英語(yǔ)教學(xué)分成三個(gè)階段和五個(gè)學(xué)期，即：基礎(chǔ)英語(yǔ)階段（大一兩個(gè)學(xué)期）、通用職場(chǎng)英語(yǔ)階段（大二兩個(gè)學(xué)期）及專業(yè)職場(chǎng)英語(yǔ)階段（大三第一學(xué)期八周）。三階段五學(xué)期的教學(xué)內(nèi)容各有側(cè)重，相互滲透。

課程考核是構(gòu)建課程體系的重要一環(huán)，為進(jìn)一步完善了公共英語(yǔ)課程體系，在大二年級(jí)第四學(xué)期期末設(shè)置職場(chǎng)英語(yǔ)水平考試，考查學(xué)生語(yǔ)言水平和教學(xué)效果。職場(chǎng)英語(yǔ)水平考試有兩個(gè)顯著的特點(diǎn)：一是重視考查學(xué)生的英語(yǔ)口語(yǔ)能力?？谠囉伞拔⑿脱葜v”（Mini-Talk）和“簡(jiǎn)短對(duì)話”（Short Conversation）兩部分組成。通過現(xiàn)場(chǎng)演講和即興對(duì)話，考查學(xué)生的口語(yǔ)表達(dá)能力；二是注重考查職場(chǎng)英語(yǔ)應(yīng)用能力。筆試部分的試題不僅涉及基礎(chǔ)英語(yǔ)，還包含了職場(chǎng)英語(yǔ)內(nèi)容（如詞匯、翻譯和應(yīng)用文寫作），較好體現(xiàn)了職業(yè)教育的特點(diǎn)和就業(yè)崗位對(duì)求職者英語(yǔ)能力的需求。

2012級(jí)學(xué)生在2014年6月參加了上海工商外國(guó)語(yǔ)學(xué)院首屆職場(chǎng)英語(yǔ)水平考試。本次考試總分150分，分筆試（100分）和口試（50分）兩部分，口試由班級(jí)授課老師進(jìn)行一對(duì)一的口試，給出分?jǐn)?shù)。筆試為2012級(jí)學(xué)生第四學(xué)期的期末統(tǒng)考，考試規(guī)范，成績(jī)可信度較高。本文擬采用SPSS.19軟件對(duì)1333份筆試成績(jī)樣本進(jìn)行分析，并提出對(duì)職場(chǎng)英語(yǔ)水平考試題型設(shè)置及分值分配的反思。

一、考試分析及主要指標(biāo)

考試分析的首要環(huán)節(jié)是試卷質(zhì)量分析。根據(jù)測(cè)量學(xué)原理，在對(duì)考試成績(jī)進(jìn)行正態(tài)擬合檢驗(yàn)的基礎(chǔ)上，從試卷的信度效度和難度、區(qū)分度三個(gè)方面獲取本次考試的相關(guān)信息。

1.正態(tài)擬合檢驗(yàn)。一門課程考試的質(zhì)量首先取決于作為考試工具的試卷是否能夠反映學(xué)生學(xué)習(xí)的實(shí)際水平。一項(xiàng)符合學(xué)生試卷水平的考試，理論上，其考試成績(jī)應(yīng)該服從或近似服從正態(tài)分布。也就是說(shuō)，成績(jī)中等水平的學(xué)生占大多數(shù)，而成績(jī)特別好和特別差的學(xué)生均為少數(shù)。因此，試卷分析首先必須檢驗(yàn)其考試結(jié)果的分布情況。采用SPSS.19軟件對(duì)1333份筆試樣本進(jìn)行分析后，本次考試的成績(jī)分布頻數(shù)如圖一。

本次職場(chǎng)英語(yǔ)水平考試筆試部分的平均成績(jī)?yōu)?1.4，標(biāo)準(zhǔn)差為15.7。通過正態(tài)擬合檢驗(yàn)發(fā)現(xiàn)本次考試的成績(jī)接近負(fù)偏態(tài)分布（見圖一），試卷基本上能反映學(xué)生的實(shí)際情況。

2.信度效度?？荚囆哦戎缚荚嚱Y(jié)果的一致性程度，是表明考試質(zhì)量的穩(wěn)定性和可靠性的一個(gè)重要指標(biāo)。試卷的信度高，意味著考試結(jié)果很少受隨機(jī)因素的影響，考試的結(jié)果與其他等價(jià)考試的結(jié)果是一致的，考試成績(jī)能真實(shí)可靠地反映學(xué)生的學(xué)業(yè)水平。效度是對(duì)考試所要測(cè)量的內(nèi)容所達(dá)到的程度的估計(jì)，考試是否準(zhǔn)確地測(cè)定了要測(cè)定的內(nèi)容。

只有信度較高的測(cè)試才能有較高的效度，但是，效度較高不能保證信度也一樣高。可以說(shuō)，信度和效度的關(guān)系是單方面的，信度差則效度差，但效度差不一定信度差。只有信度高的考試結(jié)果才能為試卷分析提供有意義的信息。

首先通過SPSS.19軟件計(jì)算出試題的均值和標(biāo)準(zhǔn)差，然后通過庫(kù)德·理查遜公式計(jì)算出本次考試的信度。

根據(jù)計(jì)算，本次考試的信度系數(shù)為0.939，可見本次考試信度較好，考試結(jié)果是穩(wěn)定可靠的。

3.難度、區(qū)分度。試題的難度就是試題的難易程度，也是試題質(zhì)量分析的一個(gè)數(shù)量指標(biāo)。試題的難度與考試分?jǐn)?shù)的分布有著直接的關(guān)系。如果試題太難，則考試分?jǐn)?shù)成負(fù)偏態(tài)分布。如果試題太容易，則考試分?jǐn)?shù)成正偏態(tài)分布。難度可用正確回答試題人數(shù)與參加測(cè)驗(yàn)總?cè)藬?shù)之比值作為指標(biāo)，也可以采用極端分組法。試卷難度會(huì)對(duì)試卷多方面的質(zhì)量產(chǎn)生深刻的影響。因此，難度必須適宜。本次考試分析采用極端分組法分析了試卷試題的難度，把全體考生的成績(jī)從高分到低分排列，把處于前27%的考生列為高分組，處于后27%的考生列為低分組。

試題的區(qū)分度是用來(lái)判斷試題具有多大能力把成績(jī)較好和較差的學(xué)生檔次區(qū)分開來(lái)的指標(biāo)，也就是試題在用于考試時(shí)使水平高的學(xué)生得高分，使水平低的學(xué)生得低分的傾向。區(qū)分度是鑒定試題的重要依據(jù)。區(qū)分度不高的考試，學(xué)業(yè)優(yōu)秀和學(xué)業(yè)差的學(xué)生在考試成績(jī)上差異不大，或沒有規(guī)律性。它可用一組學(xué)生的本試題得分與這組學(xué)生的本試卷考分之間的相關(guān)程度來(lái)表示。另一種方法是比較兩個(gè)極端組通過一個(gè)題項(xiàng)的比例，即從分布的兩端選出高分組和低分組，然后將高分組和低分組通過每個(gè)項(xiàng)目的分?jǐn)?shù)用百分比來(lái)表示，這兩個(gè)百分?jǐn)?shù)之差就提供了題目區(qū)分度的指標(biāo)。其計(jì)算公式如下：D= PH-PL

一般要求題項(xiàng)得分與總分的相關(guān)達(dá)到0.2以上。通過極端分組法計(jì)算后，D≥0.3表示區(qū)分度好；0.3>D≥0.15 表示區(qū)分度較好；D<0.15則表示區(qū)分度差。從本次考試的結(jié)果分析來(lái)看，試卷整體上具有良好的區(qū)分度（見表一）。

二、對(duì)于職場(chǎng)英語(yǔ)水平考試的反思

通過以上對(duì)試卷質(zhì)量的分析表明，本次考試的試卷總體上具有良好的信度效度和區(qū)分度，考試成績(jī)較真實(shí)的反映了學(xué)生的學(xué)業(yè)水平。對(duì)本次考試，筆者有以下幾點(diǎn)思考。

1.職場(chǎng)英語(yǔ)水平考試的定位。語(yǔ)言測(cè)試按用途來(lái)分類，至少可以分出四類：水平測(cè)試、成績(jī)測(cè)試、潛能測(cè)試和診斷測(cè)試。水平測(cè)試考查學(xué)生的語(yǔ)言能力，不管從前學(xué)過沒有或?qū)W了多少，或是如何學(xué)的，也不考慮學(xué)生的文化、教育、年齡等環(huán)境因素。如“托福”和“雅思”測(cè)試都屬于水平測(cè)試。成績(jī)測(cè)試考查學(xué)生對(duì)所學(xué)知識(shí)的掌握，它一般要參考某種教學(xué)大綱，甚至考慮到教學(xué)方法。如隨堂測(cè)試、期中期末測(cè)試，以及學(xué)校的畢業(yè)考試，都屬于成績(jī)測(cè)試。潛能測(cè)試用來(lái)預(yù)示學(xué)生學(xué)習(xí)某種語(yǔ)言的潛力和天賦。診斷測(cè)試用來(lái)發(fā)現(xiàn)教和學(xué)兩方面的問題，目的是為了改進(jìn)教學(xué)，調(diào)整教學(xué)計(jì)劃，進(jìn)行個(gè)別指導(dǎo)。

職場(chǎng)英語(yǔ)水平考試就其性質(zhì)來(lái)說(shuō)應(yīng)該屬于水平測(cè)試，而在本次考試中又把它定位為第四學(xué)期期末考試。從本次職場(chǎng)英語(yǔ)水平考試分析結(jié)果來(lái)看，二外和商務(wù)文法專業(yè)學(xué)生成績(jī)較好，而機(jī)電信息和藝術(shù)專業(yè)學(xué)生的成績(jī)不理想。作為期末考試，對(duì)于機(jī)電信息和藝術(shù)專業(yè)的學(xué)生來(lái)說(shuō)，是次難度偏大的考試，直接導(dǎo)致學(xué)生的大面積不及格。成績(jī)測(cè)試的性質(zhì)一般就限定了試題的難易程度，一般在成績(jī)測(cè)驗(yàn)中，試題難度應(yīng)該小一點(diǎn)，因?yàn)檫@類試卷是要考慮讓大多數(shù)學(xué)生都能通過，即準(zhǔn)予及格這一原則。那么，如何調(diào)整職場(chǎng)英語(yǔ)水平考試和作為成績(jī)測(cè)試的期末考試之間的矛盾，就成了我們必須解決的問題。

2.題型設(shè)置及分值分配。本次考試的題型第一部分為詞匯和語(yǔ)法結(jié)構(gòu)，考查學(xué)生對(duì)職場(chǎng)英語(yǔ)基礎(chǔ)詞匯（10%），基本語(yǔ)法結(jié)構(gòu)（30%）的掌握；第二部分為對(duì)話補(bǔ)全，考查學(xué)生交際場(chǎng)合的口語(yǔ)得體應(yīng)答（10%）；第三部分為閱讀理解題共三篇文章，主要考查學(xué)生英語(yǔ)閱讀能力（20%）。第四部分和第五部分分別為翻譯（15%）和寫作（15%），考查學(xué)生職場(chǎng)英語(yǔ)的翻譯和實(shí)用寫作能力。從筆試卷面題型的設(shè)置來(lái)看，還是以基礎(chǔ)英語(yǔ)知識(shí)的考查為重，而反映職場(chǎng)環(huán)境下的交際能力的聽力任務(wù)沒有涉及。從考試的內(nèi)容上，也還是以日常英語(yǔ)（60%）為主，涉及職場(chǎng)環(huán)境下的英語(yǔ)內(nèi)容只占（40%）。在以后的試卷編制中，應(yīng)從全面考查學(xué)生在職場(chǎng)環(huán)境下的英語(yǔ)運(yùn)用能力的視角來(lái)進(jìn)行題型設(shè)置和分值分配。

結(jié)語(yǔ)

本文對(duì)2012級(jí)學(xué)生職場(chǎng)英語(yǔ)水平考試的結(jié)果進(jìn)行了分析，從考試成績(jī)的分布、考試的信度效度、試題的難度和區(qū)分度等方面進(jìn)行了試卷質(zhì)量分析，在此基礎(chǔ)上對(duì)試卷各題型的設(shè)置及分值分配進(jìn)行了反思，以期在后續(xù)的職場(chǎng)英語(yǔ)水平考試試卷的編制中加以改進(jìn)和提高。

參考文獻(xiàn)：

[1]劉潤(rùn)清，韓定成.語(yǔ)言測(cè)試和它的方法[M].北京：外語(yǔ)教學(xué)與研究出版社，2010.

[2]蒙詩(shī)茜等.高職英語(yǔ)等級(jí)測(cè)試對(duì)“就業(yè)為導(dǎo)向”課程設(shè)計(jì)的積極反撥[J].職業(yè)時(shí)空，2013（7）.

[3]錢朝霞.考試分析及其應(yīng)用[J].海南大學(xué)學(xué)報(bào)（自然科學(xué)版）， 1999（06）.

[4]王孝玲.教育統(tǒng)計(jì)學(xué)[M].上海：華東師范大學(xué)出版社，2009.

[5]吳明隆.SPSS統(tǒng)計(jì)應(yīng)用實(shí)務(wù)[M].北京：中國(guó)鐵道出版社，2003.

[6]徐小麗.淺議基于職場(chǎng)工作視角的英語(yǔ)考試設(shè)計(jì)[J].中國(guó)校外教育，2013（3）.