陳莉燕 王軍
【摘要】英語(yǔ)考試種類繁多,有國(guó)家四六級(jí),AB級(jí),還有面向社會(huì)的PETS考試出國(guó)人員的GRE\TOFEL等。本文從各種英語(yǔ)考試命題的角度出發(fā),分析一份試卷的效度、信度和真實(shí)性,對(duì)一線的教學(xué)工作者而言知道如何確定試卷的質(zhì)量,在以后的教學(xué)中會(huì)有很重要的應(yīng)用價(jià)值。
【關(guān)鍵詞】英語(yǔ)測(cè)試 效度 信度 真實(shí)性
【中圖分類號(hào)】G718.5 【文獻(xiàn)標(biāo)識(shí)碼】A 【文章編號(hào)】2095-3089(2014)01-0096-01
如何評(píng)判一份試卷的質(zhì)量?如何測(cè)試各種語(yǔ)言技能和如何設(shè)計(jì)各種測(cè)試題目?我們知道一套試卷最終設(shè)計(jì)好了之后,我們更應(yīng)該知道它的質(zhì)量如何?也就是它是否符合語(yǔ)言測(cè)試的要求?所以,需要對(duì)試卷質(zhì)量進(jìn)行評(píng)估,評(píng)估的主要標(biāo)準(zhǔn)是什么?一般就是它的效度、信度和真實(shí)性。下面分別討論之。
1.效度
效度,又稱有效性。它是指一套測(cè)試卷所考的是否就是設(shè)計(jì)人所要考的內(nèi)容,或者說(shuō),在多大程度上考了想要考的。所以,效度的高低是衡量一套語(yǔ)言測(cè)試卷最重要的指標(biāo),它是語(yǔ)言測(cè)試的出發(fā)點(diǎn),是基點(diǎn),因?yàn)橐豁?xiàng)效度很低的語(yǔ)言測(cè)試是沒(méi)有實(shí)際意義的。例如,測(cè)試聽(tīng)力的考試中出現(xiàn)了寫作,這種測(cè)試效度是很低的。例如,Is photography an art or science?這種題目效度很低,因它似乎是對(duì)有攝影知識(shí)的學(xué)生才起作用,對(duì)攝影一無(wú)所知的學(xué)生而言根本測(cè)不出他們的寫作能力。所以,這個(gè)題目對(duì)后者而言效度很低,因?yàn)槲覀円獪y(cè)的是他們的寫作能力而不是攝影知識(shí)能力。需要指出的是,語(yǔ)言測(cè)試的效度是一個(gè)相對(duì)概念。例如,把劍橋商務(wù)英語(yǔ)證書考試來(lái)測(cè)試非英語(yǔ)專業(yè)的學(xué)生英語(yǔ)水平效度就很低。
2.信度
信度是指考試結(jié)果的可靠性和穩(wěn)定性,它通常以兩次考試結(jié)果相關(guān)系數(shù)來(lái)表示,系數(shù)越高,信度也就越高。影響信度的因素很多,主要有外部環(huán)境和個(gè)人因素,同時(shí)試卷的量是否足夠大,區(qū)分度是否高,難易度是否適中,評(píng)分是否客觀等因素也影響著信度。
3.信度和效度的關(guān)系
信度和效度是衡量測(cè)試質(zhì)量最重要的兩個(gè)指標(biāo),他們之間是相互依從,相互排斥的關(guān)系。從方向而言它們是單方向的,即信度差則效度必然差,但效度差信度未必差[1]?,F(xiàn)實(shí)常常是兩者妥協(xié)的結(jié)果。例如,我們用一個(gè)已經(jīng)證明具有很高信度的聽(tīng)力測(cè)試卷去檢驗(yàn)學(xué)生的閱讀能力,在這種情況下,考試的結(jié)果即使具有很高的穩(wěn)定性(信度高)也沒(méi)有用,因?yàn)樵嚲淼恼`用無(wú)法使我們測(cè)量到所期望的能力。但一個(gè)考試具有效度的話,它首先是有信度的基礎(chǔ)上。因?yàn)?,其一是如果考試結(jié)果本身不可靠的話,我們?cè)趺茨苷f(shuō)該考試就測(cè)試出了出題人所期望測(cè)定的學(xué)生的語(yǔ)言能力呢?其二是我們的效度確定需要以考試結(jié)果作為基本數(shù)據(jù),不可靠的數(shù)據(jù)無(wú)法用來(lái)確定考試的效度[2]。所以,信度是保證效度的必備條件之一,只談信度而忽視效度是沒(méi)有實(shí)際意義的。
4.真實(shí)性是考試的另一重要評(píng)價(jià)指標(biāo)
什么是英語(yǔ)測(cè)試的真實(shí)性?測(cè)試界對(duì)此有很多看法。Bacherman認(rèn)為,真實(shí)性是指某一語(yǔ)言測(cè)試任務(wù)與實(shí)際語(yǔ)言運(yùn)用任務(wù)在特征方面的對(duì)應(yīng)程度 [3]。它們之間的關(guān)系可以用下圖表示:
這里的 “任務(wù)特征對(duì)應(yīng)”可以理解為“形式”和“性質(zhì)”上兩個(gè)方面的對(duì)應(yīng)。
4.1情景真實(shí)性
所謂情景真實(shí)性指測(cè)試方法特征與將來(lái)某一特定目的語(yǔ)使用的情景特征相關(guān)的程度。劉潤(rùn)清認(rèn)為:考試任務(wù)的特征和將來(lái)目的語(yǔ)的使用的情景特征相一致的時(shí)候,考試任務(wù)才具有情景真實(shí)性。具體到每個(gè)考試它的情景真實(shí)性是相對(duì)的,是隨著考生情況而變化的。例如,參加商務(wù)英語(yǔ)證書(BEC)考試的考生在其工作中肯定會(huì)遇到與客戶用英語(yǔ)就商務(wù)活動(dòng)面對(duì)面交談的情景,而該口試中就安排了考生之間面對(duì)面交談這一活動(dòng),因此該口試具有很強(qiáng)的情景真實(shí)性。
4.2交際真實(shí)性
它指的是考生在完成某一測(cè)試任務(wù)時(shí),其語(yǔ)言能力的哪些方面參與了完成該測(cè)試任務(wù)的活動(dòng), 參與的程度如何,與情景真實(shí)性真實(shí)性不同,交際真實(shí)性強(qiáng)調(diào)的是考生與測(cè)試任務(wù)之間的交際關(guān)系。
4.3如何提高語(yǔ)言測(cè)試交際真實(shí)性
一般來(lái)說(shuō),提高測(cè)試的情景真實(shí)性要容易些,而提高交際的真實(shí)性要難些。Bacherman提出用以提高語(yǔ)言測(cè)試交際真實(shí)性的四項(xiàng)措施[4]:在設(shè)計(jì)考題時(shí)可以具體說(shuō)明考生只有使用何種策略才能完成任務(wù)。提供機(jī)會(huì)。即給考生提供充足的時(shí)間、必要的信息和工具等??荚嚾蝿?wù)要得當(dāng)。任務(wù)太難會(huì)影響考生的策略的應(yīng)用??荚嚾蝿?wù)要有趣味性。通過(guò)提高考試的情景真實(shí)性可以提高考試任務(wù)的趣味性。
4.4編寫試題的真實(shí)性原則
語(yǔ)言的測(cè)試目的就是為教學(xué)服務(wù)的,要考察考生在實(shí)際的環(huán)境下使用語(yǔ)言的能力,所以試題的編寫要遵循試題的真實(shí)性原則。例如,下面的例子中:
____, I would take an umbrella with me.
A. Had I been you B. I were you
C. Were I you D. I had been you
這道題從語(yǔ)法的角度來(lái)講,答案應(yīng)該是C。但現(xiàn)實(shí)的情況是人們很少這樣用。在人們?nèi)粘5慕徽勚校喟胧侵苯诱f(shuō)I would take an umbrella with me. 不會(huì)出現(xiàn)題目答案那樣的倒裝形式。就是說(shuō)這樣的題目雖然情景是真實(shí)的,但交際的真實(shí)性較差??傮w上也就影響了這道題的真實(shí)性。那么,如何保證試題的真實(shí)性呢?我們建議題干最好來(lái)源于實(shí)際語(yǔ)言交流的自然篇章。這樣的題干可以給考生提供一定的語(yǔ)境,出題也方便,同時(shí)也保證了試題的真實(shí)性。
5.結(jié)論
英語(yǔ)教學(xué)和英語(yǔ)測(cè)試是教學(xué)過(guò)程中密不可分的兩個(gè)部分。英語(yǔ)測(cè)試直接服務(wù)于英語(yǔ)教學(xué),對(duì)英語(yǔ)教學(xué)有一定的監(jiān)督和反饋?zhàn)饔?。因此要使測(cè)試真正起到應(yīng)有的作用,并且達(dá)到預(yù)期的效果,就應(yīng)該挑選適合我們教學(xué)目的和要求的測(cè)試形式,并知道如何從一套測(cè)試卷的效度、信度和真實(shí)性出發(fā)確定試卷的質(zhì)量,這對(duì)于一線的教學(xué)工作有很重要的應(yīng)用價(jià)值。
參考文獻(xiàn):
[1]劉潤(rùn)清、韓寶成編著.語(yǔ)言測(cè)試和它的方法[M].北京:外語(yǔ)教學(xué)與研究出版社,2000.
[2]Hughes, A. Testing for Language Teachers. 1989. Cambridge University Press.
[3]Bachman, L. Fundamental Considerations in Language Testing. 1990. Oxford University Press.
[4]鄒申,楊任明.簡(jiǎn)明英語(yǔ)測(cè)試教程.高等教育出版社.2004.