鄒

（廣西師范大學(xué)，廣西 桂林 541006）

英語(yǔ)專業(yè)八級(jí)考試之短文改錯(cuò)的考點(diǎn)效度分析

（廣西師范大學(xué)，廣西 桂林 541006）

本文采用了層次分析法、焦點(diǎn)因素和考點(diǎn)覆蓋分析表等方法，分析了 2004年英語(yǔ)專業(yè)八級(jí)考試大綱改革后的2005年到2011年共七年的短文改錯(cuò)試題的效度。分析得出，這七年的專八短文改錯(cuò)試題所處的層次較高，焦點(diǎn)因素以語(yǔ)法和意義為主，考點(diǎn)分布較為合理，是具有較高且較為穩(wěn)定效度的試題，達(dá)到了檢測(cè)學(xué)生能自由靈活運(yùn)用語(yǔ)言知識(shí)的能力，尤其是在實(shí)際語(yǔ)境及語(yǔ)用中學(xué)生能發(fā)現(xiàn)錯(cuò)誤并加以改正的目的。

英語(yǔ)專業(yè)八級(jí)考試；短文改錯(cuò)；效度

1 .引言

全國(guó)高校英語(yǔ)專業(yè)八級(jí)考試（TEM8），也稱“專八”，向來(lái)被認(rèn)為是考察全國(guó)綜合性大學(xué)英語(yǔ)專業(yè)學(xué)生的英語(yǔ)語(yǔ)言綜合運(yùn)用能力最高等級(jí)的考試。這是“一種測(cè)試應(yīng)試者單項(xiàng)和綜合語(yǔ)言能力的尺度參照性水平考試”。（《高校英語(yǔ)專業(yè)八級(jí)考試大綱（2004年新版）》，下文簡(jiǎn)稱“專八考綱”）專八考綱中明確了TEM8的目的是“檢查（《高等學(xué)校英語(yǔ)專業(yè)高年級(jí)英語(yǔ)教學(xué)大綱》）的執(zhí)行情況，特別是大綱所規(guī)定的八級(jí)水平所要達(dá)到的綜合語(yǔ)言技能和交際能力，藉以促進(jìn)大綱的進(jìn)一步貫徹，提高教學(xué)質(zhì)量?！?/p>

TEM8自1991年起由中國(guó)大陸教育部實(shí)行以來(lái)，短文改錯(cuò)是歷年專八中的必考題型。專八考綱對(duì)這一部分試題的要求是學(xué)生“能運(yùn)用語(yǔ)法、詞匯、修辭等語(yǔ)言知識(shí)識(shí)別所給短文內(nèi)的語(yǔ)病并提出改正方法?！痹撛囶}的測(cè)試目實(shí)為檢測(cè)學(xué)生能自由靈活運(yùn)用語(yǔ)言知識(shí)的能力，尤其是在實(shí)際語(yǔ)境及語(yǔ)用中學(xué)生能發(fā)現(xiàn)錯(cuò)誤并加以改正。

此類(lèi)試題的考點(diǎn)效度雖也受到人們的關(guān)注，但對(duì)此研究的人卻不多，實(shí)證研究更是少之又少。尤其是針對(duì)專八考試中短文改錯(cuò)試題的考點(diǎn)效度的研究更是鳳毛翎角。在此文中，筆者采用李筱菊提出的層次分析法、焦點(diǎn)因素和考點(diǎn)項(xiàng)目表對(duì)TEM8考綱改革后2005年到2011年共七年的TEM8短文改錯(cuò)試題進(jìn)行考點(diǎn)效度的分析。

2 .短文改錯(cuò)試題的理論依據(jù)

短文改錯(cuò)屬于綜合考點(diǎn)單技能試題，也成C類(lèi)試題。C類(lèi)試題是奧勒（Oller）為代表的UCH論者首創(chuàng)的，他們提出的單一能力假說(shuō)（UCH或UTH）是此類(lèi)試題的理論依據(jù)，根據(jù)他們的觀點(diǎn)，人運(yùn)用語(yǔ)言并不是針對(duì)某些項(xiàng)目專用某種能力，語(yǔ)言運(yùn)用的過(guò)程是多種語(yǔ)言技能一起協(xié)調(diào)協(xié)作的結(jié)果。針對(duì)短文改錯(cuò)試題來(lái)說(shuō)，即學(xué)生要發(fā)現(xiàn)文章紕漏的內(nèi)容并給予更正，不僅涉及到學(xué)生對(duì)單一語(yǔ)法和詞匯知識(shí)的掌握情況，還與其對(duì)語(yǔ)篇結(jié)構(gòu)的把握能力以及對(duì)語(yǔ)言知識(shí)的積極運(yùn)用汲汲相關(guān)。

按Canale和Swain（1980）提出的語(yǔ)言交際能力理論框架來(lái)分析短文改錯(cuò)考查的不僅是語(yǔ)法能力，而且至少還考查了社會(huì)語(yǔ)言能力和話語(yǔ)表達(dá)能力。李威等（1993）進(jìn)行的實(shí)驗(yàn)用因素分析方法證明短文改錯(cuò)不只考查了英語(yǔ)知識(shí)層次的內(nèi)容，也考了英語(yǔ)閱讀能力。他們的實(shí)驗(yàn)結(jié)論與上述觀點(diǎn)是一致的。所以，就整體而言，短文改錯(cuò)是一種考查語(yǔ)篇水平上語(yǔ)言能力的綜合性試題類(lèi)型。（楊鐘琳，1994）

劉建達(dá)和楊滿珍（2001）使用了定量和定性研究方法得出結(jié)論，成段改錯(cuò)測(cè)試的能力已超出語(yǔ)法知識(shí)的范圍；成段改錯(cuò)可以測(cè)試到考生在詞、短語(yǔ)、句子、及語(yǔ)篇各個(gè)層次上的知識(shí)。

同屬于 C類(lèi)試題的還有完形填空試題，他們都是以單一能力假說(shuō)作為理論基礎(chǔ)。兩者有共同點(diǎn)亦有不同之處。共同點(diǎn)在于兩者的理論依據(jù)一致，均可使用層次分析法驗(yàn)證考點(diǎn)效度，命題要求部分相同；不同點(diǎn)則在于“成段改錯(cuò)基本上是以語(yǔ)碼（形式）為核心的試題，而完形填空應(yīng)該以信息（意義）為核心。也就是說(shuō)，完形填空試題測(cè)試的主要是對(duì)意義的理解，而成段改錯(cuò)測(cè)試的是意義的準(zhǔn)確表達(dá)，包括準(zhǔn)確性和得體性（李筱菊1997：324）”。

3 .試題分析

本文對(duì)2004年改革后（即2005年至今）的七份TEM8試卷進(jìn)行效度分析主要采用李筱菊提出的層次分析法和考點(diǎn)覆蓋分析表來(lái)作為切入點(diǎn)。

3.1 層次分析法

層次分析法原用于分析完形填空的考點(diǎn)效度，以得知完形填空試題的質(zhì)量。因?yàn)橥晷翁羁蘸统啥胃腻e(cuò)同屬于 C類(lèi)試題，持有相同的理論依據(jù)，且兩者存在許多相同之處，故層次分析法亦可用于TEM8短文改錯(cuò)試題的考點(diǎn)效度分析。此方法就是將2005—2011年TEM8歷年考試真題的錯(cuò)誤按語(yǔ)篇D、句子S、詞組P、單詞W四個(gè)層次分成四類(lèi)并統(tǒng)計(jì)其考點(diǎn)錯(cuò)誤頻數(shù)制作成表（見(jiàn)表 1）。這四個(gè)層次的劃分依據(jù)即為，找出此錯(cuò)誤并能正確改正需要受試者考慮多廣的上下文才能做出決定，換言之，對(duì)錯(cuò)誤點(diǎn)進(jìn)行增刪改補(bǔ)的行為受什么層次語(yǔ)境的制約。語(yǔ)篇層次的劃分標(biāo)準(zhǔn)是由句際間的意思決定此題目的改法，且本文中采用“句子”狹義的概念，以句末標(biāo)點(diǎn)結(jié)束為一個(gè)句子；句子層次是在一個(gè)句子的范圍之內(nèi)就可以決定錯(cuò)誤點(diǎn)所在；詞組層次則是以固定搭配或者詞組間常見(jiàn)的組合為依據(jù)進(jìn)行改錯(cuò)；單詞層次考單詞的拼寫(xiě)、詞法變位、構(gòu)詞法、詞性、詞義、詞匯辨析等。

因?yàn)榭键c(diǎn)層次和考點(diǎn)因素的側(cè)重有關(guān)系，筆者還從考點(diǎn)因素角度將每道題其歸類(lèi)為三個(gè)范疇，即語(yǔ)法因素G、慣用搭配因素C以及意義因素M，題目側(cè)重于考哪個(gè)因素，該因素則為此題的焦點(diǎn)因素。

表1 TEM8考點(diǎn)層次和焦點(diǎn)因素分析表

從該表的縱向來(lái)看，一方面，在每一年的短文改錯(cuò)試題中，即使焦點(diǎn)因素是語(yǔ)法的頻率很高，此題依然可以實(shí)現(xiàn)較高的考點(diǎn)層次，也就是說(shuō)，題目的焦點(diǎn)因素為 M，但解決此題仍需要在理解整個(gè)句子甚至兩三個(gè)句子的意思才能改對(duì)。這也體現(xiàn)了 TEM8考試短文改錯(cuò)的測(cè)試目的，即考察學(xué)生的語(yǔ)法和詞匯知識(shí)在語(yǔ)境中的綜合運(yùn)用能力。10年的真題就是典型的例子，該年短文改錯(cuò)中以語(yǔ)法為焦點(diǎn)的題目占到了70%，但處在語(yǔ)篇和句子層次中的題目能占到90%，出題者確實(shí)在提高題目的考點(diǎn)層次上下足了功夫。這種情況的出現(xiàn)說(shuō)明了雖然成段改錯(cuò)試題是以語(yǔ)碼（形式）為核心的試題，但這并不妨礙其具有良好的效度。另一方面，2005—11年TEM8短文改錯(cuò)試題普遍以語(yǔ)篇和句子層次的題目為主導(dǎo)，這類(lèi)題平均占題目總量的70%。從這點(diǎn)看，TEM8的短文改錯(cuò)更側(cè)重評(píng)估學(xué)生的綜合語(yǔ)言能力，這和它的測(cè)試目的是一致的，同時(shí)也突出了這一高級(jí)別考試的特點(diǎn)。此外，題目層次越高，直接決定了整道的試題效度越高。所以，有理由相信，TEM8短文改錯(cuò)試題具有很好的效度。

從該表的橫向來(lái)看，一方面，2004年TEM8改革后到2011年間，處于語(yǔ)篇和句子層次的題目的總量趨于一個(gè)穩(wěn)定的狀態(tài)，即此試題的效度也保持在一定的高度。語(yǔ)篇層次的題目每年為1道左右，句子層次的題目則保持在6道左右。在總題目量和文章字?jǐn)?shù)不增加的情況下，TEM8短文改錯(cuò)試題的難度基本保持不變，沒(méi)有出現(xiàn)“大難大易”現(xiàn)象，這防止了不公平現(xiàn)象的發(fā)生，也有利于維持 TEM8的權(quán)威性。另一方面，以語(yǔ)法為考點(diǎn)因素的題目仍在總題量中占一定的數(shù)量，而且也持一個(gè)穩(wěn)定的狀態(tài)，一直保持在平均每年有4道。這不僅是因?yàn)槌啥胃腻e(cuò)試題是以語(yǔ)碼（形式）為核心的試題，所以決定了側(cè)重考準(zhǔn)確性的試題的存在，而且筆者認(rèn)為，因?yàn)?TEM8中無(wú)單項(xiàng)語(yǔ)法題，在短文改錯(cuò)試題中保留一定數(shù)量對(duì)語(yǔ)法知識(shí)考察的題目對(duì)整套 TEM8試題來(lái)說(shuō)是一種平衡，是科學(xué)合理的。

3.2 考點(diǎn)覆蓋分析表

考點(diǎn)覆蓋分析表可以用于分析此部分試題的考點(diǎn)覆蓋是否合理，把歷年考試放在一起，還可以看出數(shù)年來(lái)考點(diǎn)的分布情況，找到每年的必考考點(diǎn)和高頻考點(diǎn)，就可以知道TEM8短文改錯(cuò)試題的側(cè)重考點(diǎn)。李筱菊（1996）曾用該考點(diǎn)覆蓋分析表分析1985年和1988年高等學(xué)校招生英語(yǔ)考試（MET：Matriculation English Test）中語(yǔ)法填空和完形填空這兩道考語(yǔ)法的大題的考點(diǎn)分布情況。鑒于該表的語(yǔ)法覆蓋面較全，但不是針對(duì)短文改錯(cuò)設(shè)計(jì)的，筆者將此表略加改動(dòng)，改良后制作成TEM8短文改錯(cuò)的考點(diǎn)覆蓋分析表（見(jiàn)附錄）。

在新表中可看出 TEM8短文改錯(cuò)試題的兩個(gè)特點(diǎn)。第一，涉及到一些低層次考點(diǎn)的語(yǔ)法點(diǎn)在 TEM8短文改錯(cuò)試題中出現(xiàn)的頻率很低，甚至為零，如名詞的單復(fù)數(shù)、時(shí)態(tài)、疑問(wèn)句型和主謂一致等等。在 TEM8需要涵蓋全面的英語(yǔ)綜合能力這一考試中，這些考點(diǎn)的低頻率和不存在是符合要求的，且也為了保證這種級(jí)別的考試的高效度。第二，一些每年必考考點(diǎn)和高頻考點(diǎn)也體現(xiàn)了題目高層次這一要求。連詞及連接語(yǔ)、固定搭配、詞匯及其他、介詞和冠詞等都是歷年TEM8中高頻考點(diǎn)，這些錯(cuò)誤類(lèi)型“和ST6（英語(yǔ)專業(yè)3～4年級(jí)學(xué)習(xí)者語(yǔ)料庫(kù)）中學(xué)生的寫(xiě)作中所犯的錯(cuò)誤類(lèi)型顯著相關(guān)”（劉會(huì)鐲，2010），這也就說(shuō)明了這些錯(cuò)誤類(lèi)型都是英語(yǔ)專業(yè)高年級(jí)學(xué)生在寫(xiě)作中常犯的典型錯(cuò)誤類(lèi)型。因此，“從內(nèi)容覆蓋面方面來(lái)說(shuō)，TEM8短文改錯(cuò)的內(nèi)容效度相對(duì)較高”（劉會(huì)鐲，2010）。

但是從綜合各年的情況來(lái)看，此部分試題的考點(diǎn)分布仍有不合理之處：有些年份的考題在同一個(gè)考點(diǎn)的考察上過(guò)于密集。如2008年的短文改錯(cuò)中，第1、7、8、9題考察的都是短語(yǔ)的固定搭配，而且這四題中就有三道都是有關(guān)介詞的選擇，這也是為什么在 TEM8考點(diǎn)層次和焦點(diǎn)因素分析表（即表1）中2008年短語(yǔ)層次和搭配為焦點(diǎn)因素的個(gè)數(shù)突兀于歷年的數(shù)據(jù)；再如2011年試題中，第2、5、6、7題考察的都是詞義辨析，除了第2題是名詞的辨析外，其他三道都是形容詞的辨析。這樣在同一年份的同一考題中如此密集的集中在一個(gè)考點(diǎn)上，會(huì)造成一定程度的偏頗，不利于保證效度的穩(wěn)定。

附錄

[1] 高等英語(yǔ)專業(yè)八級(jí)考試大綱修訂小組編. 高等英語(yǔ)專業(yè)八級(jí)考試大綱（2004年新版）[Z]. 上海：上海外語(yǔ)教育出版社，2004.

[2] 韓景峰. 專八成段改錯(cuò)的效度分析[J]. 忻州師范學(xué)院學(xué)報(bào)，2007，（6）.

[3] 李彬彬. TEM8之校對(duì)與改錯(cuò)成績(jī)分析及其解題策略[J]. 懷化學(xué)院學(xué)報(bào)，2007，（8）.

[4] 李莜菊. 語(yǔ)言測(cè)試科學(xué)與藝術(shù)[M]. 長(zhǎng)沙：湖南教育出版社，1997.

[5] 李玉英. 淺談TEM8中Proofreading考項(xiàng)的反思性教學(xué)[J]. 江西師范大學(xué)學(xué)報(bào)，2007，（4）.

[6] 劉會(huì)鐲. 基于語(yǔ)料庫(kù)的TEM8短文改錯(cuò)內(nèi)容效度分析[D]. 武漢科技大學(xué)，2010.

[7] 劉建達(dá)，楊滿珍. What Does Proofreading Test？[J].現(xiàn)代外語(yǔ)，2001，（2）.

[8] 婁喜祥. 英語(yǔ)專業(yè)八級(jí)新舊版短文改錯(cuò)題信度與效度研究[J].牡丹江師范學(xué)院學(xué)報(bào)，2007，（3）.

G424.74

A

1008-7427（2012）09-0143-02

2012-06-01