閆玉荷，劉 凌*

（湖北工業(yè)大學(xué)外國(guó)語(yǔ)學(xué)院 湖北 武漢 430068）

1 研究背景

內(nèi)容效度體現(xiàn)在考試內(nèi)容是否覆蓋了考綱，是否和考試規(guī)范相關(guān)（Bachman, 1990）。國(guó)內(nèi)關(guān)于語(yǔ)言測(cè)試內(nèi)容效度的研究主要集中于高考和大學(xué)生英語(yǔ)各類等級(jí)考試，較少有人分析碩士研究生英語(yǔ)入學(xué)考試的內(nèi)容效度，尤其是研究生入學(xué)考試英語(yǔ)（二）〔簡(jiǎn)稱英語(yǔ)（二）〕的內(nèi)容效度。根據(jù)2017-2023 年的考綱，英語(yǔ)（二）考試分為英語(yǔ)知識(shí)應(yīng)用、閱讀理解、翻譯和寫作四個(gè)部分。其中，閱讀理解A 部分占總分值的40%，超過(guò)了其他部分的分值。閱讀理解試題的質(zhì)量引起了國(guó)內(nèi)學(xué)者的極大關(guān)注。鄧會(huì)（2014）研究了2010-2014 年英語(yǔ)（二）閱讀部分的內(nèi)容效度，研究發(fā)現(xiàn)，2010-2014 年英語(yǔ)（二）閱讀理解測(cè)試符合大綱要求，內(nèi)容效度較高，但存在閱讀文章的體裁不豐富，題材和閱讀考察技能分布不均等問(wèn)題。崔炫俊（2017）研究了2013-2016 年英語(yǔ)（二）閱讀理解A 部分的內(nèi)容效度，結(jié)果表明，英語(yǔ)（二）閱讀理解文章的題材、體裁、長(zhǎng)度和難度與大綱相符，但偏重考查細(xì)節(jié)理解，缺少對(duì)其他技能的考查。目前尚未有學(xué)者研究2017 年以來(lái)英語(yǔ)（二）的閱讀測(cè)試內(nèi)容效度，本文將填補(bǔ)這一空白。

2 研究方法

英語(yǔ)（二）考試的評(píng)價(jià)標(biāo)準(zhǔn)是高等學(xué)校非英語(yǔ)專業(yè)本科畢業(yè)生所能達(dá)到的及格或及格以上水平，以保證被錄取者具有一定的英語(yǔ)水平，并有利于各高等學(xué)校和科研院擇優(yōu)選拔。英語(yǔ)（二）閱讀理解A 部分的內(nèi)容效度主要指閱讀文章和題項(xiàng)在多大程度上符合考綱的要求，是否能夠測(cè)試其所規(guī)定的閱讀能力。2017-2021 年，考綱的考查目標(biāo)和內(nèi)容無(wú)變化，體裁均為“說(shuō)明文、議論文、記敘文”等，題材均為“經(jīng)濟(jì)、管理、社會(huì)、文化、科普”等，四篇文章總長(zhǎng)度均為1500 詞左右，考查技能均為“理解主旨要義；理解文中的具體信息；理解語(yǔ)篇的結(jié)構(gòu)和上下文的邏輯關(guān)系；根據(jù)上下文推斷重要生詞或詞組的含義；進(jìn)行一定的判斷和推理；理解作者的意圖、觀點(diǎn)或態(tài)度”；2022 年，文章長(zhǎng)度調(diào)整為1500～1600 詞，新增了“理解文章的論證方法，比較不同觀點(diǎn)”的考查目標(biāo)；2023 年考綱指出“考生應(yīng)能讀懂語(yǔ)言較復(fù)雜的文字材料，包括新聞、評(píng)論、報(bào)告、論文、專著等類型的文章”，且增加了“教育”和“歷史”為主要題材，不再將“管理”作為主要考查題材，并在2022 年考綱的基礎(chǔ)上，修改了考查技能，并增加了“分析修辭手法、比較事實(shí)和態(tài)度”的考查目標(biāo)。

依據(jù)Bachman和Palmer（2010）的任務(wù)特征框架，以及辜向東和王秋艷（2008）的閱讀理解測(cè)試分析項(xiàng)目，結(jié)合考綱，以2017-2023 年英語(yǔ)（二）閱讀理解A部分共28 篇閱讀理解文章和140 道題目為研究對(duì)象，從文本輸入、預(yù)期回答和題項(xiàng)設(shè)計(jì)三方面分析內(nèi)容效度。文本輸入是指考生需要處理和回答的測(cè)試材料，預(yù)期回答是考生對(duì)測(cè)試任務(wù)做出的反應(yīng)和輸出，題項(xiàng)設(shè)計(jì)即題目和選項(xiàng)的設(shè)計(jì)。體裁和題材以各版考綱的共同部分為基礎(chǔ)，將體裁分為說(shuō)明文、議論文和記敘文，題材包含經(jīng)濟(jì)、管理、科學(xué)、教育、社會(huì)、文化和歷史；文章長(zhǎng)度主要統(tǒng)計(jì)文章總長(zhǎng)度、題項(xiàng)長(zhǎng)度，文章和題項(xiàng)的總長(zhǎng)度；文章難度以生詞率和易讀度為衡量依據(jù)，易讀度由易讀度公式計(jì)算得出；考查技能包括考綱規(guī)定的八個(gè)技能；題項(xiàng)設(shè)計(jì)分析考點(diǎn)分布、答案準(zhǔn)確性和干擾項(xiàng)干擾。

3 研究結(jié)果

3.1 文本輸入

3.1.1 體裁

記敘文的題材通常接近生活，讀者可運(yùn)用的相關(guān)知識(shí)較豐富，能夠用來(lái)理解文章的圖解也比較成熟。說(shuō)明文通常介紹新穎事物，且結(jié)構(gòu)也比較復(fù)雜（Clinton et al.,2020）。議論文注重解釋事物本質(zhì)，呈現(xiàn)作者的觀點(diǎn)和立場(chǎng)，主觀性較強(qiáng)。2017-2023 年，文章以議論文和說(shuō)明文為主。議論文15 篇，占比53.57%，說(shuō)明文13 篇，占比46.43%，未考查記敘文。2022 年，4 篇文章均為說(shuō)明文，體裁單一,其余年份均考查了記敘文和說(shuō)明文。記敘文是考綱主要考查的體裁之一。另外，讀者閱讀不同體裁文章需要用到的技能不同，理解記敘文比較依賴解碼技能（Graesser et al.,1994），而理解說(shuō)明文更依賴對(duì)話題的熟悉度（Clinton et al.,2020）。因此，英語(yǔ)（二）僅考查議論文和說(shuō)明文并不符合考綱要求，也不利于測(cè)試考生的解碼技能，建議英語(yǔ)（二）選擇更豐富的體裁，以便更全面地考查學(xué)生對(duì)不同體裁文章的理解能力。

3.1.2 題材

2017-2022 年，每年均覆蓋3-4 個(gè)題材，最常考查的是科學(xué)和經(jīng)濟(jì)題材，分別占總數(shù)的35.71%和25%，沒(méi)有文化題材的文章。2023 年只覆蓋了經(jīng)濟(jì)和科學(xué)題材，選材不太均衡。題材可能會(huì)影響考生表現(xiàn)，對(duì)題材熟悉的考生將會(huì)比對(duì)題材不熟悉的考生表現(xiàn)得更好。閱讀文章主要選取科學(xué)和經(jīng)濟(jì)題材，有利于關(guān)注科學(xué)和經(jīng)濟(jì)知識(shí)的考生，但較少選取文化和歷史題材，不利于相關(guān)專業(yè)的考生。建議英語(yǔ)（二）適當(dāng)增加文化和歷史等題材的文章，使題材更豐富，促進(jìn)考試公平。

3.1.3 文章長(zhǎng)度

如表1 所示，每年的文章總長(zhǎng)度維持在1600 詞左右，無(wú)太大波動(dòng)。2017-2021 年考綱規(guī)定，閱讀理解A 部分的4 篇文章總長(zhǎng)度為1500 詞左右，這五年的文章總長(zhǎng)度均高于考綱要求，2022-2023 年，考綱將文章總長(zhǎng)度修改為1500-1600 詞，2022 年文章總長(zhǎng)度符合規(guī)定，2023 年文章總長(zhǎng)度超過(guò)了1600 詞。2017-2020 年，題項(xiàng)長(zhǎng)度在700 詞左右，總長(zhǎng)度在2300 詞左右。2021-2022 年，題項(xiàng)長(zhǎng)度在650 詞左右，總長(zhǎng)度在2250 詞左右。2023 年文章總長(zhǎng)度、題項(xiàng)長(zhǎng)度和總長(zhǎng)度均最長(zhǎng)。這說(shuō)明每年閱讀理解的文字材料較多，對(duì)考生的閱讀速度有一定要求。

表1 文章的長(zhǎng)度統(tǒng)計(jì)（單位：詞）

3.1.4 文章難度

研究發(fā)現(xiàn)，生詞以派生詞和復(fù)合詞為主，比如parkrun，disconcerting，shortfall,prosocial 等，每年考試的總生詞數(shù)為10 個(gè)左右，生詞數(shù)占4 篇文章總詞數(shù)的0.38%-0.62%，不超過(guò)1%；從單篇文章看，所有文章的生詞均為1-4 個(gè)，只有一篇文章的生詞率超過(guò)1%。這表明，每篇文章的生詞數(shù)較低，且每年的生詞率比較穩(wěn)定。

易讀度在50-60 屬于“比較難”的閱讀材料，30-50位于“難”的區(qū)間，0-30 屬于“非常難”。表2 統(tǒng)計(jì)了每篇文章的易讀度和每年文章的平均易讀度。由表可知，文章的易讀度集中分布于30-50 區(qū)間，易讀度在這一區(qū)間的文章為總數(shù)的78.57%，14.29%的文章易讀度在50-60 區(qū)間，7.1%的文章易讀度在0-30 區(qū)間。另外，每年的文章易讀度有一定梯度，難度不盡相同。2017-2018 年，各有一篇文章的易讀度在50-60 區(qū)間，屬于“較難”，另外三篇文章的易讀度在30-50 區(qū)間，屬于“難”；2020-2022 年，文章的易讀度也分布在兩個(gè)區(qū)間，2020-2021 年，均有1 篇文章的易讀度在50-60，其余3 篇文章的易讀度都在30-50；2022 年，4 篇文章的易讀度也分布于兩個(gè)區(qū)間，有兩篇文章的易讀度在0-30 范圍內(nèi)，兩篇文章的易讀度在30-50 范圍內(nèi)；2019 年和2023 年，所有的文章易讀度雖都在30-50 范圍內(nèi)，但具體數(shù)值有所差別。由此可見(jiàn)，英語(yǔ)（二）閱讀文章有一定難度且難度具有梯度性，區(qū)分度較好，有利于測(cè)量不同水平考生的閱讀能力，但考綱并沒(méi)有明確指出文章應(yīng)維持的難度。建議考綱增加閱讀材料的難易度指標(biāo)，提高命題科學(xué)性。

表2 文章易讀度指數(shù)

3.2 預(yù)期回答

為便于統(tǒng)計(jì)，將2017-2021 年考綱的6 項(xiàng)考查技能編號(hào)為技能1—技能6，并依據(jù)2022-2023 年考綱新增考查技能，將后2 項(xiàng)技能編號(hào)為技能7，技能8。表3 展示了八種閱讀技能在2017-2023 年的分布情況。數(shù)據(jù)顯示，閱讀文章雖考查了各個(gè)技能，但每個(gè)技能的考查頻率有較大差距。技能2 和技能5 是每年都會(huì)考查的技能，技能2為主要考查技能，占總數(shù)的50.71%，技能5 占總數(shù)的15.71%。除此之外，技能3 和技能6 雖不是每年都考查，但也屬于較常考查的技能，分別占總數(shù)的10%和8.57%，其他技能的考查頻率較低。這說(shuō)明，英語(yǔ)（二）閱讀技能考查范圍較廣，尤其注重考查考生的具體信息理解能力，判斷和推理能力，比較重視考生理解語(yǔ)篇結(jié)構(gòu)和上下文的邏輯關(guān)系的技能，也會(huì)在一定程度上要求考生能夠解讀作者的意圖、觀點(diǎn)和態(tài)度，但其他技能考查較少，建議英語(yǔ)（二）適當(dāng)提高其他閱讀技能的考查頻率，以便更全面地測(cè)試考生的閱讀水平。

表3 閱讀技能考查統(tǒng)計(jì)

3.3 題項(xiàng)設(shè)計(jì)

3.3.1 考點(diǎn)分布

研究發(fā)現(xiàn)，2017-2023 年閱讀理解A 部分每篇文章考點(diǎn)分布均勻，大部分文章的考點(diǎn)覆蓋了原文的全部段落，少數(shù)文章的考點(diǎn)分布在原文的大部分段落，如2018 年Text 2 共7 段，考點(diǎn)分布了6 段。除此之外，不存在一篇文章的所有考點(diǎn)集中分布在少數(shù)段落的情況。

3.3.2 答案準(zhǔn)確性

答案準(zhǔn)確性能夠說(shuō)明答案和原文的貼切程度。2017-2023 年英語(yǔ)（二）閱讀理解A部分的答案和原文密切相關(guān)，答案準(zhǔn)確性高，通?？忌枰獪?zhǔn)確理解和概括原文信息才能知道答案。比如，2017 年Text 1 第4 題，With regard to masssports,theauthorholdsthatgovernmentsshould.答案invest in public sports facilities 和原文“providing common goods”很貼切；2019 年Text 1 第4 題，Malti and others have shown that cooperation and sharing .答案can result from either sympathy or guilt 是原文“guilt and sympathy...sharing”的同義表達(dá)。

3.3.3 干擾項(xiàng)干擾性

2017-2023 年英語(yǔ)（二）閱讀理解A 部分題目的干擾項(xiàng)設(shè)計(jì)靈活，類型豐富，具有較強(qiáng)的干擾性。有的干擾項(xiàng)曲解了原文。例如，2020 年Text1 第3 題，AccordingtoQuinn,the rats released the social robot because they.A 選項(xiàng)tried to practice a means of escape 原文“the researchers ... release them by pressing a lever”提到壓下杠桿不是施救原因，而是施救方式。有的干擾項(xiàng)是原文的雜糅。例如，2021 年Text 4 第5 題，C 選項(xiàng)Vocabulary comprehension needs creativity，原文“In one study...and creativity...”指出，理解詞匯需要反思能力，創(chuàng)造新產(chǎn)品或修辭需要?jiǎng)?chuàng)造力。還有干擾項(xiàng)在原文找不到對(duì)應(yīng)信息。例如，2017 年Text 2 第2 題，原文未提及C 選項(xiàng)slows down babies'verbal development；2019年Text 3 第2 題，C 選項(xiàng)the lack of experienced laborers 在原文無(wú)跡可尋；2022 年Text 1 第5 題，D 選項(xiàng)moral implication 和原文無(wú)關(guān)；2023 年Text 2 第5 題，原文未提到A選項(xiàng)is able to cope with staff shortages 和C 選項(xiàng)is in need of a new pricing policy。

4 結(jié)論

2017-2023 年研究生英語(yǔ)入學(xué)考試（二）的閱讀理解A 部分，在文本輸入方面，文章體裁以議論文和說(shuō)明文為主，沒(méi)有考查記敘文，不太符合考綱要求。在題材上，主要選取科學(xué)和經(jīng)濟(jì)題材，較少涉及考綱列舉的其他題材，建議增加題材。在文章長(zhǎng)度上，除2022 年，每年的文章總長(zhǎng)度相比考綱要求更長(zhǎng)，文章和題項(xiàng)的總長(zhǎng)度也較長(zhǎng)，比較考驗(yàn)考生的閱讀速度。在文章難度上，每年的生詞率都比較穩(wěn)定；文章易讀度分布在三個(gè)區(qū)間，總體屬于“難”的范疇，且文章難度具有一定區(qū)分度，既有利于選拔人才，也有利于測(cè)量不同水平考生的閱讀能力。值得注意的是，考綱并無(wú)對(duì)閱讀材料難度的明確描述，建議增加閱讀文章的難易度指標(biāo)，以提高命題質(zhì)量。閱讀技能考查方面，題項(xiàng)覆蓋了8 大技能，但每種技能的考查頻率差距較大，主要考查考生解讀具體信息、判斷和推理技能，其他技能考查相對(duì)較少。建議適當(dāng)提高其他技能的考查頻率，以便更全面地測(cè)試考生的閱讀水平。題項(xiàng)設(shè)計(jì)方面，考點(diǎn)分布均勻；答案和原文匹配度高，準(zhǔn)確性強(qiáng)；干擾項(xiàng)設(shè)計(jì)靈活，類型比較豐富，干擾性較強(qiáng)，考生通常需要準(zhǔn)確解讀原文信息排除干擾項(xiàng)。