徐惠琦

（山西省太原市山西師范大學(xué)英語周報(bào)社教育教學(xué)研究院，山西太原 030006）

引 言

多年來，全國各地的中考試題大多以考查學(xué)生聽、讀、寫的語言技能為主，而很少或幾乎不涉及對(duì)學(xué)生口語表達(dá)能力的考查。因此，從測(cè)試的構(gòu)念以及效度角度來講，這樣的測(cè)試并不能完全考查學(xué)生的英語語言能力。造成這一現(xiàn)象的原因大多為考試成本較高、施測(cè)困難、評(píng)分隨機(jī)性誤差較大等。但隨著我國經(jīng)濟(jì)的快速發(fā)展和計(jì)算機(jī)信息技術(shù)的普及，人機(jī)對(duì)話形式的聽說考試以其容易操作、評(píng)分科學(xué)可信等優(yōu)點(diǎn)被各地中考命題者所嘗試使用。目前，全國有16 個(gè)省市在中考中開始考查聽說技能。其中，北京市勇當(dāng)先鋒，在中考英語聽說考試改革中跨出一大步，2018年在全市中考中增加聽說考試；一年兩考；分值占總分的40%。2017年12月23日，改革后的北京首場(chǎng)中考聽說考試順利舉行，受到廣大英語基礎(chǔ)教育工作者的關(guān)注和一線教師的肯定。鑒于此，本文將從構(gòu)念、任務(wù)特征和效度研究三個(gè)維度對(duì)北京教育考試院官方網(wǎng)站提供的“英語聽說計(jì)算機(jī)考試在線體驗(yàn)系統(tǒng)”中的試題進(jìn)行分析，旨在為從事中考聽說考試的開發(fā)人員及一線教師提供測(cè)評(píng)和教學(xué)依據(jù)。

一、考試的構(gòu)念效度

（一）考試內(nèi)容

根據(jù)《北京市高級(jí)中等學(xué)校招生考試英語聽說考試說明（征求意見稿）》（以下簡稱《聽說考試說明》），北京市聽說考試以教育部制定的《義務(wù)教育英語課程標(biāo)準(zhǔn)（2011年版）》（以下簡稱《義務(wù)教育課標(biāo)》）所規(guī)定的五級(jí)目標(biāo)要求為考試內(nèi)容范圍，其目的是通過各種語言使用任務(wù)考查考生在聽和說兩個(gè)方面的運(yùn)用能力（含聽說技能、語言知識(shí)、情感態(tài)度、學(xué)習(xí)策略和文化意識(shí)）?！堵犝f考試說明》和《義務(wù)教育課標(biāo)》考查的聽說內(nèi)容和能力有所不同，具體對(duì)比如表1所示。

（二）考試形式

從考試形式來看，北京市中考聽說考試時(shí)長為30 分鐘，滿分40 分，共四道大題，20 個(gè)小題；具體任務(wù)包括聽后選擇、聽后回答、聽后記錄、聽后轉(zhuǎn)述和短文朗讀。

表1 考試要求對(duì)比

（三）考試構(gòu)念

上述考試內(nèi)容和考試形式表明，北京市聽說考試主要考查學(xué)生理解或表達(dá)相對(duì)簡單的英語口語能力，充分說明了交際語言觀、任務(wù)型教學(xué)和語言技能觀是支撐該考試的理論基礎(chǔ)和構(gòu)念框架。交際語言教學(xué)觀認(rèn)為，學(xué)語言不僅是學(xué)語音、詞匯和語法知識(shí)等孤立的語言知識(shí)，而且還是獲取人與人用語言進(jìn)行交際的能力。北京市聽說考試中的具體試題任務(wù)，如聽后回答、聽后轉(zhuǎn)述和短文朗讀就是考查這種交際能力的有效題目或相對(duì)真實(shí)的語言任務(wù)?！堵犝f考試說明》中明確規(guī)定了對(duì)聽和說兩種語言技能（language skills）的詳細(xì)要求，這說明該測(cè)試開發(fā)者非常重視從語言技能的角度來對(duì)聽說考試進(jìn)行構(gòu)念，這也符合《義務(wù)教育課標(biāo)》對(duì)義務(wù)教育階段英語課程總目標(biāo)的描述：“通過英語學(xué)習(xí)使學(xué)生形成初步的綜合語言運(yùn)用能力……綜合語言運(yùn)用能力的形成建立在語言技能、語言知識(shí)、情感態(tài)度、學(xué)習(xí)策略和文化意識(shí)等方面整體發(fā)展的基礎(chǔ)之上。語言技能和語言知識(shí)是綜合語言運(yùn)用能力的基礎(chǔ)……”這些內(nèi)容充分說明，《義務(wù)教育課標(biāo)》將語言技能放在綜合語言運(yùn)用能力的首位。2018年1月，教育部頒布了新的《普通高中英語課程標(biāo)準(zhǔn)（2017年版）》（以下簡稱《高中新課標(biāo)》），明確指出：“普通高中英語課程強(qiáng)調(diào)對(duì)學(xué)生語言能力、文化意識(shí)、思維品質(zhì)和學(xué)習(xí)能力的培養(yǎng)……語言能力指在社會(huì)情境中，以聽、說、讀、寫、看等方式理解和表達(dá)意義的能力，以及在學(xué)習(xí)和使用語言的過程中形成的語言意識(shí)和語感。”《高中新課標(biāo)》的這種描述與Bachman 和Palmer 所提出的“語言能力就是使用者表達(dá)與理解話語的能力……語言技能是在完成具體的語言使用任務(wù)時(shí)對(duì)語言使用能力的實(shí)現(xiàn)……”(Bachman & Palmer, 2010)的理念相一致[1]。因此，北京聽說考試從構(gòu)念上應(yīng)更多地借鑒《高中新課標(biāo)》和測(cè)試學(xué)領(lǐng)域關(guān)于語言能力描述的理念，而不是一味地強(qiáng)調(diào)語言技能。

（四）難度設(shè)計(jì)

從表1中可以看出，《北京聽說考試說明》對(duì)聽說能力的要求比《義務(wù)教育課標(biāo)》的要求稍低，尤其是在說的方面表現(xiàn)得更為突出，如《義務(wù)教育課標(biāo)》的要求“能借助語境克服生詞障礙、理解大意”“能就簡單的話題提供信息，表達(dá)簡單的觀點(diǎn)和意見，參與討論”“能與他人溝通信息，合作完成任務(wù)”“能根據(jù)話題進(jìn)行情景對(duì)話”等難度稍大的項(xiàng)目，在《北京聽說考試說明》中均未得到體現(xiàn)，這就說明北京聽說考試從構(gòu)念上來說，試題難度較低，這可能是為了照顧北京市不同地區(qū)的英語教學(xué)水平差異，同時(shí)力求中考聽說考試的改革平穩(wěn)過渡。

二、考試的任務(wù)特征

語言使用離不開具體的任務(wù)，學(xué)生的語言能力通常通過完成語言測(cè)試任務(wù)的表現(xiàn)來衡量。測(cè)試任務(wù)不同，學(xué)生的表現(xiàn)也會(huì)存在差異。所以，為了準(zhǔn)確測(cè)量北京市初三學(xué)生的聽說能力，有必要厘清北京市聽說考試各個(gè)任務(wù)的特征。

本文主要參考了Bachman 和Palmer 在2010年提出的任務(wù)特征框架，包括任務(wù)情境特征、任務(wù)說明特征、任務(wù)輸入特征、任務(wù)預(yù)期作答反應(yīng)特征和任務(wù)輸入與作答反應(yīng)之間的關(guān)系5 個(gè)基本要素[2]。

（一）任務(wù)情境特征

北京市聽說考試均在統(tǒng)一建設(shè)的聽說考試實(shí)驗(yàn)室進(jìn)行，每人使用一臺(tái)計(jì)算機(jī)。學(xué)生考前可以在北京教育考試院提供的“英語聽說計(jì)算機(jī)考試在線體驗(yàn)系統(tǒng)”進(jìn)行模擬體驗(yàn)，確保熟悉考試流程和答題要求等?？荚噷?duì)象為北京市初三在冊(cè)學(xué)生，備考時(shí)間為40 分鐘，考試時(shí)間為30 分鐘。

（二）任務(wù)說明特征

通俗地講，任務(wù)說明就是指答題時(shí)的題目要求。北京市聽說考試的題目要求為中文，同時(shí)用書面形式和錄音形式呈現(xiàn)。題目要求明確說明了考試的具體任務(wù)、學(xué)生應(yīng)如何反應(yīng)、答題位置、答題時(shí)間以及每題的分?jǐn)?shù)等內(nèi)容。

題目要求較為詳盡，字?jǐn)?shù)較多。各大題的題目要求最短有33 個(gè)字，最長有119 個(gè)字；而各小題的題目要求最短有14個(gè)字，最長有37 個(gè)字。無論是大題還是小題的題目要求中，均未呈現(xiàn)示例，但說明了做題準(zhǔn)備時(shí)間和答題時(shí)間。

題目說明的結(jié)構(gòu)比較清晰。在考試開始時(shí)，計(jì)算機(jī)就通過語音和屏幕呈現(xiàn)了“同學(xué)們，歡迎參加北京市高級(jí)中等學(xué)校招生考試英語聽說考試。試題共包括四道大題。下面請(qǐng)看第一大題。”準(zhǔn)確說明了聽說考試的大題數(shù)量，而且在每個(gè)大題的題目說明中，又包括了每個(gè)大題中的小題數(shù)量。聽說考試的答題順序也是固定的，必須按順序在固定時(shí)間內(nèi)完成每道題目，且完成后不可更改答案。

學(xué)生所答的聽說答案數(shù)據(jù)都是通過計(jì)算機(jī)進(jìn)入保密性較強(qiáng)的服務(wù)器，便于計(jì)算機(jī)評(píng)分并供任何時(shí)間的人工審核和查閱。2017年12月23日舉行的首場(chǎng)聽說考試已于2018年1月19日公布成績，考生可以通過北京市教育考試院官方網(wǎng)站進(jìn)行查詢。

（三）任務(wù)輸入特征

北京市聽說考試的輸入材料基本都是相對(duì)真實(shí)的英語口語素材，材料是由試題命制者精心加工后重新錄制的，不是源自生活中的真實(shí)英語口語。

表2 考試選材的語境和話題

續(xù) 表

如表2中的分析數(shù)據(jù)顯示，北京市聽說考試選材的語境和話題貼近學(xué)生的生活實(shí)際，有利于學(xué)生發(fā)揮自己真實(shí)的英語水平。聽說材料總長度858 個(gè)詞，題目長度225 個(gè)詞，總計(jì)1083 個(gè)詞。相較于北京市2017年中考英語聽力部分的材料詞數(shù)835 個(gè)，題目詞數(shù)205 個(gè)，總計(jì)1040 個(gè)詞略有增長。聽說材料的選材難度較低，弗萊士易讀值（Flesch Reading Ease）顯示材料的難度在84.7～100，屬于特別容易的水平；而Grade Level 則表明材料難度在英語為母語的國家為學(xué)前至小學(xué)三年級(jí)英語水平。聽說材料的語速也比較慢，每分鐘92～122 個(gè)詞，比全國普通中考每分鐘140 個(gè)詞左右慢了許多。這些都充分印證了試題難度較低的構(gòu)念和設(shè)計(jì)初衷。

聽說材料的呈現(xiàn)形式主要分為兩種：一種是長對(duì)話，另一種是獨(dú)白。相比以往北京市中考英語試題聽力部分的輸入材料，刪去了短對(duì)話的形式，也就是說，北京市聽說考試的材料更強(qiáng)調(diào)其語篇特征，將語言放入仿真實(shí)的交際情境中，用語篇的形式呈現(xiàn)，避免了用碎片化的語言考查學(xué)生的語言能力，這與《高中新課標(biāo)》剛提出的核心素養(yǎng)六要素中的主題語境和語篇類型的理念高度相一致。

（四）任務(wù)預(yù)期作答反應(yīng)特征

北京市聽說考試共4 道大題，20 個(gè)小題，其中有8 道選擇題，其余全是主觀題。在主觀題中，有5 道題目要求學(xué)生口頭簡答問題，有5 道題是填寫關(guān)鍵信息，1 道題目是口頭轉(zhuǎn)述短文大意，還有1 道題目為朗讀短文，期待應(yīng)答的文本形式覆蓋了短語、句子、語篇等各種形式。考試為考生預(yù)留的答題時(shí)間也非常充足，選擇題或簡答題為10 秒，填寫關(guān)鍵信息為1分鐘，口頭轉(zhuǎn)述準(zhǔn)備時(shí)間為90秒鐘，答題時(shí)間為90秒鐘，而朗讀短文則給出90 秒鐘的準(zhǔn)備時(shí)間和2 分鐘的答題時(shí)間，這些都確保了學(xué)生能夠在作答時(shí)從容不迫，保證了考試的信度和效度。

（五）任務(wù)輸入與作答反應(yīng)之間的關(guān)系

北京市聽說考試的答題順序是固定的，雖然是計(jì)算機(jī)考試，但不可前后調(diào)整答題順序且不能對(duì)學(xué)生的答案即時(shí)給出反饋。任務(wù)輸入與作答反應(yīng)關(guān)系有寬域（broad scope）和窄域(narrow scope)兩種，北京市聽說考試的任務(wù)主要是窄域，即絕大部分是細(xì)節(jié)理解類的直接性題目，而寬域的、間接性的題目也略有涉及，如第一大題的第8 小題，考查學(xué)生是否能夠理解長對(duì)話的主旨大意。

三、考試的效度分析

效度驗(yàn)證其實(shí)并不抽象，簡單來說就是指研究試題是否考查了目標(biāo)能力。聽說考試效度驗(yàn)證主要回答兩個(gè)方面的問題，即各試題是否能夠考查到考生的相應(yīng)能力以及在多大程度上考查到了這種能力。本文將主要從內(nèi)容效度、相關(guān)效度、共時(shí)效度、表面效度和后果效度5 個(gè)方面來分析北京市聽說考試的效度。

（一）內(nèi)容效度

將北京市教育考試院體驗(yàn)版的聽說考試內(nèi)容與《聽說考試說明》相對(duì)比，可以發(fā)現(xiàn)，考試基本覆蓋了《考試說明》中規(guī)定的內(nèi)容，考試內(nèi)容效度較高。對(duì)照分析如表3所示。

表3 北京市教育考試院體驗(yàn)版聽說考試內(nèi)容與聽說考試說明對(duì)比

（二）相關(guān)效度

北京市聽說考試能夠有效考查考生的聽力理解和口語產(chǎn)出能力，但是，人機(jī)對(duì)話聽說考試的智能程度尚在發(fā)展之中，實(shí)施測(cè)試的功能仍具有一定局限性，如計(jì)算機(jī)不能對(duì)考生的表達(dá)做出模仿真實(shí)交際者的回應(yīng)[3]。也就是說，目前人機(jī)對(duì)話的聽說考試考查了學(xué)生的理解性和產(chǎn)出性能力，但對(duì)交際性能力的考查略顯不足。

（三）共時(shí)效度

上文在對(duì)考試構(gòu)念和任務(wù)特征分析時(shí)指出，北京市聽說考試的難度較低，與2017年北京市中考英語的筆試部分相比，無論在語言輸入材料的易讀值方面，還是在所考查題目的能力方面，難度明顯降低。這有可能造成試題的區(qū)分度不明顯。這些在一定程度上表明，北京市聽說考試的共時(shí)效度還有待提高。

（四）表面效度

北京市聽說考試的計(jì)算機(jī)頁面顯示其題目要求明確清晰、題目簡潔明了、答題位置突出易找，從卷面上來看比較符合初中畢業(yè)生的英語學(xué)習(xí)特點(diǎn)，表面效度較高。

（五）后果效度

北京市計(jì)劃實(shí)施聽說考試以來，取得了十分令人滿意的反撥效果。聽說考試的實(shí)施，對(duì)英語教師自身的語音語調(diào)、英語口語表達(dá)能力等提出了更高要求，教師應(yīng)力求調(diào)整和修正自己的語音語調(diào)，以求為學(xué)生起到示范和引領(lǐng)作用。聽說考試中包括模仿朗讀和聽后復(fù)述兩部分，學(xué)生在日常英語學(xué)習(xí)過程中應(yīng)更加重視自己的語音語調(diào)和口頭轉(zhuǎn)述關(guān)鍵信息的能力[4]。聽說考試已真正成為治療“聾啞英語”的一劑猛藥。

需要特別指出的是，人機(jī)對(duì)話的聽說考試一開始受到了一些質(zhì)疑，尤其是對(duì)計(jì)算機(jī)評(píng)分代替人工評(píng)分持懷疑態(tài)度。隨著計(jì)算機(jī)信息技術(shù)的不斷發(fā)展，廣東省在2011年率先在高考中實(shí)行人機(jī)對(duì)話的聽說考試，積累了許多有價(jià)值的經(jīng)驗(yàn)，也用事實(shí)驗(yàn)證了計(jì)算機(jī)評(píng)分比人工評(píng)分信度更高的優(yōu)點(diǎn)。Barry O'Sullivan 也指出，對(duì)于低段的英語聽說測(cè)試，計(jì)算機(jī)評(píng)分有較高的信度。另外，計(jì)算機(jī)評(píng)分不容易出現(xiàn)隨機(jī)誤差，也不會(huì)因人工評(píng)分中主考官語言水平的差異、情緒波動(dòng)、體能變化等出現(xiàn)評(píng)分誤差。因此，人機(jī)對(duì)話的聽說考試更有利于實(shí)現(xiàn)考試的計(jì)劃性和公平性。

結(jié) 語

正如曾用強(qiáng)教授所說：“現(xiàn)代生活的任何一方面都離不開信息化，包括教育?！比藱C(jī)對(duì)話的聽說考試在推動(dòng)考試改革的同時(shí)，也推動(dòng)了教育信息化的發(fā)展。在考試大環(huán)境下，計(jì)算機(jī)具有紙筆考試所無可比擬的優(yōu)勢(shì)，在評(píng)分方面也表現(xiàn)出更高的信度?！叭藱C(jī)對(duì)話”的聽說考試將是未來發(fā)展的趨勢(shì)。教育部考試中心于涵副主任在“第二屆語言測(cè)試與評(píng)價(jià)國際研討會(huì)”上說，北京可以成為“大舞臺(tái)”，廣東可以強(qiáng)調(diào)“導(dǎo)向性”。試題命制者和一線教師要及時(shí)更新觀念與意識(shí)，學(xué)習(xí)先行考改地區(qū)有價(jià)值的經(jīng)驗(yàn)，確保英語聽說考試改革在為教學(xué)和選拔人才服務(wù)的道路上走得穩(wěn)健、長遠(yuǎn)。