劉莉媛

（桂林理工大學外國語學院，廣西 桂林，541004）

CET-6聽力試題結構效度研究
——以2016年6月CET-6聽力理解試題為例

劉莉媛

（桂林理工大學外國語學院，廣西 桂林，541004）

效度是評判一套試題質量的主要標準，結構效度又是其核心。結構效度的高低直接關系試題質量和對考生能力的檢測程度。大學英語六級考試是非英語專業(yè)學生最重要的英語水平測試，而聽力部分又是其重難點?，F(xiàn)選取2016年6月CET-6真題為研究對象，對其聽力理解部分進行結構效度分析，對CET-6聽力試題的結構效度從宏觀與微觀角度進行了深入探索，得出其結構效度較高，對大學英語聽力教學具有正面引導作用的結論。

CET-6；聽力理解；結構效度

一、引言

隨著我國經濟的發(fā)展，國際交流的機會日益增多，以及大數(shù)據時代的急速到來，對當代大學生英語交際能力的要求越來越高。大學英語六級考試是檢驗非英語專業(yè)學生英語能力和水平的重要考試，在當下中國發(fā)展與國際經濟緊密聯(lián)系的大背景下，英語六級的通過情況與大學生就業(yè)能力的強弱直接掛鉤，通過英語六級，表明學生具備一定的外語水平，能夠在人才市場贏得一定優(yōu)勢。如今，英語六級已經成為大學生必不可少的求職砝碼。而相對一紙證書，比過級更重要的是實實在在的英語交際能力。外語聽、說、讀、寫四項基本能力中，聽力能力是英語四項基本能力之首，也是練就其他三項能力的基礎之一。同樣是語言輸入能力，聽比讀的效率更高，單位時間輸入的信息量更大，交際中的互動性更強，因此，在當前大學英語教學改革的大背景下，要高度重視大學英語四、六級考試尤其是聽力測試對大學生英語聽力學習和大學英語聽力教學的正面引導作用。一套優(yōu)質的英語試題，其結構效度是關鍵，只有結構效度高的聽力試題，才能了解學生的聽力能力和水平，并且積極發(fā)揮聽力測試對教與學的正面引導作用。

二、語言測試的結構效度

語言能力本身是無法直接被測量的，語言能力是潛在的，隱藏的，我們通過試題測出的得分不是語言學習者的語言能力，只是語言能力的一種數(shù)字表征[1]。例如在口語能力測試中我們設立如“準確性”、“流利性”、“得體性”等各種評判標準都是一種構想。指出“所謂構想,就是假設的概念”[2]。因此，關于語言能力的各種規(guī)定性要求都是假設和構想，是考察人依據現(xiàn)實生活或具體領域對語言熟練程度的要求對受試者提出的。有一種觀點認為:效度是指所考的是否就是設計人想要考的內容，或者說，在多大程度上考了想要考的。

語言測試的目的就是要通過試題和得分展現(xiàn)語言學習者的語言能力和對語言知識的掌握情況，那么試題的結構效度就是關鍵[3]。結構效度是一份試卷是否考到及在多大程度上考了我們之前構想的語言能力。以考查獲取信息能力的閱讀理解題為例，滿足上述要求的閱讀理解題便是一份結構效度高的測試題，所得分數(shù)可代表受試者的閱讀理解力，反之，一份結構效度低的試題對考生閱讀理解能力的探測和考察性就差，最終所得分數(shù)意義不大。由此可見，結構效度是考生語言能力測出與否的保證和前提，分數(shù)是受試者語言能力的呈現(xiàn)形式，對考生而言，分數(shù)結合結構效度的解釋才是客觀合理的。

三、聽力試題的結構效度

一直以來，對于語言是如何被理解的以及語言理解能力的探索發(fā)現(xiàn)從未停止，且日益深入。語言理解是一個復雜的過程，語言理解能力涉及人腦、思維等多個機制的協(xié)同運轉，人們對此進行了不懈的研究和探索，語言理解能力也是所有語言學習者最為關心和亟待提高的對象[4]。對于聽力理解能力，語言研究者們提出了多個描述模型，其中20世紀90年代Bachman和Palmer提出的聽力理解能力描述框架——聽力能力分為語言能力（language competence）和策略能力（strategic competence）。語言能力是指語法、語篇、語用和社會語言學等四個方面的知識；策略能力是指聽者在聽的過程中如何運用語言知識的能力，這是一種執(zhí)行能力,也是如何利用上述各種聽力策略以達到聽懂目的語的能力。Purpura根據實證研究認為策略能力至少包括認知策略和元認知策略。認知策略是有意識或無意識的理解、儲存和使用語言知識的心智活動過程[5]。元認知策略包括用于監(jiān)察與管理認知活動的自我管理活動。西方測試學界借此模型沿用至今。

聽力測試是語言測試學中考察學生信息獲取能力的C類試題，聽力理解能力測試的目的在于考察學生是否具有當前階段所應具備的語言理解能力，聽力測試是了解學生聽力理解能力和水平的方式，由此，聽力測試的結構效度便意指聽力試題是否以及在多大程度上考察出學生的語言理解能力[6]。

四、CET-6聽力試題的結構效度

聽力試題的結構效度是指試題是否以及在多大程度上考察出學生當前所應具備的語言能力[7]。筆者認為，CET-6聽力試題的結構效度要結合以獲取信息為目的的C類試題和《大學英語六級考試大綱》共同制定，同時也要結合測試學界的學者提出的各種描述模型。語言四項基本能力“聽、說、讀、寫”中的“聽”是語言輸入過程，與輸出相對，是語言輸出能力形成的前提和基礎，輸入即信息獲取，聽力測試就是考察學生是否獲取所需信息。《大學英語六級考試大綱》要求學生能聽懂英語講課，并能聽懂題材熟悉、句子結構比較簡單、基本上沒有生詞、語速為每分鐘130-150詞的簡短會話、談話、報道或講座，掌握其中心大意，抓住要點和有關細節(jié)，領會講話者的觀點和態(tài)度。由此可見，CET-6考試大綱已經將西方語言學家提出的聽力測試結構效度模型——語言知識與策略能力包含在內，也充分體現(xiàn)了C類試題即信息獲取類試題的特征。CET-6測試的結構效度最終落實于題型和題目的設計情況，題型和題目設計水平的高低決定了試題是否能探測和了解學生多層次的語言能力和真實的語言水平，也就決定了試題結構效度的實現(xiàn)情況。CET-6聽力理解部分由聽力對話、短文和講座三部分組成，題型均為多項選擇題，考生只能預覽所提供的選項，所問問題緊隨錄音材料，不在試卷上呈現(xiàn)。聽力題材選用對話、講座、廣播電視節(jié)目等更具真實性的材料[8]。

五、CET-6聽力試題結構效度宏觀分析

CET-6聽力理解試題共分為聽力對話、短文和講座三大部分。結合下表，從橫、縱兩個維度對2016年6月CET-6聽力理解試題結構效度作宏觀分析：

從表1中可以得出：一，聽力試題的考點有兩類：主旨大意和細節(jié)信息獲取，各占比為6:25，以細節(jié)信息獲取為主。二，考點類型中深層理解、歸納、字面理解的比例為6:2:17，以深層和字面理解題為主。三，25道聽力理解選擇題中，與材料核心信息相關程度達中等的題只有一道，其余24題全部為高度相關。四，強干擾項數(shù)為1、2、3的題目總數(shù)之比為5:9:11，有五分之四的題目強干擾項數(shù)達兩項以上。

表1 2016年6月CET-6聽力試題整體分析

說明：1.表中關聯(lián)度指該題與材料核心信息的關聯(lián)程度；2.強干擾項指該題干擾項中似乎可能性高的干擾項數(shù)，“似乎可能性高”的標準為：一，該選項的中心詞在錄音中出現(xiàn)過；二，該選項有道理、講得通，但不是錄音原文中的項，不是正確答案，滿足其中一條即為“似乎可能性高”的強干擾項。

橫向地看，分析可得：一，就考點與考點類型的搭配來看，同一考點與不同的考點類型搭配，沒有固定模式，保證了試題的結構效度。若考點中的細節(jié)信息理解只與字面理解的考點類型搭配，那么難度不夠，所考察的能力有限，試題的結構效度受到影響；如果細節(jié)信息與深層和字面理解的考點類型都有搭配，那么試題難度和所考能力則較為均衡和全面，試題的結構效度得以保證。二、就考點類型與考題難度的聯(lián)系來看，深層理解題整體偏難，字面理解題難度系數(shù)略低，比較容易，深層理解題不能從所聽到的材料錄音中直接得出答案，需要將所聽信息進行加工，而字面理解題可直接得出答案。以上聽力理解題中，二者總體比例適當，保證了試題的結構效度。三、多數(shù)字面理解題難度為“易”，而少數(shù)字面理解題難度為“中”，具有特殊性，說明題目難度不僅與考點類型單項相關，也與強干擾項數(shù)有關，對于考生而言，強干擾項的設計對其在真實考場上應試的影響是直接的，答對此題的難度、語言知識及策略能力隨之增加，考生是否掌握相應的語言理解能力則清晰呈現(xiàn)，試題的結構效度予以實現(xiàn)[9]。

縱向地看，分析可得：一、從考點設計上看，聽力理解題達到了《大學英語六級考試大綱》中把握材料中心大意，抓住細節(jié)和要點的要求。二、從考點類型的編排上看，深層和字面理解為主同時兼顧歸納能力的考察與西方現(xiàn)行的聽力能力描述模型一致，符合主流。三、從與核心信息的關聯(lián)程度總體統(tǒng)計上看，此項指數(shù)相當之高，說明考點與核心信息的關聯(lián)程度很高，對考生是否具有考綱所要求的主題與要點把握能力的考察就越精準、越客觀和越有說明性，對實現(xiàn)聽力理解題結構效度的積極作用就越大。四，從各題高“似乎可能性”的強干擾項數(shù)量總體統(tǒng)計上看，高“似可能性”強干擾項可以幫助聽力試題更好地實現(xiàn)結構效度，本套聽力試題此項指數(shù)也較高，指數(shù)越高，表明該部分試題對學生能力的考察越全面，試題的難度也略微增加，同時也能夠檢驗出學生是否通過運用語言知識和策略能力真正“聽”到了題目所要考的信息，達到了C類信息獲取性試題的檢驗目的，而不是依據卷面所給的四個選項憑借邏輯和常識進行相互比較與排除僥幸得出答案，所以，適當數(shù)量的高似乎可能性強干擾項對實現(xiàn)聽力理解題的結構效度具有重要意義[10]。

至此，從橫縱兩個方面可以得出：2016年6月CET-6聽力理解題的結構效度較高。

六、CET-6聽力試題結構效度微觀分析

從以上橫、縱兩個角度的分析要點中選取兩個影響結構效度的突出方面，結合實例對CET-6聽力試題的結構效度作微觀分析，進一步探討CET-6聽力試題的結構效度。

（一）考點與考點類型的搭配對結構效度的影響分析

考點與考點類型的搭配對結構效度的影響較大，直接關系到考察的能力層次高低，最終影響試題的結構效度。下面以16年6月CET-6聽力試題第3題為例分析二者的搭配對結構效度的影響。一般而言，細節(jié)信息考點一般與字面理解的考點類型搭配，且在本套聽力理解試題中，此種配型占主要，但本套試題的第3題的考點雖為細節(jié)信息理解與把握，但是出題人設計的考點類型卻是比字面理解難度稍高的深層理解類型。題目設問為“那個男人認為在商業(yè)競爭中他應該做到什么”，材料原文所給的細節(jié)信息是“The company culture must switch from these point-in-time innovations to a continuous pipeline of innovations from everywhere and everyone”，正確選項C為Innovate constantly，對比本套其它細節(jié)信息理解題的答案，C選項不是錄音材料的原文表述，其中“Innovate”不是原文中的“innovations”，是它的動詞原形，需要考生在聽后做簡單的轉換，本題對考生深層理解能力的考察著重體現(xiàn)在理解原文“continuous pipeline”，正確選項中的“constantly”與原文的“continuous”意義相近，與“point-in-time”意義相對，且屬于關鍵或要點信息，對于實戰(zhàn)中的考生而言，同樣是細節(jié)信息理解題，不能像做簡單的字面理解題一樣，將備選項與原文信息一一比對，找出備選項與材料原文的單詞完全相同的一項，而要將原文的“point-in-time”與“continuous pipeline”真正理解后才能選出正確答案。類似的利用搭配考點與考點類型提升難度的題還有第2和第22題。由此可見，考點與考點類型的搭配直接影響了16年6月CET-6聽力理解題考察的能力層次高低，最終影響了本套試題的結構效度。

（二）強干擾項設計對結構效度的影響分析

似乎可能性高的強干擾項對聽力試題的結構效度影響較大，直接關系到考題難度和能力考察面的寬窄，最終影響試題的結構效度[11]。以16年6月CET-6聽力理解試題第20題為例分析：該題的錄音材料主題為環(huán)境科學，考點是細節(jié)信息，考點類型是字面理解，雖是字面理解題，但難度為“中”，原因在于選擇項中除正確選項D以外的其他三項的似乎可能性都很高，均為強干擾項。題目設問為“關于北冰洋地區(qū)該報告談到了什么”，A選項“Eighty percent of the ice disappears in summer time（80%的冰在夏季消失）”內容上與材料中的重要信息“北冰洋冰川融化加速”高度相關，但不符合事實，因為錄音前段提到，覆蓋在北冰洋的冰在10年后大約會減少80%，而不是A項所說“80%的冰在夏季消失”。B選項“Most of the ice was accumulated over the past centuries（大部分的冰是在過去的幾百年累積成的）”和C選項“The ice ensures the survival of many endangered species（冰確保了許多瀕危物種的存活）”與材料主題緊密相關，也符合邏輯，但在錄音中并未提及，屬于主觀臆造信息，不能被選。由此可見，此題借助強干擾項的設計，不僅考察學生是否具備大綱要求的掌握中心大意，抓住要點和有關細節(jié)的能力，還考察了學生的聽力策略能力，即能否運用認知策略對所聽信息進行理解與儲存，面對高似乎可能性的強干擾項能夠敏感、快速地提取和使用之前存儲的信息予以辨別（B、C選項）、對比（A選項）和排除。類似的利用設計強干擾項覆蓋多項能力的題還有第4，7、9、13題。由此可見，16年6月CET-6聽力理解題強干擾項的設計直接對接多項語言能力的考察，決定了本套試題的結構效度[12]。

七、結語

綜上可得：2016年6月CET-6聽力試題的結構效度較高，符合C類信息獲取性試題、《大學英語六級考試大綱（聽力部分）》的能力要求，以及當前主流的聽力能力描述模型。聽力測試的最終目的是要提升學生的聽力水平，全面提高學生的英語交際能力，發(fā)揮語言測試的意義性原則，必然會對大學英語聽力教學產生正面的引導作用。

[1]Bachman，L.F.Fundamental Consideration in Language Testing [M].Oxford:Oxford University Press，1990.

[2]Bachman，L.F.&A.S.Palmer..Language Testing in Practice[M]. Oxford:Oxford University Press，1996.

[3]Buck，G.Assess Listening[M].Cambridge:Cambridge University Press，2001.

[4]Canale，M.On Some dimensions of language proficiency[A]，InJ. W.Oller（ed.）Issues in Language Testing Research[C].Row-ley，MA:Newbury House，1983.

[5]Crocker，L.&J.Algina.Introduction to Classical and Modern Test Theory[M].New York:CBS College Publishing，1986.

[6]陳宏.在語言能力測驗中如何建立結構效度[J].語言教學與研究，1997（2）.

[7]高蘭生，陳輝岳.英語測試論[M].南寧:廣西教育出版社，1996.

[8]李筱菊.語言測試科學與藝術[M].長沙:湖南教育出版社，1997.

[9]劉潤清.語言測試和它的方法[M].北京:外語教學與研究出版社，1991.

[10]劉潤清，韓寶成.語言測試和它的方法[M].北京:外語教學與研究出版社，2000.

[11]張凱.關于結構效度[J].語言教學與研究，1998（4）.

[12]李筱菊.語言測試科學與藝術[M].長沙:湖南教育出版社，1997.

On the Construct Validity of CET-6 Listening Subtest

LIU li-yuan
(Guilin University of Technology,College of Foreign studies,Guilin 541004,Guangxi)

Validity is a major criterion of evaluating a test and construct validity is the core of it.The level of construct validity has a close relationship with the quality of a test and how much subjects have achieved in it.CET-6 is the most important test for non-English majors,and listening subtest is a key and difficulty part.CET-6 in the June of 2016 is selected as the case of study,and its construct validity is analyzed.The construct validity of CET-6 is probed in this paper,aiming to improve its construct validity and perfect its designed quality.

CET-6;listening subtest;construct validity

H31;G424.79

A

1671-5004（2017）02-0090-04

2017-2-21

廣西研究生教育創(chuàng)新計劃項目“大數(shù)據時代背景下廣西理工類大學大學生外語素質培養(yǎng)創(chuàng)新模式研究”階段性研究成果。

劉莉媛（1991-），女，湖北枝江人，桂林理工大學外國語學院在讀研究生，研究方向：英語教學。