李海宏

（浙江傳媒學院 播音與主持藝術學院，浙江 杭州 310018）

影響普通話水平測試信度與效度的實證研究①

李海宏

（浙江傳媒學院 播音與主持藝術學院，浙江 杭州 310018）

普通話水平測試的信度與效度是影響普通話水平測試規(guī)范性和科學性的重要問題。試卷的設計、普測員的水平、被試的心理素質等都是影響普通話水平測試信度與效度不容忽視的因素，將這些影響降到最低能夠提高測試的信度與效度。

普通話水平測試；信度；效度；影響因素

推廣普通話是國家的一項重要的語言文字政策，越來越多的職業(yè)崗位已經實行普通話持證上崗制度，普通話等級證書已經成為影響某些人員職業(yè)發(fā)展的重要砝碼，普通話水平測試（以下簡稱PSC）的重要性不言而喻，如何保證PSC的規(guī)范性和科學性就成為我們必須考慮的問題。鑒于此，筆者以浙江省普通話培訓測試中心2006～2009年期間送審國家語委普通話培訓測試中心的8個批次206名一級甲等被測者的測試結果為例，分析影響現(xiàn)行PSC信度與效度的相關因素。

一、PSC的相關概念

《普通話水平測試大綱》（以下簡稱《大綱》）中明確規(guī)定，PSC是“為進一步提高推廣普通話工作的制度化、規(guī)范化、科學化水平，完善普通話水平測試系統(tǒng)”而制定的，它“不是普通話系統(tǒng)知識的考試，不是文化水平的考核，也不是口才的評估，是應試人運用普通話所達到的標準程度的檢測和評定?！薄洞缶V》中規(guī)定了測試的方式及內容，浙江省PSC中心免測“選擇判斷”項；大綱中明確規(guī)定了各項的評分標準，并根據最終得分將PSC分為三級六等，最高級別為一級甲等（97分及其以上），最低為三級乙等（60分及其以上但不足70分）。所有的測試結果最終體現(xiàn)為一定的分數(shù)及等級，因此成績評定直接反映并影響著PSC的信度和效度，體現(xiàn)著測試的科學性和規(guī)范性。

二、語言測試的信度與效度

信度（Reliability）是反映測驗結果受到隨機誤差影響程度的指標，是評價測驗質量的最基本的指標，高信度是高效度的前提，沒有信度，效度也談不上［1］（P143）。PSC屬于主觀評分，根據目前的經典測試信度理論，我們可以將主觀評分的信度理解為評分員的一致性，據此筆者認為如果幾個測試員給出被測者的成績和等級是一致的，尤其是等級是一致的，就可以說該測試具備高信度，反之，則不具備高信度。美國心理學學會認為效度是“對測驗分數(shù)所作的特定推論在恰當、有意義以及實際使用價值幾個方面的程度?！保?］（P203），正如張凱在《語言測試理論及漢語測試研究》中指出的，“信度和效度是測驗的兩大質量標準，是測驗研究最為重要的問題，而效度更是重中之重，已被公認為語言測驗的核心問題?！保?］（P168）按照Deterich和Freeman的觀點，如果脫離了效度問題，包括信度在內的一切有關標準或質量的討論都會顯得毫無意義。語言測試中效度的重要性由此可見一斑。同時，效度的定義中已經明確表示出，目的性是效度的基本特征，即考查某個測驗有效的程度一定要針對其測驗目的而言，否則討論效度也是無意義的，因此在考查PSC的效度問題時必須緊緊圍繞PSC的目的——“PSC不是普通話系統(tǒng)知識的考試，不是文化水平的考核，也不是口才的評估，是應試人運用普通話所達到的標準程度的檢測和評定”。

三、影響PSC信度與效度的相關因素

通過對本次課題研究中所涉及的206份試卷及其考核結果來看，影響PSC信度與效度的主要因素如下。

首先是試卷的設計與測試目標不盡一致。浙江省PSC試卷主要由四部分構成：單音節(jié)字詞朗讀、多音節(jié)字詞朗讀、短文朗讀、命題說話四部分。從試卷構成來看，字詞的朗讀毫無疑問是考查學生語音是否標準的重要內容，但不可否認的是字詞的識記水平會影響到測試成績，而這與測試目標無關；第三題為短文朗讀，從測試的實際情況來看，考生出現(xiàn)“錯讀、漏讀和增讀”的情況往往是對短文不熟悉，而不是語音不標準、語言不規(guī)范。第四題的命題說話評分標準中的“離題”雖然防止了測試者“以不變應萬變”的錯誤應試行為，但客觀來說是否離題也與普通話測試的目標無關。

試卷難易程度的差異也導致測試與目標相違背。試卷的難易程度很大程度上影響了考試成績。如在考項“讀單音節(jié)字詞”中，有的試卷生僻字比較多，而有的就相對少些，如13號試卷中就出現(xiàn)了8個比較生僻的字詞（“幀、娑、幔、菖、溯、巋、疵、眩），學生在這8個字詞中得分率僅為42.9%，而52號試卷則只出現(xiàn)了3個相對比較生僻的字詞（“嫌、刪、庚”），兩者相比就是0.5分，而這個分數(shù)對于想考取一級甲等的學生而言是至關重要的，而且學生反映生僻字多了對考生的情緒影響很大，后續(xù)的考試內容也受到了影響。考項“讀多音節(jié)詞語”中試題的難易程度也不一致，如20號試卷中幾乎沒有生僻詞語（只有“隧道”相對生僻些），而9號卷中則出現(xiàn)了7個較生僻的詞語（“拙劣、果脯、贅述、寒磣、攫取、渣滓、蔑視），后者的得分率僅為57.74%，也嚴重影響了考生的成績，并因此影響了PSC的效度和信度。第三題朗讀短文中，40篇文章形形色色，有的較口語化，如《二十美金的價值》《陶行知的“四塊糖果”》等，有的則書面色彩濃厚，如《站在歷史的枝頭微笑》《海洋與生命》等，由于語體色彩的不同導致學生在停連、朗讀熟練程度等方面扣分差別較大；有的同學兒化韻讀得不太標準，但作品4號《第一場雪》中有8個兒化韻，而更多的作品中根本沒有兒化韻，這也嚴重影響了測試的信度與效度?？柬棥懊}說話”的難易程度也相差較大，如有21個題目側重敘述（如“我的朋友”“我尊敬的人”等），9個題目側重議論（如“談談服飾”“學習普通話的體會”等），相對而言敘述要比議論容易得多，雖然抽簽時是兩個題目選擇一個，但有的學生恰恰選到了相對較難的兩個，在調查中我們就發(fā)現(xiàn)有4個同學選擇了議論性的題目，由于流暢程度各扣1分，與一級甲等失之交臂，的確可惜。上述由于試卷難易程度不一導致的扣分與《大綱》的測試目標——“是應試人運用普通話所達到的標準程度的檢測和評定?！笔秋L馬牛不相及的，這影響了測試的信度和效度，也影響了考試的公正性。

其次是測試員的水平參差不齊。雖然在本次課題調查中涉及到的測試員都是國家級普測員，但是其中表現(xiàn)出的水平差異依然是不容忽視的。在調查中我們發(fā)現(xiàn)普測員受自身語言條件的限制影響了評分的客觀性。有62人次的考生由于前后鼻韻發(fā)音不到位導致沒有通過一甲，而測試這62人次考生的普測員中有24人次是浙江籍（前后鼻韻發(fā)音不準確是浙江方言的典型特點之一），占到所涉及測試員比例的67%，顯然測試員受本身方言的影響導致了誤判；還有方言詞匯和語調的問題，在調查中我們發(fā)現(xiàn)有5人次比較明顯的方言詞匯和語調問題沒有扣分，涉及到的9人次測試員全是跟考生方言區(qū)一致，由此可見由于測試員本身語言條件限制導致評分有失公正的現(xiàn)象是必須要重視的。

最后是應試者的心理素質。作為參加PSC的主體，應試者的心理素質至關重要，通過問卷和調查統(tǒng)計我們發(fā)現(xiàn)，由于應試者心理素質原因導致的扣分是比較多的。通過聽評錄音我們發(fā)現(xiàn)，不少考生將平時認識的字詞讀錯，如把“典雅”讀成“雅典”，把“飯盒兒”讀成“盒飯兒”，甚至有的考生將短文《胡適的白話電報》中的“干不了”兩次錯讀成“不干了”，有的考生在考試中緊張得透不過氣來，錄音里長吁短嘆的聲音不時出現(xiàn)，有的考生說話題時聲音直發(fā)顫，流暢度受影響，這些都影響了學生的成績。

四、提高PSC信度與效度的措施

在語言測試中我們要堅持定量與定性相結合的原則，定量是定性的基礎，而定性是定量的概括和總結，同時還要注意以下幾點。

第一，編制試卷時要經過充分的信度、區(qū)別度、難度分析，以保證PSC的信度與效度。PSC作為國家性的水平考試，試卷的題目類型、評分標準等必須經過充分論證，以保證標準的信度與效度，如果標準有誤，后續(xù)的操作都是無稽之談；每一份試卷的信度、區(qū)別度、難度必須經過充分分析，以保證試卷的平衡性和公平性。

第二，盡可能地避免與測試目標無關的考查內容。PSC“是應試人運用普通話所達到的標準程度的檢測和評定?！蹦敲锤四繕藷o關的一些內容要減少到最低限度。如測試想通過單雙音節(jié)字詞朗讀考查考生語音標準水平，就要將字詞識記水平對被試的影響控制到最小程度，盡量少用生僻字等?，F(xiàn)在的考項“命題說話”是單向說話，考生可以經過精心準備將錯誤減少到最低限度，如盡量避免個人的語音弱點等，如果可能的話，采用真實的雙向對話更能考查出考生的真實水平。

第三，將客觀影響因素控制到最少。如普測員的水平可以通過經常性的培訓不斷增強其聽辨能力；普測員由于勞動強度太大造成的失誤可以通過適當減少工作量避免；考生由于心理緊張造成的失誤可以通過考前培訓、模擬等減少，這些措施都可以提高PSC的信度與效度。

PSC是國家推廣普通話的重要舉措之一，測試的最終目的是提高國民的普通話水平，通過不斷的改進和完善提高PSC的信度與效度始終是保證測試公平、公正的前提。

［1］張凱.語言測試理論及漢語測試研究［M］.北京：商務印書館，2006.

H102

A

1673－1395（2011）12－0077－03

2011 10 29

李海宏（1976—），女，山東濰坊人，講師，碩士，主要從事播音主持專業(yè)教育研究。

① 本文屬浙江傳媒學院科研項目（KYKT0704423）產出論文。

責任編輯 胡號寰 E－mail：huhaohuan2＠126.com