王志武

（湖北省教育考試院，武漢 430077）

作為對(duì)社會(huì)考試開(kāi)展評(píng)價(jià)的探索，從2013年至2016年，湖北省教育考試院先后對(duì)湖北考區(qū)的全國(guó)計(jì)算機(jī)等級(jí)考試、全國(guó)大學(xué)英語(yǔ)四六級(jí)考試、中小學(xué)教師資格考試和湖北省英語(yǔ)口語(yǔ)等級(jí)考試開(kāi)展評(píng)價(jià)，取得了良好的效果。

1 開(kāi)展社會(huì)考試評(píng)價(jià)的意義

第一，開(kāi)展社會(huì)考試評(píng)價(jià)是專業(yè)化考試機(jī)構(gòu)建設(shè)的需要。教育考試開(kāi)展專業(yè)化建設(shè)的實(shí)質(zhì)就是要增強(qiáng)辦考能力。教育考試必須立足本職、主動(dòng)服務(wù)考試用戶（包括考生群體和考生個(gè)體、教學(xué)/培訓(xùn)機(jī)構(gòu)、社會(huì)用人部門(mén)或單位），對(duì)考試結(jié)果提供深入的數(shù)據(jù)統(tǒng)計(jì)與分析服務(wù)，滿足他們對(duì)考試數(shù)據(jù)深度挖掘和解讀的需要，充分發(fā)揮考試數(shù)據(jù)在咨詢、參考、借鑒與指導(dǎo)方面的功效。這既是考試機(jī)構(gòu)開(kāi)展專業(yè)化服務(wù)的具體表現(xiàn)，也是考試機(jī)構(gòu)自我轉(zhuǎn)型升級(jí)的現(xiàn)實(shí)需要。

第二，開(kāi)展社會(huì)考試評(píng)價(jià)是深化考試供給側(cè)改革的需要。當(dāng)前，教學(xué)機(jī)構(gòu)、用人單位、考生本人和家長(zhǎng)都希望考試機(jī)構(gòu)在提供考試成績(jī)的同時(shí)，通過(guò)深入開(kāi)展考試評(píng)價(jià)，挖掘考試數(shù)據(jù)所蘊(yùn)涵的深層信息，以達(dá)到改進(jìn)教學(xué)、甄選人才、提高學(xué)習(xí)效益的目的。教育考試機(jī)構(gòu)需要深入推進(jìn)考試服務(wù)的供給側(cè)改革，即根據(jù)社會(huì)對(duì)考試服務(wù)的新需要，不斷豐富考試的服務(wù)產(chǎn)品、服務(wù)內(nèi)容與服務(wù)方式，使教育考試能夠與時(shí)俱進(jìn)，滿足社會(huì)和人民群眾對(duì)考試服務(wù)不斷增長(zhǎng)的需求。

第三，開(kāi)展社會(huì)考試評(píng)價(jià)是不斷提高社會(huì)考試質(zhì)量的需要。當(dāng)前，社會(huì)考試工作不再追求考試規(guī)模的盲目擴(kuò)張，不再追求考試經(jīng)濟(jì)效益的單一增長(zhǎng)，而是以打造社會(huì)考試品牌、打造社會(huì)考試精品為重點(diǎn)，追求社會(huì)考試的社會(huì)效益。伴隨辦考理念的轉(zhuǎn)變，在社會(huì)考試工作中加強(qiáng)對(duì)辦考行為的自我約束、辦考過(guò)程的自我監(jiān)控、辦考風(fēng)險(xiǎn)的自我診斷和辦考效益的自我評(píng)估，使考試評(píng)價(jià)成為社會(huì)考試質(zhì)量監(jiān)控的主要手段。

第四，開(kāi)展社會(huì)考試評(píng)價(jià)是實(shí)現(xiàn)社會(huì)考試可持續(xù)發(fā)展的需要。黨的十八大以來(lái)，政府行政審批事項(xiàng)大幅消減，先后6批次取消職業(yè)資格許可事項(xiàng)達(dá)400多項(xiàng)，對(duì)社會(huì)考試的發(fā)展產(chǎn)生了深遠(yuǎn)影響。新形勢(shì)下，社會(huì)考試要實(shí)現(xiàn)科學(xué)發(fā)展和可持續(xù)發(fā)展，把現(xiàn)有社會(huì)考試項(xiàng)目做大做強(qiáng)，必須主動(dòng)加強(qiáng)與社會(huì)的聯(lián)系，密切關(guān)注社會(huì)對(duì)考試的反應(yīng)，積極回應(yīng)社會(huì)對(duì)考試的關(guān)切，認(rèn)真開(kāi)展社會(huì)考試評(píng)價(jià)，主動(dòng)提供社會(huì)考試的效度、信度、區(qū)分度和難度等方面的信息，增強(qiáng)社會(huì)考試對(duì)社會(huì)人才開(kāi)發(fā)與甄別的可信性、可靠性和有效性。

第五，開(kāi)展社會(huì)考試評(píng)價(jià)是遵循考試自身發(fā)展規(guī)律的需要。社會(huì)考試的主要功能不是淘汰，而是認(rèn)證與認(rèn)定，是對(duì)人才專業(yè)水平與技能的認(rèn)證與鑒別。為了確保社會(huì)考試對(duì)人才認(rèn)證與鑒別的客觀性、準(zhǔn)確性、科學(xué)性和高效性，必須加強(qiáng)對(duì)考試質(zhì)量的掌控、監(jiān)測(cè)與評(píng)估，確保對(duì)人才認(rèn)證與鑒別的信度和效度。

2 湖北省開(kāi)展社會(huì)考試評(píng)價(jià)的實(shí)踐探索

為主動(dòng)適應(yīng)形勢(shì)發(fā)展的需要，回應(yīng)社會(huì)對(duì)社會(huì)考試的關(guān)切，有效推進(jìn)由管理型考試機(jī)構(gòu)轉(zhuǎn)變?yōu)榉?wù)型考試機(jī)構(gòu)，促進(jìn)考試工作與考試服務(wù)專業(yè)化建設(shè)，自2013年起，湖北省教育考試院對(duì)湖北考區(qū)的社會(huì)考試分期分批實(shí)施評(píng)價(jià)試點(diǎn)。社會(huì)考試評(píng)價(jià)涵蓋各社會(huì)考試項(xiàng)目，以命題質(zhì)量、考試流程、管理環(huán)節(jié)、考風(fēng)考紀(jì)、改革措施等為主要維度，輔之以考試政策、執(zhí)行力度、工作績(jī)效等方面的情況信息，對(duì)整個(gè)考試進(jìn)行評(píng)價(jià)。同時(shí)，不同考試項(xiàng)目的評(píng)價(jià)還結(jié)合考試項(xiàng)目的特點(diǎn)、評(píng)價(jià)所要達(dá)到目標(biāo)以及信息資源等情況，在評(píng)價(jià)實(shí)施過(guò)程中各有側(cè)重，具體情況如下：

2013年，為了推進(jìn)湖北的全國(guó)計(jì)算機(jī)等級(jí)考試全面實(shí)行機(jī)考改革，對(duì)湖北考區(qū)2010—2012年6次全國(guó)計(jì)算機(jī)等級(jí)考試進(jìn)行了評(píng)價(jià)。本次評(píng)價(jià)以報(bào)考人數(shù)最多的二級(jí)C語(yǔ)言設(shè)計(jì)和二級(jí)公共基礎(chǔ)知識(shí)為樣本，以兩個(gè)科目的考試大綱為標(biāo)準(zhǔn)，分別組建學(xué)科專家組、評(píng)價(jià)專家組和考試管理工作組三個(gè)團(tuán)隊(duì)共同開(kāi)展考試的數(shù)據(jù)統(tǒng)計(jì)與分析、評(píng)價(jià)與研究，重點(diǎn)對(duì)這兩個(gè)科目的試卷信度、難度、區(qū)分度進(jìn)行了數(shù)據(jù)統(tǒng)計(jì)與實(shí)證分析，并從部屬高校、省屬高校、三本院校和高職高專院校4個(gè)層次中隨機(jī)抽取一所學(xué)校的考生成績(jī)樣本，將他們?cè)谏鲜鰞蓚€(gè)科目考試中呈現(xiàn)出的知識(shí)與能力結(jié)構(gòu)進(jìn)行對(duì)比，制作成雷達(dá)圖，直觀反映出不同高?？忌谌珖?guó)計(jì)算機(jī)等級(jí)考試中所表現(xiàn)出的特點(diǎn)與優(yōu)勢(shì)。評(píng)價(jià)報(bào)告充分肯定全國(guó)計(jì)算機(jī)等級(jí)考試命題質(zhì)量非常穩(wěn)定，同時(shí)建議為考生提供寫(xiě)實(shí)性的考試成績(jī)（而不僅僅是考試合格證），為考生提供考試結(jié)果咨詢和解釋服務(wù)，以利于考生查找自身知識(shí)結(jié)構(gòu)的缺陷與不足，幫助考生實(shí)現(xiàn)學(xué)習(xí)的自我改進(jìn)與提高。

為正面回應(yīng)部分考生對(duì)全國(guó)大學(xué)英語(yǔ)四六級(jí)考試多題多卷改革的疑慮，2014年對(duì)湖北考區(qū)的全國(guó)大學(xué)英語(yǔ)四六級(jí)考試多題多卷改革進(jìn)行評(píng)價(jià)。在缺少考試實(shí)證數(shù)據(jù)的情況下，評(píng)價(jià)組主要是根據(jù)全國(guó)大學(xué)英語(yǔ)四級(jí)和六級(jí)考試大綱，對(duì)試卷從思想性、規(guī)范性、公平性、有效性、等值性和后效性等方面進(jìn)行了統(tǒng)計(jì)與分析，同時(shí)對(duì)四六級(jí)考試成績(jī)按部屬高校、省屬高校、三本院校和高職高專進(jìn)行分類(lèi)對(duì)比，還分別對(duì)聽(tīng)力、客觀題、主觀題三個(gè)部分進(jìn)行了考試成績(jī)專項(xiàng)統(tǒng)計(jì)與分析。同時(shí)，在全省組織近4 000名高校師生參加了網(wǎng)上問(wèn)卷調(diào)查。評(píng)價(jià)報(bào)告充分肯定了全國(guó)大學(xué)英語(yǔ)四六級(jí)考試命題與考試大綱的高度一致性，強(qiáng)調(diào)多題多卷改革既能保持各套試卷的基本等值，又能有效預(yù)防考試舞弊，同時(shí)建議進(jìn)一步改進(jìn)全國(guó)大學(xué)英語(yǔ)四六級(jí)考試的試卷等值工作。

作為全國(guó)中小學(xué)教師資格考試改革的試點(diǎn)省份，2015年對(duì)湖北考區(qū)中小學(xué)教師資格考試進(jìn)行了評(píng)價(jià)。評(píng)價(jià)分為兩大部分：一是筆試，主要是以中、小學(xué)綜合素質(zhì)和教育知識(shí)與能力試卷為樣本，以考試大綱為標(biāo)準(zhǔn)，對(duì)命題質(zhì)量進(jìn)行分析與評(píng)價(jià)。同時(shí)組織開(kāi)展問(wèn)卷調(diào)查，征求考生對(duì)試卷的感受和意見(jiàn)。二是面試，主要是對(duì)從2012年下半年試點(diǎn)開(kāi)始到2014年共6次面試的成績(jī)數(shù)據(jù)進(jìn)行統(tǒng)計(jì)，建構(gòu)因子分析模型，并與面試評(píng)分標(biāo)準(zhǔn)進(jìn)行關(guān)聯(lián)分析，既統(tǒng)計(jì)各考點(diǎn)面試評(píng)分的總體情況，又分析面試考官對(duì)每項(xiàng)評(píng)分標(biāo)準(zhǔn)的把握程度，查找面試工作的薄弱考點(diǎn)和薄弱環(huán)節(jié)，并制定了《湖北省中小學(xué)教師資格面試工作暫行管理規(guī)定》（鄂綜考〔2016〕22號(hào)）。

湖北省英語(yǔ)口語(yǔ)等級(jí)考試是由湖北省自主開(kāi)發(fā)的旨在促進(jìn)基礎(chǔ)英語(yǔ)教學(xué)改革、提高學(xué)生英語(yǔ)口頭交際能力的水平考試，普通高校英語(yǔ)專業(yè)招錄新生時(shí)可作為參考，考生自愿報(bào)名，目前年均報(bào)考規(guī)模有7～8萬(wàn)人。2016年對(duì)該項(xiàng)考試2014年和2015年的情況進(jìn)行評(píng)價(jià)，涵蓋三個(gè)方面內(nèi)容：一是以考試大綱為標(biāo)準(zhǔn)，對(duì)命題質(zhì)量進(jìn)行分析和評(píng)價(jià)；二是以調(diào)查問(wèn)卷的統(tǒng)計(jì)數(shù)據(jù)為基礎(chǔ)，對(duì)考試質(zhì)量進(jìn)行了解和分析；三是通過(guò)座談與問(wèn)卷對(duì)考試改革進(jìn)行調(diào)查并征求意見(jiàn)。評(píng)價(jià)報(bào)告充分肯定湖北省英語(yǔ)口語(yǔ)等級(jí)考試對(duì)促進(jìn)全省基礎(chǔ)英語(yǔ)教學(xué)改革發(fā)揮了重要作用，同時(shí)指出了試題中存在一些脫離考生實(shí)際生活和超過(guò)考試大綱范圍的語(yǔ)料、詞匯、主題和內(nèi)容，容易對(duì)考生造成不公，影響考試質(zhì)量。評(píng)價(jià)報(bào)告建議改進(jìn)英語(yǔ)口語(yǔ)等級(jí)考試評(píng)分標(biāo)準(zhǔn)及評(píng)分權(quán)重分配，積極推進(jìn)英語(yǔ)口語(yǔ)等級(jí)考試開(kāi)展智能評(píng)分。

經(jīng)過(guò)近5年的社會(huì)考試評(píng)價(jià)探索與實(shí)踐，湖北省社會(huì)考試評(píng)價(jià)工作取得了明顯的突破，具體表現(xiàn)有：

第一，評(píng)價(jià)對(duì)象得以拓展。由于考試評(píng)價(jià)實(shí)踐在國(guó)內(nèi)推進(jìn)時(shí)間還不是很久，主要評(píng)價(jià)對(duì)象是教育考試，如高中畢業(yè)會(huì)考、高中學(xué)業(yè)水平考試、普通高考等。開(kāi)展考試評(píng)價(jià)的主要目的是為了搜集考試反饋信息，了解考試實(shí)施情況，幫助師生改善教學(xué)效果，提升考試命題質(zhì)量，以達(dá)到改進(jìn)教育考試自身工作的目的。湖北省開(kāi)展社會(huì)考試評(píng)價(jià)探索與實(shí)踐，對(duì)本考區(qū)全國(guó)計(jì)算機(jī)等級(jí)考試、全國(guó)大學(xué)英語(yǔ)四六級(jí)考試等開(kāi)展評(píng)價(jià)試點(diǎn)，把考試評(píng)價(jià)從教育考試延伸到了社會(huì)考試，拓展了考試評(píng)價(jià)的對(duì)象。

第二，評(píng)價(jià)內(nèi)容得以充實(shí)。在社會(huì)考試評(píng)價(jià)試點(diǎn)工作中，在堅(jiān)持開(kāi)展對(duì)試卷難度、區(qū)分度、信度進(jìn)行統(tǒng)計(jì)分析的同時(shí)，還結(jié)合各個(gè)考試項(xiàng)目的不同特征及具體情況、考試改革發(fā)展的需要等，制定不同的評(píng)價(jià)目標(biāo)、評(píng)價(jià)方案和評(píng)價(jià)辦法，涉及考試目的、考試過(guò)程、考試環(huán)節(jié)、考試數(shù)據(jù)、考試現(xiàn)象、考試制度和考試效果等。如湖北省英語(yǔ)口語(yǔ)等級(jí)考試評(píng)價(jià)過(guò)程中，專門(mén)收集、歸納、整理全省有關(guān)考試機(jī)構(gòu)、考點(diǎn)、中學(xué)英語(yǔ)教師對(duì)英語(yǔ)口語(yǔ)考試改革的意見(jiàn)與建議，對(duì)推進(jìn)全省英語(yǔ)口語(yǔ)等級(jí)考試智能評(píng)分發(fā)揮了重要作用。

第三，評(píng)價(jià)方法靈活多樣。由于各社會(huì)考試項(xiàng)目及其所擁有的資源、條件不同，在開(kāi)展社會(huì)考試評(píng)價(jià)過(guò)程中所使用的評(píng)價(jià)方式方法也因考試項(xiàng)目、評(píng)價(jià)目的的不同而存在差異。對(duì)全國(guó)計(jì)算機(jī)等級(jí)考試評(píng)價(jià)，主要是對(duì)2010—2012年考試結(jié)果的統(tǒng)計(jì)與分析，并努力探索建立一種標(biāo)準(zhǔn)參照性考試的評(píng)價(jià)模式。在中小學(xué)教師資格考試評(píng)價(jià)中，對(duì)命題質(zhì)量與考試大綱要求的吻合度進(jìn)行對(duì)比分析時(shí)，采用了SEC（Surveys of Enacted Curriculum）分析法，以統(tǒng)計(jì)出試卷與大綱的一致性系數(shù)，這種方法對(duì)考試評(píng)價(jià)具有高效性和準(zhǔn)確性。在大學(xué)英語(yǔ)四六級(jí)考試評(píng)價(jià)過(guò)程中，通過(guò)對(duì)試題的各項(xiàng)語(yǔ)言維度進(jìn)行統(tǒng)計(jì)分析，指出全國(guó)大學(xué)英語(yǔ)四六級(jí)考試多題多卷改革在等值方面仍然存在一些值得改進(jìn)的地方。

第四，評(píng)價(jià)理念明顯升華。一是以終身教育理念指導(dǎo)社會(huì)考試評(píng)價(jià)。把開(kāi)展社會(huì)考試、提供社會(huì)考試評(píng)價(jià)服務(wù)作為促進(jìn)我國(guó)終身教育體系建設(shè)的重要內(nèi)容和組成部分，為建設(shè)學(xué)習(xí)型社會(huì)服務(wù)[1]。二是開(kāi)展社會(huì)考試評(píng)價(jià)是教育考試工作的本分和天職。開(kāi)展社會(huì)考試既是對(duì)教育考試機(jī)構(gòu)自身資源與能力的再開(kāi)發(fā)和再利用，也是教育考試機(jī)構(gòu)履行服務(wù)社會(huì)職能、參與社會(huì)經(jīng)濟(jì)建設(shè)的具體體現(xiàn)。三是建立具有社會(huì)考試特色的評(píng)價(jià)體系。社會(huì)考試評(píng)價(jià)既要注重對(duì)命題質(zhì)量的分析，又要注重對(duì)學(xué)生學(xué)習(xí)質(zhì)量與效果的分析，增強(qiáng)考試評(píng)價(jià)的合目的性和合規(guī)律性[2]。社會(huì)考試評(píng)價(jià)既要遵從考試評(píng)價(jià)自身規(guī)律，又要兼顧各行業(yè)部門(mén)對(duì)人才技能與規(guī)格的要求變化，主動(dòng)回應(yīng)社會(huì)對(duì)社會(huì)考試的呼聲和關(guān)切，使社會(huì)考試評(píng)價(jià)形成自身特色和風(fēng)格。社會(huì)考試評(píng)價(jià)不僅應(yīng)包括考試效度、信度、區(qū)分度和難度等內(nèi)容，還需要根據(jù)評(píng)價(jià)目的和要求，拓展評(píng)價(jià)內(nèi)容和范圍，以增強(qiáng)評(píng)價(jià)的針對(duì)性、科學(xué)性和有效性。四是主動(dòng)順應(yīng)時(shí)代發(fā)展潮流，積極推進(jìn)由考試機(jī)構(gòu)向評(píng)價(jià)機(jī)構(gòu)的轉(zhuǎn)變。從單一考試邁向多元評(píng)價(jià)是人類(lèi)的教育觀從選拔和分類(lèi)躍升到促進(jìn)人的全面發(fā)展的必然產(chǎn)物[3]。

3 開(kāi)展社會(huì)考試評(píng)價(jià)的思考

俗話說(shuō)：萬(wàn)物之初，其形必丑。湖北省教育考試院開(kāi)展社會(huì)考試評(píng)價(jià)的實(shí)踐與探索，雖然取得了一些成績(jī)，但也存在一些問(wèn)題與不足：

第一，評(píng)價(jià)觀念有待進(jìn)一步強(qiáng)化。由于考試評(píng)價(jià)還只是處于試點(diǎn)、探索階段，雖然取得了一些成效，但仍存在許多不足，如評(píng)價(jià)理論與技術(shù)、評(píng)價(jià)資源與隊(duì)伍、評(píng)價(jià)過(guò)程與結(jié)論、評(píng)價(jià)方式與方法等方面都還存在一些值得商榷與改進(jìn)的地方，最關(guān)鍵的問(wèn)題是對(duì)考試評(píng)價(jià)的認(rèn)識(shí)還需要進(jìn)一步提高，對(duì)考試評(píng)價(jià)工作需要進(jìn)一步重視，要把考試評(píng)價(jià)納入考試業(yè)務(wù)的整體范疇，統(tǒng)一規(guī)劃、統(tǒng)一布置、統(tǒng)一推進(jìn)，增強(qiáng)考試評(píng)價(jià)工作的目的性、計(jì)劃性、協(xié)調(diào)性和成效性。

第二，考試數(shù)據(jù)有待進(jìn)一步完備。除了全國(guó)計(jì)算機(jī)等級(jí)考試有翔實(shí)的考試數(shù)據(jù)外，全國(guó)大學(xué)英語(yǔ)四六級(jí)考試、中小學(xué)教師資格考試和湖北省英語(yǔ)口語(yǔ)等級(jí)考試等都缺乏考生作答的詳細(xì)數(shù)據(jù)，可能會(huì)影響考試評(píng)價(jià)的全面性、科學(xué)性和客觀性。另外，有的評(píng)價(jià)只是對(duì)一次考試的試卷進(jìn)行統(tǒng)計(jì)與分析，所得出的評(píng)價(jià)結(jié)論缺乏應(yīng)有的公信力和說(shuō)服力。

第三，方式方法有待進(jìn)一步完善。如在對(duì)湖北考區(qū)全國(guó)大學(xué)英語(yǔ)四六級(jí)考試試卷質(zhì)量的網(wǎng)上問(wèn)卷調(diào)查中，有時(shí)學(xué)生和教師對(duì)同一問(wèn)題的回答分歧很大。又如在對(duì)湖北省英語(yǔ)口語(yǔ)等級(jí)考試評(píng)價(jià)時(shí)，由于該項(xiàng)考試目前還是采用人工評(píng)卷，相當(dāng)多的數(shù)據(jù)來(lái)自于調(diào)查問(wèn)卷，數(shù)據(jù)的來(lái)源和類(lèi)型過(guò)于單一。

第四，效用發(fā)揮有待進(jìn)一步加強(qiáng)。雖然考試評(píng)價(jià)結(jié)果在考試管理與考試政策方面得到及時(shí)采納，發(fā)揮了積極效用，但評(píng)價(jià)結(jié)果尚未直接服務(wù)學(xué)校和考生，考試評(píng)價(jià)的結(jié)果沒(méi)能發(fā)揮應(yīng)有的反饋效用。在今后的工作中，要努力提高和拓展社會(huì)考試評(píng)價(jià)的效用。

[1]戴家干.遵循教育規(guī)律,推進(jìn)教育考試評(píng)價(jià)科學(xué)發(fā)展[J].考試研究,2011（1）:28.

[2]張遠(yuǎn)增.考試評(píng)價(jià):考試研究的新領(lǐng)域[J].考試研究,2005（1）:6.

[3]韓寧.從關(guān)于學(xué)習(xí)的評(píng)價(jià)到為了學(xué)習(xí)的評(píng)價(jià)[J].中國(guó)考試,2009（8）:21.