王超

（蕪湖職業(yè)技術(shù)學(xué)院，安徽蕪湖 241002)

考試，作為對(duì)學(xué)生知識(shí)水平進(jìn)行測試的一種重要方式，也是高校教學(xué)實(shí)踐過程當(dāng)中的一個(gè)重要步驟。單一筆試已不能適應(yīng)現(xiàn)代教育對(duì)人才能力全面培養(yǎng)的需要。在信息技術(shù)不斷創(chuàng)新和飛速發(fā)展的時(shí)代背景下，考試的手段也變得越來越多樣，計(jì)算機(jī)輔助考試(CAT)作為近年來興起的一種新型考試制度受到越來越多教育界人士的重視和關(guān)注。它打破了傳統(tǒng)的教學(xué)模式，使教師從繁重而重復(fù)的教學(xué)活動(dòng)中解放出來，提高了教學(xué)質(zhì)量。結(jié)合現(xiàn)有網(wǎng)上測評(píng)系統(tǒng)進(jìn)行開發(fā)和運(yùn)用，為教學(xué)提供靈活方便的考試系統(tǒng)成為必然趨勢。公共英語無紙化考試是利用現(xiàn)代信息技術(shù)在考試方面的創(chuàng)新之舉，摒棄了以往作為測試信息載體的紙張，轉(zhuǎn)而充分利用移動(dòng)電子終端，對(duì)學(xué)生聽說讀寫譯等能力進(jìn)行考核的考試。在無紙化考試中，常用的系統(tǒng)是基于ITIL 技術(shù)構(gòu)建并運(yùn)行的英語在線考試系統(tǒng)（簡稱“iTEST系統(tǒng)”)。該考試系統(tǒng)擺脫了時(shí)間和空間的限制，簡化了考試流程，節(jié)省了大量的人力和資源，尤其適用大范圍統(tǒng)一考試。因此越來越多的高校目前逐步應(yīng)用這一系統(tǒng)。

蕪湖職業(yè)技術(shù)學(xué)院（以下簡稱“學(xué)院”)審時(shí)度勢,引進(jìn)iTEST 無紙化測試系統(tǒng)并初步使用,取得了良好的效果。學(xué)院打破以往傳統(tǒng)思維，在2020年大一新生期末統(tǒng)考中采用了iTEST 移動(dòng)端作為期末考試平臺(tái)，并取得良好的效果。

1 iTEST測試系統(tǒng)的無紙化測試研究過程

iTEST系統(tǒng)由考生管理模塊、題庫管理模塊、考生成績分析模塊、試卷生成模塊組成。采用iTEST 系統(tǒng)進(jìn)行無紙化測評(píng)，測評(píng)流程簡單、靈活、易于掌握，主要可以分為考前、考中、考后三個(gè)環(huán)節(jié)。

考前，管理員（即上級(jí)教務(wù)主管部門）導(dǎo)入統(tǒng)考大一新生班級(jí)姓名和任課教師，教師隨后用工號(hào)登錄注冊(cè)并認(rèn)領(lǐng)自己教學(xué)班級(jí)，再由任課教師組織所在教學(xué)班同學(xué)利用學(xué)號(hào)注冊(cè)歸入各自班級(jí)。

其次，由負(fù)責(zé)教師出題，它是無紙化測試的全部過程中最為重要的步驟。iTEST 系統(tǒng)自帶一般大學(xué)應(yīng)用英語AB 級(jí)對(duì)應(yīng)教程的題庫,但為了適應(yīng)不同專業(yè)不同水平學(xué)生考試的需要，學(xué)院指定了多位專任教師不斷補(bǔ)充、更新題庫,根據(jù)AB 級(jí)考試大綱的要求，錄入難度水平相關(guān)試題,并且按照新AB 級(jí)測試的題型設(shè)計(jì)包含選擇、填空、翻譯、寫作等多元題型，確保全方位考查學(xué)生能力。同時(shí)，在線題庫測試還能夠?qū)W(xué)生英語學(xué)習(xí)有診斷反饋?zhàn)饔茫鰪?qiáng)考試的公平公正性，激發(fā)學(xué)生競爭意識(shí)，也規(guī)避了猜題、押題、漏題等不良風(fēng)氣，對(duì)培養(yǎng)學(xué)生的自主學(xué)習(xí)能力和創(chuàng)新能力有著正面引導(dǎo)性作用。

隨著iTEST 無紙化測試研究的由淺入深，總結(jié)每一次測試得到的反饋，在不斷發(fā)現(xiàn)問題解決問題的過程中，學(xué)院逐漸根據(jù)實(shí)際情況不斷完善題庫，同時(shí)利用教研會(huì)議，定期進(jìn)行交流經(jīng)驗(yàn)和方法，以期為將來題庫建設(shè)提供可供更廣闊的思路。題庫從剛開始只能滿足所有專業(yè)統(tǒng)一時(shí)間測試，到后來可以根據(jù)專業(yè)、入學(xué)分?jǐn)?shù)、教學(xué)層次不同而分別命題,各系部可以根據(jù)自身情況從容安排考試時(shí)間,在不降低試卷信度的情況下，也確保了考試的公平性。

考中，監(jiān)考教師只需按照監(jiān)考表到場維持考場紀(jì)律，清點(diǎn)考試人數(shù)，省去領(lǐng)試卷核對(duì)試卷的煩瑣流程。

在考試結(jié)束后，系統(tǒng)會(huì)自動(dòng)批改并生成該考生的卷面成績。待所有試卷主客觀題評(píng)分結(jié)束后，系統(tǒng)會(huì)將所有試卷歸檔，教師就可以查看所在班成績及各班的試卷分析。

2 iTEST系統(tǒng)的優(yōu)點(diǎn)

學(xué)院自2020年6月份投入使用以來，系統(tǒng)運(yùn)行穩(wěn)定、效果良好、學(xué)生反饋積極，成效顯著、滿意度高。實(shí)踐表明，iTEST 系統(tǒng)在避免學(xué)生作弊、節(jié)約資源、降低成本、降低老師重復(fù)工作量、提高改卷效率和正確率方面優(yōu)勢明顯[1]。

2.1 有效預(yù)防學(xué)生作弊，增強(qiáng)考試嚴(yán)肅性、公平性

針對(duì)機(jī)考作弊問題，iTEST 利用客戶端和試卷的橫向同級(jí)異序來防止作弊。當(dāng)學(xué)生進(jìn)入考試后，系統(tǒng)頁面最大化，除了答題以外，考試無關(guān)的操作將會(huì)被屏蔽掉。例如，打開搜索引擎、查找答案、查詞典等。針對(duì)手機(jī)客戶端替考、切屏的問題，iTEST系統(tǒng)新增了簽署考前承諾書并對(duì)學(xué)生進(jìn)行認(rèn)證，考中對(duì)動(dòng)態(tài)抓拍的考生圖像進(jìn)行對(duì)比，確?？忌矸菀恢滦?。后臺(tái)管理員可以在開始過程中全程監(jiān)控，超過合理切屏次數(shù)，系統(tǒng)會(huì)在考生頁面自動(dòng)提示，當(dāng)達(dá)到一定次數(shù)，自動(dòng)判為作弊。試卷的橫向同級(jí)異序則是通過從多套試卷的同一部分中抽取不同的題目來組合，增加試卷隨機(jī)性，考場前后左右試卷均不相同，從“千人一卷”變成“千人千卷”，從根本上杜絕考試舞弊。

2.2 無紙化機(jī)考既節(jié)約了資源，又降低了成本

在啟用iTEST 系統(tǒng)前，學(xué)院一直采用傳統(tǒng)紙質(zhì)考試。每年面臨著大一新生期末統(tǒng)考的巨大壓力，南北校區(qū)15 個(gè)二級(jí)學(xué)院，6 000 多名考生，將近200 個(gè)考場。出卷、試卷裝訂、試卷發(fā)放、監(jiān)考、閱卷、存檔環(huán)環(huán)相扣，牽一發(fā)而動(dòng)全身。對(duì)考務(wù)人員而言，考試過程中既要防止學(xué)生作弊，又要確?？己竺恳环菰嚲泶痤}卡的回收，一旦出現(xiàn)差錯(cuò)，將會(huì)造成教學(xué)事故，這在無形中增大了任課教師非教學(xué)工作量。iTEST無紙化考試系統(tǒng)的引入，出卷老師只需要錄入題庫，系統(tǒng)自動(dòng)組卷，從而免去了試卷印刷、保存、派送、分發(fā)等各環(huán)節(jié)。同時(shí)也節(jié)約了大量的紙質(zhì)資源?？荚囘^程中學(xué)生無須準(zhǔn)備任何文具，iTEST 系統(tǒng)可以實(shí)現(xiàn)答題數(shù)據(jù)一分鐘保存一次，本地和服務(wù)器雙重存儲(chǔ)，確保數(shù)據(jù)安全不遺失。

2.3 減輕教師工作量，閱卷的速度和準(zhǔn)確度得到提高。

公共英語考題通常由主觀題和客觀題組成。針對(duì)客觀題iTEST系統(tǒng)采用機(jī)器讀入考試數(shù)據(jù)比照題庫事先輸入答案評(píng)分的方式。系統(tǒng)通過網(wǎng)絡(luò)傳輸試題數(shù)據(jù)到后臺(tái)服務(wù)器進(jìn)行處理，然后將處理結(jié)果傳送至客戶端?？陀^題部分對(duì)照輸入的答案自動(dòng)評(píng)分，相較于傳統(tǒng)的答題卡，評(píng)分誤判率大幅度下降的同時(shí)，評(píng)卷速度大幅上升。在翻譯、寫作部分，系統(tǒng)則綜合運(yùn)用了AI 智能預(yù)評(píng)分和人工給分。單一的人工評(píng)分方式不可避免存在較大的主觀性，評(píng)價(jià)學(xué)生英語水平缺乏客觀性，且受主觀因素的制約，易發(fā)生錯(cuò)判或者漏判的情況，對(duì)考生造成很大的困擾。iTEST 可以實(shí)現(xiàn)聽說讀寫譯全題型的智能評(píng)閱，在寫作批改方面，系統(tǒng)會(huì)調(diào)用iwrite 2.0 智能批改引擎提供內(nèi)容、語言、篇章、結(jié)構(gòu)和技術(shù)規(guī)范四個(gè)維度的專業(yè)評(píng)價(jià)，以及基于學(xué)生作文的總體評(píng)價(jià)反饋和智能批改。iwrite2.0首創(chuàng)了基于聯(lián)想詞庫的內(nèi)容評(píng)價(jià)方法，可以實(shí)現(xiàn)對(duì)學(xué)生寫作的切題性和連貫性進(jìn)行評(píng)價(jià)，從而有效識(shí)別跑題和言之無物的作文，在翻譯題方面iTEST 利用內(nèi)置的智能評(píng)估引擎來進(jìn)行評(píng)分，可以實(shí)現(xiàn)從語言質(zhì)量和翻譯質(zhì)量兩方面對(duì)譯文進(jìn)行評(píng)估。從使用的效果來看，受到老師一致好評(píng)，為人工給分提供了準(zhǔn)確的參考依據(jù)。試驗(yàn)前后數(shù)據(jù)表明，從考試結(jié)束到教務(wù)系統(tǒng)登記完全部學(xué)生的分?jǐn)?shù)的時(shí)間，在采用無紙化考試前，平均要2 周，在采用無紙化之后平均僅需7 天。并且錄入教務(wù)系統(tǒng)后，要求修改成績，統(tǒng)計(jì)錯(cuò)誤的情況大大減少[2]。

2.4 評(píng)價(jià)更加科學(xué)，提高了教學(xué)質(zhì)量

在采用iTEST 系統(tǒng)前，英語測試后主要采用形成性評(píng)價(jià)的方法，但由于技術(shù)手段比較落后，需要任課教師對(duì)大量的數(shù)據(jù)進(jìn)行搜集、分析和加工，造成評(píng)價(jià)過程的困難，評(píng)價(jià)結(jié)果的信度和效度不高，因此，許多教師不愿意進(jìn)行形成性評(píng)價(jià)。iTEST 無紙化測試系統(tǒng)具有成績統(tǒng)計(jì)和試卷分析，雙維度、多方位的專業(yè)數(shù)據(jù)統(tǒng)計(jì)分析功能，對(duì)教學(xué)和測評(píng)研究起到輔助作用。在成績統(tǒng)計(jì)方面，系統(tǒng)有基于考試的最高分、最低分、平均分、最高分標(biāo)準(zhǔn)差等多方位的專業(yè)數(shù)據(jù)統(tǒng)計(jì)，同時(shí)提供針對(duì)整體考試學(xué)生的成績分布，餅圖能夠幫助教師方便快捷地把握學(xué)生整體成績的分布情況。

在試卷分析維度，系統(tǒng)提供了基于題目的難易度分析以及基于試卷的難易度分布表，還提供了基于選擇題題型的干擾項(xiàng)分析，這些維度能夠幫助任課教師及時(shí)把握考試難度、試題質(zhì)量，掌握學(xué)生情況，提高了評(píng)價(jià)的效度和信度，從而有針對(duì)性地指導(dǎo)教學(xué)，并可基于數(shù)據(jù)開展測評(píng)研究，為學(xué)院公共英語實(shí)行分層教學(xué)提供有力的數(shù)據(jù)支撐。

無紙化考試的實(shí)施，客觀上倒逼教師掌握更先進(jìn)的教學(xué)手段，當(dāng)意識(shí)到其優(yōu)點(diǎn)后，能更好地利用并提高其教學(xué)質(zhì)量。對(duì)學(xué)生而言，參加無紙化考試，對(duì)其個(gè)人素質(zhì)也是一種提升[3]。

3 iTEST系統(tǒng)在應(yīng)用中遇到的問題及解決方法

首先，數(shù)字題庫的構(gòu)建和維護(hù)。試題庫建設(shè)的質(zhì)量在很大程度上決定了試卷的質(zhì)量，同場考題之間難易度能否相當(dāng)、考題有沒有很好的區(qū)分度、試卷的信度和效度。試題庫應(yīng)具有足夠的試題量和多樣化的特點(diǎn)，包括寫作、聽力、閱讀、翻譯、詞匯結(jié)構(gòu)和口語等不同類型的子題庫，不僅僅是題目的堆積，也包括按考試分類的子題庫，構(gòu)建如AB 級(jí)試題庫和大學(xué)英語四級(jí)試題庫。隨著辦學(xué)方向的調(diào)整，試題庫還應(yīng)與時(shí)俱進(jìn)、不斷調(diào)整，添加新題、刪除過時(shí)題型，既能保證測試質(zhì)量，又可降低人力成本[4]。

其次，英語機(jī)考對(duì)教師和學(xué)生的計(jì)算機(jī)應(yīng)用能力提出了更高要求。從教師主體來看，部分教師的系統(tǒng)操作熟練程度還有待提高，考試前教師需操作一整套系統(tǒng)流程：認(rèn)證后進(jìn)入系統(tǒng)，認(rèn)領(lǐng)班級(jí)、生成班級(jí)碼、學(xué)生輸入班級(jí)碼加入班級(jí)、將班級(jí)與系統(tǒng)進(jìn)行關(guān)聯(lián)、命題組卷、發(fā)布班級(jí)考試、學(xué)生參加考試、結(jié)束考試、開始閱卷、結(jié)束閱卷、開始?xì)w檔等。整套流程比較復(fù)雜、煩瑣，且每一步的選擇、設(shè)定需精準(zhǔn)到位，否則無法進(jìn)入下一環(huán)節(jié)，并且在具體操作過程中極易出錯(cuò)，因此一些教師產(chǎn)生了畏難情緒。對(duì)此，系統(tǒng)提供方多次組織了教師的考前系統(tǒng)使用培訓(xùn)，教授機(jī)考實(shí)施方法，并組織微信群，第一時(shí)間協(xié)助教師解決操作時(shí)遇到的困難，增強(qiáng)教師運(yùn)用機(jī)考系統(tǒng)的能力。此外教務(wù)部門聯(lián)合學(xué)院共同完善了與無紙化考試相關(guān)制度、紀(jì)律、要求，從制度層面上進(jìn)一步保證了考試的順利進(jìn)行。

從學(xué)生主體來看，部分學(xué)生在觀念上仍停留在傳統(tǒng)紙筆考試階段，對(duì)無紙化考試重視不足[5]。如：無故缺席模擬考試、對(duì)考試流程一知半解、不熟悉考試操作界面、不習(xí)慣在屏幕上閱讀、對(duì)電腦屏幕長時(shí)間的視覺疲勞、不熟悉鍵盤輸入作文等，都影響了學(xué)生的考試成績。學(xué)院考前會(huì)安排任課教師統(tǒng)一講授學(xué)生端的操作方法，并利用系統(tǒng)題庫，按照期末考試題型指導(dǎo)學(xué)生，讓學(xué)生適應(yīng)在屏幕前答題，進(jìn)而化解學(xué)生考試時(shí)易產(chǎn)生的緊張、焦躁、憂慮等情緒，讓學(xué)生正確看待無紙化考試的形式與作用。

再次，iTEST 系統(tǒng)主觀題閱卷準(zhǔn)度尚待提升。當(dāng)前iTEST試題庫試題單選，閱讀是一種客觀題型，計(jì)算機(jī)依據(jù)事先給定的答案，可以對(duì)客觀題進(jìn)行準(zhǔn)確無誤的批改。但考試中的寫作與翻譯都是主觀題型，盡管iTEST 系統(tǒng)已運(yùn)用其人工智能軟件自動(dòng)批改主觀題、給出分?jǐn)?shù)，但教師反映實(shí)際考試中翻譯與作文機(jī)器批改后的成績與實(shí)際情況出入較大，最后還要閱卷人手動(dòng)打分，主觀與客觀題加起來，才能得出考生的最終得分。所以，系統(tǒng)提供方也需要對(duì)系統(tǒng)進(jìn)行進(jìn)一步的改進(jìn)以提供信度效度更高、能精確批改英語各類型試題的iTEST系統(tǒng),讓其能更好地服務(wù)于考試。

最后，利用iTEST 系統(tǒng)實(shí)現(xiàn)無紙化機(jī)考硬件需要完善的校園無線網(wǎng)絡(luò)系統(tǒng)，以及系統(tǒng)提供商軟件系統(tǒng)，這些因素具有很大的不可控性，比如在考試中出現(xiàn)、無線網(wǎng)絡(luò)癱瘓、停電、服務(wù)器訪問量過大而癱瘓或軟件系統(tǒng)中毒無法工作等，只能依靠專業(yè)技術(shù)人員來維護(hù)問題，很難在短時(shí)間內(nèi)恢復(fù)正常的考試。一旦在大規(guī)?？荚囍谐霈F(xiàn)上述問題，就會(huì)直接影響整個(gè)考試，甚至全校的考試安排都會(huì)受到影響。這一切相關(guān)軟硬件，前期都需要大量資金投入，后期的維護(hù)也需要資金和人力，這絕不是某一部門一己之力可以完成，需要學(xué)校給予大量支持。對(duì)此學(xué)院聯(lián)系教務(wù)處、信息化建設(shè)與管理處、系統(tǒng)提供方多方聯(lián)動(dòng)，保證設(shè)備的日常維護(hù)，在考前對(duì)參考教師進(jìn)行培訓(xùn)，進(jìn)而輻射到所任課班級(jí)。每一次考試前，都會(huì)對(duì)系統(tǒng)服務(wù)器進(jìn)行模擬壓力測試，從而確保正式考試的萬無一失。

4 結(jié)束語

2020 年6 月，學(xué)院應(yīng)用iTEST 系統(tǒng)經(jīng)受了一次巨大的挑戰(zhàn)，來自全國13個(gè)省、市的6 300名大一學(xué)生在同一時(shí)間，采用難度相當(dāng)?shù)牟煌嚲硗瓿闪斯灿⒄Z課期末考試，第一次向全體教師展現(xiàn)了“互聯(lián)網(wǎng)+”的優(yōu)越性。2022 年初，iTEST 系統(tǒng)在蕪湖職業(yè)技術(shù)學(xué)院的應(yīng)用已經(jīng)趨于成熟，仍然高效、平穩(wěn)地完成了全院的公共英語考試。無紙化測評(píng)受到廣大教師和全校學(xué)生的認(rèn)可和喜愛。通過兩年多來的不斷學(xué)習(xí)和摸索，以iTEST 系統(tǒng)為載體的無紙化測試體系已初步形成，這是蕪湖職業(yè)技術(shù)學(xué)院在公共課程考核方式上既充分結(jié)合了自己的特色，又運(yùn)用現(xiàn)代化手段進(jìn)行了大膽的改革與創(chuàng)新的成果，在iTEST系統(tǒng)日益得到更加廣泛應(yīng)用和功能更加豐富的今天，我們將繼續(xù)完善并創(chuàng)新測試?yán)砟?，?shí)現(xiàn)iTEST 系統(tǒng)在學(xué)校公共英語教學(xué)中的深度整合，充分發(fā)揮該平臺(tái)在促進(jìn)學(xué)生聽力、閱讀和寫作能力提升方面的作用，促進(jìn)大學(xué)英語的改革和發(fā)展。