王岱君,劉清華,王 箐,李 林,田 華
(濰坊醫(yī)學(xué)院基礎(chǔ)醫(yī)學(xué)院,山東 濰坊 261053)
考試是教育教學(xué)過(guò)程中的一個(gè)重要環(huán)節(jié)??茖W(xué)的考試分析評(píng)價(jià)、高質(zhì)量的題庫(kù)建設(shè)管理、智能化的抽題組卷考試等每一環(huán)節(jié)對(duì)保證考試質(zhì)量都至關(guān)重要。把考試各環(huán)節(jié)用現(xiàn)代化手段有機(jī)地聯(lián)系在一起,構(gòu)建科學(xué)的“考試分析—題庫(kù)建設(shè)—智能組卷”一體化完整考試體系,無(wú)疑對(duì)新時(shí)代創(chuàng)新人才的培養(yǎng)具有重要意義。目前此方面的工作國(guó)內(nèi)各學(xué)校做得不多,已成為教育教學(xué)中亟待解決的問(wèn)題。鑒于此,我們運(yùn)用現(xiàn)代化技術(shù)手段構(gòu)建“考試分析—題庫(kù)建設(shè)—智能組卷”一體化考試體系,真正實(shí)現(xiàn)教考分離、公平公正考試以及科學(xué)化的考試評(píng)價(jià),對(duì)提高教育教學(xué)水平和人才培養(yǎng)質(zhì)量具有重要的現(xiàn)實(shí)意義。
所謂“考試分析—題庫(kù)建設(shè)—智能組卷”一體化考試體系是指運(yùn)用教育測(cè)量的方法進(jìn)行考試分析評(píng)價(jià),依據(jù)分析評(píng)價(jià)的結(jié)果優(yōu)選試題以建立題庫(kù),然后從題庫(kù)中智能化抽題組卷考試,再度對(duì)考試進(jìn)行分析評(píng)價(jià)、優(yōu)選試題入庫(kù),如此循環(huán),不斷提高,不斷完善,形成一整體化的考試體系。
該體系是以我們自主開(kāi)發(fā)的《試卷分析系統(tǒng)》及《題庫(kù)管理系統(tǒng)》為主要工具進(jìn)行構(gòu)建的。前期,我們開(kāi)發(fā)了《試卷分析系統(tǒng)》及《題庫(kù)管理系統(tǒng)》,并長(zhǎng)期實(shí)踐應(yīng)用,取得了良好的效果,且獲山東省省級(jí)教學(xué)成果三等獎(jiǎng)及校教學(xué)成果一等獎(jiǎng),《試卷分析系統(tǒng)》在學(xué)校已應(yīng)用17年,效果良好,同時(shí)也推廣到全國(guó)10余所學(xué)校應(yīng)用,其開(kāi)發(fā)工具主要為C#、VB、Excel VBA等[1-3]。現(xiàn)在此基礎(chǔ)上,對(duì)上述兩系統(tǒng)進(jìn)行更新升級(jí),使之功能更加強(qiáng)大,以此為主要工具,構(gòu)建集科學(xué)的考試評(píng)價(jià)、優(yōu)質(zhì)的試題庫(kù)建設(shè)與管理、智能化的組卷考試于一體的考試評(píng)價(jià)及考試管理體系。
運(yùn)用《試卷分析系統(tǒng)》對(duì)考試進(jìn)行分析評(píng)價(jià);依據(jù)《試卷分析系統(tǒng)》分析計(jì)算出的每道題的難度和區(qū)分度進(jìn)行試題優(yōu)選,將優(yōu)選出的試題做好各種標(biāo)識(shí)后,建立試題庫(kù);用《題庫(kù)管理系統(tǒng)》對(duì)試題庫(kù)進(jìn)行管理及智能組題,按要求輸出規(guī)范的試卷進(jìn)行考試;再度用《試卷分析系統(tǒng)》對(duì)考試進(jìn)行分析評(píng)價(jià)、進(jìn)一步優(yōu)選試題,如此循環(huán),不斷提高,形成優(yōu)質(zhì)高效的“考試分析—題庫(kù)建設(shè)—智能組卷”一體化考試體系。
“考試分析—題庫(kù)建設(shè)—智能組卷”一體化考試體系構(gòu)建工作主要有如下內(nèi)容:①對(duì)《試卷分析系統(tǒng)》和《題庫(kù)管理系統(tǒng)》更新升級(jí)。②以《試卷分析系統(tǒng)》對(duì)課程考試進(jìn)行分析評(píng)價(jià)。③以《試卷分析系統(tǒng)》計(jì)算分析各試題的難度和區(qū)分度,以遴選優(yōu)質(zhì)試題。④建立試題庫(kù)。⑤試題庫(kù)擴(kuò)展。⑥以《試題庫(kù)管理系統(tǒng)》對(duì)題庫(kù)進(jìn)行管理和智能化組卷考試。⑦試題庫(kù)更新。⑧構(gòu)建完成“考試分析—題庫(kù)建設(shè)—智能組卷”一體化考試體系并持續(xù)提高。
2.3.1 前期準(zhǔn)備
召集課程任教教師、全體參與人員及學(xué)生代表,對(duì)體系構(gòu)建的重要意義統(tǒng)一認(rèn)識(shí),對(duì)所涉及的有關(guān)考試評(píng)價(jià)、試題命題、錄入和生成試卷等各環(huán)節(jié)提出明確要求。
2.3.2 更新升級(jí)《試卷分析系統(tǒng)》和《題庫(kù)管理系統(tǒng)》
進(jìn)一步分析論證,對(duì)系統(tǒng)中各項(xiàng)指標(biāo)及實(shí)現(xiàn)進(jìn)行細(xì)致研究,對(duì)系統(tǒng)進(jìn)一步改進(jìn)完善,使其更適合各學(xué)科應(yīng)用。對(duì)《試卷分析系統(tǒng)》和《題庫(kù)管理系統(tǒng)》的功能作用、操作方法和流程進(jìn)行說(shuō)明和培訓(xùn),使參與的每個(gè)成員能熟練掌握。
2.3.3 以《試卷分析系統(tǒng)》對(duì)課程考試進(jìn)行分析評(píng)價(jià)
以試卷的“四度”(難度、區(qū)分度、信度、效度)[4]、成績(jī)分布及各試題的兩度(難度及區(qū)分度),結(jié)合學(xué)生及教師的情況,評(píng)價(jià)考試的試卷及試題、學(xué)生學(xué)習(xí)及教師的教學(xué)情況。
2.3.4 以《試卷分析系統(tǒng)》確定的各試題的難度和區(qū)分度遴選優(yōu)質(zhì)試題
(1)收集整理資料。收集整理課程考試材料。我們以解剖學(xué)課程為例收集整理2006年以來(lái)的《系統(tǒng)解剖學(xué)》《局部解剖學(xué)》《人體解剖學(xué)》及《口腔解剖學(xué)》等課程已進(jìn)行過(guò)考試的全部資料。之所以選擇2006年至今的資料,是因?yàn)樽?006年以來(lái),我們各課程的考試資料保存完整,皆有考試試題、參考答案、學(xué)生成績(jī)、成績(jī)分析等,且成績(jī)分析資料全部由《試卷分析系統(tǒng)》所做出。
(2)篩選優(yōu)質(zhì)試題。將所有試題的考試成績(jī)用《試卷分析系統(tǒng)》進(jìn)行分析。依據(jù)《試卷分析系統(tǒng)》所分析出的各題的難度、區(qū)分度等進(jìn)行試題篩選。對(duì)難度過(guò)低(P≥0.8)或過(guò)高(P<0.2)、區(qū)分度過(guò)低(D<0.2)的試題剔除,保留難度為0.8>P≥0.2及區(qū)分度D≥0.2的試題待納試題庫(kù)。
2.3.5 試題庫(kù)建設(shè)
(1)分類(lèi)標(biāo)記:①將篩選出的試題依據(jù)難度劃分為三個(gè)層次:難(0.3>P≥0.2)、中(0.5>P≥0.3)、易(0.8>P≥0.5),按照統(tǒng)一的規(guī)定要求,分別編號(hào)標(biāo)記。②對(duì)篩選出的各題分別進(jìn)行題型、章節(jié)等標(biāo)識(shí)。
(2)入庫(kù)。依據(jù)《題庫(kù)管理系統(tǒng)》標(biāo)準(zhǔn)要求,將整理標(biāo)識(shí)好的試題輸入到系統(tǒng)中(或輸入到系統(tǒng)產(chǎn)生的模板中,然后導(dǎo)入系統(tǒng)),進(jìn)行試題庫(kù)的建立。
2.3.6 試題庫(kù)擴(kuò)展
除對(duì)以往試題進(jìn)行遴選入庫(kù)外,課程教師日常教學(xué)中認(rèn)為質(zhì)量較好的題目也加入題庫(kù)中。但因這部分題目還未進(jìn)行過(guò)考試,未用《試卷分析系統(tǒng)》進(jìn)行遴選,因而先對(duì)其做出未考試標(biāo)記,暫納入題庫(kù),經(jīng)考試后進(jìn)行成績(jī)分析,按入選標(biāo)準(zhǔn)再篩選入庫(kù),作為正式題目。
2.3.7 以《試題庫(kù)管理系統(tǒng)》對(duì)題庫(kù)進(jìn)行管理和智能化組卷考試
依照需要,對(duì)試題庫(kù)進(jìn)行各種管理如新建試題庫(kù)、刪除試題庫(kù)、修改試題庫(kù)各種屬性(例如更改試題庫(kù)名稱(chēng),添加、刪除題型等)、題目管理(題干、答案、備注、所屬章節(jié)、所屬試題庫(kù)、各其他屬性等)。
將納入庫(kù)內(nèi)的試題應(yīng)用于考試。按照要求的章節(jié)、難度、各部分題量、題型等全自動(dòng)化完成抽題組卷。組成的試卷還可進(jìn)行手工調(diào)整(如添加、刪除試卷中的題目、修改試題的順序等)。按要求輸出規(guī)范的考試試卷,輸出的試卷為word格式,可直接用于考試。
2.3.8 題庫(kù)更新
考試完成后再利用《試卷分析系統(tǒng)》進(jìn)行考試分析,對(duì)整個(gè)試卷的難度、區(qū)分度、信度、效度、成績(jī)分布等進(jìn)行綜合分析,再依據(jù)各試題的難度和區(qū)分度對(duì)不合格試題再進(jìn)行剔除,使試題庫(kù)不斷更新完善。
試題庫(kù)建設(shè)是一個(gè)長(zhǎng)期的工程,隨著教育教學(xué)改革及人才培養(yǎng)目標(biāo)的不斷完善,先前的試題也隨之不能適應(yīng)教學(xué)考核的要求。因建立的試題庫(kù)是一個(gè)開(kāi)放的系統(tǒng),之后可隨時(shí)加入、剔除、替換更新,以適應(yīng)人才培養(yǎng)的要求??傊?,建立的試題庫(kù)能做到選題科學(xué)化、題庫(kù)規(guī)范化、組卷自動(dòng)化。避免了以往試題庫(kù)建設(shè)中選題主觀、試題不規(guī)范、組卷隨意的弊端,使考試更客觀、更全面、更合理、更公平、更科學(xué)、更有效。
此體系有以下三個(gè)顯著特點(diǎn):(1)集科學(xué)考試分析評(píng)價(jià)、規(guī)范優(yōu)質(zhì)題庫(kù)建設(shè)及智能組卷考試整個(gè)流程于一體;(2)用各學(xué)校各學(xué)科自己經(jīng)過(guò)試卷分析驗(yàn)證優(yōu)選的題目進(jìn)行題庫(kù)建設(shè)而后進(jìn)行智能化組卷考試,非常適合針對(duì)各自的學(xué)生考試,這顯著優(yōu)于商業(yè)化的題庫(kù)或未經(jīng)科學(xué)篩選自行建立的題庫(kù);(3)《試卷分析系統(tǒng)》及《題庫(kù)管理系統(tǒng)》為我們針對(duì)各學(xué)科課程所開(kāi)發(fā),經(jīng)長(zhǎng)期實(shí)踐應(yīng)用效果良好。
《試卷分析系統(tǒng)》能夠高度自動(dòng)化完成考試評(píng)價(jià),評(píng)價(jià)指標(biāo)全面,能夠科學(xué)評(píng)價(jià)試題的質(zhì)量、學(xué)生的學(xué)習(xí)以及教師的教學(xué)。由于該系統(tǒng)對(duì)試卷中每一試題都做了難度和區(qū)分度的計(jì)算分析,因而能夠依據(jù)試題的難度、區(qū)分度等進(jìn)行科學(xué)的遴選試題,在此基礎(chǔ)上建設(shè)高質(zhì)量的試題庫(kù)?!额}庫(kù)管理系統(tǒng)》能夠按考試所要求的試題難度、章節(jié)、題型等自動(dòng)抽題組卷,按要求輸出規(guī)范的word格式試卷。這樣,使考試分析評(píng)價(jià)、優(yōu)質(zhì)題庫(kù)建設(shè)及管理、自動(dòng)化組卷考試有機(jī)結(jié)合,融為一體,完美實(shí)現(xiàn)“考試分析-題庫(kù)建設(shè)-智能組卷”一體化考試體系的構(gòu)建。
試題庫(kù)建設(shè)是課程建設(shè)的一個(gè)重要組成部分,也是創(chuàng)新人才培養(yǎng)所要求的。試題庫(kù)建設(shè)是一項(xiàng)長(zhǎng)期的、復(fù)雜的系統(tǒng)性工程,需要各學(xué)科課程共同努力來(lái)完成。目前,試題庫(kù)建設(shè)中大多沒(méi)有科學(xué)的指標(biāo)作為依據(jù)并進(jìn)行科學(xué)的指標(biāo)檢驗(yàn),多為主觀的判斷,這就存在著諸多的弊端。外購(gòu)的試題庫(kù)經(jīng)實(shí)踐證明并不適合自己的課程考試。因此,自己學(xué)科課程的授課教師依據(jù)科學(xué)的指標(biāo)標(biāo)準(zhǔn)進(jìn)行試題庫(kù)建設(shè)無(wú)疑是最好的、最合適的。
迄今,集考試評(píng)價(jià)、題庫(kù)建設(shè)、智能組卷于一體的考試體系構(gòu)建,在國(guó)內(nèi)開(kāi)展研究的尚少。該體系為一個(gè)循進(jìn)提升、不斷完善的完整的開(kāi)放的體系,可使考試分析、優(yōu)質(zhì)試題庫(kù)建設(shè)及管理、自動(dòng)化組卷考試有機(jī)結(jié)合,融為一體。我們近兩年的初步應(yīng)用收到了良好的效果。該體系的應(yīng)用,能夠真正實(shí)現(xiàn)教考分離、公平考試、科學(xué)評(píng)價(jià)、以考促學(xué),必將為教育教學(xué)改革、持續(xù)提高教育教學(xué)水平和人才培養(yǎng)質(zhì)量起到明顯的推動(dòng)作用。