張林 劉堃 郭蕾蕾 張佩
無(wú)論是傳統(tǒng)的考核還是題庫(kù)抽提考核均采用基于經(jīng)典的測(cè)量理論(classical test theory,CTT)的指標(biāo)評(píng)價(jià),如難度系數(shù)、區(qū)分度、信度、效度等,此類(lèi)評(píng)價(jià)方法難度和區(qū)分度嚴(yán)重受到樣本量變化的影響、給出的線性模型是粗糙等缺點(diǎn),此方法,目前依然大范圍應(yīng)用,而項(xiàng)目反應(yīng)理論(item response theory,IRT)為一種現(xiàn)代測(cè)量理論,解決了經(jīng)典測(cè)量理論未能解決的許多問(wèn)題,如難度和區(qū)分度的估計(jì)值與被試無(wú)關(guān),測(cè)驗(yàn)信息函數(shù)的概念代替了CTT的信度理論等,在心理與教育測(cè)量中得到了廣泛的應(yīng)用[1-2]。本研究運(yùn)用基于項(xiàng)目反應(yīng)理論專(zhuān)門(mén)開(kāi)發(fā)的工具對(duì)外科護(hù)理學(xué)的試卷進(jìn)行評(píng)價(jià),為外科護(hù)理學(xué)試卷質(zhì)量教學(xué)評(píng)價(jià)提供參考。
2017年10—12月整群抽取的錦州醫(yī)科大學(xué)2016—2017學(xué)年第一學(xué)期本科消化系統(tǒng)疾病護(hù)理試卷159份,試題均有標(biāo)準(zhǔn)化題庫(kù)抽取。
成績(jī)采用計(jì)算機(jī)輔助人工閱卷,流水作業(yè),以填空題為例,錄入全部數(shù)據(jù),采用SPSS 18.0與PARSCALE進(jìn)行統(tǒng)計(jì)分析。
填空題共計(jì)5題,分別為T(mén)1、T2、T3、T4、T5,每題得分為2個(gè)知識(shí)點(diǎn),每個(gè)1分,總分10分??偝煽?jī)分布為0~10分,平均(6.23±2.13)分。
試題信度0.623,結(jié)構(gòu)效度0.621;T1、T2、T3、T4、T5難度系數(shù)分別為0.60、0.63、0.69、0.67、0.53,總體難度系數(shù)為0.62;T1、T2、T3、T4、T5區(qū)分度分別為0.74、0.40、0.62、0.15,總體區(qū)分度為0.34。
試卷成績(jī)特征曲線和信息函數(shù)曲線如圖1~7。1、2、3三條特征曲線分別對(duì)應(yīng)的得分為0、1、2,特征曲線拐點(diǎn)處的斜率,即斜率的最大值,表示題目的區(qū)分度,它的值越大說(shuō)明題目對(duì)受測(cè)者的區(qū)分程度越高。特征曲線上最陡的那一點(diǎn)所對(duì)應(yīng)的θ值,表示題目的難度。特征曲線的截距,表示題目的猜測(cè)參數(shù),它的值越大,說(shuō)明不論受測(cè)者能力高低,都容易。
難易度反應(yīng)護(hù)生完成試題難易程度,值越大,難度越小,反之亦然[3-4]。一般在0.5~0.7。本研究試題基本符合要求;區(qū)分度是試題能力差異指標(biāo),值越大,區(qū)分度越好,一般在0.3~0.4,本研究試題基本偏大[5];信度是考試的可靠性,值越大,信度越高,一般大于0.5[6-7],本研究試題基本符合;效度是整套試卷準(zhǔn)確性和有效性,一般在0.3~0.7[8]。本研究試題符合要求。
IRT試卷評(píng)測(cè)指標(biāo)主要用斜率代替了傳統(tǒng)的區(qū)分度,用θ代替了難易度,并進(jìn)一步評(píng)測(cè)研究對(duì)象的能力得分[9-10]。本研究中特征曲線0、1、2分所對(duì)應(yīng)的曲線中,不同能力對(duì)應(yīng)相應(yīng)的得分概率,相應(yīng)試題在-3~3間對(duì)應(yīng)相應(yīng)的試題信息,在總的信息曲線中在-1~1間對(duì)應(yīng)的信息最多,在-1~1能力區(qū)間內(nèi)對(duì)應(yīng)的頻數(shù)最多,被試者測(cè)試能力分布值,能在擬合的區(qū)間上找到相應(yīng)的概率,結(jié)果非常直觀。
圖1 T1 ICC及信息圖
圖2 T2 ICC及信息圖
圖3 T3 ICC及信息圖
圖4 T4 ICC及信息圖
圖5 T4 ICC及信息圖
3.3.1 推進(jìn)教學(xué)改革,提高教學(xué)質(zhì)量 在我院以“以器官系統(tǒng)為中心”護(hù)理課程體系模式改革研究的推動(dòng)下[11-12],消化系統(tǒng)疾病的護(hù)理的教學(xué)方法,有了很大的改進(jìn)。
3.3.2 加強(qiáng)題庫(kù)建設(shè),提高試卷質(zhì)量 消化系統(tǒng)疾病護(hù)理的老師每年通過(guò)試卷分析了解往年題目特點(diǎn),在配合考試中心保密制度的原則下,對(duì)外科護(hù)理學(xué)的題庫(kù)進(jìn)行增補(bǔ)、刪減,形成目前的題庫(kù)。
3.3.3 完善考核方式,嚴(yán)格考評(píng)流程 嚴(yán)格評(píng)分標(biāo)準(zhǔn),評(píng)分標(biāo)準(zhǔn)要統(tǒng)一,評(píng)分人員要培訓(xùn),盡量采用流水作業(yè)式評(píng)卷方法。
圖6 所有題目信息圖
圖7 能力評(píng)估圖
總之,要以提高教學(xué)質(zhì)量為根本,積極探索題庫(kù)考評(píng)方式,加強(qiáng)試題的區(qū)分度,提高此類(lèi)題型的信度,積極推進(jìn)IRT與傳統(tǒng)評(píng)價(jià)相結(jié)合的方式較為全面的評(píng)價(jià)試卷質(zhì)量。
[1]周冰潔. 基于項(xiàng)目反應(yīng)理論的中學(xué)數(shù)學(xué)試卷分析的研究[D]. 武漢:華中師范大學(xué),2014:25-28 .
[2]許志勇,丁樹(shù)良,鐘君. 高考數(shù)學(xué)試卷多維項(xiàng)目反應(yīng)理論的分析及應(yīng)用[J].心理學(xué)探新,2013,33(5):438-443.
[3]石秦東,李昊,張蕾,等. 留學(xué)生急診醫(yī)學(xué)考試試卷分析及評(píng)價(jià)[J]. 衛(wèi)生職業(yè)教育,2016,34(20):109-110.
[4]任子朝,佟威,陳昂. 高考試卷難度與區(qū)分性能分析研究[J]. 數(shù)學(xué)通報(bào),2017,56(1):1-5.
[5]孟蕊. 試卷質(zhì)量評(píng)價(jià)及影響因素分析——以L大學(xué)為例[J]. 統(tǒng)計(jì)與管理,2017(1):34-35.
[6]劉怡君,王峰,申旭波. 醫(yī)學(xué)本科生對(duì)循證醫(yī)學(xué)期末考試試卷評(píng)價(jià)——基于問(wèn)卷調(diào)查分析[J]. 亞太教育,2016(28):287,280.
[7]龐瑞華,彭波,韓艷婷. 遺傳學(xué)期末試卷分析及評(píng)價(jià)[J]. 高教學(xué)刊,2016(7):80-81.
[8]李發(fā)恩,趙洪俠. 五年制護(hù)理大專(zhuān)外科護(hù)理學(xué)期末試卷分析及教學(xué)總結(jié)[J].現(xiàn)代職業(yè)教育,2016(1):176-177.
[9]劉建平,賈致榮. 混合式教學(xué)課程考核方式改革研究[J]. 中國(guó)現(xiàn)代教育裝備,2017(21):42-44.
[10]盧榮偉. 項(xiàng)目反應(yīng)理論在大規(guī)模考試試題分析中的應(yīng)用[J]. 統(tǒng)計(jì)與管理,2017(10):50-52.
[11]宮建美,劉春霞,于洪宇,等. “以器官系統(tǒng)為中心”教學(xué)模式下的護(hù)理教育環(huán)境現(xiàn)狀評(píng)估[J]. 中國(guó)醫(yī)學(xué)教育技術(shù),2017,31(3):265-268.
[12]代春美,任歷,王洪新. 基于“器官系統(tǒng)為中心”的醫(yī)學(xué)機(jī)能學(xué)實(shí)驗(yàn)教學(xué)改革初探[J]. 基礎(chǔ)醫(yī)學(xué)教育,2016,18(5):379-381.
中國(guó)繼續(xù)醫(yī)學(xué)教育2018年18期