外科動物實(shí)驗(yàn)是培養(yǎng)無菌觀念和外科基本操作技能以及培養(yǎng)外科職業(yè)素養(yǎng)的實(shí)驗(yàn)課程,是外科教學(xué)中的一個(gè)重要環(huán)節(jié)[1]。目前,外科動物實(shí)驗(yàn)教學(xué)效果評價(jià)方法單一,缺乏系統(tǒng)有效的評價(jià)體系[2]。操作技能直接觀察法(direct observation of procedural skills,DOPS)是一種形成性評價(jià)方法,它通過評估者就某一項(xiàng)或一類臨床技能或操作對受評者即時(shí)進(jìn)行評估及反饋,是一種兼具教學(xué)和考核功能的臨床技能形成性評價(jià)工具[3]。為了更好的探索外動教學(xué)過程中有效的評價(jià)體系,我們在教學(xué)過程中引入DOPS 評估考核體系,探討其能否作為有效的考核和反饋的評價(jià)方法,提高教學(xué)質(zhì)量。
選擇2018年3—6月在我院見習(xí)的臨床醫(yī)學(xué)專業(yè)的全日制本科生60名為研究對象。隨機(jī)分為對照組和實(shí)驗(yàn)組,每組30名。對照組男性16名,女14名,平均年齡(20.8±2.0)歲。實(shí)驗(yàn)組男性17名,女性13名,平均年齡(20.2±1.4)歲;兩組見習(xí)生的一般資料對比,差異無統(tǒng)計(jì)學(xué)意義(P>0.05),具有可比性。
1.2.1 教學(xué)過程實(shí)施 實(shí)驗(yàn)組和對照組均在本院臨床技能中心外動實(shí)驗(yàn)室上課??己藘?nèi)容包括洗手、消毒鋪巾、穿脫手術(shù)衣及戴手套、切開縫合打結(jié)。每項(xiàng)內(nèi)容均由外科教師組授課。期末考試均采用臨床客觀結(jié)構(gòu)化多站考試模式(objective structured clinical examination,OSCE)考核??荚噧?nèi)容及方法一致,具有較高的真實(shí)性、客觀性。每個(gè)學(xué)生考試總成績是以上4 站考試成績的總和,共100分。
1.2.2 形成性評價(jià)實(shí)施 實(shí)驗(yàn)組在進(jìn)行每項(xiàng)技能教學(xué)中均進(jìn)行一次操作技能直接觀察評估,作為形成性評價(jià)。對照組按照傳統(tǒng)教學(xué)流程組織教學(xué),不進(jìn)行形成性評價(jià)。DOPS 評估表為10 項(xiàng)內(nèi)容:相關(guān)知識掌握及擴(kuò)展、告知簽署同意、操作前的準(zhǔn)備工作充足、技能操作熟練、無菌觀念嚴(yán)格、合理尋求幫助、操作后物品的處理流程、溝通順暢多樣、醫(yī)學(xué)職業(yè)素養(yǎng)、操作整體表現(xiàn)??己私處煾鶕?jù)學(xué)生這10 項(xiàng)內(nèi)容完成的情況進(jìn)行評估,評估結(jié)果分為四個(gè)層次:未執(zhí)行、不符合要求、符合要求、表現(xiàn)優(yōu)異。同時(shí)對學(xué)生技能操作的優(yōu)缺點(diǎn)及需要改進(jìn)的地方進(jìn)行評價(jià)。學(xué)生對教師的教學(xué)效果進(jìn)行評價(jià)。教師與見習(xí)生對此次考核的滿意度互相之間進(jìn)行打分。評分標(biāo)準(zhǔn)分3 個(gè)級別:1、2、3分不滿意;4、5、6分滿意;7、8、9分非常出色[4]。
數(shù)據(jù)采用SPSS 22.0 統(tǒng)計(jì)軟件進(jìn)行分析,實(shí)驗(yàn)組和對照組OSCE 考試總成績及滿意度均以(±s)表示,采用獨(dú)立樣本t檢驗(yàn),以P<0.05 為差異有統(tǒng)計(jì)學(xué)意義。
結(jié)果顯示實(shí)驗(yàn)組和對照組OSCE 考試總成績服從正態(tài)分布且方差齊性。實(shí)驗(yàn)組的期末考試OSCE 總成績?yōu)椋?0.23±7.26)分,高于對照組(84.77±9.54)分,差異具有統(tǒng)計(jì)學(xué)意義(P<0.05)。如表1 所示。
表1 對照組與實(shí)驗(yàn)組期末OSCE 考試總成績比較(±s,分)
表1 對照組與實(shí)驗(yàn)組期末OSCE 考試總成績比較(±s,分)
組別 人數(shù)(n) 考試成績 t 值 P 值實(shí)驗(yàn)組 30 90.23±7.26 2.134 5 <0.05對照組 30 84.77±9.54
教師對實(shí)驗(yàn)組DOPS 考核結(jié)果的滿意度為(8.22±0.75)分,高于對照組的(7.23±0.54)分,差異具有顯著統(tǒng)計(jì)學(xué)意義(P<0.01);實(shí)驗(yàn)組見習(xí)生對DOPS 考核結(jié)果的滿意度為(8.66±0.79)分,高于對照組(7.04±0.53)分,差異具有顯著統(tǒng)計(jì)學(xué)意義(P<0.01),見表2
表2 教師及見習(xí)生對DOPS 考核結(jié)果的滿意度(±s,分)
表2 教師及見習(xí)生對DOPS 考核結(jié)果的滿意度(±s,分)
組別 教師滿意度 學(xué)生滿意度實(shí)驗(yàn)組 8.22±0.75 8.66±0.79對照組 7.23±0.54 7.04±0.53 t 值 5.867 6.432 P 值 <0.01 <0.01
目前,國內(nèi)在對動物實(shí)驗(yàn)課學(xué)生學(xué)習(xí)情況進(jìn)行考核評價(jià)時(shí),多數(shù)采用理論和單純操作,或者客觀結(jié)構(gòu)化考核(OSCE)等終結(jié)性評價(jià)[5]。傳統(tǒng)的終結(jié)性評價(jià)雖然是經(jīng)典的成熟的評價(jià)方法,能夠客觀準(zhǔn)確判斷教育效果;但其評價(jià)時(shí)間滯后,不能動態(tài)了解學(xué)生的學(xué)習(xí)過程[6]。無法使教師及時(shí)改善教學(xué)方法,不能向?qū)W生反饋即時(shí)有效信息,使他們能更主動學(xué)習(xí)或進(jìn)行自我調(diào)整。在傳統(tǒng)的終結(jié)性評價(jià)基礎(chǔ)上應(yīng)用形成性評價(jià)能夠彌補(bǔ)其不足之處。形成性評價(jià)可以通過教師及學(xué)生的反饋,及時(shí)了解教與學(xué)的進(jìn)行狀況,及時(shí)調(diào)整教學(xué)活動,進(jìn)而提高教學(xué)質(zhì)量[7-8]。
DOPS 是一種評估臨床技能的過程性評價(jià)方法,其特點(diǎn)在于能提供有效的反饋,兼顧評價(jià)的結(jié)果與過程,有利于分別提高“教”與“學(xué)”的質(zhì)量[9]。既可以評價(jià)醫(yī)師的臨床技能操作,也可以評估醫(yī)學(xué)生的技能操作水平[10-11]。該項(xiàng)目研究中,我們在實(shí)驗(yàn)組每一項(xiàng)操作內(nèi)容中均進(jìn)行DOPS 評估表評估。操作過程中由指導(dǎo)教師指導(dǎo)學(xué)生操作,評估教師觀察學(xué)生操作并填寫DOPS 評估表,操作結(jié)束后,評估教師對學(xué)生和指導(dǎo)教師現(xiàn)場反饋,同時(shí)學(xué)生在表上寫出對教師的反饋意見并進(jìn)行現(xiàn)場討論,反饋和討論時(shí)間大概5 min。教師組根據(jù)學(xué)生反饋的意見進(jìn)行總結(jié)并及時(shí)調(diào)整教學(xué)方法。期末OSCE 考試總成績表明其無菌觀念、技能水平、與患者的溝通能力以及職業(yè)素養(yǎng)均高于對照組,而且學(xué)生及教師對操作的滿意度也明顯提高。研究結(jié)果證實(shí),DOPS 評估法通過有效的反饋,能夠在實(shí)驗(yàn)操作過程中遇到的問題做出及時(shí)、有效的改進(jìn)和調(diào)整,有利于學(xué)生學(xué)習(xí)態(tài)度、職業(yè)素養(yǎng)及技能操作全面提升。同時(shí)促使教師不斷完善教學(xué)方法及時(shí)調(diào)整教學(xué)計(jì)劃,從而促進(jìn)教學(xué)質(zhì)量的整體提高。
外科動物實(shí)驗(yàn)操作具有現(xiàn)場的實(shí)時(shí)性、真實(shí)性,還具有發(fā)展性的特點(diǎn)[12]。在外動教學(xué)過程中以培訓(xùn)教師作為觀察者,以DOPS為主要的形成性評價(jià)工具,通過老師和學(xué)生雙方的互評和自評,改變以往以終結(jié)性評價(jià)為主的單一的考評形式,重視對操作過程的評價(jià),有效提升動物實(shí)驗(yàn)學(xué)的教學(xué)質(zhì)量;并且在操作過程中對學(xué)生的技能和能力從多角度進(jìn)行現(xiàn)場綜合評價(jià),真正促進(jìn)學(xué)生臨床技能水平的提升,為將來進(jìn)入臨床打下堅(jiān)實(shí)的基礎(chǔ)。