鄧 姣,楊 柳,楊謙梓,蘇斌虓,董海龍,雷 偉*
(1.空軍軍醫(yī)大學(xué)西京醫(yī)院,陜西 西安 710032;2. 空軍軍醫(yī)大學(xué)基礎(chǔ)醫(yī)學(xué)院,陜西 西安710049)
為分析我校外科學(xué)教學(xué)質(zhì)量,評(píng)估教學(xué)改革的作用以及進(jìn)一步形成便于錄入、便于分析的數(shù)字化調(diào)查方法,篩選分析了2008—2017年外科學(xué)學(xué)員調(diào)查問卷的總結(jié)報(bào)告,將統(tǒng)計(jì)資料詳實(shí)可比的代表年份單獨(dú)列出,分析了不同學(xué)年教學(xué)質(zhì)量的變化趨勢(shì)及原因,對(duì)比了兩種評(píng)分方式的優(yōu)劣并總結(jié)了學(xué)員建議,提出了未來改進(jìn)防線。
1.資料來源。選取第四軍醫(yī)大學(xué)2008—2017級(jí)不同學(xué)年外科學(xué)教研室教學(xué)質(zhì)量調(diào)查表的統(tǒng)計(jì)分析報(bào)告。
2.方法。根據(jù)滿意度問卷對(duì)外科學(xué)整體教學(xué)質(zhì)量的評(píng)估,分析了不同學(xué)年教學(xué)質(zhì)量的波動(dòng)并回顧其波動(dòng)的原因??偨Y(jié)學(xué)員建議,對(duì)教學(xué)方法改進(jìn)提出建議;提出問卷的局限性,并設(shè)計(jì)了新的電子問卷。
3.數(shù)據(jù)處理。將滿意度結(jié)果按照:很滿意=4;滿意=3;一般=2;不滿意=1;很不滿意=0進(jìn)行計(jì)分,并按照單項(xiàng)評(píng)分結(jié)果錄入Prism 6.0,采用Two-way ANOVA進(jìn)行分析。對(duì)比結(jié)果分析兩種評(píng)分方式的差異和優(yōu)缺點(diǎn)。
1.一般情況。每學(xué)年調(diào)查人員數(shù)、調(diào)查問卷數(shù)、教師人數(shù)和調(diào)查表項(xiàng)目數(shù)(見表1)。
表1 2007—2017年外科學(xué)教學(xué)質(zhì)量調(diào)查報(bào)告基本情況
2.調(diào)查問卷的問題歸類和分析。2008—2014年滿意制評(píng)分采用百分制,按教師職稱,對(duì)比歷年教學(xué)質(zhì)量變更(2013年資料缺失);2015—2017年采用抽樣調(diào)查滿意制,評(píng)估整體教學(xué)質(zhì)量,不針對(duì)教師個(gè)人。
3.評(píng)估結(jié)果分析。通過對(duì)2008—2017年歷年教學(xué)質(zhì)量調(diào)查總結(jié)報(bào)告的回顧,發(fā)現(xiàn)百分制全面調(diào)查雖然數(shù)據(jù)量大,但由于打分差距過小(大多數(shù)學(xué)生為教師打分均在95及以上),但同職稱不同年度及同年度不同職稱間評(píng)分均無明顯差異,且對(duì)個(gè)人無提示作用。而滿意制抽樣調(diào)查問卷數(shù)量雖小,但便于反應(yīng)教學(xué)技術(shù)的不同方面的差別,且由于轉(zhuǎn)換后屬于等級(jí)資料,個(gè)體差別較大,可以出現(xiàn)統(tǒng)計(jì)學(xué)差異。在跨年比較及改進(jìn)同類教學(xué)技術(shù)的方面有很大優(yōu)勢(shì);缺點(diǎn)是抽樣調(diào)查無法體現(xiàn)不同課程、不同授課教師之間的差別。而開放“點(diǎn)名”式的問題,可能可以發(fā)現(xiàn)榜樣課程、榜樣教師,但對(duì)于要改進(jìn)的課程和教師無提示作用。同時(shí),該問卷設(shè)計(jì)單一,除教學(xué)技術(shù)外,對(duì)教學(xué)表現(xiàn)、學(xué)習(xí)效果等方面均沒有進(jìn)行評(píng)價(jià),在調(diào)查范圍上有明顯缺陷。而就分析結(jié)果來看,2016年教學(xué)在重點(diǎn)突出方面有明顯下降(3.27±0.09降至2.92±0.13,P<0.05),通過改進(jìn),2017年恢復(fù)正常水平(3.30±0.08),且2017年啟發(fā)式教學(xué)質(zhì)量較2016年顯著上升(2.92±0.13升至3.28±0.07,P<0.05)。相信以滿意制進(jìn)行評(píng)價(jià)和轉(zhuǎn)化,在增加問卷數(shù)量(樣本量)的情況下,可以在統(tǒng)計(jì)學(xué)上表現(xiàn)出更多的差異。
4.新型電子教學(xué)質(zhì)量調(diào)查問卷的設(shè)計(jì)。使用“問卷星”應(yīng)用,在線設(shè)計(jì)調(diào)查問卷,對(duì)以往我校教學(xué)質(zhì)量評(píng)估的調(diào)查問題進(jìn)行歸類和增補(bǔ),分成課程總體滿意度,教學(xué)技術(shù),教學(xué)表現(xiàn)力,學(xué)習(xí)效果和教師特征五個(gè)方面,結(jié)合生動(dòng)、多樣化的形容詞匯,加深學(xué)生理解和接受測(cè)評(píng)時(shí)的耐心。由于每位教師講授一個(gè)或幾個(gè)章節(jié)的內(nèi)容,本著學(xué)生匿名、評(píng)估不針對(duì)個(gè)人的原則,問卷沒有關(guān)于教師姓名、職稱等相關(guān)內(nèi)容的設(shè)計(jì),根據(jù)課程,將一個(gè)完整的教學(xué)內(nèi)容作為一個(gè)模塊,對(duì)不同課堂不同模塊的教學(xué)質(zhì)量進(jìn)行評(píng)估,分析時(shí)可根據(jù)模塊(所在教室和教學(xué)內(nèi)容)追溯教師,可將個(gè)人結(jié)果和整體結(jié)果發(fā)給其個(gè)人,以促進(jìn)其自身成長(zhǎng)。具體問卷內(nèi)容見開放測(cè)試網(wǎng)址:https://www.wjx.cn/jq/21343417.aspx。
滿意制問卷抽查,優(yōu)勢(shì)在于轉(zhuǎn)化為評(píng)分時(shí),等級(jí)資料差別明顯,因此變化易出現(xiàn)統(tǒng)計(jì)學(xué)差異。但缺點(diǎn)在于每學(xué)期僅發(fā)放幾十份,對(duì)課程整體評(píng)估,對(duì)教師教學(xué)質(zhì)量和效果的評(píng)估則屬于開放式,由被抽查到的學(xué)生寫下表現(xiàn)比較突出的教師名字,因此調(diào)查報(bào)告總結(jié)中沒有具有統(tǒng)計(jì)學(xué)意義的信息,或可量化評(píng)估每一位教師的教學(xué)情況。學(xué)生反饋由于抽樣樣本量較少,也存在偏倚。因此調(diào)查問卷改革的主要內(nèi)容應(yīng)在以下幾點(diǎn):(1)以課程模塊為單位;(2)全面評(píng)估教師的教學(xué)內(nèi)容、教學(xué)技術(shù)、課堂表現(xiàn)力和學(xué)生的吸收掌握能力;(3)充分發(fā)揮群眾調(diào)查的優(yōu)勢(shì),吸納學(xué)生建議,采用無記名形式開放學(xué)生對(duì)每一位教師的建議和對(duì)整個(gè)課程設(shè)計(jì)和編排的建議,并反饋給教師和教研室;(4)問卷量大、信息全的同時(shí)便于填寫和統(tǒng)計(jì)、分析。
總結(jié)設(shè)計(jì)新調(diào)查問卷時(shí),應(yīng)從以下幾個(gè)方面入手[1]:(1)調(diào)查問卷整體設(shè)計(jì)目標(biāo):應(yīng)注重應(yīng)答率,從整體到細(xì)節(jié),由淺入深,由客觀到主觀,優(yōu)化填寫感覺,以反映受調(diào)查人真實(shí)的感受,不僅要明確感興趣的問題。(2)影響關(guān)鍵信息評(píng)估結(jié)果的因素問題:還要增補(bǔ)能的內(nèi)容,如學(xué)生自己的學(xué)習(xí)方式,對(duì)該門課程的接受程度,以獲得更加準(zhǔn)確的信息。(3)如何設(shè)計(jì)問題:應(yīng)注重填寫人感受,包括簡(jiǎn)約,避免混淆,提問精確,確保該問題是可以理解并回答的,細(xì)節(jié)程度及敏感問題數(shù)適宜,以盡量使偏倚最小化。(4)應(yīng)答格式:有開放式和封閉式(選擇)兩種,也可以混合,如填寫選擇某項(xiàng)的原因。但在選項(xiàng)的類別設(shè)計(jì)中,實(shí)際上描述性分級(jí)選項(xiàng)是應(yīng)用最少的,因?yàn)橛涗浐头治龆枷鄬?duì)困難。而由于個(gè)人理解和對(duì)課程要求的不同,學(xué)生回答時(shí)的判斷標(biāo)準(zhǔn)可能有差異,導(dǎo)致對(duì)每個(gè)教師、每一節(jié)課的評(píng)價(jià)可能都不一樣。但在電子問卷的設(shè)計(jì)中,將登記資料直接賦予打分性質(zhì),可以直接得出統(tǒng)計(jì)結(jié)果,并且在交叉分析的過程中可以直接篩選一個(gè)自變量和一個(gè)因變量,對(duì)比不同課程內(nèi)容之間、單項(xiàng)評(píng)估內(nèi)容之間的差異,也可以對(duì)整體效果進(jìn)行分析和對(duì)比。(5)問卷長(zhǎng)度可能會(huì)影響應(yīng)答率和應(yīng)答效果:BMJ一項(xiàng)研究顯示較短的問卷(6 vs. 34)可能更容易獲取更多的完整答卷[2]。為提高應(yīng)答率但又能全面評(píng)估課程質(zhì)量,我們最終設(shè)計(jì)了全長(zhǎng)20個(gè)問題。(6)問題的排布:從普遍到特殊,從簡(jiǎn)到難,從實(shí)際到抽象,從封閉式題目開始,優(yōu)先排布和主題關(guān)系最密切的問題及避免從個(gè)人問題開始。因此問卷排布為學(xué)生對(duì)課程總體的感受,到教師教學(xué)技術(shù)、教學(xué)表現(xiàn)力,再到學(xué)生個(gè)人的學(xué)習(xí)效果,最后對(duì)教師的特性(教師個(gè)人特征)進(jìn)行總結(jié)。(7)問卷的發(fā)放方法和時(shí)機(jī)[3]:大學(xué)課堂教學(xué)效果問卷一般采用當(dāng)堂發(fā)放或經(jīng)電郵發(fā)放;發(fā)放頻率可以從每章節(jié)結(jié)束后,定期(如周、月)或該門課程結(jié)束后發(fā)放。更改為電子問卷后,避免了分發(fā)、收集的繁冗工作,將二維碼發(fā)送給各班組長(zhǎng),請(qǐng)其負(fù)責(zé)在每次課內(nèi)容結(jié)束后提醒組員進(jìn)行評(píng)估,以提高應(yīng)答率。
本問卷在實(shí)施過程中可能還會(huì)針對(duì)學(xué)生的反應(yīng)及建議進(jìn)行修訂,以期獲得真實(shí)、可靠且有效的數(shù)據(jù)支持,調(diào)查結(jié)果反饋至全體教師以利今后改進(jìn),鼓勵(lì)教師不斷改進(jìn)教學(xué)方法,使學(xué)生既能將重點(diǎn)內(nèi)容在課堂上消化并記住、增進(jìn)對(duì)臨床病例的理解,又能從疾病角度出發(fā)掌握重點(diǎn)和常見疾病的外科學(xué)診治原則,進(jìn)一步提高我院外科學(xué)教學(xué)質(zhì)量。