楊喜媚 麥英杰 朱慶棠 王 波
(中山大學(xué)醫(yī)學(xué)院 廣東廣州 510080)
復(fù)習(xí)型PBL是以問題為復(fù)習(xí)切入點,以學(xué)生為教學(xué)中心的教學(xué)模式,在學(xué)生學(xué)習(xí)完相關(guān)的基礎(chǔ)內(nèi)容后進行PBL學(xué)習(xí)。PBL應(yīng)用廣泛,復(fù)習(xí)型PBL的應(yīng)用不及教學(xué)型PBL,教學(xué)效果被證實有效。當(dāng)今,PBL為何有效仍然不知,而且由于PBL是開放性學(xué)習(xí),PBL教學(xué)效果也不能由基于課本知識的閉卷考試來衡量。當(dāng)今國內(nèi)PBL多以學(xué)生自我評價量表作為評價學(xué)生學(xué)習(xí)情況的依據(jù),其中只有少數(shù)通過信效度檢驗。此外,通過信效度檢驗的自評量表忽略了部分影響學(xué)生學(xué)習(xí)效果的因素,也沒有試圖驗證自評量表的得分與PBL學(xué)習(xí)范圍內(nèi)的傳統(tǒng)閉卷考試成績是否有相關(guān)性。因此,本研究旨在編制一個更完善的PBL自評量表,并探索PBL自評量表的得分與PBL學(xué)習(xí)內(nèi)容有關(guān)的傳統(tǒng)閉卷考試的成績的相關(guān)性。
2019年10月,對5個教學(xué)班中自愿拓展細胞生物學(xué)課程外知識的中山大學(xué)中山醫(yī)學(xué)院一年級臨床專業(yè)的165名本科生進行預(yù)實驗并確定暫行版PBL自評量表,2019年11月用同樣方法選取152名中山醫(yī)學(xué)院臨床醫(yī)學(xué)專業(yè)的一年級本科生進行實驗。預(yù)實驗與正式實驗的研究對象入選標(biāo)準(zhǔn)為:了解PBL且知道如何進行PBL學(xué)習(xí),自愿參加本實驗,且正在學(xué)習(xí)細胞生物學(xué)課程的本科生。
1. PBL自評量表的構(gòu)建
PBL自評量表參考量表法評價法的制作,將可能的PBL學(xué)習(xí)過程按時間順序認(rèn)為劃分成7個維度,即早期的知識探索、團隊合作、中期的問題完成度、思維方式、成果展示和后期的學(xué)習(xí)效果和主觀感受。PBL自評量表包括標(biāo)題、學(xué)生基本信息、相關(guān)注意事項說明、指導(dǎo)語、條目、選項和主觀學(xué)習(xí)時長統(tǒng)計,選項使用Likert5級計分法,按問題設(shè)置從完全同意到完全不同意分別計為1-5或5-1。
2.PBL自評量表條目的確定,形成初期版PBL自評量表
按照PBL病例學(xué)習(xí)的全過程時間順序,以及該過程中可能出現(xiàn)的問題,預(yù)設(shè)可能用于量表的條目,并且結(jié)合國內(nèi)外相關(guān)文獻進行參考、收集條目,接著對條目進行整理、分析、篩選,將重復(fù)和意義相同以及對此研究意義不大的條目進行刪減、合并和舍棄。隨后兩位第三方專家審批量表,再對表達有誤或表達不清的地方進行修改,最終形成初期版量表的條目共37條。
3.預(yù)實驗,形成暫定版PBL自評量表
2019年10月,選取中山大學(xué)中山醫(yī)學(xué)院5個教學(xué)班中自愿拓展細胞生物學(xué)課程外知識的一年級臨床專業(yè)的152名本科生進行預(yù)實驗,發(fā)放量表和測試題,共回收152份量表和143份測試題(回收率分別為100%和94.08%)。然后,通過預(yù)實驗收集的數(shù)據(jù)結(jié)果,咨詢統(tǒng)計學(xué)專家,征集專家建議,并對該數(shù)據(jù)進行詳細的統(tǒng)計學(xué)分析,對初期版量表中的部分條目進行修改和篩選,并確定含有35個條目的暫行版PBL自評量表。
4.正式實驗,形成最終版PBL自評量表
2019年11月用相同的方法選取中山大學(xué)中山醫(yī)學(xué)院臨床醫(yī)學(xué)專業(yè)的152名本科一年級本科生進行正式實驗,使用暫行版PBL自評量表。正式實驗共發(fā)放量表152份,回收115份,回收率為75.66%。
表1 高分組和低分組區(qū)分度檢驗
題號 t P 15 -4.977 <0.001 16 -6.360 <0.001 17 -2.924 0.005 18 -4.140 <0.001 19 -5.777 <0.001 20 -4.219 <0.001 21 -5.412 <0.001 22 -5.490 <0.001 23 -7.675 <0.001 24 -8.114 <0.001 25 -8.788 <0.001 26 -10.337 <0.001 27 -6.291 <0.001 28 -8.925 <0.001 29 -6.085 <0.001 30 -8.402 <0.001 31 2.232 0.030 32 -6.566 <0.001 33 -2.952 0.004 34 -.459 <0.001 35 -2.230 0.030
5.統(tǒng)計學(xué)方法
使用SPSS 25.0軟件進行統(tǒng)計分析,首先對量表進行計量心理學(xué)考核,包括計算克拉巴哈系數(shù)檢驗內(nèi)部一致性,分別計算折半信度、重測信度和肯德爾W系數(shù)進行信度檢驗,以及使用因子分析和區(qū)分度檢驗進行效度考核。其次是使用Mann-Whitney U檢驗對成績進行分析。
先通過計算量表結(jié)果和重測量表結(jié)果的正態(tài)性驗證兩次量表結(jié)果是否一致。
對試驗結(jié)果計算克朗巴哈系數(shù)后,將評價量表按照題目的奇偶分為二份,分別計算兩部分的克朗巴哈系數(shù),進而得出該量表的折半信度等長spearman-Brown系數(shù)以驗證其信度。
計算KMO系數(shù)和Bartlett’s Test和因子分析和區(qū)分度檢驗來驗證其效度。
將PBL自評量表得分取前27%和后27%的臨界點上的得分作為高低分組的臨界點,將每題前27%和后27%的數(shù)據(jù)分成高分組和低分組,對高分組和低分組進行區(qū)分度檢驗。
計算PBL量表與測試成績的相關(guān)性。
預(yù)測試問卷的克朗巴哈系數(shù)為0.746,分半信度測試測得Spearman-Brown系數(shù)為0.683,旋轉(zhuǎn)成分矩陣各成分得分在0.554~0.800之間。
由于得分為連續(xù)型變量,對兩次量表得分進行正態(tài)性檢驗。
第一次量表得分的正態(tài)性檢驗p=0.853(>0.05),第二次量表得分的正態(tài)性檢驗p=0.288(>0.05)。
Pearson相關(guān)系數(shù)為0.879,大于0.7(p<0.001)。
肯德爾協(xié)同系數(shù)為0.276(p<0.05)。
計算各題項之和的均值,方差,項間協(xié)方差和項間相關(guān)性的均值,極值,極差和方差,沒有發(fā)現(xiàn)比較極端的項目
對第一次得分進行效度檢驗,計算第一次得分的克朗巴哈系數(shù)為0.871(p>0.8)。然后計算折半信度,得等長spearman-Brown系數(shù)為0.834。
計 算KMO系 數(shù) 得,KMO系 數(shù) 為0.783>0.7,且Bartlett’s Test結(jié)果p<0.01。進行效度檢驗,見圖1。
圖1 總方差的解釋
圖1中,基于特征值大于1時累計百分比為64.703%>60%。
從旋轉(zhuǎn)后的成分矩陣表可得,第14題、第31題、第19題和第6題沒有分值。
見表1,區(qū)分度檢驗中,除了第四題,所有題目的高分組和低分組差異p值都小于0.05。
由于有9位同學(xué)沒有考試成績,故用考試成績均值50.54分進行填補。
對問卷總得分按均值劃分為平均分74分為界限的兩組,見表2。
表2 SSPBL得分劃分組的成績(分)
由于成績是離散分布,不屬于正態(tài)分布,采用非參數(shù)檢驗對比兩組數(shù)據(jù),發(fā)現(xiàn)Mann-Whitney U統(tǒng)計量為1 351,P為0.451,大于0.05。
計算重測信度得:Pearson相關(guān)系數(shù)小于0.001,肯德爾協(xié)同系數(shù)小于0.05,認(rèn)為重測信度良好,表明測試分?jǐn)?shù)的穩(wěn)定性較好,各評分者的一致性較高,說明量表結(jié)果的穩(wěn)定程度高,量表測出的結(jié)果是不會隨時間而改變的,誤差變異小。
由于重測信度良好,故只對第一次量表的得分進行信效度檢驗。
克朗巴哈系數(shù)為0.871(0.8~0.9),說明量表信度非常好,內(nèi)部一致性較高,則可計算其折半信度。
計算各題項和的統(tǒng)計量,沒有發(fā)現(xiàn)比較極端的項目,說明數(shù)據(jù)沒有極端值或者異常值,比如說有人是不認(rèn)真甚至惡意填寫這個量表的,就容易出現(xiàn)極端值,需要進行數(shù)據(jù)處理后再次進行分析,剔除這個影響。
計算折半信度得,等長spearman-Brown系數(shù)為0.834,說明量表內(nèi)部具有一致性。
見圖1,基于特征值大于1的時候累計百分比為64.703%,大于60%,說明現(xiàn)在探索出來的8個維度能較好地代表整個數(shù)據(jù),能準(zhǔn)確反映需要考察的內(nèi)容。
從經(jīng)旋轉(zhuǎn)后的成分矩陣可得,橫向看,第14題,第31題,第19題和第6題不屬于任何一個維度,所以屬于無效題項,應(yīng)當(dāng)刪除??v向看,刪除以上4題后,維度7只有第5題一題,所以這個維度和題目也是無效的。綜上,刪除第5題,第6題,第14題,第19題和第31題。刪除后可劃分為7個維度,分別是維度1(第25-30題和第32題)維度2(第12,16,18,23和24題),維度3(第7,21和22題),維度4(第11,15,17和35題),維度5(第8,9和13題),維度6(第4,20和33題)和維度7(第10和34題)。
綜上,第14題,第31題,第19題和第6題建議結(jié)合專業(yè)知識來判斷是否需要刪除。
除了第四題的高分組和低分組得分比較P為0.795大于0.05外,其他均小于0.05,差異有統(tǒng)計學(xué)意義,說明高分組和低分組在每一道題上都有非常好的區(qū)分性。除第4題以外,所有題目都通過了區(qū)分度檢驗,說明每一道題都可以與其他題目相區(qū)分,沒有重復(fù)測量的內(nèi)容。
由于成績是離散型分布,所以用非參數(shù)檢驗對比兩組成績,發(fā)現(xiàn)Mann-Whitney U統(tǒng)計量為1 351,P為0.451,大于0.05,說明差異不具有統(tǒng)計學(xué)意義,尚不能認(rèn)為兩組成績有相關(guān)性。
兩組成績沒有相關(guān)性的可能原因如下:1. 小測題目數(shù)目較少,成績不呈正態(tài)性;2. 學(xué)生的積極性下降;3. 樣本量不足;4.本科生暫無足夠知識和充足時間深入挖掘病例;5. 半數(shù)以上小組采取分工合作的方式,將問題分配給不同組員回答,事后僅生搬硬湊,沒有進行組內(nèi)知識共享和消化;6.SSPBL包含與成績相關(guān)與不相關(guān)的內(nèi)容,考試題目也包含僅靠自主學(xué)習(xí)就能掌握的基礎(chǔ)知識和與PBL復(fù)習(xí)內(nèi)容有關(guān)的拓展問題,SSPBL總得分與考試總得分無相關(guān)性的原因可能源于此。
本研究所建立的量表信度效度良好,可作為評估本科醫(yī)學(xué)PBL教學(xué)效果的工具。但是量表結(jié)果與應(yīng)試測試成績沒有關(guān)聯(lián),不能由該量表預(yù)測應(yīng)試成績,但可作為階段性學(xué)習(xí)的自我學(xué)習(xí)效果的評價。