陳 超 陳麗芬 朱慶雙 陳 晨 王亞軍
(首都醫(yī)科大學(xué)宣武醫(yī)院教育處,北京 100053)
隨著醫(yī)學(xué)教育改革在世界范圍內(nèi)的不斷發(fā)展與推進,臨床實踐教學(xué)規(guī)范化、標(biāo)準(zhǔn)化、科學(xué)化的必要性日益凸顯。臨床實踐技能考核是檢驗培訓(xùn)過程和教學(xué)效果的重要依據(jù),考官正是影響考核科學(xué)、規(guī)范、公平、公正的主要因素[1-2]??脊俚呐嘤?xùn)越到位,考試過程中出現(xiàn)問題的概率越低,工作效率越高,因此規(guī)范有效的考官培訓(xùn)就顯得尤為重要[3-4]。考官培訓(xùn)多分為日常通識技能培訓(xùn)和考前針對性培訓(xùn)兩種形式。通過整合云平臺資源,利用信息技術(shù)與教育深度融合,迎合了時代的需要,使教育突破時間和空間的限制,從封閉走向開放[5]。為探索應(yīng)用云平臺的考官培訓(xùn)模式提升培訓(xùn)效果和效率的可行性,我們對首都醫(yī)科大學(xué)臨床技能會考中應(yīng)用云平臺進行考官考前培訓(xùn)及其培訓(xùn)效果進行了調(diào)查、分析和評價。
2021年3月參加首都醫(yī)科大學(xué)臨床技能會考的考官190名。遴選標(biāo)準(zhǔn)為:中級以上職稱,2年以上臨床教學(xué)經(jīng)驗,通過校級考官資格認(rèn)證培訓(xùn)。
考官培訓(xùn)分為日常通識技能培訓(xùn)和考前針對性培訓(xùn)兩種形式。日常通識技能培訓(xùn)包括職業(yè)素養(yǎng)、考試的基本理論、命題的方法、考試設(shè)計方法、考試實施路徑、評價量表的應(yīng)用方法、考試結(jié)果的分析評價方法7個方面??记搬槍π耘嘤?xùn)主要針對考試紀(jì)律、考核流程、考核物品的使用方法、評價量表的應(yīng)用標(biāo)準(zhǔn)、試評分等5個方面。
此次培訓(xùn)為考前針對性培訓(xùn),師資為考核實施負(fù)責(zé)人、首都醫(yī)科大學(xué)遴選的專家型考官以及臨床技能中心工作人員;培訓(xùn)時間共計2 h。培訓(xùn)手段與方法如下。
(1)建立云教室:利用云平臺通過手機號碼邀請考官進入具備在線通知、視頻直播、在線完成作業(yè)、線上線下實時互動、填寫問卷、打卡簽到等功能的云教室形成云班級,并根據(jù)不同的專業(yè)進行分組,每組配備專職管理員,負(fù)責(zé)組織培訓(xùn)期間的所有教學(xué)活動。
(2)云平臺在線統(tǒng)一培訓(xùn):由考核各環(huán)節(jié)負(fù)責(zé)人采用在線互動直播的形式對相關(guān)內(nèi)容進行講授及問題解答。
(3)云評分模擬考核現(xiàn)場場景:采用考核現(xiàn)場使用的信息化考評系統(tǒng)的云平臺版本,在線模擬考核現(xiàn)場場景。在培訓(xùn)前根據(jù)各考核項目中易錯點和易誤判點設(shè)定腳本,錄制模擬技能操作考核視頻,并制定相應(yīng)的標(biāo)準(zhǔn)評分表(標(biāo)準(zhǔn)分為85分)。授課教師(專家型考官)對有關(guān)要點進行指導(dǎo)并講解評分標(biāo)準(zhǔn)。有疑問的考官可以直接提問,現(xiàn)場交流和解答問題,讓考官可以充分了解評分標(biāo)準(zhǔn),達到同質(zhì)化的要求。然后在云平臺模擬考核場景并播放視頻,由考官進行評價,結(jié)果實時反饋并了解培訓(xùn)效果,并對評價差異較大(誤差大于5分)的考官進行二次培訓(xùn)。
1.3.1 培訓(xùn)效果分析
培訓(xùn)前結(jié)合評分量表,參考既往難點,選擇各專業(yè)具有代表性的操作項目,按照85分的標(biāo)準(zhǔn)分?jǐn)?shù)進行操作視頻腳本設(shè)計與拍攝, 使用云平臺進行評分。分析經(jīng)過培訓(xùn)后不同專業(yè)(內(nèi)科、外科、婦產(chǎn)科、兒科、急診科、護理等)考官應(yīng)用云平臺模擬評分結(jié)果與標(biāo)準(zhǔn)分?jǐn)?shù)的差異,評價培訓(xùn)效果,驗證培訓(xùn)有效性。
1.3.2 問卷調(diào)查
采用自設(shè)問卷,利用問卷星平臺對研究對象實施自填式問卷調(diào)查,調(diào)查內(nèi)容包括調(diào)查對象的基本情況、培訓(xùn)需求匹配度、培訓(xùn)形式匹配度、培訓(xùn)內(nèi)容合理性、培訓(xùn)效果認(rèn)可度、培訓(xùn)效果自評、軟件應(yīng)用熟練度、繼續(xù)參加考核意愿、培訓(xùn)流程滿意度等。采用Likert 11級評分法[6]對每個指標(biāo)11個等級由低到高分別賦值0~11分,按照由低級指標(biāo)得出高級指標(biāo)的運算方向,依次計算各指標(biāo)的算術(shù)平均分。共發(fā)放問卷190份,回收有效問卷190分,有效回收率為100%。
計量資料采用均數(shù)±標(biāo)準(zhǔn)差(±s)表示,計數(shù)資料采用頻數(shù)(百分比)表示。利用可靠性分析、KMO和Bartlett球形檢驗的方法對考官培訓(xùn)效果的認(rèn)同程度進行評價,采用主成分分析的方法對問卷測量指標(biāo)的信息進行降維處理,采用單樣本t檢驗的方法評價模擬效果。所有數(shù)據(jù)處理與分析采用SPSS 26.0軟件,雙側(cè)檢驗,以P<0.05為差異具有統(tǒng)計學(xué)意義。
參加培訓(xùn)的考官均來自首都醫(yī)科大學(xué)21家臨床醫(yī)學(xué)院、附屬醫(yī)院及教學(xué)醫(yī)院,其中男性55名(28.95%),女性135名(71.05%);年齡33~59歲,平均44.56±6.16歲,其中30~39歲46名(24.21%)、40~49歲105名(55.26%)、50~59歲39名(20.53%);職稱為中級35名(18.43%)、副高級121名(63.68%)、正高級34名(17.89%),其中84名(44.2%)具有中級及以上教學(xué)職稱;參加臨床教學(xué)年限2~37年,平均14.16±7.81年,10年 以 下55人(28.95%),10~19年88人(46.31%),20~29年36人(18.95%),30年及以上11人(5.79%);所從事的專業(yè)(二級學(xué)科)內(nèi)科66人(34.74%)、外科37人(19.47%)、婦產(chǎn)科30人(15.79%)、兒科29人(15.29%)、護理20人(10.53%)、急診科8人(4.21%)。
應(yīng)用單樣本t檢驗,檢驗值為85,對考官評分結(jié)果按照專業(yè)進行分析,各專業(yè)考官評價結(jié)果與標(biāo)準(zhǔn)分?jǐn)?shù)間無顯著性差異(P>0.05)(表1)。其中各專業(yè)中均存在相較標(biāo)準(zhǔn)分?jǐn)?shù)誤差大于±5分的情況,針對相應(yīng)考官進行二次培訓(xùn)。
表1 各專業(yè)模擬評價成績分析
從需求匹配度、形式匹配度、內(nèi)容合理性、效果認(rèn)可度、培訓(xùn)效果自評、軟件應(yīng)用熟練度、繼續(xù)參加考核意愿、培訓(xùn)流程滿意度8個方面測量考官對此次培訓(xùn)效果的認(rèn)同程度。利用可靠性分析、KMO和Bartlett球形檢驗進行因子分析適當(dāng)性檢驗。本研究得出克隆巴哈系數(shù)為0.87,說明上述8個問題的內(nèi)在一致性較好。KMO為0.82,Bartlett球形檢驗值為815.18(P<0.01),說明適合進行因子分析。根據(jù)特征根大于1 的原則,采取主成分分析法提取公因子。最終得到1個公因子,累計貢獻率為55.71 %,基本符合要求,說明這8個指標(biāo)基本可以解釋大部分測量指標(biāo)的信息,但解釋度略顯不足,若能增加指標(biāo)數(shù)量,貢獻率可進一步提升??脊賹ε嘤?xùn)各方面反饋評分均值大于10分,其中培訓(xùn)對軟件應(yīng)用熟練度提升效果最好(10.71±0.81),形式匹配度(10.43±1.25)、效果認(rèn)可度(10.42±1.29)相對較低(表2)。
表2 培訓(xùn)結(jié)果反饋 (n=190)
《中國教育現(xiàn)代化2035》中明確指出,要加快信息化時代教育變革,相關(guān)政策鼓勵醫(yī)療健康行業(yè)通過多元化培訓(xùn)模式提高教育培訓(xùn)的質(zhì)量,利用好信息化技術(shù)為醫(yī)療培訓(xùn)服務(wù)。本研究在既有的臨床實踐技能考官培訓(xùn)模式的基礎(chǔ)上,借助多媒體技術(shù)、在線考核評價系統(tǒng)等信息化技術(shù),利用云平臺突破培訓(xùn)在空間和時間上的限制,形成了全新的“云”上培訓(xùn)模式,有效地提升了培訓(xùn)效率,達到了預(yù)期的培訓(xùn)效果,對在實踐技能考核中執(zhí)考規(guī)范、評價同質(zhì)化起到了積極的促進作用。
目前,各醫(yī)學(xué)院校和臨床醫(yī)學(xué)院均在開展各類型的考官培訓(xùn),部分單位建立了考官庫,考核能力水平得到了日益的提升[7]。但是在各類的臨床實踐技能考試組織與實施的過程中,考官隊伍多為根據(jù)考核內(nèi)容與要求臨時組建或抽調(diào)組成的,來自多個單位橫跨多個專業(yè),穩(wěn)定性、專業(yè)性和熟練程度存在著一定的差異,對當(dāng)前考試的內(nèi)涵和規(guī)則理解也不夠充分,容易造成集中度和規(guī)范度欠缺。因此,考前的集中培訓(xùn)是必不可少的。對于成熟考官而言,傳統(tǒng)的考核前考官培訓(xùn)通常采用的是考核前一天或者一周進行集中的短時培訓(xùn),考核規(guī)模越大則要求場地和占用資源越大,組織的難度隨之增加,造成培訓(xùn)效果的實時反饋愈加困難,所以隨著培訓(xùn)規(guī)模的擴大,培訓(xùn)效果不斷下降。采用云平臺的培訓(xùn)模式,不受空間限制,組織難度隨之降低,通過研究可以看到,對于培訓(xùn)需求的匹配度、培訓(xùn)形式的匹配度等方面評價分?jǐn)?shù)均在10分以上,可以匹配考官培訓(xùn)的要求。
傳統(tǒng)的考前考官培訓(xùn)模式多為專家授課講解,實際操作欠缺,培訓(xùn)后承擔(dān)考官工作存在標(biāo)準(zhǔn)職責(zé)模糊的情況,影響到評價的一致性。通過信息化網(wǎng)絡(luò)平臺應(yīng)用在考官培訓(xùn)過程中,結(jié)合視頻還原考核場景,豐富了培訓(xùn)形式,了解考核內(nèi)涵更為直接,在線模擬考官評分,增加互動,提升了參與度并可集中注意力。隨著智能化的考核管理平臺的使用,信息化評分系統(tǒng)使用的培訓(xùn)也是保障考核順利實施的必要條件[8-11]。在研究中可以看到,對于培訓(xùn)內(nèi)容的合理性、培訓(xùn)效果的認(rèn)可度評分均大于10分。通過考官自評結(jié)合各專業(yè)模擬評價的成績均和標(biāo)準(zhǔn)成績差異無統(tǒng)計學(xué)意義??梢钥闯?運用此模式培訓(xùn)后可以有效地保障培訓(xùn)質(zhì)量,并可促進評價標(biāo)準(zhǔn)的統(tǒng)一,培訓(xùn)效果反饋較好。軟件應(yīng)用熟練度評分最高,可以看出應(yīng)用與實際考核中相同的評價系統(tǒng)進行考官培訓(xùn)可以有效地提升考核效率。同時多專業(yè)同時開展培訓(xùn)工作,省時省力,節(jié)約人力資源,能有效地實現(xiàn)資源利用最大化,提高培訓(xùn)的整體效率。
隨著考核方式的不斷完善、內(nèi)容的不斷豐富、規(guī)模的日益增加,臨床教師在承擔(dān)教學(xué)工作的同時還要承擔(dān)繁重的臨床診療工作[12-13]。傳統(tǒng)培訓(xùn)模式的集中考官團體培訓(xùn),占用了組織者、授課教師和考官的整段時間,由于近期公共衛(wèi)生事件頻發(fā),集中培訓(xùn)防疫壓力陡增,增加了的考官和管理者的壓力和疲勞感。尤其是多單位、多科室參加或者是多中心同時開展的大型考試考核工作,參加和培訓(xùn)的過程中浪費了考官們大量的時間,尤其是培訓(xùn)前后花費在路程上的時間和精力,采用基于云平臺的考官培訓(xùn)模式對于培訓(xùn)效果以及減輕培訓(xùn)壓力有著不可替代的優(yōu)勢。
基于云平臺的學(xué)習(xí)和培訓(xùn)模式已成為現(xiàn)階段社會主要發(fā)展趨勢,將云平臺的考官培訓(xùn)模式應(yīng)用于考核評價工作中,可以切實地提高考核培訓(xùn)的效率和質(zhì)量。但是也發(fā)現(xiàn)了一定的不足,培訓(xùn)過程考官很容易受到干擾,這也從側(cè)面反映出了相關(guān)管理人員應(yīng)當(dāng)對考官在線學(xué)習(xí)的實際狀況進行實時監(jiān)督,只有這樣才能從源頭上促進培訓(xùn)質(zhì)量的全面提升。
利益沖突所有作者均聲明不存在利益沖突
作者貢獻聲明陳超:提出論文構(gòu)思,收集、整理相關(guān)數(shù)據(jù),撰寫論文;陳麗芬:提出論文構(gòu)思,撰寫論文;朱慶雙、王亞軍:總體把關(guān),審訂論文;陳晨:收集、整理相關(guān)數(shù)據(jù)