陳鳳 劉明 張麗娟
摘 要:目的:探討操作技能直接觀察測評(Direct observation of procedural skills,DOPS)在醫(yī)務人員臨床操作技能培訓中的應用和效果評價。方法:選擇2020年1月22日至27日金堂縣第一人民醫(yī)院在崗員工120名,開展“穿脫防護用品6項”操作技能培訓,對他們培訓前期和培訓后期分別進行1次DOPS考核,通過對考核成績、培訓者和培訓對象對培訓結果的滿意度進行分析,評價DOPS教學效果。結果:前期操作考核結果顯示,120名培訓對象因職系不同操作水平存在明顯差異,其中護士考核成績相對較高(P<0.05);后期操作考核結果顯示,全體成員各單項評分、總平均分均高于前期考核(P<0.05);對DOPS結果的滿意度測評,培訓者前期得分為6.8±0.7,后期為8.0±0.5;培訓對象前期得分為7.9±0.6,后期為8.6±0.4,培訓雙方后期測評滿意度均高于前期且處于較高水平,培訓對象高于培訓者。結論:DOPS可有效運用于臨床操作技能培訓和考核,能夠良好提高醫(yī)務人員相關操作技能水平。
關鍵詞:操作技能直接觀察測評;臨床操作技能培訓;效果評價
中圖分類號:R4 文獻標識碼:A 文章編號:1671-2064(2020)09-0216-03
操作技能直接觀察測評(Direct observation of procedural skills, DOPS),是評估者通過直接觀察教學對象操作技術過程并及時給予評估和回饋,兼具教學和考核功能的新型臨床技能評價工具[1]。多項研究顯示,DOPS具有評價周期短、反饋及時的優(yōu)點,是培訓與評估操作能力的重要手段[2-4]。為有效提高醫(yī)務人員職業(yè)安全防護技能水平,金堂縣第一人民醫(yī)院于2020年1月22日至1月27日,運用DOPS對醫(yī)務人員進行了“穿脫防護用品”系列操作技能培訓,現(xiàn)將培訓效果報道如下。
1 對象與方法
1.1 研究對象
120名培訓對象:(1)成員組成:醫(yī)生30人(占25%),護士64人(占53.33%),技師8人(占6.67%),工勤人員18人(占15%);(2)年齡:23歲~53歲,平均年齡35.6歲;(3)性別:男43人(占35.8%),女77人(占64.2%), 男女比例為0.56∶1;(4)在醫(yī)院工作年限:3年~31年,平均年限8.7年;(5)學歷:碩士1人(占0.83%),本科61人(占50.83%),???1人(34.17%),中專/高中及以下17人(占14.17%);(6)職稱:副高級職稱及以上10人(占8.33%),中級職稱48人(占40%),初級職稱44人(占36.67%),其他18人(占15%)。培訓對象按報名序號隨機分為6組,不同職系人員盡可能平均分入各組,均進行為期5d的培訓。培訓第一天由同一位培訓者分組別進行操作示教后,每組每天集中培訓80min,在培訓第一天和第五天分別進行DOPS考核。
1.2 評分方法
培訓由責任心強、受過專門培訓且經驗豐富的6位師資同時擔任培訓者和考核者,考核方式為考核者直接觀察考核對象的操作技術進行評分,以平均分記作考核者成績。6位考核者在考核前集中開展DOPS研討,達成考核共識,并告知考核對象考核的內容、方式及評分標準,盡量保證評分的客觀性和可比性。
1.2.1考核內容
確定了“手衛(wèi)生、取用無菌帽子、取用N95口罩、取用無菌手套、取用護目鏡、穿脫防護服”共6項穿脫防護用品操作考試科目,后5項操作各包括穿戴與脫下兩個環(huán)節(jié)。
1.2.2評分標準
按照量表評估條目內容分項逐步考核,每個項目采用9分制評分,擬定1分~5分為不合格,6分~7分為基本合格,8分~9分為合格。
1.2.3測評反饋
每次操作考核結束后,考核者針對考核對象操作中的優(yōu)缺點,面對面溝通,針對其不足之處,給予建設性意見、建議,同時注意傾聽考核對象的想法與感受,必要時再次操作示范,達成糾正性改善共識。
1.2.4滿意度評價
培訓者及培訓對象分別根據測評的反饋和結果,對滿意程度進行9分制評分(最高為9分,最低為1分),滿意度測評在考核結束后立即進行。
1.3統(tǒng)計學分析
DOPS評分表的信度采用Cronbachα系數為指標進行分析,當α系數信度>0.7時表示高信度;DOPS評分表的效度采用Bartlett球形檢驗和KMO進行分析,當Bartlett球形檢驗P<0.01及KMO值>0.5時表示效度好。數據錄入使用Excel 2019進行,數據統(tǒng)計分析使用SPSS 25.0統(tǒng)計軟件,計量資料以均數加減標準誤(±S)表示,采用t檢驗行組間比較,當P<0.05時表示差異有統(tǒng)計學意義。
2 結果
2.1 操作測評
前期考核顯示,120人中單項測評最高分為9分,最低分為2分,無各項成績均合格人員;其中工勤人員成績明顯低于其他人員,以護士操作成績相對較高(見圖1);后期考核高分占比明顯提高,最低分、平均分均高于前期考核(其中不同職系人員成績比較見表1,全體人員前期和后期DOPS考核單項平均分比較見圖2),差異有統(tǒng)計學意義(P<0.05)。
評分表中各單項評分項目的α系數信度均>0.7、評分表的α系數總信度為0.819,說明評分表信度高,評分表的Bartlett球形檢驗P值為0、 KMO值為0.721,說明評分表效度好(見表2)。
2.2培訓者及培訓對象DOPS測評的滿意度
培訓者對DOPS測評結果的滿意度,前期考核為6.8±0.7,后期考核為8.0±0.5;培訓對象對DOPS測評結果的滿意度,前期考核為7.9±0.6,后期考核為8.6±0.4;培訓雙方后期考核滿意度均高于前期且都處于較高水平,并且培訓對象(8.6±0.4)高于培訓者(8.0±0.5);兩組之間的差異均有統(tǒng)計學意義(P<0.05)(見圖3,表3)。
3 討論
“穿脫防護用品”系列操作技能是有效防范醫(yī)務人員在診療活動中暴露于感染性疾病、各種化傷因子的危害,保證職業(yè)安全的重要手段,也是臨床操作培訓中需常規(guī)開展的重要技能。DOPS作為一種形成性評價方式,由英國皇家醫(yī)師協(xié)會設計,是通過在現(xiàn)場對操作者在操作過程中表現(xiàn)的行為與能力進行多維度的綜合評價,真實反映操作者技能的熟練性及應用程度[5]。近年來,已在國內外各臨床領域技能培養(yǎng)方案中推廣使用,值得借鑒[6-9]。本次研究的培訓對象有醫(yī)生、護士、技師及工勤人員,他們年齡跨度大,專業(yè)背景差異大,學歷層次不同,知識技能水平參差不齊,普遍存在院感防控操作技能不足的現(xiàn)狀。本次采用DOPS進行“穿脫防護用品”操作培訓,聘請接受過系統(tǒng)培訓的專業(yè)培訓者師資,多位考核者同時為考核對象評分,以平均分計作考核者成績,避免了評分偏差,保證了考核結果的客觀公正性。
本研究的前期測評結果顯示,工勤人員的基礎知識和操作技能最差,考核成績顯著低于其他職系人員;經過在校專業(yè)培訓的醫(yī)生、護士、技師,對“穿脫防護用品”技能的掌握也有不足,其中醫(yī)生和技師較護士整體操作水平差;全體成員中,成績最低的操作是“穿脫防護服”。這可能與縣級醫(yī)院缺少相關專業(yè)知識的系統(tǒng)培訓有關,也折射出基層醫(yī)院醫(yī)務人員日常工作中院感防控意識不強,系統(tǒng)嚴格的臨床操作技能培訓不足。
本研究的后期測評結果顯示,各項目單項評分及總平均分均高于前期,表明培訓對象經過5d的強化DOPS測評,針對自己操作中的不足進行了歸納總結及良好改進,各單項技能操作水平較前有了明顯提升并達到預期目標,其中,操作技能提升幅度最大的是工勤人員,培訓后,與其他職系人員的技能水平明顯接近,本批次培訓結束后無不合格人員。這也說明,DOPS可有效應用于醫(yī)院在職員工臨床操作技能培訓中。
同時,DOPS不僅是培訓者對培訓對象操作技能的測評,也反映了雙方對測評結果的互動與反饋。采用DOPS測評,培訓者通過前期評估能直觀掌握培訓對象操作技能和知識層面存在的不足,繼而與其面對面進行個體化指導,雙方共同達成改進共識,培訓對象通過多頻次的再考核測評,在技能操作過程中強化了職業(yè)精神,臨床思維與專業(yè)素養(yǎng)也同步得到提升,使教學質量得以保證。本研究結果顯示,培訓者和培訓對象對DOPS測評的滿意度后期均高于前期,5d的DOPS培訓測評過程顯示,操作技能直接觀察測評展現(xiàn)出簡單靈活、以考促學、高效實用的特點,使教學質量得以充分保證。
參考文獻
[1] 葉志偉,詹高房,鐘樹柵,等.操作技能直接觀察評估(DOPS)在實習醫(yī)師外科實踐教學中的應用[J].廣州醫(yī)科大學學報,2019,47(02):95-97.
[2] Barton J,Corbett S,Vleuten Cvd.The validity and reliability of a Direct Observation of Procedural Skills assessment tool:assessing colonoscopic skills of senior endoscopists[J].Gastrointestinal endoscopy,2012,75(3):591-597.
[3] Villatoro E,Patterson JE.Training and assessment[J].Surgery(Oxford),2008,26(10):419-423.
[4] 周畢軍.形成性評價在外科學教學中運用的價值探討[J].衛(wèi)生職業(yè)教育,2017,35(10):65-66.
[5] Awad Z,Hayden L,Muthuswamy K,et al.Does direct observation of procedural skills reflect trainee's progress in otolaryngology?[J].Clinical otolaryngology:official journal of ENT-UK;official journal of Netherlands Society for Oto-Rhino-Laryngology & Cervico-Facial Surgery,2014,39(3):169-173.
[6] 張仁杰,李洪凱,鐘小日,等.操作技能直接觀察評估的應用研究進展[J].中國繼續(xù)醫(yī)學教育,2018,10(15):37-39.
[7] Kumar N,Singh N,Rudra S,et al.Effect of formative evaluation using direct observation of procedural skills in assessment of postgraduate students of obstetrics and gynecology:Prospective study[J].Journal of advances in medical education & professionalism,2017,5(1):1-5.
[8] Lee V.Maximising direct observation of procedural skills for learning in the emergency department[J].Emergency medicine Australasia:EMA,2018,30(1):111-112.
[9] 李旻露,方進博,劉蘭,等.操作技能直接觀察評估在護理領域應用的研究進展[J].護理研究,2019,33(12):2105-2108.