徐 濤，姜晶梅，薛 芳，王子興，韓 偉

中國(guó)醫(yī)學(xué)科學(xué)院基礎(chǔ)醫(yī)學(xué)研究所 北京協(xié)和醫(yī)學(xué)院基礎(chǔ)學(xué)院 流行病與衛(wèi)生統(tǒng)計(jì)學(xué)系，北京 100005

2020年春季學(xué)期開(kāi)始時(shí)，國(guó)內(nèi)正處于新型冠狀病毒肺炎疫情的防控期間，而且國(guó)外疫情從4月份開(kāi)始呈暴發(fā)態(tài)勢(shì)，外來(lái)輸入型病例對(duì)國(guó)內(nèi)疫情防控造成很大威脅，為阻斷疫情向校園蔓延，確保師生生命安全和身體健康，多數(shù)高校開(kāi)展了網(wǎng)絡(luò)線上教學(xué)模式[1-3]。北京協(xié)和醫(yī)學(xué)院在整個(gè)2020年春季學(xué)期都開(kāi)展了全面的線上教學(xué)模式，醫(yī)學(xué)統(tǒng)計(jì)學(xué)課程的期末考試采用了線上開(kāi)放式考試模式；2020年秋季學(xué)期采用了線上線下混合教學(xué)，醫(yī)學(xué)統(tǒng)計(jì)學(xué)期末考試仍然采用了線上開(kāi)放式考試模式；2021年春季學(xué)期采用了線下教學(xué)和線下閉卷考試模式。本研究旨在運(yùn)用教育測(cè)量學(xué)理論和教育統(tǒng)計(jì)學(xué)方法，對(duì)3次連續(xù)學(xué)期的醫(yī)學(xué)統(tǒng)計(jì)學(xué)考試進(jìn)行區(qū)分度和難度評(píng)價(jià)分析，以發(fā)現(xiàn)和解決課程安排、線上線下教學(xué)模式和考題設(shè)計(jì)、測(cè)評(píng)方法等方面的問(wèn)題，為評(píng)定教學(xué)效果和教學(xué)質(zhì)量提供依據(jù)，也為不同教學(xué)模式和測(cè)評(píng)方法的合理應(yīng)用提供支持。

對(duì)象和方法

對(duì)象北京協(xié)和醫(yī)學(xué)院2020年春季學(xué)期、秋季學(xué)期和2021年春季學(xué)期選修醫(yī)學(xué)統(tǒng)計(jì)學(xué)課程的研究生。

教學(xué)實(shí)施2020年春季學(xué)期采用線上教學(xué)和線上開(kāi)放式考試模式。期末考試采用完全開(kāi)放式測(cè)評(píng)，考試時(shí)間為2.5 h，考卷包括7個(gè)綜合應(yīng)用題和1個(gè)實(shí)驗(yàn)設(shè)計(jì)題，綜合應(yīng)用題要求學(xué)生對(duì)具體數(shù)據(jù)進(jìn)行分析，分別測(cè)試其用SPSS軟件對(duì)統(tǒng)計(jì)描述、t檢驗(yàn)、卡方檢驗(yàn)、置信區(qū)間、秩和檢驗(yàn)、相關(guān)分析等基本分析方法的靈活應(yīng)用，實(shí)驗(yàn)設(shè)計(jì)題要求學(xué)生對(duì)一個(gè)具體科研假設(shè)進(jìn)行統(tǒng)計(jì)學(xué)設(shè)計(jì)。該學(xué)期共有98名學(xué)生選修統(tǒng)計(jì)學(xué)，包括基礎(chǔ)班41名，臨床班57名。

2020年秋季學(xué)期采用線上線下混合教學(xué)和線上開(kāi)放式考試模式。期末考試仍采用完全開(kāi)放式測(cè)評(píng)，但考試時(shí)間為2 h，考卷包括5個(gè)綜合應(yīng)用題和1個(gè)實(shí)驗(yàn)設(shè)計(jì)題，綜合應(yīng)用題要求學(xué)生對(duì)具體數(shù)據(jù)進(jìn)行分析，分別測(cè)試其用SPSS軟件對(duì)卡方檢驗(yàn)、置信區(qū)間、秩和檢驗(yàn)、相關(guān)分析等基本分析方法的靈活應(yīng)用，實(shí)驗(yàn)設(shè)計(jì)題要求學(xué)生對(duì)一個(gè)具體科研假設(shè)進(jìn)行統(tǒng)計(jì)學(xué)設(shè)計(jì)。該學(xué)期共有129名學(xué)生選修統(tǒng)計(jì)學(xué)，包括基礎(chǔ)班64名，臨床班65名。

2021年春季學(xué)期采用線下教學(xué)和線下考試模式。期末考試包括閉卷筆試和開(kāi)卷軟件操作考試兩部分，筆試試卷包括選擇題、填空題、案例分析題(20分)和計(jì)算題，軟件操作考試為實(shí)例數(shù)據(jù)的SPSS軟件分析，滿分共100分。該學(xué)期共有86名學(xué)生選修統(tǒng)計(jì)學(xué)，包括基礎(chǔ)班33名，臨床班53名。

數(shù)據(jù)管理與分析采用EP 13.1軟件編制數(shù)據(jù)錄入程序，進(jìn)行數(shù)據(jù)錄入與管理。由2名數(shù)據(jù)管理員獨(dú)立錄入并校對(duì)。采用SAS 9.4軟件進(jìn)行統(tǒng)計(jì)分析，計(jì)量資料以均數(shù)±標(biāo)準(zhǔn)差表示，分類資料以例數(shù)表示?；A(chǔ)班和臨床班平均成績(jī)的比較采用t檢驗(yàn)，3個(gè)學(xué)期平均成績(jī)的比較采用方差分析，并用Student-Newman-Keuls(SNK)檢驗(yàn)進(jìn)行多重比較。統(tǒng)計(jì)檢驗(yàn)用雙側(cè)檢驗(yàn)，P<0.05為差異有統(tǒng)計(jì)學(xué)意義。

結(jié) 果

試卷成績(jī)比較2020年春季學(xué)期、秋季學(xué)期和2021年春季學(xué)期期末考試的平均成績(jī)分別為78.76±12.73、82.61±10.08、73.67±14.50，3個(gè)連續(xù)學(xué)期的平均成績(jī)比較差異有統(tǒng)計(jì)學(xué)意義(F=13.731，P<0.001)。2020年春季學(xué)期、秋季學(xué)期基礎(chǔ)班和臨床班平均成績(jī)比較差異無(wú)統(tǒng)計(jì)學(xué)意義(t=0.336，P=0.738；t=1.070，P=0.287)，而2021年春季學(xué)期基礎(chǔ)班的平均成績(jī)高于臨床班，差異有統(tǒng)計(jì)學(xué)意義(t=2.400，P=0.019)(表1)。

表1 3次考試平均成績(jī)比較

區(qū)分度分析2020年春季學(xué)期的線上教學(xué)和線上開(kāi)放式考試的區(qū)分度分析結(jié)果顯示，8道考題中有7道考題(87.5%)的區(qū)分度優(yōu)秀(D均≥0.4)，只有應(yīng)用3(t檢驗(yàn))的區(qū)分度一般尚可(D=0.26)，沒(méi)有區(qū)分度差的考題。總分的區(qū)分度為0.38，總體區(qū)分度良好(表2)。

表2 線上教學(xué)和線上開(kāi)放式考試的區(qū)分度分析

2020年秋季學(xué)期的線上線下混合教學(xué)和線上開(kāi)放式考試的區(qū)分度分析結(jié)果顯示，6道考題中只有3道考題(50%)的區(qū)分度優(yōu)秀(D均≥0.4)，應(yīng)用1(均數(shù)差的置信區(qū)間)的區(qū)分度良好(D=0.33)，應(yīng)用5(率差的置信區(qū)間)的區(qū)分度一般尚可(D=0.26)，應(yīng)用4(卡方檢驗(yàn))的區(qū)分度差(D=0.17)。總分的區(qū)分度為0.26，總體區(qū)分度一般(表3)。

表3 線上線下混合教學(xué)和線上開(kāi)放式考試的區(qū)分度分析

2021年春季學(xué)期的線下教學(xué)和線下閉卷考試的區(qū)分度分析結(jié)果顯示，填空題、案例分析題和綜合應(yīng)用題的區(qū)分度優(yōu)秀(D均≥0.4)，計(jì)算題以及基礎(chǔ)理論匯總的區(qū)分度良好(D=0.38；D=0.37)，選擇題的區(qū)分度一般尚可(D=0.26)，沒(méi)有區(qū)分度差的考題?？偡值膮^(qū)分度為0.33，總體區(qū)分度良好(表4)。

表4 線下教學(xué)和線下考試的區(qū)分度分析

難度分析2020年春季學(xué)期的線上教學(xué)和線上開(kāi)放式考試的難度系數(shù)分析結(jié)果顯示，難題和較難題3道，中等難度題1道，較易題和易題共4道(50%)?？季淼目偡蛛y度系數(shù)為0.79，總體難度適中(表5)。

表5 線上教學(xué)和線上開(kāi)放式考試的難度系數(shù)分析

2021年秋季學(xué)期的線上線下混合教學(xué)和線上開(kāi)放式考試的難度系數(shù)分析結(jié)果顯示，難題1道，中等難度題1道，較易題和易題共4道(66.7%)?？季淼目偡蛛y度系數(shù)為0.83，總體難度較容易(表6)。

表6 線上線下混合教學(xué)和線上開(kāi)放式考試的難度系數(shù)分析

2021年春季學(xué)期的線下教學(xué)和線下考試的難度系數(shù)分析結(jié)果顯示，案例分析為難題，填空題、綜合應(yīng)用題以及基礎(chǔ)理論匯總為中等難度，計(jì)算題為較易題，選擇題為易題。考卷的總分難度系數(shù)為0.74，總體難度適中(表7)。

表7 線下教學(xué)和線下考試的難度系數(shù)分析

討 論

對(duì)2020年春季學(xué)期的線上教學(xué)和線上開(kāi)放式考試模式、秋季學(xué)期的線上線下混合教學(xué)和線上開(kāi)放式考試模式和2021年春季學(xué)期的線下教學(xué)和線下閉卷考試模式的3次醫(yī)學(xué)統(tǒng)計(jì)學(xué)考試成績(jī)進(jìn)行分析發(fā)現(xiàn)，2020年秋季學(xué)期的基礎(chǔ)班和臨床班的平均成績(jī)都略高于其他2個(gè)學(xué)期，2020年春季學(xué)期和2020年秋季學(xué)期2次開(kāi)放式考試中，基礎(chǔ)班和臨床班的平均成績(jī)差異無(wú)統(tǒng)計(jì)學(xué)意義。但是2021年春季學(xué)期線下考試，臨床班的平均成績(jī)顯著低于基礎(chǔ)班，可能原因有2個(gè)，首先，基礎(chǔ)班成績(jī)都在60分以上，而臨床班有3名學(xué)生的考試成績(jī)?cè)?0分以下；其次，2021年春季學(xué)期，疫情得到有效控制，各臨床醫(yī)院基本恢復(fù)了正常運(yùn)行，臨床專業(yè)研究生開(kāi)始進(jìn)行臨床輪轉(zhuǎn)，對(duì)于其基礎(chǔ)理論課學(xué)習(xí)有一定影響。

對(duì)3個(gè)學(xué)期不同教學(xué)模式和不同測(cè)評(píng)方法進(jìn)行區(qū)分度和難度分析發(fā)現(xiàn)，2020年春季學(xué)期第1次進(jìn)行線上教學(xué)和線上開(kāi)放式考試的總體區(qū)分度良好，各類考題中除t檢驗(yàn)應(yīng)用的區(qū)分度一般，其他題目的區(qū)分度都達(dá)到優(yōu)秀，而且沒(méi)有區(qū)分度差的考題。但是2020年秋季學(xué)期第2次進(jìn)行線上開(kāi)放式考試的總體區(qū)分度一般，只有50%考題的區(qū)分度優(yōu)秀(D≥0.4)，有1/3考題的區(qū)分度一般或較差。分析原因可能是以下幾個(gè)方面，首先，2020年春季學(xué)期是第1次進(jìn)行開(kāi)放式考試，雖然是開(kāi)卷考試，但是同學(xué)們都是居家考試且有明確的時(shí)間限制，相互間不容易進(jìn)行交流溝通；其次，這種考試方式在本校是首次采用，同學(xué)們無(wú)法提前從上幾屆同學(xué)處獲得有效提示，所以此次考試的區(qū)分度比較好。2020年秋季學(xué)期進(jìn)行線上線下混合教學(xué)，部分學(xué)生在教室上課，另一部分在線上同步直播，線上的同學(xué)只能看到PPT不能看到教室的黑板。同時(shí)，實(shí)施開(kāi)放式考試時(shí)，同學(xué)們?cè)趯W(xué)校宿舍、實(shí)驗(yàn)室等場(chǎng)所聚集在一起，可以一邊考試一邊進(jìn)行溝通交流；而且由于是第2次進(jìn)行開(kāi)放式考試，很多同學(xué)在考試前已經(jīng)從上一屆同學(xué)處了解很多考試技巧甚至上次的考題，所以此次考試雖然去掉了第1次開(kāi)放式考試中區(qū)分度最低的t檢驗(yàn)應(yīng)用和得分率最高的統(tǒng)計(jì)描述，但整體區(qū)分度仍然不高。從難度分析可見(jiàn)，第2次開(kāi)放式考試整體難度偏易，除靈活多變的實(shí)驗(yàn)設(shè)計(jì)題外，其他綜合應(yīng)用題都偏容易。2021年春季學(xué)期線下考試的總體區(qū)分度良好，除選擇題的區(qū)分度一般外，其他類型考題的區(qū)分度都優(yōu)秀或良好，而且沒(méi)有區(qū)分度差的考題；難度分析也可見(jiàn)，此次考試的整體難度適中，多數(shù)題型都是中等難度，難度太大和太容易的題目都較少，這可能與閉卷考試中對(duì)基礎(chǔ)理論的考查更全面且對(duì)基礎(chǔ)理論的掌握程度要求較高有關(guān)系。

作為線下常規(guī)教學(xué)的一種補(bǔ)充，線上教學(xué)模式也可以在醫(yī)學(xué)統(tǒng)計(jì)學(xué)教學(xué)中發(fā)揮很好的輔助作用[10-12]。在線上教學(xué)模式逐步發(fā)展成常規(guī)教學(xué)形式的情況下，線上考試也將成為一種新型的考試模式。線上考試可分為閉卷考試和開(kāi)放式考試兩種。線上閉卷考試和線下閉卷考試在試題設(shè)計(jì)方面基本類似，只是電子試卷和紙質(zhì)試卷的區(qū)別，但是線上閉卷考試只能在學(xué)校機(jī)房進(jìn)行，或者在各自的獨(dú)立考場(chǎng)利用雙機(jī)位進(jìn)行監(jiān)場(chǎng)，執(zhí)行難度較大。線上開(kāi)放性考試由于其開(kāi)放的性質(zhì)，對(duì)于試題設(shè)計(jì)、考查內(nèi)容和綜合應(yīng)用題的數(shù)據(jù)庫(kù)都有較高要求，必須做到新穎獨(dú)到，以保證同學(xué)們無(wú)法從上幾屆同學(xué)處獲取考題相關(guān)信息。而且開(kāi)放性考試也要盡量保證學(xué)生們能夠做到獨(dú)立答題，盡量控制好考題量和考試時(shí)間的銜接，使學(xué)生們沒(méi)有多余時(shí)間交流答題甚至相互抄襲。

綜上，本研究結(jié)果顯示，線下閉卷考試區(qū)分度較好，可以很好地區(qū)分學(xué)習(xí)良好和略差的學(xué)生。兩次線上考試的區(qū)分度差異較大，第1次線上開(kāi)放式考試的區(qū)分度優(yōu)于線下考試，但第2次線上開(kāi)放式考試的區(qū)分度明顯較差，說(shuō)明在線上進(jìn)行開(kāi)放式考試測(cè)評(píng)時(shí)，需要對(duì)考試內(nèi)容和考核方式進(jìn)行更深入的調(diào)整，使之能夠更好地反映學(xué)生們的學(xué)習(xí)狀況。如果設(shè)計(jì)得當(dāng)，線上考試也可達(dá)到難度適中而且區(qū)分度良好的效果。此外，需要進(jìn)一步加強(qiáng)醫(yī)學(xué)生對(duì)統(tǒng)計(jì)學(xué)軟件綜合應(yīng)用的能力，使學(xué)生能靈活運(yùn)用統(tǒng)計(jì)學(xué)知識(shí)解決醫(yī)學(xué)科研中的實(shí)際問(wèn)題。