摘要:體育理論考試是普通高校對(duì)學(xué)生體育學(xué)習(xí)評(píng)價(jià)的一個(gè)方面,文章主要闡述運(yùn)用GITEST 3+系統(tǒng)對(duì)學(xué)生的體育理論測(cè)試題進(jìn)行分析,以改進(jìn)評(píng)價(jià)試題、減少主觀評(píng)分影響、促進(jìn)對(duì)學(xué)生體育理論學(xué)習(xí)評(píng)價(jià)的公平、公正與科學(xué),減輕教師負(fù)擔(dān),同時(shí)為計(jì)算機(jī)化的體育理論考試作準(zhǔn)備。
關(guān)鍵詞:GITEST3+系統(tǒng);體育理論;考試;項(xiàng)目分析
一、 問(wèn)題的提出
《全國(guó)普通高等學(xué)校體育課程教學(xué)指導(dǎo)綱要》規(guī)定要重視理論與實(shí)踐相結(jié)合,在運(yùn)動(dòng)實(shí)踐教學(xué)中注意滲透相關(guān)理論知識(shí),并運(yùn)用多種形式和現(xiàn)代教學(xué)手段,安排約10%的理論教學(xué)內(nèi)容,擴(kuò)大體育的知識(shí)面,提高學(xué)生的認(rèn)知能力。對(duì)學(xué)生的體育學(xué)習(xí)評(píng)價(jià)方面提出,要對(duì)其學(xué)習(xí)效果和過(guò)程的評(píng)價(jià),主要的內(nèi)容除了體能與運(yùn)動(dòng)技能之外還應(yīng)該包括認(rèn)知、學(xué)習(xí)態(tài)度等方面的評(píng)價(jià)。認(rèn)知能力主要有概念性認(rèn)知、形象性認(rèn)知和運(yùn)動(dòng)性認(rèn)知三種表現(xiàn)形式。公共體育理論考試主要就是對(duì)學(xué)生的體育認(rèn)知能力和體育運(yùn)動(dòng)文化等方面的評(píng)價(jià),當(dāng)前公共體育理論考試的通常做法之一是學(xué)生做理論試卷;之二是要求學(xué)生寫(xiě)一篇有關(guān)體育理論學(xué)習(xí)感想或者與之相關(guān)的論文,然后教師根據(jù)參考答案或主觀判斷進(jìn)行評(píng)分。本文試圖根據(jù)項(xiàng)目分析原理運(yùn)用單參數(shù)項(xiàng)目分析和試題測(cè)試、二級(jí)評(píng)分、評(píng)估系統(tǒng)分析軟件包(GITEST3+系統(tǒng))對(duì)普通高校學(xué)生體育認(rèn)知評(píng)價(jià)的測(cè)試題進(jìn)行分析,改進(jìn)評(píng)價(jià)試題、為計(jì)算機(jī)化的體育理論測(cè)試作準(zhǔn)備,以使對(duì)學(xué)生的體育認(rèn)知評(píng)價(jià)做得更科學(xué)。
二、 項(xiàng)目分析的原理
項(xiàng)目分析是根據(jù)項(xiàng)目反應(yīng)理論(Item Response Theory,IRT),也稱潛在特質(zhì)理論來(lái)分析考試成績(jī)或者問(wèn)卷調(diào)查數(shù)據(jù)的數(shù)學(xué)模型。項(xiàng)目反應(yīng)理論是依據(jù)一定的數(shù)學(xué)模型,用項(xiàng)目特征參數(shù)估計(jì)潛在特質(zhì)的一種測(cè)試?yán)碚摚杭僭O(shè)被測(cè)試者有一種“潛在特質(zhì)”,潛在特質(zhì)是在觀察分析測(cè)驗(yàn)反應(yīng)基礎(chǔ)上提出的一種統(tǒng)計(jì)構(gòu)想,在測(cè)試中,潛在特質(zhì)一般是指潛在的能力,并經(jīng)常用測(cè)試分?jǐn)?shù)作為這種潛力的估算,且認(rèn)為被試者在測(cè)試項(xiàng)目的反應(yīng)和成績(jī)與他們的潛在特質(zhì)有特殊的關(guān)系,并通過(guò)項(xiàng)目反應(yīng)曲線綜合各種項(xiàng)目分析的資料,使我們綜合直觀地看出項(xiàng)目難度、鑒別度等項(xiàng)目分析的特征,從而起到指導(dǎo)項(xiàng)目篩選和編制測(cè)驗(yàn)比較分?jǐn)?shù)等作用。具體到考試中的項(xiàng)目分析,就是通過(guò)考試成績(jī)即學(xué)生對(duì)項(xiàng)目的反應(yīng),去確定學(xué)生的各種能力即潛在特征、傾向,并估算出具有此能力的學(xué)生的分?jǐn)?shù);再用分?jǐn)?shù)去預(yù)測(cè)和解釋項(xiàng)目和考試成績(jī)。把無(wú)法直接觀察到學(xué)生的能力或傾向作為認(rèn)知變量和可觀察到的學(xué)生考試分?jǐn)?shù)的關(guān)系,設(shè)計(jì)為一種特征函數(shù):Pi(θj)=e(θj -bi)/1+e(θj -bi),其中i=1,2,…n,θj為考生的能力水平值;bi為項(xiàng)目的難度,隨項(xiàng)目的不同,bi值是變化的;Pi(θj)為第j個(gè)考生答對(duì)項(xiàng)目的概率;e表示自然對(duì)數(shù)之底=2.71828,此函數(shù)的意義在于描述出“成功解答某一特定考試項(xiàng)目的可能性”和“被測(cè)試者能力”之間的關(guān)系,因此一個(gè)項(xiàng)目反應(yīng)模式就是一種數(shù)學(xué)模式。這種數(shù)學(xué)函數(shù)稱為項(xiàng)目特征函數(shù),表現(xiàn)為特征曲線。它說(shuō)明具有更高分?jǐn)?shù)的學(xué)生有更高的概率答對(duì)一個(gè)項(xiàng)目。
三、 研究工具與對(duì)象
(一) 研究工具:GITEST3+系統(tǒng)軟件
GITEST3+系統(tǒng)是由廣東外語(yǔ)外貿(mào)大學(xué)桂詩(shī)春教授和李崴先生研制的考試分析系統(tǒng)。它選用單參數(shù)模型和最大擬然估計(jì)法作參數(shù)估算,可使用經(jīng)典測(cè)試?yán)碚撟鲰?xiàng)目分析也可使用單參數(shù)模型做參數(shù)分析,具有方便快速、準(zhǔn)確可靠的特點(diǎn)。適用于各類型的客觀性試題的考試評(píng)分、統(tǒng)計(jì)和分析。
(二) 研究對(duì)象
(1)2012學(xué)年度廣東省15所普通高校一年級(jí)體育理論統(tǒng)一考試試題。
(2)每校隨機(jī)抽取100名學(xué)生參加考試的答題結(jié)果。
四、 研究結(jié)果與討論
(一) 數(shù)據(jù)輸入
在GITEST3+系統(tǒng)的數(shù)據(jù)編輯系統(tǒng)中按如下格式輸入原始數(shù)據(jù):第一行輸入“50,20,20,10”分別表示總題數(shù)50題,第一部分20題、第二部分20題、第三部分10題。第二行輸入“6,PETEST12,JCLL,ZXLL,TYSZ”分別表示學(xué)生學(xué)號(hào)占6位,考試名稱為PETEST12、第一大題為體育基礎(chǔ)理論、第二大題為體育專項(xiàng)理論、第三大題目為體育時(shí)政。第三行輸入標(biāo)準(zhǔn)答案,第四行至最后一行為每個(gè)學(xué)生的學(xué)號(hào)及作答結(jié)果。運(yùn)行GITEST3+系統(tǒng)后自動(dòng)生成項(xiàng)目分析文件PETEST12.ia1、試卷各部分分析文件PETEST09.ia2和對(duì)整份試卷評(píng)價(jià)綜合報(bào)告文件PETEST12.ia3三個(gè)文件。
(二) 各題項(xiàng)目分析
表1試題項(xiàng)目分析表
TEST CODEITEM NO.PtPiPdPMAMBMCMDMO
PETEST12JCLL 111.3811.8618.330.0915.019.6115.7113.21-8.61
NO.OF CAN.KEYArBrCrDrABCDO
1500C-0.570.800.38-0.036735201381690
表1第一行依次表示考試代號(hào)為PETEST12,本大題名稱為體育基礎(chǔ)理論,這是第1題,其中Pt、Pi、Pd分別是整份試卷、本大題、本小題的難度指標(biāo),分別是11.38、11.86和 18.33,用答對(duì)率算出。當(dāng)答對(duì)率為50%時(shí)其值為13,答對(duì)率為小于50%時(shí)其值大于13,答對(duì)率為大于50%時(shí)其值小于13。P為小題答對(duì)率:0.09,表明這是一道很難的題,只有9%的人答對(duì)。MA、MB、MC、MD、MO分別是選擇A、B、C、D選項(xiàng)和無(wú)效選擇的人成績(jī)。此成績(jī)一律轉(zhuǎn)換為以13為平均分,以4為標(biāo)準(zhǔn)差的標(biāo)準(zhǔn)分,其意義是:13表示等于全體平均水平,大于13表示高于全體平均水平,小于13表示低于全體平均水平。MO為-8.61說(shuō)明無(wú)效選擇的人的成績(jī)遠(yuǎn)遠(yuǎn)低于全體平均水平。第二行依次為:NO.OF CAN.是樣本考生數(shù)為1500人;KEY,本題正確答案是C;Ar、Br、Cr、Dr是各選擇項(xiàng)的區(qū)分度指標(biāo),使用的是雙列相關(guān)系數(shù)。區(qū)分度在-1~±1之間,一般正確答案的區(qū)分度要求大于0.3。干擾項(xiàng)的區(qū)分度要求在0以上為可以。這是表明本道題的四個(gè)選項(xiàng)只有B、C合乎要求,而干擾項(xiàng)A的區(qū)分度一般、D的區(qū)分度最低。其他小題可根據(jù)試題項(xiàng)目分析表按同樣的方法進(jìn)行分析。
(三) 試題難度與區(qū)分度分析
運(yùn)行GITEST3+系統(tǒng)會(huì)產(chǎn)生一個(gè)試題難度與區(qū)分度雙向總表,表中縱行表示試題區(qū)分度,橫行表示試題難易度,即答對(duì)率;TOTAL指各種難易程度的題目總數(shù)。NO.(<0.3)指各種難易程度的題目中區(qū)分度小于0.3的題目總數(shù)。表中數(shù)字是對(duì)答對(duì)率和區(qū)分度下的題目數(shù),TOTAL是該行或該列的累加和。VD5%、D15%、60%、E15%、VE5%分別是各種難度水平下的題應(yīng)占的比例和數(shù)字,下面一行的TOTAL是在本考試中題目實(shí)際難度分布情況,PASS行是實(shí)際可通過(guò)的題目數(shù),即符合要求的題目數(shù)。在理論上,一份好的試卷應(yīng)當(dāng)是非常難(答對(duì)率小于0.1)的試題占5%,即這次考試只允許有3道題;比較難(答對(duì)率0.1~0.3)的試題占15%,即這次考試只允許有7道題;中等難度(答對(duì)率為0.3~0.7)的試題占60%,即這次考試只允許有30道題;比較容易(答對(duì)率為0.7~0.9)的試題占15%,即這次考試只允許有7道題、很容易(答對(duì)率為0.9以上)的題目占5%,即這次考試只允許有3道題。經(jīng)過(guò)分析表明:非常難的試題有3道題目;比較難的試題沒(méi)有;中等難度的試題有14道題目;比較容易的試題31道題;很容易的沒(méi)有。說(shuō)明本試卷所含試題中只有26道題目符合要求,還有24道題目區(qū)分度等不符合要求。這些不符合要求的題目編號(hào)(ITEMS)將在下面各個(gè)大題分析表中列出,以便下一步進(jìn)行題目修改或替換。
(四) 各部分試題項(xiàng)目分析
基礎(chǔ)理論部分有20道題。1500名學(xué)生的平均分為 24.48 分,標(biāo)準(zhǔn)差為2.27;方差為5.14;答對(duì)率是0.61,答對(duì)率轉(zhuǎn)換的難度指標(biāo)Δ值小于13,表明答對(duì)率大于50%;這部分的R11信度指標(biāo)為0.36,低于0.90,即信度不高,不太合乎要求;區(qū)分度指標(biāo)在0.38,表明較好;這部分學(xué)生的成績(jī)分布偏態(tài)值小于0表示負(fù)偏態(tài),表明題目偏易。成績(jī)分布峰值大于0,表示峰“瘦窄”即成績(jī)分布集中,可以說(shuō)明學(xué)生對(duì)體育基礎(chǔ)理論認(rèn)識(shí)較好;這與總體分析是一致的。基礎(chǔ)體育理論部分特別難的題有3道;其中2道不符合乎要求即區(qū)分度小于 0.3,它們分別是第3道、第7道題;難題和特別容易的題沒(méi)有;中等難度的題有5道,只有第9道題不合乎要求;較容易的題有12道,其中只有5道題合乎要求,7題不合乎要求,分別是第5、6、10、16、17、18、20道題,說(shuō)明這些題目出得不好,不能很好的測(cè)試出學(xué)生對(duì)體育基礎(chǔ)理論認(rèn)知水平的高低。按照同樣的方法,可以對(duì)學(xué)生在籃球?qū)m?xiàng)理論和體育時(shí)政試題的作答情況以及試題的區(qū)分度等方面作出評(píng)價(jià)。
(五) 試卷總分析
表4是試卷總分析的其他數(shù)據(jù)。Mean指全體考生平均分32.88(為五十分制,百分制為65.76),SD為全體考生標(biāo)準(zhǔn)差,Varn為全體考生的方差,p+為答對(duì)率(0.66),pd為答對(duì)率轉(zhuǎn)換的難度指標(biāo)△值,R11和aVALUE分別是由KR20公式和Cronbach的a系數(shù)公式計(jì)算出的兩個(gè)信度指標(biāo),Rbis是區(qū)分度指標(biāo),Skew.是成績(jī)分布偏態(tài)值,這里0表示正態(tài),大于0表示正偏態(tài),即題目偏難;小于0表示負(fù)偏態(tài),即題目偏易。Kurt.為成績(jī)分布峰值:這里0表示正態(tài),大于0表示峰“瘦窄”,即成績(jī)分布集中,小于0表示峰“平緩”,即成績(jī)分布分散。從目前所得出的數(shù)據(jù)推斷,本試題項(xiàng)目難易度分布呈負(fù)偏態(tài)且分布峰值“瘦窄”,說(shuō)明學(xué)生的體育認(rèn)知水平普遍較高且部分學(xué)生具有同質(zhì)性。
五、 結(jié)論
本試卷平均分為65.76,說(shuō)明這是一份適中的試題。標(biāo)準(zhǔn)差為4.19期望標(biāo)準(zhǔn)差為7.12,最高分與最低分的全距為30,說(shuō)明分?jǐn)?shù)分布集中,整份試卷看,分?jǐn)?shù)分布屬“瘦窄”態(tài),試卷有待改進(jìn),測(cè)量誤差為±2.19。對(duì)試卷結(jié)果進(jìn)行因素分析表明,整份試卷能夠說(shuō)明39.06%的學(xué)生的體育理論水平,且體育基礎(chǔ)理論和專項(xiàng)理論屬一個(gè)因素,體育時(shí)政屬另一個(gè)因素。對(duì)試卷項(xiàng)目分析表明,整份試卷很容易的題目和較難的題目沒(méi)有、較容易的題目占62%、中等難度的題占28%、特別難的題占10%,說(shuō)明試卷區(qū)分度達(dá)到要求,但有24題未能達(dá)到要求。本文只是利用GITEST3+系統(tǒng)按經(jīng)典測(cè)試?yán)碚搶?duì)考試進(jìn)行分析,它還可以對(duì)考試進(jìn)行平行試題等值后產(chǎn)生試題難度和能力值調(diào)整參數(shù)對(duì)照表,如果試題太難或太易,可根據(jù)學(xué)生相對(duì)應(yīng)的答對(duì)題數(shù)的能力值對(duì)原始分?jǐn)?shù)進(jìn)行調(diào)整,從而不至于使考試分?jǐn)?shù)普遍偏高或偏低,影響對(duì)學(xué)生整體的體育學(xué)習(xí)評(píng)價(jià)。
參考文獻(xiàn):
[1]全國(guó)普通高等學(xué)校體育課程教學(xué)指導(dǎo)綱要.http:∥baike.baidu.com/view/644000.htm
[2]傅健.體育認(rèn)知形式與體育學(xué)習(xí)方式轉(zhuǎn)變[J].體育與科學(xué),2007.
[3]詩(shī)桂春.標(biāo)準(zhǔn)化考試:理論、原則與方法[M].廣東高等教育出版社,1986.
[4]張權(quán).語(yǔ)言測(cè)試中的項(xiàng)目分析與等值技術(shù):研究與應(yīng)用[M].高等教育出版社,2009.
作者簡(jiǎn)介:
王娟,湖南省長(zhǎng)沙市,湖南護(hù)理學(xué)校。