顧玉蓮,陳 瑩

(青島遠(yuǎn)洋船員學(xué)院,山東青島 266071)

海上專業(yè)英語(yǔ)平時(shí)成績(jī)信度與效度實(shí)證研究

顧玉蓮*,陳 瑩

(青島遠(yuǎn)洋船員學(xué)院,山東青島 266071)

通過(guò)實(shí)證方法,借助SPSS統(tǒng)計(jì)軟件,對(duì)青島遠(yuǎn)洋船員學(xué)院海上專業(yè)學(xué)生英語(yǔ)平時(shí)成績(jī)的信度和效度進(jìn)行分析,進(jìn)而探討保證學(xué)生平時(shí)成績(jī)信度和效度的方法。

青島遠(yuǎn)洋船員學(xué)院;海上專業(yè);英語(yǔ);平時(shí)成績(jī);信度;效度

平時(shí)成績(jī)是對(duì)學(xué)生學(xué)習(xí)的階段性和過(guò)程性評(píng)估,側(cè)重考查學(xué)生的學(xué)習(xí)態(tài)度、學(xué)習(xí)能力和學(xué)習(xí)策略。平時(shí)成績(jī)考核的目的是為了加強(qiáng)對(duì)學(xué)生學(xué)習(xí)過(guò)程的督促、指導(dǎo)和管理,促進(jìn)學(xué)生自主學(xué)習(xí),也為了更加全面地反映學(xué)生的學(xué)習(xí)情況,對(duì)學(xué)生學(xué)習(xí)作出更加合理的評(píng)價(jià)。

不少教師在教學(xué)實(shí)踐中都有這樣的發(fā)現(xiàn):部分學(xué)生平時(shí)學(xué)習(xí)認(rèn)真,按要求完成學(xué)習(xí)任務(wù),期末測(cè)試成績(jī)卻不理想;部分教師在取分依據(jù)、給分標(biāo)準(zhǔn)和操作程序等方面存在隨意性、偶然性和非規(guī)范性。本文通過(guò)數(shù)據(jù)分析研究以下問(wèn)題:不同教師對(duì)平時(shí)成績(jī)的評(píng)定是否存在差別?如有差別,在統(tǒng)計(jì)學(xué)意義上是否顯著?學(xué)生平時(shí)成績(jī)與期末測(cè)試成績(jī)之間的相關(guān)性如何?平時(shí)成績(jī)的高低對(duì)學(xué)生學(xué)習(xí)是否有影響?如何保證平時(shí)成績(jī)的信度和效度?

一、研究設(shè)計(jì)

本文采用實(shí)證研究的方法,借助SPSS13.0統(tǒng)計(jì)軟件對(duì)樣本數(shù)據(jù)進(jìn)行分析。抽取青島遠(yuǎn)洋船員學(xué)院2009級(jí)船舶駕駛和船舶機(jī)電專業(yè)共計(jì)12個(gè)合班,即24個(gè)自然班,涉及學(xué)生937人、任課教師12人。各班人數(shù)及各班入學(xué)第一學(xué)期平時(shí)成績(jī)均數(shù)與第一學(xué)期期末測(cè)試成績(jī)均數(shù)如表1所示。

表1 研究樣本及相關(guān)數(shù)據(jù)

青島遠(yuǎn)洋船員學(xué)院英語(yǔ)課的成績(jī)構(gòu)成及各部 分比例如表2所示。

表2 青島遠(yuǎn)洋船員學(xué)院英語(yǔ)課的成績(jī)構(gòu)成

二、分析與討論

1.數(shù)據(jù)分析

(1)對(duì)不同教師量分的方差分析。由表1可見(jiàn),學(xué)生平時(shí)成績(jī)普遍高于期末測(cè)試成績(jī),最大差值17,最小差值2,差值均數(shù)也達(dá)到7.9。這首先說(shuō)明教師在量分方面標(biāo)準(zhǔn)比較寬松,大都采取鼓勵(lì)為主的原則;其次說(shuō)明不同教師在評(píng)定平時(shí)成績(jī)上存在一定的差別。為調(diào)查這種差別是否顯著,借助SPSS13.0統(tǒng)計(jì)軟件對(duì)各班平時(shí)成績(jī)進(jìn)行方差分析。結(jié)果表明,不同教師對(duì)于平時(shí)成績(jī)的評(píng)定存在顯著差別(見(jiàn)表3),也就是說(shuō),不同教師評(píng)價(jià)學(xué)生的標(biāo)準(zhǔn)存在顯著差別。從這個(gè)層面上講,教師所評(píng)平時(shí)成績(jī)不具有很好的信度[1]。

表3 各班平時(shí)成績(jī)方差分析(ANOVA)

對(duì)比學(xué)生平時(shí)成績(jī)與學(xué)生評(píng)教分?jǐn)?shù)(見(jiàn)表4)發(fā)現(xiàn),學(xué)生平時(shí)成績(jī)均值明顯高于其他班級(jí)的教師3所得,學(xué)生評(píng)分也高于大多數(shù)教師。平時(shí)成績(jī)與學(xué)生評(píng)教之間的關(guān)系如何?師生之間在打分方面是否存在相互“取悅”的現(xiàn)象?取班級(jí)平時(shí)成績(jī)均數(shù)與學(xué)生給教師打分的值,做Spearman相關(guān)性分析。結(jié)果顯示相關(guān)系數(shù) r為0.021,顯著值p為0.948,p值遠(yuǎn)遠(yuǎn)大于0.05,故推翻原假設(shè),即證明教師給學(xué)生的平時(shí)成績(jī)與學(xué)生評(píng)教打分之間沒(méi)有顯著的聯(lián)系。

表4 教師任課班級(jí)平時(shí)成績(jī)均值與學(xué)生評(píng)教分值

(2)平時(shí)成績(jī)與期末測(cè)試成績(jī)的相關(guān)性。平時(shí)成績(jī)主要考核學(xué)生學(xué)習(xí)態(tài)度與學(xué)習(xí)任務(wù)的完成情況,而期末測(cè)試主要考核學(xué)生知識(shí)水平的提高,兩者各有側(cè)重,所以本研究中不期望平時(shí)成績(jī)與期末測(cè)試成績(jī)呈現(xiàn)完全正相關(guān),但不相關(guān)甚至負(fù)相關(guān)的情況同樣是不能接受的。取各班學(xué)生的平時(shí)成績(jī)與期末測(cè)試成績(jī)做兩個(gè)變量Pearson相關(guān)分析,得Pearson相關(guān)系數(shù)和相關(guān)顯著性如表5所示。

表5 各班平時(shí)成績(jī)與期末成績(jī)的相關(guān)性

結(jié)果顯示,所有班級(jí)學(xué)生的平時(shí)成績(jī)與期末測(cè)試成績(jī)均呈現(xiàn)出正相關(guān),其中1個(gè)班為一般正相關(guān),2個(gè)班為顯著正相關(guān),9個(gè)班為非常顯著正相關(guān)。這首先說(shuō)明學(xué)生學(xué)習(xí)過(guò)程中的表現(xiàn)是決定測(cè)試成績(jī)的重要因素,通過(guò)前者能在一定程度上對(duì)后者進(jìn)行預(yù)測(cè)。其次,則說(shuō)明教師所計(jì)平時(shí)成績(jī)具有較好的效度,具有一定的區(qū)分度。再次,也證明提高平時(shí)成績(jī)比例具有一定的可行性和有效性,對(duì)于考查學(xué)生的學(xué)習(xí)態(tài)度和評(píng)估學(xué)生的學(xué)習(xí)過(guò)程具有實(shí)用的意義。

(3)平時(shí)成績(jī)與進(jìn)步成績(jī)的相關(guān)性。取各班入學(xué)英語(yǔ)摸底成績(jī)平均值與各班第一學(xué)期英語(yǔ)期末考試成績(jī)均數(shù),得各班平均成績(jī)的進(jìn)步分?jǐn)?shù)值,將其與各班平時(shí)成績(jī)的均數(shù)作Spearman相關(guān)性分析,試求平時(shí)成績(jī)對(duì)學(xué)生學(xué)習(xí)能力和學(xué)習(xí)效果的影響(見(jiàn)表6)。

表6 平時(shí)成績(jī)與進(jìn)步分?jǐn)?shù)的相關(guān)性

表6顯示,學(xué)生平時(shí)成績(jī)與進(jìn)步分?jǐn)?shù)之間的正相關(guān)程度相當(dāng)高。形成此結(jié)果可能有兩點(diǎn)原因:其一,相對(duì)高的平時(shí)成績(jī)是學(xué)生學(xué)習(xí)態(tài)度端正、班級(jí)學(xué)風(fēng)良好的結(jié)果,這樣的學(xué)生和班級(jí)進(jìn)步幅度相對(duì)較大也在意料之中;其二,教師平時(shí)成績(jī)給分標(biāo)準(zhǔn)相對(duì)寬松,經(jīng)常鼓勵(lì)學(xué)生、肯定學(xué)生的學(xué)業(yè)表現(xiàn)對(duì)學(xué)生的學(xué)習(xí)會(huì)產(chǎn)生激勵(lì)和促進(jìn)作用,帶來(lái)學(xué)生知識(shí)水平的較大提高。

2.如何保證平時(shí)成績(jī)的信度與效度

(1)合理安排總評(píng)成績(jī)的組成及權(quán)重。近年來(lái),高校呈現(xiàn)加大公共課程平時(shí)成績(jī)權(quán)重的趨勢(shì),甚至有學(xué)者建議平時(shí)成績(jī)應(yīng)當(dāng)占到總評(píng)成績(jī)的60%。[2]筆者通過(guò)訪談了解到多數(shù)教師及學(xué)生認(rèn)為平時(shí)成績(jī)的比例應(yīng)不低于30%,在30%～50%為宜。這也順應(yīng)了2007年教育部頒布的《大學(xué)英語(yǔ)課程教學(xué)要求》中所倡導(dǎo)的以形成性評(píng)估與終結(jié)性評(píng)估相結(jié)合的模式評(píng)價(jià)學(xué)習(xí)。以加大平時(shí)成績(jī)比例為基本特征的形成性評(píng)估模式,有利于降低傳統(tǒng)考試的偶然性和單一性等不足,培養(yǎng)學(xué)生良好的學(xué)習(xí)習(xí)慣,使其重視學(xué)習(xí)過(guò)程,把學(xué)習(xí)能力的提高放到首位。

(2)制定平時(shí)成績(jī)記錄單和打分標(biāo)準(zhǔn),并要求教師嚴(yán)格執(zhí)行。制訂平時(shí)成績(jī)記錄單,作為學(xué)生學(xué)習(xí)檔案的一部分。記錄單上分列課堂表現(xiàn)、作業(yè)、自主學(xué)習(xí)和平時(shí)測(cè)驗(yàn)等部分,要求每一部分記錄至少兩次成績(jī),取其均值作為該部分得分,最終按照比例算得平時(shí)成績(jī)。同時(shí),基于教學(xué)目標(biāo)選擇合適的依據(jù),對(duì)平時(shí)成績(jī)各構(gòu)成項(xiàng)目的考核盡可能量化。對(duì)于不易量化的依據(jù),比如筆記,也設(shè)定一個(gè)參考的標(biāo)準(zhǔn),可按照框架的完整性和內(nèi)容的充實(shí)性評(píng)分。[3]明晰的取分依據(jù)是保證平時(shí)成績(jī)信度與效度的前提。

制定統(tǒng)一的評(píng)分標(biāo)準(zhǔn)只是第一步,還必須要求教師嚴(yán)格執(zhí)行標(biāo)準(zhǔn),盡量縮小打分差距。表1中所顯示的輪管3班和駕駛3班的平時(shí)成績(jī)均值比期末測(cè)試均值分別高出了17分和16.1分。誠(chéng)然,如前所述平時(shí)成績(jī)考核當(dāng)中對(duì)學(xué)生的平時(shí)表現(xiàn)多加肯定能有效促進(jìn)學(xué)習(xí),但是過(guò)高的平時(shí)成績(jī)很難保證評(píng)價(jià)的效度,也勢(shì)必會(huì)影響區(qū)分度,所以要求教師評(píng)分時(shí)拉開檔次。

要降低不同教師平時(shí)成績(jī)量分差別對(duì)學(xué)生成績(jī)的影響,還需采取其他一些做法。比如,在評(píng)定獎(jiǎng)學(xué)金的時(shí)候,應(yīng)以班級(jí)為單位配以一定比例,而不采取各專業(yè)年級(jí)統(tǒng)排的方法。這樣,只要班級(jí)內(nèi)部的平時(shí)成績(jī)有信度、效度和區(qū)分度,獎(jiǎng)學(xué)金的分配就會(huì)相對(duì)合理。

(3)對(duì)學(xué)生自主學(xué)習(xí)情況的考查需要網(wǎng)絡(luò)平臺(tái)的支持。平時(shí)成績(jī)的設(shè)計(jì)要以“學(xué)”為中心,即以學(xué)生的自主學(xué)習(xí)為中心。這就要求平時(shí)成績(jī)要對(duì)學(xué)生的學(xué)習(xí)具有激勵(lì)和督查的雙重作用。[4]評(píng)價(jià)學(xué)生的自主學(xué)習(xí)活動(dòng)除檢查學(xué)生的學(xué)習(xí)筆記、讀書筆記之外,更需要有網(wǎng)絡(luò)平臺(tái)的支撐。當(dāng)前,一些院校開設(shè)了師生交流的網(wǎng)站或者引進(jìn)了多媒體自主學(xué)習(xí)系統(tǒng),無(wú)論是網(wǎng)站還是自主學(xué)習(xí)系統(tǒng)中,都需要有能夠記錄學(xué)生學(xué)習(xí)行為的功能或軟件,以方便教師掌握學(xué)生的自主學(xué)習(xí)開展情況,也為平時(shí)成績(jī)量分提供有效依據(jù)。

(4)確保平時(shí)成績(jī)公開、公正,重視平時(shí)成績(jī)的反饋?zhàn)饔?。要做到公開、公正,有三點(diǎn)要求:其一,教師在首次上課時(shí)就公布取分依據(jù),讓學(xué)生清楚平時(shí)成績(jī)的構(gòu)成和考核標(biāo)準(zhǔn);其二,將學(xué)生每次的得分及時(shí)、明晰地錄入平時(shí)成績(jī)記錄單,允許學(xué)生查看,并認(rèn)真對(duì)待學(xué)生對(duì)自己的成績(jī)提出的異議,如有偏誤及時(shí)糾正;其三,學(xué)?？梢笕握n教師在考試之前將平時(shí)成績(jī)錄入并提交教務(wù)系統(tǒng),以防止任課教師參照卷面成績(jī)對(duì)平時(shí)成績(jī)作出隨意的調(diào)整。此外,還可以通過(guò)其他途徑確保平時(shí)成績(jī)的公開、公正,比如引入學(xué)生自評(píng)和同學(xué)互評(píng)的評(píng)價(jià)方式作為師評(píng)的有力補(bǔ)充。

三、結(jié) 語(yǔ)

本研究以實(shí)證的方法,對(duì)平時(shí)成績(jī)的信度與效度進(jìn)行初步的研究和探討。結(jié)果表明,青島遠(yuǎn)洋船員學(xué)院英語(yǔ)教師所評(píng)平時(shí)成績(jī)有較好的效度和區(qū)分度,但不同教師評(píng)定平時(shí)成績(jī)的標(biāo)準(zhǔn)存在顯著差別。進(jìn)而從學(xué)校制度、硬件支持和課堂實(shí)施等層面探討了保證平時(shí)成績(jī)信度與效度的方法。

目前平時(shí)成績(jī)考核面臨著巨大的難題:多數(shù)院校的英語(yǔ)課程是按照大班制開設(shè)的,課堂人數(shù)多達(dá)七、八十甚至上百人,準(zhǔn)確評(píng)價(jià)如此眾多學(xué)生的課堂表現(xiàn)、作業(yè)完成情況、自主學(xué)習(xí)開展情況和平時(shí)測(cè)驗(yàn)無(wú)論在時(shí)間上還是精力上對(duì)任課教師都是極大的挑戰(zhàn)。如何能高效地考核學(xué)生平時(shí)學(xué)業(yè)表現(xiàn)值得進(jìn)一步探究。

[1]HEATON J B.Writing English language tests[M].北京:外語(yǔ)教學(xué)與研究出版社,2000:159-168.

[2]劉壽堂.大學(xué)公共課程平時(shí)成績(jī)考評(píng)手段質(zhì)疑及商榷[J].黑龍江高教研究,2009(2):174-176.

[3]陳冰杰,邵青山,范文芹.大學(xué)生平時(shí)成績(jī)與期末考試關(guān)系研究[J].運(yùn)城學(xué)院學(xué)報(bào),2006(6):69-71.

[4]張 卓.模糊綜合評(píng)判法在學(xué)生平時(shí)成績(jī)考核中的應(yīng)用[J].廣州大學(xué)學(xué)報(bào):社會(huì)科學(xué)版,2009(5):62-64.

U676.2

A

1006-8724(2010)03-0088-03

2010-05-23

青島遠(yuǎn)洋船員學(xué)院教改課題“大學(xué)英語(yǔ)基礎(chǔ)課程形成性評(píng)估實(shí)踐與研究”

顧玉蓮(1979-),女,講師,主要從事應(yīng)用語(yǔ)言學(xué)與英語(yǔ)教學(xué)研究。