韓 后 王冬青通訊作者】
(華南師范大學(xué) 教育信息技術(shù)學(xué)院,廣東廣州510631)
隨著教育改革的進(jìn)行,有效學(xué)習(xí)的研究成為焦點(diǎn)話題之一。在信息時(shí)代,面對海量的信息、知識和技能,如果學(xué)習(xí)方式不當(dāng),很容易陷入忙碌但無效的學(xué)習(xí)狀態(tài)之中。反饋是教學(xué)過程的必要環(huán)節(jié)、形成性評價(jià)的重要組成部分,也是有效學(xué)習(xí)發(fā)生的基本要素之一?!盎诜答亴W(xué)習(xí)”的觀點(diǎn)認(rèn)為“教學(xué)就意味著提供反饋”[1]。
傳統(tǒng)教學(xué)環(huán)境中,反饋的實(shí)施存在一定的問題,教師不能及時(shí)、全面了解學(xué)生的學(xué)習(xí)情況,在反饋信息方面存在一定的主觀性、片面性,并帶有一定的延遲:(1)教師往往憑借教學(xué)經(jīng)驗(yàn),根據(jù)學(xué)生的表情判斷學(xué)生對知識的掌握情況,反饋效果難以測量;(2)反饋的參與面較窄,教師難以同時(shí)對多個(gè)學(xué)生提供反饋輔導(dǎo),難以面向全體;(3)針對作業(yè)、練習(xí)和測試的反饋帶有較大的延遲性,而且反饋信息不夠具體全面,難以為學(xué)生提供及時(shí)、有針對性的學(xué)習(xí)建議。
技術(shù)在教學(xué)中的應(yīng)用為學(xué)習(xí)者提供及時(shí)反饋和更多的學(xué)習(xí)機(jī)會[2]:(1)計(jì)算機(jī)具有強(qiáng)大的數(shù)據(jù)存儲與分析功能,能夠全面記錄學(xué)生的學(xué)習(xí)過程數(shù)據(jù),并為教師和學(xué)生提供全面的測評報(bào)告;(2)網(wǎng)絡(luò)中存儲了大量優(yōu)質(zhì)的學(xué)習(xí)資源,如試題、解析、教案等,為反饋提供內(nèi)容來源;(3)理想情況下的評價(jià)反饋系統(tǒng)具有較高的智能性,能夠根據(jù)學(xué)生的水平、任務(wù)的難度等自動為學(xué)習(xí)者提供個(gè)性化的反饋[3],真正體現(xiàn)“一對一”教學(xué)的理念、促進(jìn)有效學(xué)習(xí)。
有效學(xué)習(xí)是解決學(xué)習(xí)內(nèi)容無限性和學(xué)習(xí)時(shí)間有限性這一基本矛盾的重要途徑。國內(nèi)外很多學(xué)者從不同方面對有效學(xué)習(xí)發(fā)生的條件進(jìn)行界定:斯皮策[4]從學(xué)習(xí)動機(jī)角度提出有效學(xué)習(xí)的發(fā)生取決于以往的學(xué)習(xí)體驗(yàn)及現(xiàn)有學(xué)習(xí)情境提供的誘因;拉爾夫泰勒[5]從學(xué)習(xí)者的學(xué)習(xí)心理及學(xué)習(xí)行為方面將有效學(xué)習(xí)發(fā)生的條件歸納為積極主動的學(xué)習(xí)動機(jī)、清晰的學(xué)習(xí)目標(biāo)、適宜的學(xué)習(xí)任務(wù)、學(xué)習(xí)者解決問題的信心、獎勵和反饋、不斷地練習(xí)和學(xué)習(xí)遷移等;我國學(xué)者邵瑞珍等[6]從教與學(xué)兩個(gè)方面考慮,認(rèn)為有效學(xué)習(xí)包括外部條件(主要指教師提供的信息)、學(xué)習(xí)者原有知識和技能以及學(xué)習(xí)者的學(xué)習(xí)動機(jī)和學(xué)習(xí)策略三個(gè)必要條件。
本文認(rèn)為有效學(xué)習(xí)的發(fā)生離不開教師、學(xué)生以及學(xué)習(xí)環(huán)境三方面內(nèi)容。(1)教師方面,包括教學(xué)目標(biāo)設(shè)置、教學(xué)內(nèi)容選擇以及教學(xué)任務(wù)安排等。調(diào)控好教學(xué)過程,使教與學(xué)處于優(yōu)化、平衡的狀態(tài),離不開反饋;(2)學(xué)習(xí)方面,包括學(xué)習(xí)者的學(xué)習(xí)準(zhǔn)備和學(xué)習(xí)者的主動加工活動。美國心理學(xué)家加涅認(rèn)為:“學(xué)習(xí)的每一個(gè)動作,如果需要完成,就需要反饋,反饋是學(xué)生學(xué)習(xí)的重要條件”;(3)學(xué)習(xí)環(huán)境方面,主要指教師、學(xué)生以及學(xué)習(xí)內(nèi)容之間交互的平臺或系統(tǒng)。交互數(shù)據(jù)本身也是反饋內(nèi)容的數(shù)據(jù)來源,平臺提供的反饋信息能夠進(jìn)一步改進(jìn)學(xué)習(xí)。
形成性評價(jià)是當(dāng)前評價(jià)領(lǐng)域研究的熱點(diǎn)問題,反饋是形成性評價(jià)的重要組成部分,對形成性評價(jià)的效果起著至關(guān)重要的作用[7]。作為自我調(diào)節(jié)學(xué)習(xí)的關(guān)鍵環(huán)節(jié),反饋可以有效地促進(jìn)學(xué)習(xí)者建構(gòu)知識體系、改進(jìn)認(rèn)知策略、優(yōu)化目標(biāo)設(shè)置、調(diào)整學(xué)習(xí)策略,進(jìn)而提高學(xué)習(xí)效果和效率。當(dāng)前對反饋的研究不僅僅關(guān)注反饋是否能夠促進(jìn)學(xué)習(xí),而且關(guān)注反饋如何促進(jìn)學(xué)習(xí)的問題。Hatti從反饋縮小學(xué)習(xí)者當(dāng)前水平與預(yù)期目標(biāo)之間的差距方面提出了促進(jìn)有效學(xué)習(xí)的反饋模型[8],指出有效反饋必須回答的三個(gè)問題:(1)我要去哪里,即我的目標(biāo)是什么;(2)我現(xiàn)在在哪里,即我已經(jīng)取得了哪些進(jìn)步;(3)我接著要去哪里,即為了取得更大的進(jìn)步,我需要采取哪些行動。通過回答上述三個(gè)問題,可以使反饋達(dá)到促進(jìn)有效學(xué)習(xí)的目的。但對于“什么樣的反饋能起作用”這個(gè)問題至今沒有定論,大量研究表明在學(xué)習(xí)者能理解的范圍內(nèi),正確、有效、客觀、有重點(diǎn)且明確的反饋能夠促進(jìn)有效學(xué)習(xí)。同時(shí),只有學(xué)習(xí)者愿意接受反饋并且正確使用反饋信息時(shí),反饋才能發(fā)揮事半功倍的效果。
技術(shù)與評價(jià)思想的融合,引發(fā)了評價(jià)內(nèi)容、方法和形式的深刻變革,主要體現(xiàn)在強(qiáng)調(diào)評價(jià)活動與學(xué)習(xí)活動的整合,通過形成性評價(jià)來促進(jìn)學(xué)生的學(xué)習(xí)與發(fā)展[9]。針對評價(jià)過程與結(jié)果的反饋也更加全面、呈現(xiàn)形式愈發(fā)多樣,為學(xué)生的學(xué)習(xí)提供了有力的支持。
本文從學(xué)生內(nèi)部處理、教師外部干預(yù)以及技術(shù)支持環(huán)境三方面提出評價(jià)反饋系統(tǒng)的設(shè)計(jì)模型,如圖1所示。
首先,在教師教學(xué)干預(yù)方面,教師對教學(xué)的管理,根據(jù)教學(xué)過程可以將其分為制定任務(wù)、針對性教學(xué)、個(gè)別化輔導(dǎo)、教學(xué)質(zhì)量分析四個(gè)階段。每個(gè)階段,教師會安排不同的教學(xué)內(nèi)容、設(shè)置不同的學(xué)習(xí)活動。教師既可以使用傳統(tǒng)的方式為學(xué)習(xí)者提供活動和內(nèi)容、觀察學(xué)習(xí)者的表現(xiàn)、改進(jìn)教學(xué)并為學(xué)習(xí)者提供學(xué)習(xí)指導(dǎo)意見;又可以通過技術(shù)支持環(huán)境(系統(tǒng)或平臺)發(fā)布學(xué)習(xí)活動和教學(xué)內(nèi)容,在系統(tǒng)或平臺給出的測評報(bào)告、反饋建議等反饋信息的基礎(chǔ)上調(diào)整教學(xué),為學(xué)習(xí)者提供個(gè)性化的學(xué)習(xí)資源。這些資源被稱為學(xué)生進(jìn)一步學(xué)習(xí)的“腳手架”,從而促進(jìn)學(xué)生的知識學(xué)習(xí)和技能發(fā)展。
其次,在學(xué)生內(nèi)部反饋方面,學(xué)生在完成任務(wù)的過程中監(jiān)控成績和學(xué)習(xí)過程記錄了解差距,能夠產(chǎn)生各種自我反饋;學(xué)生能夠?qū)ν獠啃畔⑦M(jìn)行解釋和過濾,對反饋在影響下一步行動之前做出解釋和內(nèi)化,即通過增加努力程度、調(diào)整學(xué)習(xí)目標(biāo)、優(yōu)化學(xué)習(xí)策略,縮小當(dāng)前水平與預(yù)期目標(biāo)的差距。除此之外,伙伴反饋也作為一種外部反饋,對學(xué)習(xí)起到一定的促進(jìn)作用,學(xué)習(xí)者可以與伙伴合作、查詢同伴與自己過去成績,構(gòu)建一個(gè)“同伴壓力和競爭”機(jī)制,讓學(xué)生了解自己和他人的作答情況,以此勉勵自己,形成良好的互動。
最后,技術(shù)支持環(huán)境能夠全面記錄學(xué)習(xí)者學(xué)習(xí)過程及學(xué)習(xí)結(jié)果數(shù)據(jù),并根據(jù)學(xué)習(xí)評價(jià)信息構(gòu)建學(xué)生模型、領(lǐng)域模型、認(rèn)知診斷模型等。一方面為學(xué)習(xí)者提供自動反饋,當(dāng)學(xué)生提交評價(jià)任務(wù)后,系統(tǒng)進(jìn)行自動評閱并提供反饋內(nèi)容,如標(biāo)準(zhǔn)答案、分?jǐn)?shù)以及適合學(xué)習(xí)者知識水平和認(rèn)知狀態(tài)的學(xué)習(xí)內(nèi)容;另一方面為學(xué)習(xí)者提供學(xué)習(xí)資源推送服務(wù),包括學(xué)生根據(jù)自我評價(jià)結(jié)果訂閱符合自己認(rèn)知特點(diǎn)的學(xué)習(xí)資源,以及系統(tǒng)根據(jù)學(xué)生模型主動為學(xué)生推薦的學(xué)習(xí)資源。
圖1 評價(jià)反饋系統(tǒng)設(shè)計(jì)模型
測評報(bào)告能夠通過對學(xué)習(xí)過程和學(xué)習(xí)結(jié)果的統(tǒng)計(jì)分析,提供學(xué)習(xí)者學(xué)習(xí)過程中存在的問題,為有效學(xué)習(xí)的開展做出科學(xué)依據(jù)。它作為教師對學(xué)生學(xué)習(xí)過程最重要的外部干預(yù)手段之一,被普遍應(yīng)用于教學(xué)活動中。根據(jù)評價(jià)類型的不同,測評報(bào)告可以分為總結(jié)性評價(jià)報(bào)告(如,學(xué)業(yè)水平報(bào)告)和形成性評價(jià)報(bào)告兩類。學(xué)業(yè)水平報(bào)告(國外又稱分?jǐn)?shù)報(bào)告)屬于學(xué)業(yè)反饋的范疇,通過控制分?jǐn)?shù)報(bào)告的反饋形式對學(xué)習(xí)者進(jìn)行干預(yù),可以有效地影響學(xué)生的表現(xiàn)[10];形成性評價(jià)報(bào)告基于具體的學(xué)習(xí)平臺,能夠?yàn)閷W(xué)習(xí)者提供章節(jié)內(nèi)容的分析報(bào)告,并提供一定的學(xué)習(xí)建議。有研究表明,當(dāng)向?qū)W習(xí)者提供學(xué)習(xí)建議時(shí),學(xué)習(xí)者的學(xué)習(xí)動機(jī)和學(xué)習(xí)效率都會受到促進(jìn)[11]。本文在總結(jié)性評價(jià)和形成性評價(jià)并重原則的指導(dǎo)下,在評價(jià)反饋系統(tǒng)中進(jìn)行測評報(bào)告的設(shè)計(jì),其分析流程如圖2所示。
本文構(gòu)建了評價(jià)反饋系統(tǒng)原型—ilearning,并在其中實(shí)現(xiàn)了測評報(bào)告的分析流程。學(xué)生可以在系統(tǒng)中進(jìn)行目標(biāo)導(dǎo)向?qū)W習(xí)、開展針對性的迭代訓(xùn)練與錯題專項(xiàng)練習(xí)、完成教師統(tǒng)一組織的測試或作業(yè)等,教師可以為學(xué)生提供個(gè)性化輔導(dǎo)和關(guān)鍵學(xué)習(xí)指導(dǎo),系統(tǒng)自動記錄學(xué)生學(xué)習(xí)過程數(shù)據(jù)和學(xué)習(xí)結(jié)果數(shù)據(jù),為學(xué)生提供知識點(diǎn)掌握情況分析、歷次作答情況分析、試卷作答情況分析以及相應(yīng)的學(xué)習(xí)建議等反饋內(nèi)容,幫助學(xué)習(xí)者更好地了解當(dāng)前學(xué)習(xí)狀態(tài)。測評報(bào)告系統(tǒng)界面如圖3、圖4所示。
圖2 測評報(bào)告分析流程
圖3 測評報(bào)告成績分析
圖4 測評報(bào)告知識點(diǎn)分析
為驗(yàn)證該評價(jià)反饋系統(tǒng)的有效性,本文選取大一《計(jì)算機(jī)導(dǎo)論》中技能操作部分(含Windows、Office、IE等)作為實(shí)驗(yàn)內(nèi)容,華南師范大學(xué)教育技術(shù)1班、多媒體3班96名學(xué)生作為實(shí)驗(yàn)對象,進(jìn)行實(shí)驗(yàn)組對照組前后測準(zhǔn)實(shí)驗(yàn)設(shè)計(jì)。技能操作部分的自動評價(jià)借助itutor[12]實(shí)現(xiàn),學(xué)生學(xué)習(xí)過程數(shù)據(jù)和結(jié)果數(shù)據(jù)實(shí)時(shí)傳送到該評價(jià)反饋系統(tǒng)中。實(shí)驗(yàn)組使用評價(jià)反饋系統(tǒng)輔助學(xué)習(xí),對照組則不使用該系統(tǒng)。
在實(shí)驗(yàn)開始前,首先對兩個(gè)班學(xué)生計(jì)算機(jī)基礎(chǔ)水平進(jìn)行測試(即前測)。測試結(jié)果表明,兩個(gè)班學(xué)生的技能操作水平無顯著差異(t=0.255,p>0.05),為此我們選擇教育技術(shù)1班為實(shí)驗(yàn)組,多媒體3班為對照組。隨后,根據(jù)前測結(jié)果將參與實(shí)驗(yàn)的學(xué)生分為高分組、中分組和低分組(如表所示),其中得分前33%的學(xué)生為高分組、得分后33%的學(xué)生為低分組、中間則為中分組。經(jīng)過一個(gè)學(xué)期的實(shí)驗(yàn)后,對所有參與實(shí)驗(yàn)的學(xué)生進(jìn)行IT技能水平測試(即后測),分析是否使用評價(jià)反饋系統(tǒng)(即不同的教學(xué)方法)對不同學(xué)習(xí)程度的學(xué)生計(jì)算機(jī)掌握水平的影響。
除去前、后測成績?yōu)榭盏膶W(xué)生,實(shí)驗(yàn)收集94名學(xué)生的兩次成績,其中教育技術(shù)1班48人,多媒體班46人。計(jì)算機(jī)水平分組如表所示。對收集到的數(shù)據(jù)采用兩因素方差分析、單因素方差分析以及事后檢驗(yàn)等方法進(jìn)行分析。
表4 計(jì)算機(jī)水平分組
(1)不同計(jì)算機(jī)水平和不同教學(xué)方法對學(xué)生技能操作水平的影響
表5 教學(xué)方法和計(jì)算機(jī)水平兩因素方差分析(n=94)
在兩因素方差分析之前,對方差齊整性(F5,88=2.207,p>0.05)進(jìn)行檢驗(yàn),結(jié)果表明因變量符合方差齊整性檢驗(yàn)。兩因素方差分析結(jié)果如表,不同教學(xué)方法和不同計(jì)算機(jī)水平對后測結(jié)果有顯著的影響。LSD事后檢驗(yàn)表明,使用評價(jià)反饋系統(tǒng)進(jìn)行學(xué)習(xí)的學(xué)生明顯比不使用該系統(tǒng)的學(xué)生后測成績高。不同教學(xué)方法與不同計(jì)算機(jī)水平的交互效應(yīng)顯著(F2,88=3.164,p<0.05)。
(2)不同教學(xué)方法下不同計(jì)算機(jī)水平對學(xué)生技能操作水平的影響
表6 不同教學(xué)方法下計(jì)算機(jī)水平方差分析
在進(jìn)行單因素方差分析前,對不同教學(xué)方法下計(jì)算機(jī)水平的方差齊整性(實(shí)驗(yàn)組,F(xiàn)2,45=0.257,p>0.05;對照組,F(xiàn)2,43=3.598,p<0.05)進(jìn)行檢驗(yàn),對照組不符合方差齊整性檢驗(yàn),因此在事后分析中采用Dunnett方法進(jìn)行檢驗(yàn)。單因素方差分析結(jié)果如表所示,實(shí)驗(yàn)組中不同計(jì)算機(jī)水平的學(xué)生后測成績無顯著差異(F2,45=0.213,p>0.05),即高分組、中分組與低分組學(xué)生的后測成績相差不大;對照組中不同計(jì)算機(jī)水平的學(xué)生后測成績有顯著差異(F2,43=6.301,p<0.01),Dunnett事后檢驗(yàn)表明,中分組和高分組學(xué)生的后測成績明顯高于低分組學(xué)生的后測成績,然而中分組和高分組學(xué)生之間無顯著差異。
(3)不同計(jì)算機(jī)水平下不同教學(xué)方法對學(xué)生技能水平測試的影響
表7 不同計(jì)算機(jī)水平下評價(jià)反饋系統(tǒng)功能方差分析表
在進(jìn)行單因素方差分析之前,對不同計(jì)算機(jī)水平下不同教學(xué)方法的方差齊整性(高分組,F(xiàn)1,27=0.059,p>0.05;中分組,F(xiàn)1,32=0.000,p>0.05;低分組,F(xiàn)1,29=3.742,p>0.05)進(jìn)行檢驗(yàn),結(jié)果沒有違反方差齊整性假設(shè)。單因素方差分析結(jié)果如表所示,在不同計(jì)算機(jī)水平前提下,不同教學(xué)方法對后測成績有顯著影響。使用評價(jià)反饋系統(tǒng)的實(shí)驗(yàn)組中低分組學(xué)生的成績明顯高于不使用評價(jià)反饋系統(tǒng)的對照組中低分組學(xué)生(F1,29=12.624,p<0.01),實(shí)驗(yàn)組中高分組和中分組學(xué)生的后測成績均高于控制組中高分組和中分組學(xué)生,但在統(tǒng)計(jì)學(xué)上差異不顯著。
通過比較表和表發(fā)現(xiàn):與不使用評價(jià)反饋系統(tǒng)相比,使用評價(jià)反饋系統(tǒng)能夠更有效的促進(jìn)學(xué)生對計(jì)算機(jī)基本操作技能的掌握。并且,對于計(jì)算機(jī)水平較差的低分組學(xué)生有更大的促進(jìn)作用,有助于他們縮小與計(jì)算機(jī)水平較高的中分組與高分組學(xué)生的差距。計(jì)算機(jī)水平較低的學(xué)生學(xué)習(xí)計(jì)算機(jī)操作技能時(shí)存在困難,他們需要更多的指導(dǎo)和幫助。然而,在不使用評價(jià)反饋系統(tǒng)的對照組中,計(jì)算機(jī)水平較差的學(xué)生后測成績也較差。
反饋是有效學(xué)習(xí)發(fā)生的關(guān)鍵條件,測評報(bào)告是反饋的一種重要形式。如何設(shè)計(jì)評價(jià)反饋系統(tǒng)中的測評報(bào)告以促進(jìn)有效學(xué)習(xí)是研究者必須考慮的問題之一。本文以促進(jìn)有效學(xué)習(xí)為出發(fā)點(diǎn),提出了評價(jià)反饋系統(tǒng)的設(shè)計(jì)模型,以及該系統(tǒng)中測評報(bào)告的分析流程,并在ilearning原型系統(tǒng)中進(jìn)行實(shí)現(xiàn),應(yīng)用效果表明包含測評報(bào)告功能的評價(jià)反饋系統(tǒng)能夠提高學(xué)習(xí)效果。信息時(shí)代云計(jì)算、大數(shù)據(jù)正在逐步擴(kuò)展并深入到教育領(lǐng)域,在云計(jì)算、大數(shù)據(jù)技術(shù)背景下如何分析評價(jià)數(shù)據(jù)并為學(xué)生提供個(gè)性化反饋是下一步研究的重點(diǎn)。
[1]Bacic, B.. Computer at the university: opportunities for tailoring automated marking and digital feedback, F, 2003[C].IEEE.
[2]Ashtom, H., S., Beevers, C., E., Korabinski, A., A., et al. Incorporating partial credit in computer_aided assessment of mathematics in secondary education[J]. British Journal of Educational Technology, 2006,(1):93-119.
[3]Mason, B., J., Bruning, R.. Providing feedback in computer-based instruction: What the research tells us[OL].
[4]盛群力,李志強(qiáng).現(xiàn)代教學(xué)設(shè)計(jì)論[M].浙江教育出版社,1998.
[5]Tyler, W., R.. Conditions for effective learning[M]. The University of Chicago Press, 1985(Education in School and Nonschool Settings (84 Yearbook of the NSSE)),1985:203-208.
[6]邵瑞珍.教育心理[M].上海:上海教育出版社, 1997.
[7]Bell, B., Cowie, B.. The characteristics of formative assessment in science education[J]. Science Education, 2001,(5):536-553.
[8]Hattie, J., Timperley, H.. The power of feedback[J]. Review of Educational Research, 2007,(1):81-112.
[9]Chang, C., C.. Building a web-based learning portfolio for authentic assessment; proceedings of the computers in education[A], 2002 Proceedings International Conference on, F, 2002[C]. IEEE.
[10]Locke, E., A., Latham, G., P.. A theory of goal setting & task performance[M]. Prentice-Hall, Inc, 1990.
[11]王文江.監(jiān)控與評價(jià)“診斷書”:北京義務(wù)教育改革一大亮點(diǎn)[J].教育,2010,(8): 40-41.
[12]王冬青,柳泉波,任光杰等.一種面向問題解決的智能導(dǎo)師系統(tǒng)[J].中國電化教育, 2008,(8):90-94.