杜茹娟

（西北大學 現(xiàn)代教育技術(shù)中心，陜西西安710069）

基于網(wǎng)絡(luò)學習的過程性評價指標研究

杜茹娟

（西北大學 現(xiàn)代教育技術(shù)中心，陜西西安710069）

網(wǎng)絡(luò)在線學習的日益盛行，給學習評價帶來了新的挑戰(zhàn)，傳統(tǒng)的單一評價方式已經(jīng)不能科學全面地反映出學習者的學習效果。本文首先介紹了網(wǎng)絡(luò)學習行為及網(wǎng)絡(luò)學習評價的內(nèi)涵，并將網(wǎng)絡(luò)學習評價與傳統(tǒng)面授式學習評價進行對比得出網(wǎng)絡(luò)學習評價的優(yōu)勢；其次分析總結(jié)出現(xiàn)有網(wǎng)絡(luò)學習評價模型存在的缺陷，說明本文研究的重要意義；最后通過對學習者在網(wǎng)絡(luò)學習中的一系列行為的比較與分析，制定出科學全面的網(wǎng)絡(luò)學習評價指標。

學習評價；網(wǎng)絡(luò)學習行為；學習評價指標選??；學習效果

一、引言

互聯(lián)網(wǎng)的飛速發(fā)展給教育教學產(chǎn)業(yè)帶來了日新月異的變化。傳統(tǒng)的面授教育模式等方式方法已不能滿足人們對于學習知識的需求，越來越來多的人希望能通過網(wǎng)絡(luò)獲取到優(yōu)質(zhì)的學習資源，近幾年國內(nèi)外遠程教育課程、公共教育服務(wù)平臺、網(wǎng)絡(luò)培訓班等新型教育模式的相繼出現(xiàn)，給傳統(tǒng)的教育教學模式帶來了巨大變革。由此帶來的對學習者學習評價的方式方法需要有新的途徑來解決。傳統(tǒng)試卷考試的學習評價方式已不能滿足新型的網(wǎng)絡(luò)學習。目前，我國雖然有很多網(wǎng)絡(luò)學習平臺，但經(jīng)過調(diào)查與統(tǒng)計發(fā)現(xiàn)，對于網(wǎng)絡(luò)學習的學習效果評價還存在不完善不科學等缺陷，尚未建立完善實用科學的網(wǎng)絡(luò)學習評價指標體系。

二、理論研究

學習行為指的是在有遺傳基因的基礎(chǔ)上，在環(huán)境的作用下，通過一系列生活經(jīng)驗及學習所獲的知識和技能。但縱觀目前的研究現(xiàn)狀來看，關(guān)于網(wǎng)絡(luò)學習行為的具體定義在國內(nèi)外還存在一定爭議，比較常見的概念有“在線學習行為”、“數(shù)字化學習行為”等。沿用最多的定義是：“在線學習行為是指學習者再由現(xiàn)代信息技術(shù)所創(chuàng)設(shè)的、具有全新溝通機制與豐富資源的學習環(huán)境中開展的遠程自主學習行為[1]”。

評價，就是指依據(jù)明確的目標，按照一定的標準，采用科學方法，測量對象的功能、品質(zhì)和屬性，并對評價對象做出價值性判斷[2]。學習評價作為學習系統(tǒng)中最終要呈現(xiàn)的部分，其反饋調(diào)節(jié)機制具有不可不忽視的重要作用。學習評價有三要素，分別為：評價對象，評價指標體系，評判者。三者的關(guān)系如圖1所示。

圖1 三者關(guān)系

其中評價指標體系的建立是近年來的研究熱點，目前常見的指標體系中以考試成績及問卷調(diào)查的結(jié)果為主要指標。根據(jù)評價的時間段及目的的不同，學習評價分為三類：形成性評價、總結(jié)性評價、診斷性評價，其中以形成性評價和和總結(jié)性評價使用居多[3]。

網(wǎng)絡(luò)學習評價屬于學習評價的子范疇，具備學習評價三個方面的含義（價值判斷、評價發(fā)展、參照標準）。然而，網(wǎng)絡(luò)學習評價與傳統(tǒng)的面授學習式學習評價相比，又有很多不同之處，比如教與學在空間或時間上的分離，學習環(huán)境、學習所需的軟硬件條件等。在網(wǎng)絡(luò)學習中主要依靠學習者的自覺性，既自主學習等主觀因素，因此，網(wǎng)絡(luò)學習評價也會表現(xiàn)出其獨特的特點。

（1）網(wǎng)絡(luò)學習評價充分利用了互聯(lián)網(wǎng)絡(luò)的技術(shù)優(yōu)勢，縮短了評價的周期，提高了評價的效率，增強了評價的準確性，能夠?qū)υu價結(jié)果進行及時反饋與評估，同時降低了教學資源的使用量；

（2）網(wǎng)絡(luò)學習評價不受時間與空間的限制，無論學習者在什么時間與地點，通過怎樣的方式進行網(wǎng)上學習，都可對學習者進行測量與評價，大大降低了人力資源的消耗，節(jié)省了時間；

（3）網(wǎng)絡(luò)學習評價可從多角度對學習者進行評價，而不僅僅是口頭問答、平時表現(xiàn)、紙上答題這些片面的指標去評價，符合學習者多變的行為特征及科學的評價方式。

過程性評價是近年來教育評價研究中備受關(guān)注的面向?qū)W習者學習過程的一種評價方式，過程性評價并非一個新名詞。早在1967年，斯塔弗爾比姆（Dr.Daniel L. Stufflebeam）及其同事所提出的CIPP評價模式中就包含了過程評價。在CIPP模式中給出的解釋是：“過程評價是對所確定方案的實施過程的評價，為方案的制定者提供反饋信息，用于發(fā)現(xiàn)方案實施過程中的潛在問題[4]?！?/p>

本文中所強調(diào)的過程性評價既是對學習者在網(wǎng)絡(luò)上進行學習過程中的諸多行為表現(xiàn)進行深入科學的研究。

三、現(xiàn)狀分析與比較及研究意義

1.本研究中存在的問題

通過對大量的學習平臺及文獻資料進行使用及深入分析后發(fā)現(xiàn)，目前國內(nèi)外關(guān)于網(wǎng)絡(luò)學習行為的研究中存在的問題主要有:

（1）收集和整理學生在學習過程中的信息及背景材料。在教師與學習者遠距離分離的情況下，學習資料的單一性與評價的效度和信度有直接的關(guān)系[5]，評價指標來源單一，選取具有局限性，經(jīng)常造成評價結(jié)果的片面性，甚至是錯誤評價，對學習者、教學過程組織者，授課教師都有很大的誤導性；

（2）偏重學生的成績評價，而忽視對學習方法、能力及學習全過程中的行為評價，因而評價不能全面反映學習中的事實，對教學也缺乏指導意義；

（3）評價主體單一且太過主觀性，現(xiàn)有網(wǎng)絡(luò)學習評價體系中仍舊以單一的教師為評價主體，將教師作為評價體系中的唯一評價來源，學習者是他們評價的對象，是被動的、消極的，教師對學習者的評價也具有強烈的個人感情色彩，不能科學正確的反應(yīng)出學習者的學習效果。

2.具體表現(xiàn)

本研究通過對用戶在網(wǎng)上學習的行為信息進行有效抓取和深入分析，依據(jù)現(xiàn)有學習評價理論和網(wǎng)絡(luò)學習評價模型對所抓取的信息進行建模分析，得出用戶在網(wǎng)上學習的習慣、學習風格、學習效果等結(jié)論，對于構(gòu)建個性化、智能化的學習系統(tǒng)具有極為重要的意義。具體表現(xiàn)為以下方面：

（1）有利于網(wǎng)絡(luò)學習資料的開發(fā)。研究學習者在學習過程中使用學習資料的行為方式和喜好，有助于學習資料設(shè)計者開發(fā)出更符合學習者學習方式和學習習慣的教育資料，提高學習效率。

（2）有利于教師對課程的把握和運用。網(wǎng)絡(luò)教學過程中，教師如果能夠更多地了解學生在網(wǎng)絡(luò)學習中的行為特點和規(guī)律，就能夠更好地分配授課時長和改進課程設(shè)計，引導和服務(wù)學習者有效學習。

（3）有利于對學習資源及學習者做出全面科學的評價。對學習者在整個學習過程中的學習行為進行研究，可全面反映出學習行為與學習效果的相關(guān)性，可以為教育管理提供可靠的評價依據(jù)，進而采取有效的管理控制方式。

（4）有利于給網(wǎng)站資源開發(fā)與管理人員提供科學有效的改進意見。如果系統(tǒng)設(shè)計者能更多地了解學習者對網(wǎng)絡(luò)教育平臺的使用方式和特點，將有助于其開發(fā)出更合理易用的網(wǎng)絡(luò)教育平臺。此外，如果能解決對學習者行為的跟蹤、采集、分析和評估等問題，將有助于開發(fā)出個性化、智能化的自適應(yīng)網(wǎng)絡(luò)學習系統(tǒng)[6]。

四、研究介紹

1.研究框架

本文通過對成熟理論的研究與分析，分析總結(jié)出現(xiàn)有網(wǎng)絡(luò)學習評價方法的不足，針對性的進行完善，使指標的選取更具科學性與合理性，能真實貼近地反映出學習者的學習效果。本研究主要從以下幾方面進行研究：

（1）學習者日常的學習行為都有哪些，哪些行為可以多方位反映出學習者的學習效果；

（2）針對某一大型學習平臺的學習用戶進行相應(yīng)學習行為數(shù)據(jù)的收集、計算；

（3）將所得到的有效數(shù)據(jù)與學習者最終的學習成績進行相關(guān)性分析，得出結(jié)論。

2.研究對象

本文選取陜西省某大型網(wǎng)絡(luò)學習平臺中的一門為時30天24個課時的課程，對選擇該課程的228人日常的學習行為進行采集分析。

3.研究方法

（1）文獻分析法：研究開始前閱讀了大量相關(guān)文獻資料，對本研究的研究背景與研究現(xiàn)狀進行了充分了解。深入理解了學習評價、網(wǎng)絡(luò)學習評價、學習評價體系等相關(guān)內(nèi)容，對該研究的進展與不足進行了分析總結(jié)，找到研究的突破點。之后對研究中所涉及到的相關(guān)術(shù)語及概念進行界定，運用已有的研究成果展開分析研究。

（2）調(diào)查統(tǒng)計法：在進行了相關(guān)理論的研究之后，對學習者在網(wǎng)絡(luò)學習平臺上的所有行為進行統(tǒng)計與提取。運用SQL語句對數(shù)據(jù)庫中的數(shù)據(jù)進行提取。之后進行統(tǒng)計及相關(guān)性分析，確定各個指標與學習結(jié)果之間的相關(guān)性，進而確定二級指標與三級指標。

五、指標的選取原則

指標在評價中起著主要作用，所以指標的選取應(yīng)遵循以下六個原則：與目標的一致性、直接的可測性、體系內(nèi)指標相互獨立、指標體系的整體完備性、指標的可比性、可接受性。除此以外，為了使指標與目標相一致，可以通過分解目標的方式來形成指標體系。

六、指標的分析

根據(jù)以上指標選取原則，以陜西某網(wǎng)絡(luò)學習平臺為研究基礎(chǔ)，以學完一門完整的教學過程為時間節(jié)點（在該平臺中以一門15課時，需要30天來完成的課時為基礎(chǔ)）。研究對象為該學習平臺選擇該課程是所有用戶共220人。通過采用SQL Sever 2010 Data Mining數(shù)據(jù)挖掘工具對數(shù)據(jù)庫中的信息進行處理，采用SPSS20.0、Excel2010進行統(tǒng)計分析。本研究首先選取了學習者基本特征、學習者行為特征、學習者學習效果三類數(shù)據(jù)表。從用戶日志及數(shù)據(jù)庫中提取所有用戶在該學習平臺上的行為數(shù)據(jù)作為單項指標（從用戶每次登錄平臺開始記錄，直到學完整個課程并得出考試成績期間所有的行為數(shù)據(jù)）。

根據(jù)統(tǒng)計，目前該學習平臺共有15項功能，可提取到的數(shù)據(jù)項有如表1所示。

表1 評價指標選取

之后通過SQL語句對所提取的數(shù)據(jù)進行預(yù)處理，包括對數(shù)據(jù)進行數(shù)據(jù)集成、數(shù)據(jù)變換、數(shù)據(jù)計算，經(jīng)過篩選實際可作為研究對象的人數(shù)為201人。將所得到的數(shù)據(jù)進行篩選歸納總結(jié)后，對數(shù)據(jù)進行平均數(shù)、標準差、極大值、極小值的計算。

平均數(shù)最常用的是算數(shù)平均數(shù)和加權(quán)平均數(shù)。算數(shù)平均數(shù)是所有數(shù)據(jù)之和除以數(shù)據(jù)個數(shù)的商，記為。公式為：

其中xi為第i個數(shù)據(jù)為數(shù)據(jù)總個數(shù)。

加權(quán)平均數(shù)是幾個作用在不同比重的平均數(shù)在進行平均，公式為：

其中xi為第i個數(shù)據(jù)i=1，2，…，N，xl是f1個數(shù)的平均數(shù)，N為數(shù)據(jù)總個數(shù)。

標準差是方差的平方根，又稱均方差，用S表示。方差是各個數(shù)據(jù)與平均數(shù)離差的算術(shù)平均數(shù)，用S2表示公式為：

其中xi為第i個數(shù)據(jù)i=1，2，…，N，為平均數(shù)，N為數(shù)據(jù)總個數(shù)。標準差是描述一組數(shù)據(jù)的離散程度，即標準差越小數(shù)據(jù)越集中與平均數(shù)，差異越??；標準差越大，數(shù)據(jù)越偏離平均數(shù)，差異越大。結(jié)果匯總?cè)绫?所示。

通過使用SPSS20.0對上表所有數(shù)據(jù)依次與學習成績進行相關(guān)性分析，結(jié)果顯示如表3所示。

本研究的人數(shù)為201人，查詢相關(guān)系數(shù)臨界值表，得到時，指標與學習成績平均值呈不顯著相關(guān)；當時，指標與學習成績平均值呈顯著性相關(guān)。

從以上結(jié)果中可以看出，所有指標中與學習成績呈顯著性相關(guān)的學習行為指標有：登錄頻率、查找資源頻率、使用資源時長、使用資源頻率、提問頻率、回答問題正確率、回答問題頻率、回答被采納次數(shù)、上傳資源數(shù)量、上傳資源頻率、下載資源數(shù)量、模擬仿真試卷使用頻率、模擬仿真試卷使用成績、參加線上活動的頻率、作業(yè)得分、老師評價得分共16項。

表2 數(shù)據(jù)處理結(jié)果

與學習成績呈不顯著性相關(guān)的學習行為指標有：登錄時間、發(fā)帖次數(shù)、回答次數(shù)、收發(fā)郵件數(shù)量、下載資源頻率、電子筆記的使用頻率、同步練習使用的頻率共7項。沒有與學習成績呈不相關(guān)的學習行為指標。

經(jīng)過以上分析與計算，確定了針對在該學習網(wǎng)站上學習的學習者的行為評價指標，這些指標能科學合理地反映出學習者學習行為與學習效果之間的關(guān)系，進而能對學習者的學習效果有更加全面的評價。

七、總結(jié)與展望

本文運用了文獻分析法、實驗驗證法等一些科學研究方法，將常見的學習行為進行系統(tǒng)地歸納整理，再通過對數(shù)據(jù)的隨機采集和科學的計算，找出學習行為與學習效果的相關(guān)性大小，進而得出科學合理的注重學習行為過程的評價指標。但由于實驗部分的數(shù)據(jù)來源單一，數(shù)量較小，所以得出的結(jié)論不具有普遍適用性，希望在以后的研究中能通過大量的實驗設(shè)計出一套適用于大多數(shù)學習平臺的過程性評價指標體系，為學習者帶來更好更全面的學習評價。

表3 各指標與學習效果的相關(guān)指數(shù)

[1]彭文輝，楊宗凱，黃克斌.網(wǎng)絡(luò)學習行為分析及其模型研究[J].中國電化教育,2006(9):67-69.

[2]秦換魚.網(wǎng)絡(luò)學習的過程性評價研究[D].徐州:徐州師范大學,2011.

[3]秦換魚.網(wǎng)絡(luò)學習的過程性評價研究[D].徐州:徐州師范大學,2011.

[4]馬建桂，牟慧中.學習者自主視野下的英語自學考試過程性評價[J].科教導刊(中旬刊),2011(8):18-21.

[5]傅鋼善，王改花.基于數(shù)據(jù)挖掘的網(wǎng)絡(luò)學習行為與學習效果研究[J].電化教育研究,2014(9):12.

[6]彭文輝，楊宗凱，黃克斌.網(wǎng)絡(luò)學習行為分析及其模型研究[J].中國電化教育,2006(9):67-69.

（編輯：楊馥紅）

G434

A

1673-8454（2016）19-0021-04