趙宏　張亨國(guó)等

摘要：學(xué)習(xí)評(píng)價(jià)作為保障學(xué)習(xí)質(zhì)量和學(xué)習(xí)效果的重要措施，是MOOC學(xué)習(xí)中不可缺少的一環(huán)。該研究旨在對(duì)MOOCs的學(xué)習(xí)評(píng)價(jià)現(xiàn)狀進(jìn)行分析，以期為我國(guó)MOOcs學(xué)習(xí)評(píng)價(jià)提供有意義的啟示和借鑒。筆者選取了國(guó)內(nèi)14個(gè)MOOCs平臺(tái)中能夠獲取課程學(xué)習(xí)評(píng)價(jià)方式說明的課程，對(duì)不同類別課程和不同平臺(tái)的學(xué)習(xí)評(píng)價(jià)進(jìn)行分析，針對(duì)評(píng)價(jià)方式、評(píng)價(jià)類型數(shù)量、評(píng)價(jià)主體等方面進(jìn)行了對(duì)比分析。研究發(fā)現(xiàn)，課程評(píng)價(jià)沒有得到很好的重視，評(píng)價(jià)總體水平較低，期末考試、單元測(cè)驗(yàn)和參與討論是最常采用的評(píng)價(jià)方式；課程整體的評(píng)價(jià)類型數(shù)量趨向于多元性的特征；評(píng)價(jià)主體仍顯得較為單一，主要為機(jī)器評(píng)價(jià)（90.8%）。各學(xué)科類別課程中文科課程偏重于同伴互評(píng)；各典型平臺(tái)的評(píng)價(jià)方式有所差異，“好大學(xué)在線”平臺(tái)考核方式最為豐富，更側(cè)重于線下考試。根據(jù)研究發(fā)現(xiàn)，該文建議我國(guó)MOOCs建設(shè)和應(yīng)用過程中需要立足在線學(xué)習(xí)環(huán)境的特點(diǎn)，創(chuàng)新學(xué)習(xí)評(píng)價(jià)理念，重視同伴互評(píng)，設(shè)計(jì)有效的評(píng)價(jià)機(jī)制，推進(jìn)學(xué)習(xí)分析的實(shí)踐應(yīng)用，開展個(gè)性化的學(xué)習(xí)評(píng)價(jià)。

關(guān)鍵詞：MOOCs；大規(guī)模在線開放；學(xué)習(xí)評(píng)價(jià)；評(píng)價(jià)方式

中圖分類號(hào)：G434 文獻(xiàn)標(biāo)識(shí)碼：A

一、研究背景

在信息化社會(huì)中，互聯(lián)網(wǎng)對(duì)教育領(lǐng)域產(chǎn)生了巨大影響。隨著技術(shù)和理念的革新，各種新型教學(xué)方式層出不窮，影響著人們的學(xué)習(xí)方式。2012年，由MOOCs引發(fā)的“數(shù)字海嘯”席卷了全球，哈佛大學(xué)、MIT、斯坦福大學(xué)、耶魯大學(xué)等頂尖大學(xué)紛紛加入MOOCs行列。2013年，中國(guó)教育部和高校積極投身到MOOCs建設(shè)實(shí)踐中，各大高校的MOOCs如雨后春筍般接踵而至。清華大學(xué)牽頭建設(shè)的“學(xué)堂在線”，五所交大共建的大型開放式網(wǎng)絡(luò)課程平臺(tái)“Ewant”，愛課程攜手網(wǎng)易云課堂打造的“中國(guó)大學(xué)MOOC”等平臺(tái)都紛紛涌現(xiàn)，形成了群雄逐鹿的局面。MooCs作為新型在線開放課程在世界范圍內(nèi)迅速興起，對(duì)在線教育及傳統(tǒng)教育產(chǎn)生了強(qiáng)烈的沖擊，但是一些挑戰(zhàn)也隨之而來，尤其是在MOOCs學(xué)習(xí)評(píng)價(jià)的實(shí)施上，傳統(tǒng)的以教師為主體的評(píng)價(jià)模式已經(jīng)不能適應(yīng)MOOCs的學(xué)習(xí)過程，如何對(duì)大規(guī)模學(xué)習(xí)者的學(xué)習(xí)進(jìn)行科學(xué)評(píng)價(jià)成為新的挑戰(zhàn)。

2015年4月教育部頒布了《教育部關(guān)于加強(qiáng)高等學(xué)校在線開放課程建設(shè)應(yīng)用與管理的意見》，文件中明確指出要“建設(shè)適合網(wǎng)絡(luò)傳播和教學(xué)活動(dòng)的內(nèi)容質(zhì)量高、教學(xué)效果好的在線開放課程”。為保證在線開放課程的質(zhì)量，必須有與之相應(yīng)的評(píng)價(jià)機(jī)制，沒有相應(yīng)的評(píng)價(jià)機(jī)制就難以評(píng)判真正意義上的網(wǎng)絡(luò)學(xué)習(xí)，從某種程度上說，學(xué)習(xí)評(píng)價(jià)是在線學(xué)習(xí)的關(guān)鍵和核心，其在檢驗(yàn)學(xué)習(xí)者的學(xué)習(xí)成效的同時(shí)，也幫助教師把握整體課程的學(xué)習(xí)狀態(tài)，是MOOCs學(xué)習(xí)中必不可少的一環(huán)。

學(xué)習(xí)評(píng)價(jià)，顧名思義，主要指對(duì)學(xué)生學(xué)習(xí)狀況的測(cè)量與評(píng)估，即基于學(xué)生的學(xué)習(xí)過程和結(jié)果進(jìn)行事實(shí)把握和價(jià)值判斷。已有研究和實(shí)踐從不同角度對(duì)MOOCs的學(xué)習(xí)評(píng)價(jià)進(jìn)行了調(diào)查：一些研究者調(diào)查分析了MOOC學(xué)習(xí)評(píng)價(jià)方式，如Chauhan分析了新技術(shù)支持下的學(xué)習(xí)評(píng)價(jià)案例，包括學(xué)習(xí)分析技術(shù)、個(gè)人學(xué)習(xí)網(wǎng)絡(luò)（Personal Learning Network）、數(shù)字徽章等如何支持學(xué)習(xí)評(píng)價(jià)等；Papathoma通過觀察和訪談收集了12名學(xué)習(xí)者對(duì)于MOOC學(xué)習(xí)評(píng)價(jià)的看法，發(fā)現(xiàn)學(xué)習(xí)者認(rèn)可同伴互評(píng)的方式，但是自動(dòng)化評(píng)價(jià)仍舊是最受歡迎的評(píng)價(jià)方式；王宏艷等人結(jié)合自身在Coursera、Udacity等平臺(tái)的優(yōu)質(zhì)MOOCs的學(xué)習(xí)體驗(yàn)對(duì)MOOCs教學(xué)評(píng)價(jià)加以探究，認(rèn)為MOOCs具有多元、開放、人性化三大特征；鄭志高對(duì)Coursera、edX和Udacity三個(gè)平臺(tái)上349門課程的學(xué)習(xí)評(píng)價(jià)方式進(jìn)行了調(diào)查分析。大部分學(xué)者尤其關(guān)注MOOCs環(huán)境下同伴互評(píng)的可行性與可靠性，探索不同的方法來提高同伴互評(píng)的精確性，其中一些學(xué)者嘗試通過構(gòu)建統(tǒng)計(jì)模型來評(píng)估和校正評(píng)價(jià)過程中的偏差；還有學(xué)者對(duì)評(píng)價(jià)量規(guī)進(jìn)行了設(shè)計(jì)和應(yīng)用，發(fā)現(xiàn)在同伴互評(píng)的過程中提供指導(dǎo)，能有效提升評(píng)價(jià)效果。

綜合國(guó)內(nèi)外近階段的研究發(fā)現(xiàn)，目前關(guān)于MOOC學(xué)習(xí)評(píng)價(jià)的研究國(guó)外文獻(xiàn)居多，對(duì)學(xué)習(xí)評(píng)價(jià)的研究更為具體和深入，而國(guó)內(nèi)相關(guān)研究整體較少，且主要以國(guó)外的MOOCs平臺(tái)為調(diào)研對(duì)象，尚未有研究對(duì)我國(guó)MOOCs平臺(tái)的學(xué)習(xí)評(píng)價(jià)進(jìn)行全面分析，如此便無(wú)法知曉教師對(duì)MOOCs學(xué)習(xí)評(píng)價(jià)的理解，那么相應(yīng)的改進(jìn)建議就很難擺脫盲目性。因此，全面系統(tǒng)地研究我國(guó)MOOCs的學(xué)習(xí)評(píng)價(jià)現(xiàn)狀有著非常重大的意義。目前國(guó)內(nèi)MOOCs的學(xué)習(xí)評(píng)價(jià)在評(píng)價(jià)方式、評(píng)價(jià)類型數(shù)量、評(píng)價(jià)主體的整體狀況是怎樣的？不同平臺(tái)之間和不同課程之間到底有什么異同？這些都是值得我們探究的。因此，本研究通過借鑒已有研究，結(jié)合國(guó)內(nèi)的課程平臺(tái)及其教學(xué)課程，對(duì)不同類別課程和不同平臺(tái)的學(xué)習(xí)評(píng)價(jià)進(jìn)行分析，針對(duì)評(píng)價(jià)方式、評(píng)價(jià)類型數(shù)量、評(píng)價(jià)主體等方面進(jìn)行了對(duì)比分析，以期為我國(guó)MOOCs學(xué)習(xí)評(píng)價(jià)提供有意義的啟示和借鑒。

二、研究對(duì)象與數(shù)據(jù)來源

本研究以國(guó)內(nèi)主要的14個(gè)MOOCs平臺(tái)中明確給出評(píng)價(jià)方式的663門課程為研究對(duì)象，調(diào)查其采用的評(píng)價(jià)方式的類型、數(shù)量、評(píng)價(jià)主體及比例。

調(diào)查發(fā)現(xiàn)，本研究樣本中學(xué)習(xí)評(píng)價(jià)方式主要包括單元測(cè)驗(yàn)、單元作業(yè)、線下考試、期中考試、期末考試、期末大作業(yè)、隨堂小測(cè)試、參與討論頻次、課件瀏覽次數(shù)、調(diào)查共計(jì)10種評(píng)價(jià)方式。根據(jù)以往研究者的分類，以上評(píng)價(jià)方式可以分為兩類：總結(jié)性評(píng)價(jià)（期末考試、期末大作業(yè)及線下考試）、過程性評(píng)價(jià)（單元測(cè)驗(yàn)、單元作業(yè)、期中考試、隨堂小測(cè)試、參與討論、課件瀏覽、課堂參與度調(diào)查）。同時(shí)，在663門課程中明確給出不同評(píng)價(jià)類型分值比例的有624門課程，占94%；只說明評(píng)價(jià)方式未給出比例說明的有39門，占6%。

三、MOOCs學(xué)習(xí)評(píng)價(jià)對(duì)比分析

（一）總體情況分析

1.MOOCs評(píng)價(jià)方式分析

本研究對(duì)樣本所采用的評(píng)價(jià)方式的類型進(jìn)行了統(tǒng)計(jì)，發(fā)現(xiàn)可以分為三種類型：只采用總緒性評(píng)價(jià)、只采用過程性評(píng)價(jià)以及兩者結(jié)合評(píng)價(jià)方式。其中采用兩者結(jié)合評(píng)價(jià)方式的課程數(shù)量最多，共517門，占78%；其次是只采用“過程性評(píng)價(jià)”，包括119門課程，占17.9%；只采用“總緒性評(píng)價(jià)”課程數(shù)量最少，僅有27門課程，占4.1%。

本研究進(jìn)一步對(duì)樣本采用的評(píng)價(jià)類型數(shù)量進(jìn)行統(tǒng)計(jì)，結(jié)果發(fā)現(xiàn)，絕大多數(shù)課程都采取了兩種以上的評(píng)價(jià)方式。樣本中僅有54門課程只采用了一種評(píng)價(jià)方式，占8.1%；采用三種評(píng)價(jià)方式的課程最多，有274門，占總體課程數(shù)量的41.3%；三種以上評(píng)價(jià)方式的課程共165門課程，占24.9%。

為了進(jìn)一步分析當(dāng)前M00Cs評(píng)價(jià)方式的差異，本研究對(duì)樣本中采用的具體評(píng)價(jià)方式類型進(jìn)行了統(tǒng)計(jì)，如圖1所示。

數(shù)據(jù)結(jié)果表明，在所有評(píng)價(jià)方式中，單元測(cè)試是使用最多的評(píng)價(jià)類型（494門課程，占74.5%）；其次是期末考試（451門課程，占68%）；第三是參與討論頻次（407門課程，占61.4%）?？偨Y(jié)性評(píng)價(jià)方式類型，期末大作業(yè)與線下考試這兩種普通高校傳統(tǒng)的評(píng)價(jià)方式在MOOCs中較少被采用。在過程性評(píng)價(jià)類型中，除了單元測(cè)試和參與討論頻次之外，單元作業(yè)也是經(jīng)常采用的一種評(píng)價(jià)方式（245門課程，占37%）。而采用期中考試、課件瀏覽次數(shù)、隨堂小測(cè)試和參與度調(diào)查的課程較少，均不超過整體課程數(shù)量的20%。

2.MOOCs評(píng)價(jià)主體分析

本研究對(duì)研究樣本的學(xué)習(xí)評(píng)價(jià)主體也進(jìn)行了統(tǒng)計(jì)，發(fā)現(xiàn)樣本中有553門課程說明了評(píng)價(jià)主體，占83.4%。評(píng)價(jià)主體分為機(jī)器、同伴和教師三種類型。其中采用機(jī)器自評(píng)的課程數(shù)量最多，為501門，占了整體課程的90.6%；實(shí)施同伴互評(píng)的課程有156門，占28.2%；采用教師評(píng)價(jià)的課程最少，僅有40門，占7.2%。

本研究進(jìn)一步統(tǒng)計(jì)了同一門課程采用不同評(píng)價(jià)主體的數(shù)量，如圖2所示。

數(shù)據(jù)表明，只采用一類評(píng)價(jià)主體的課程最多（426門），占總體的77%，兩類評(píng)價(jià)主體結(jié)合使用的課程數(shù)為110門（20%），三種評(píng)價(jià)主體均有的課程最少，僅有17門（3%）。由此可見，目前MOOCs主要以單主體評(píng)價(jià)為主。

（二）課程層次分析

一般來說根據(jù)學(xué)習(xí)對(duì)象，課程可以分為中學(xué)、本科、研究生、職業(yè)教育和通用課程五個(gè)層次。在本研究樣本中，本科課程最多，為373門，占總樣本的56%，通用課程為249門，占全部課程的38%，中學(xué)課程（6門，占0.9%）、研究生課程（6門，占0.9%）和職業(yè)教育（29門，占4.4%）數(shù)量較少。本部分對(duì)不同課程層次MOOCs的評(píng)價(jià)方式進(jìn)行了分析。

1.不同課程層次MOOCs的評(píng)價(jià)類型及數(shù)量分析

本部分首先對(duì)不同課程層次MOOCs的評(píng)價(jià)類型數(shù)量進(jìn)行了統(tǒng)計(jì)，如圖3所示。

結(jié)果發(fā)現(xiàn)，無(wú)論哪種課程層次，同時(shí)采用兩種及以上評(píng)價(jià)方式的課程占絕大多數(shù)，以三種為最多，而只采用一種評(píng)價(jià)方式的課程極少。

本部分進(jìn)一步分析了不同課程層次MOOCs采用的評(píng)價(jià)類型（如圖4所示）。

由于研究樣本中本科生課程和通用課程占主體，因此這兩個(gè)層次課程的評(píng)價(jià)方式也最為全面。本科層次課程中，采用最多的前四種評(píng)價(jià)類型分別是期末考試（282門，占本科課程總數(shù)的75.6）、單元測(cè)驗(yàn)（236門，63.3%）、參與討論頻次（206門，占55.2%）和單元作業(yè)（132門，占35.4%）。值得注意的是，本科生層次中，采用隨堂小測(cè)試的課程數(shù)量明顯高于其他三種層次。

通用課程中，使用最多的評(píng)價(jià)方式是單元測(cè)驗(yàn)（197門，占通用課程數(shù)量的79.1%）和參與討論頻次（149門，占59.8%），其次才是期末考試（143門，57.4%）。

職業(yè)教育課程主要以過程性評(píng)價(jià)為主，其主要采用參與討論頻次（25門，占職業(yè)教育課程總數(shù)的86.2%）和單元測(cè)驗(yàn)（22門，75.9%）兩種評(píng)價(jià)方式。

2.不同課程層次的MOOCs評(píng)價(jià)主體分析

本部分對(duì)不同課程層次MOOCs評(píng)價(jià)主體進(jìn)行了統(tǒng)計(jì)，如圖5所示。

分析結(jié)果可知，不同層次課程在評(píng)價(jià)主體選擇上既有共同點(diǎn)也有差異。共同點(diǎn)是各層次課程的評(píng)價(jià)主體均以機(jī)器自評(píng)為主，尤其是研究生層次課程采用單一的機(jī)器自評(píng)。差異主要體現(xiàn)在教師評(píng)價(jià)和同伴互評(píng)方面。中學(xué)課程除機(jī)器自評(píng)外，主要以教師為主體進(jìn)行學(xué)習(xí)評(píng)價(jià)，沒有同伴互評(píng)；而其他三種層次課程則正好相反，同伴評(píng)價(jià)的比例要顯著高于教師評(píng)價(jià)。

（三）學(xué)科類別分析

本研究樣本中，按照學(xué)科類別可分為哲學(xué)、經(jīng)濟(jì)學(xué)、法學(xué)、教育學(xué)、文學(xué)、歷史學(xué)、理學(xué)、工學(xué)、農(nóng)學(xué)、醫(yī)學(xué)、軍事學(xué)、管理學(xué)、藝術(shù)13類。其中，理學(xué)（202門，30.4%）和工學(xué)（126門，19%）兩類課程占研究樣本的49.4%，醫(yī)學(xué)（67門，10%）、藝術(shù)（57門，8.5%）和文學(xué)（56門，8.5%）的課程數(shù)居中；農(nóng)學(xué)類課程僅有2門，均以期末大作業(yè)作為評(píng)價(jià)方式，軍事學(xué)的1門課程采用了參與討論頻次與期末大作業(yè)相結(jié)合的評(píng)價(jià)方式，由于這兩類學(xué)科的課程數(shù)量太少，在以下分析中不再加以說明。

1.不同學(xué)科類別MOOCs評(píng)價(jià)類型及數(shù)量分析

本部分對(duì)不同學(xué)科類別的課程評(píng)價(jià)方式進(jìn)行了統(tǒng)計(jì)，結(jié)果如表1所示。

總體來說，各學(xué)科最常采用的四種評(píng)價(jià)方式是期末考試、單元測(cè)驗(yàn)、參與討論、單元作業(yè)。其中，歷史學(xué)、工學(xué)兩個(gè)學(xué)科使用最多的評(píng)價(jià)方式是期末考試，其他9個(gè)學(xué)科采用最多的評(píng)價(jià)方式是單元測(cè)驗(yàn)，比例均高于50%。

除此之外，不同學(xué)科其他6種評(píng)價(jià)類型的選擇上也有所差異。法學(xué)、醫(yī)學(xué)學(xué)科的MOOCs很注重學(xué)習(xí)者瀏覽課件的狀況，以此來評(píng)估學(xué)習(xí)者的學(xué)習(xí)參與度，采用此評(píng)價(jià)類型的比例明顯高于其他學(xué)科。相比較而言，經(jīng)濟(jì)學(xué)科中采用參與討論（33.3%）、單元作業(yè)（12.5%）、課件瀏覽（4.2%）三種評(píng)價(jià)方式的比重在研究樣本中均為最低。隨堂小測(cè)試、調(diào)查兩種評(píng)價(jià)方式僅在少數(shù)學(xué)科中有所應(yīng)用，且比例均低于5%。

對(duì)不同學(xué)科類別采用的評(píng)價(jià)類型數(shù)量進(jìn)行進(jìn)一步統(tǒng)計(jì)，如表2所示，各學(xué)科類別均同時(shí)至少采用了3種評(píng)價(jià)方式，尤其是哲學(xué)和醫(yī)學(xué)兩個(gè)學(xué)科，其采用三種以上評(píng)價(jià)類型的課程占比最高。

2.不同學(xué)科類別MOOCs評(píng)價(jià)主體分析

本部分對(duì)不同學(xué)科類別MOOCs的評(píng)價(jià)主體進(jìn)行了統(tǒng)計(jì)，如圖6所示。

不同學(xué)科類別MOOCs采用機(jī)器自評(píng)的課程比例均高于75%，其中哲學(xué)和歷史學(xué)兩類學(xué)科中100%的課程都選擇了機(jī)器自評(píng)，其次是工學(xué)、理學(xué)學(xué)科，其采用機(jī)器自評(píng)的課程比例分別是96.0%（121門）和91.6%（185門）。

在所有學(xué)科類別中，采用教師主體進(jìn)行學(xué)習(xí)評(píng)價(jià)的課程所占比例均低于同伴互評(píng)。其中歷史學(xué)采用同伴互評(píng)的比例最高，有7門課程，占80%，其次是法學(xué)（13門，占60%）、教育學(xué)（18門，占45%）。

（四）典型平臺(tái)分析

為了更深入分析目前MOOCs評(píng)價(jià)方式的現(xiàn)狀，本研究對(duì)具有代表性的前五個(gè)平臺(tái)（如表3所示），即中國(guó)大學(xué)MOOC、Ewant、智慧樹、學(xué)堂在線、好大學(xué)在線進(jìn)行了進(jìn)一步分析。

1.典型平臺(tái)評(píng)價(jià)方式比較

本部分對(duì)5個(gè)典型平臺(tái)課程所采用的評(píng)價(jià)方式進(jìn)行了比較分析，如圖7所示。

結(jié)果表明，學(xué)堂在線和中國(guó)大學(xué)MOOC是采用評(píng)價(jià)方式類型最多的平臺(tái)，涵蓋了9種類型；其次是好大學(xué)在線和Ewant平臺(tái)，涵蓋8種類型；智慧樹平臺(tái)采用的評(píng)價(jià)類型最少，只有4種類型。

另外，各平臺(tái)選擇評(píng)價(jià)方式的類型有共同點(diǎn)也有差異。智慧樹、中國(guó)大學(xué)MOOC、學(xué)堂在線最常采用的評(píng)價(jià)方式是期末考試、單元測(cè)驗(yàn)與參與討論，Ewant平臺(tái)主要采用單元測(cè)驗(yàn)（81門，75.7%）和期末考試（63門，58.9%）兩種評(píng)價(jià)方式，參與討論沒有作為重要的評(píng)價(jià)方式（37門，34.6%）。值得注意的是，學(xué)堂在線采用隨堂小測(cè)試（15門，15.8%）的課程比例顯著高于其他四個(gè)平臺(tái)，Ewant期末大作業(yè)（22門，20.6%）的比重也明顯高于其他四個(gè)平臺(tái)。

相比較而言，好大學(xué)在線平臺(tái)在評(píng)價(jià)方式的設(shè)計(jì)上獨(dú)具一格，有三個(gè)區(qū)別于其他平臺(tái)的顯著特征：一是與其他4個(gè)平臺(tái)以期末考試為主的情況正好相反，好大學(xué)在線平臺(tái)期末考試的比例很低，僅占其平臺(tái)課程的3.2%；二是線下考試占據(jù)了很大的比重（37門，占該平臺(tái)課程的58.7%），這也與其他4個(gè)平臺(tái)截然相反，其他4個(gè)平臺(tái)中，除了智慧樹平臺(tái)僅有1.9%課程采用線下考試方式外，其余3個(gè)平臺(tái)都沒有采用此評(píng)價(jià)方式；三是相比較其他平臺(tái)，好大學(xué)在線平臺(tái)更為重視過程性評(píng)價(jià)，單元作業(yè)、單元測(cè)驗(yàn)、課件瀏覽次數(shù)和參與討論頻次等比例均顯著高于其他4個(gè)平臺(tái)。

2.典型平臺(tái)評(píng)價(jià)類型數(shù)量比較

本部分進(jìn)一步比較了五個(gè)平臺(tái)MOOCs評(píng)價(jià)類型數(shù)量，如圖8所示。

好大學(xué)在線采用的評(píng)價(jià)類型數(shù)量最為豐富，同時(shí)使用3種以上評(píng)價(jià)方式的課程比例為57.1%（36門），而其僅采用一種評(píng)價(jià)方式的課程比例最低（1.6%，1門）。其余四個(gè)平臺(tái)中同時(shí)使用3種評(píng)價(jià)方式的課程所占比較最高，均高于35%，其中以智慧樹（61.0%，64門）為最高。經(jīng)進(jìn)一步分析發(fā)現(xiàn)，智慧樹平臺(tái)中采用三種評(píng)價(jià)方式相結(jié)合的64門課程中，全部采用的是期末考試與單元測(cè)驗(yàn)、參與討論相結(jié)合的評(píng)價(jià)。

3.典型平臺(tái)的MOOCs評(píng)價(jià)主體比較

本研究對(duì)五個(gè)平臺(tái)中課程的評(píng)價(jià)主體進(jìn)行對(duì)比分析，如圖9所示。

整體來說，各平臺(tái)采用最多的仍然是機(jī)器自評(píng)，其次是同伴互評(píng)，最少的是教師評(píng)價(jià)。不同平臺(tái)在評(píng)價(jià)主體的選擇上各有偏好。較之其他四個(gè)平臺(tái)，好大學(xué)在線平臺(tái)采用機(jī)器自評(píng)的課程比例最低（76.9%，48門），采用同伴互評(píng)（75.4%，47門）和教師評(píng)價(jià)（21.5%，13門）兩種人工評(píng)價(jià)的課程比例卻顯著高于其他四個(gè)平臺(tái)。智慧樹平臺(tái)的課程均采用機(jī)器自評(píng)，沒有選擇任何一種人工評(píng)價(jià)的方式。

隨著技術(shù)和方法的進(jìn)步，大多數(shù)MOOCs平臺(tái)都能實(shí)現(xiàn)對(duì)學(xué)生學(xué)習(xí)過程數(shù)據(jù)的記錄，實(shí)時(shí)地為學(xué)習(xí)評(píng)價(jià)提供重要依據(jù)。因此，本研究對(duì)典型平臺(tái)在學(xué)習(xí)過程數(shù)據(jù)上的評(píng)價(jià)狀況進(jìn)行了分析。五個(gè)平臺(tái)都建立了練習(xí)和測(cè)試系統(tǒng)，支持學(xué)生互評(píng)功能，支持課程成績(jī)?cè)O(shè)定及學(xué)習(xí)成績(jī)自動(dòng)統(tǒng)計(jì)功能，除Ewant之外的四個(gè)平臺(tái)均可視化呈現(xiàn)了學(xué)習(xí)者的學(xué)習(xí)過程信息，如中國(guó)大學(xué)MOOC平臺(tái)提供了學(xué)習(xí)進(jìn)度；學(xué)堂在線平臺(tái)記錄顯示了課程進(jìn)度及學(xué)習(xí)者測(cè)試題得分情況；好大學(xué)在線提供了學(xué)習(xí)者每周學(xué)習(xí)時(shí)長(zhǎng)與人均學(xué)習(xí)時(shí)長(zhǎng)的對(duì)比、個(gè)人練習(xí)得分及班級(jí)平均得分的學(xué)習(xí)情況，便于學(xué)習(xí)者了解其他同伴的學(xué)習(xí)情況并知曉自己所處的學(xué)習(xí)狀態(tài)；智慧樹通過統(tǒng)計(jì)圖呈現(xiàn)了學(xué)習(xí)者的進(jìn)度及個(gè)人測(cè)試成績(jī)。但是總體來看，各平臺(tái)并沒有完整收集學(xué)習(xí)過程中的重要信息，相關(guān)信息的可視化呈現(xiàn)甚少。

四、MOOCs評(píng)價(jià)狀況討論

（一）評(píng)價(jià)設(shè)計(jì)的總體水平較低，期末考試、單元測(cè)驗(yàn)和參與討論是最常采用的評(píng)價(jià)方式

通過對(duì)有評(píng)價(jià)說明的663門課程分析發(fā)現(xiàn)，我國(guó)MOOCs學(xué)習(xí)評(píng)價(jià)的主流趨勢(shì)是總結(jié)性評(píng)價(jià)與過程性評(píng)價(jià)相結(jié)合，采用了更加偏重考試和測(cè)驗(yàn)的評(píng)價(jià)方式，形式較為簡(jiǎn)單，這與我國(guó)MOOCs偏重行為主義教學(xué)設(shè)計(jì)的現(xiàn)狀相符。值得注意的是，“參與討論”這一評(píng)價(jià)方式在MOOCs評(píng)價(jià)中應(yīng)用廣泛，這說明MOOC教師開始重視學(xué)習(xí)者之間的互動(dòng)，評(píng)價(jià)學(xué)習(xí)者的交互將促進(jìn)他們的主動(dòng)參與，實(shí)現(xiàn)同伴間的知識(shí)共享、共同成長(zhǎng)，同時(shí)討論內(nèi)容也是教師了解學(xué)習(xí)者學(xué)習(xí)狀態(tài)的一個(gè)重要依據(jù)。然而，課堂參與度調(diào)查、課程瀏覽和隨堂小測(cè)試三種方式只在不到15%的課程中得到應(yīng)用，這也側(cè)面體現(xiàn)了我國(guó)MOOCs對(duì)學(xué)習(xí)者的過程性學(xué)習(xí)行為關(guān)注不夠，隨堂小測(cè)試的缺失也會(huì)導(dǎo)致教學(xué)人員無(wú)法診斷學(xué)習(xí)者在視頻學(xué)習(xí)中遇到的問題。

學(xué)習(xí)評(píng)價(jià)應(yīng)考慮不同的情境，運(yùn)用多種不同方式，從多個(gè)角度進(jìn)行綜合分析和判斷。我國(guó)MOOCs整體的評(píng)價(jià)類型數(shù)量趨向于多元化的特征，67%的課程選擇3種及3種以上的評(píng)價(jià)方式相結(jié)合。但是整體課程的評(píng)價(jià)主體仍顯得較為單一，受限于MOOC的大規(guī)模、免費(fèi)的特征，大多評(píng)價(jià)是基于客觀題，由機(jī)器評(píng)價(jià)（90.8%）展開，這可能會(huì)導(dǎo)致學(xué)習(xí)者與教師、同伴的交互處于較低的狀態(tài)，在學(xué)習(xí)過程中感受到孤獨(dú)與焦慮。調(diào)查結(jié)果顯示，國(guó)內(nèi)MOOCs（156門，28.2%）開始運(yùn)用同伴互評(píng)這一重要評(píng)價(jià)方式，但并不廣泛，仍在探索當(dāng)中。相較于國(guó)內(nèi)，雖然國(guó)外對(duì)同伴互評(píng)的效果有所爭(zhēng)議，但Coursera、edX等平臺(tái)廣泛采用了互評(píng)策略。另外，面對(duì)數(shù)量巨大的學(xué)習(xí)者，MOOCs教師無(wú)法也不再適合作為主要的評(píng)價(jià)主體，調(diào)查顯示只有極少數(shù)課程采用了教師評(píng)價(jià)（3%）。其實(shí)教師和學(xué)生的雙向交互是促進(jìn)有效教學(xué)的重要環(huán)節(jié)，教師可以通過作業(yè)的集中反饋、答疑等方式來與學(xué)習(xí)者進(jìn)行良好的互動(dòng)。

（二）各學(xué)科類別最常采用機(jī)器自評(píng)，社科領(lǐng)域更關(guān)注同伴互評(píng)

在不同學(xué)科類別的課程中，采用最多的評(píng)價(jià)方式仍舊是單元測(cè)驗(yàn)、參與討論與期末考試。在調(diào)查中發(fā)現(xiàn)，由于平臺(tái)提供的評(píng)價(jià)方式都是固定的類別，各學(xué)科類別可選擇的評(píng)價(jià)方式并無(wú)差異。如果要實(shí)現(xiàn)具有學(xué)科特色的學(xué)習(xí)評(píng)價(jià)，那么必須完善平臺(tái)功能，使教師能根據(jù)學(xué)科內(nèi)容靈活選擇適合的評(píng)價(jià)方式。

在評(píng)價(jià)主體的選擇上，法學(xué)、歷史學(xué)更注重于同伴互評(píng)和教師評(píng)價(jià)，而理學(xué)和工學(xué)在同伴互評(píng)和教師評(píng)價(jià)上相對(duì)較弱，這與edX平臺(tái)上MOOCs的學(xué)習(xí)評(píng)價(jià)情況一致。究其原因，自然科學(xué)領(lǐng)域側(cè)重于考察學(xué)習(xí)者對(duì)客觀知識(shí)的掌握，而人文社科領(lǐng)域則更關(guān)注于學(xué)習(xí)者的觀念、想法，注重培養(yǎng)學(xué)生的分析能力、問題解決能力及創(chuàng)新能力，主要選擇主觀題對(duì)學(xué)習(xí)者進(jìn)行評(píng)價(jià)，因此在人文科學(xué)及社會(huì)科學(xué)領(lǐng)域更多利用“同伴互評(píng)”讓學(xué)習(xí)者可以對(duì)同伴的作業(yè)答案進(jìn)行評(píng)價(jià)并提供反饋。

（三）本科層次和通用層次課程占據(jù)課程主體，評(píng)價(jià)形式表現(xiàn)不一

在中學(xué)、本科、研究生、職業(yè)教育和通用課程五種層次課程中，本科層次和通用層次課程有更為全面的評(píng)價(jià)方式。盡管兩種課程最常用的三種評(píng)價(jià)方式都是參與討論、單元測(cè)驗(yàn)和期末考試，但是本科課程更注重期末考試，注重課程整體學(xué)習(xí)狀況的評(píng)估，而通用課程更關(guān)注參與討論、課件瀏覽等，注重學(xué)習(xí)者在線學(xué)習(xí)的參與度。這個(gè)現(xiàn)象和兩類層次課程的學(xué)習(xí)目標(biāo)相一致。研究生課程和中學(xué)生課程稀少，類型單一，有待進(jìn)一步發(fā)現(xiàn)學(xué)習(xí)者需求開設(shè)更多課程。

（四）不同平臺(tái)采用的評(píng)價(jià)方式差異較大

對(duì)五個(gè)典型平臺(tái)的評(píng)價(jià)方式分析后發(fā)現(xiàn)，各平臺(tái)在評(píng)價(jià)方式與評(píng)價(jià)主體的選擇上都各具特色，無(wú)統(tǒng)一標(biāo)準(zhǔn)，這反映了各平臺(tái)建設(shè)的差異性。好大學(xué)在線的評(píng)價(jià)方式最為豐富，充分利用了線下考試，同時(shí)也重視課件瀏覽等行為數(shù)據(jù)，體現(xiàn)出教學(xué)探索的意味，這主要是因?yàn)椤昂么髮W(xué)在線”深化了“翻轉(zhuǎn)課堂”的教學(xué)模式，而翻轉(zhuǎn)課堂師生見面的便利性在評(píng)價(jià)中得到充分應(yīng)用，應(yīng)用線下考試的比例非常高。智慧樹與其他MOOCs平臺(tái)相比的一個(gè)明顯不足在于評(píng)價(jià)方式相對(duì)單調(diào)，平臺(tái)中僅采用了四種評(píng)價(jià)方式，更注重于結(jié)果性評(píng)價(jià)，評(píng)價(jià)主體均為機(jī)器自評(píng)。

五、MOOCs學(xué)習(xí)評(píng)價(jià)的改進(jìn)建議

學(xué)習(xí)評(píng)價(jià)作為保障學(xué)習(xí)質(zhì)量和學(xué)習(xí)效果的重要措施，是MOOCs教學(xué)過程中不可或缺的要素，筆者通過調(diào)研國(guó)內(nèi)MOOCs學(xué)習(xí)評(píng)價(jià)實(shí)踐現(xiàn)狀，對(duì)MOOCs學(xué)習(xí)評(píng)價(jià)狀況進(jìn)行了整體分析，以下從教學(xué)理念、實(shí)踐應(yīng)用等方面對(duì)MOOCs的學(xué)習(xí)評(píng)價(jià)改進(jìn)提出幾點(diǎn)建議。

（一）以學(xué)習(xí)目標(biāo)為燈塔，創(chuàng)新學(xué)習(xí)評(píng)價(jià)理念

作為一類新型的在線學(xué)習(xí)，MOOCs以其大規(guī)模、開放、優(yōu)質(zhì)、創(chuàng)新等優(yōu)勢(shì)吸引了諸多學(xué)習(xí)者，同時(shí)也不可避免地出現(xiàn)了一系列的問題，如通過率低、學(xué)生參與度不足、師生互動(dòng)缺乏等，MOOCs的學(xué)習(xí)評(píng)價(jià)對(duì)于了解MOOCs學(xué)習(xí)者的學(xué)習(xí)需求與狀態(tài)，調(diào)整教學(xué)過程，提升教學(xué)質(zhì)量均有著重要意義。從實(shí)踐效果看，由于教學(xué)方式的不同，傳統(tǒng)學(xué)習(xí)評(píng)價(jià)的形式在MOOCs的應(yīng)用產(chǎn)生了相應(yīng)的變化，但是從本質(zhì)上看大量MOOCs對(duì)學(xué)習(xí)者的學(xué)習(xí)評(píng)價(jià)仍舊偏重于考試、測(cè)驗(yàn)等評(píng)價(jià)方式，停留在通過試題分析發(fā)現(xiàn)學(xué)生的認(rèn)知問題、通過作業(yè)反饋給學(xué)生提供學(xué)習(xí)指導(dǎo)的階段。學(xué)習(xí)者會(huì)把他們的努力集中在他們認(rèn)為會(huì)被測(cè)試的內(nèi)容或技能上，學(xué)習(xí)評(píng)價(jià)不僅對(duì)學(xué)生的學(xué)習(xí)內(nèi)容、時(shí)長(zhǎng)有所影響，對(duì)學(xué)習(xí)方式、結(jié)果也會(huì)產(chǎn)生影響?，F(xiàn)有MOOCs評(píng)價(jià)模式呈現(xiàn)出的單一化，會(huì)導(dǎo)致課程在維持學(xué)習(xí)者的學(xué)習(xí)動(dòng)機(jī)、引發(fā)學(xué)習(xí)者的積極投入、提升高階思維能力等方面存在缺陷，反映了課程設(shè)計(jì)階段對(duì)課程學(xué)科特點(diǎn)、學(xué)習(xí)目標(biāo)與學(xué)習(xí)過程監(jiān)控的忽視。

因此，現(xiàn)階段MOOCs評(píng)價(jià)理念應(yīng)當(dāng)有所突破。在線課程設(shè)定學(xué)習(xí)目標(biāo)不僅是學(xué)生對(duì)知識(shí)的簡(jiǎn)單掌握，更希望學(xué)生在多個(gè)方面的發(fā)展，包括學(xué)生在學(xué)習(xí)過程中的收集處理信息能力、交流合作能力、投入程度、情感態(tài)度等，所以在設(shè)定評(píng)價(jià)內(nèi)容時(shí)，在以課程的學(xué)習(xí)目標(biāo)為前提的條件下應(yīng)當(dāng)全面地考慮學(xué)生各方面的成長(zhǎng)變化。另外，雖然目前課程以行為主義理論指導(dǎo)下的xMOOCs為主，但一門在線課程中學(xué)習(xí)不可能獨(dú)立地依賴于某一種學(xué)習(xí)理論支撐，更多地是在多種學(xué)習(xí)理論的指導(dǎo)下的學(xué)習(xí)，雖然某些課程中并不存在具有明顯社會(huì)建構(gòu)和知識(shí)創(chuàng)新特征的設(shè)計(jì)，但不乏在討論區(qū)形成強(qiáng)交互的潛在聯(lián)通。我們認(rèn)為，課程設(shè)計(jì)者在遵循“學(xué)習(xí)目標(biāo)一學(xué)習(xí)評(píng)價(jià)”的基礎(chǔ)上，應(yīng)當(dāng)突破現(xiàn)有的基于行為主義和認(rèn)知主義的MOOCs評(píng)價(jià)設(shè)計(jì)，關(guān)注學(xué)習(xí)者在異步交互中形成的知識(shí)建構(gòu)，不僅停留在交互數(shù)量的評(píng)價(jià)上，更要嘗試對(duì)現(xiàn)有在線學(xué)習(xí)中的交互質(zhì)量進(jìn)行評(píng)價(jià)，是使MOOCs評(píng)價(jià)真正實(shí)現(xiàn)有效改進(jìn)和提升的關(guān)鍵所在。

（二）重視同伴互評(píng)，設(shè)計(jì)有效的評(píng)價(jià)機(jī)制

MOOCs的大規(guī)模和教師精力的有限性決定了MOOCs教師不再適合作為學(xué)習(xí)評(píng)價(jià)主體，MOOCs將學(xué)生這一主體元素引入學(xué)習(xí)評(píng)價(jià)，將評(píng)價(jià)作為學(xué)習(xí)任務(wù)，把課程學(xué)習(xí)與評(píng)價(jià)有機(jī)統(tǒng)一起來，這對(duì)于發(fā)展學(xué)習(xí)者的評(píng)價(jià)能力、促進(jìn)其成為主動(dòng)的學(xué)習(xí)者尤為重要。雖然相較于人工反饋，MOOCs學(xué)習(xí)者更愿意接受機(jī)器評(píng)價(jià)，但以往研究調(diào)查也表明MOOCs學(xué)習(xí)者表現(xiàn)出與同伴交流的強(qiáng)烈意愿，并認(rèn)同MOOCs中同伴互評(píng)的策略，認(rèn)為其可以促進(jìn)學(xué)習(xí)者的理解，減少孤獨(dú)感，通過同伴互評(píng)不僅能夠獲得改進(jìn)其學(xué)習(xí)的具體建議和支持，而且能夠從中獲得更強(qiáng)烈的情感支持，激勵(lì)他們持續(xù)投入在學(xué)習(xí)中。因此，設(shè)計(jì)有效的同伴互評(píng)機(jī)制對(duì)于引導(dǎo)學(xué)習(xí)者參與學(xué)習(xí)，增強(qiáng)學(xué)習(xí)動(dòng)機(jī)有重要的作用。

由前文分析可知，雖然我國(guó)大部分平臺(tái)已經(jīng)在著力研究同伴互評(píng)，但是對(duì)同伴互評(píng)的應(yīng)用才剛剛開始，整體仍舊處于一個(gè)較低水平。一個(gè)主要原因是開設(shè)MOOCs的教師大多是傳統(tǒng)高校的教師，缺乏充足的在線設(shè)計(jì)經(jīng)驗(yàn)，更容易關(guān)注教學(xué)內(nèi)容與測(cè)試的設(shè)計(jì)，忽視同伴互評(píng)這一重要?jiǎng)?chuàng)新性教學(xué)方法。因此，MOOCs教師應(yīng)當(dāng)轉(zhuǎn)換觀念，借鑒傳統(tǒng)教育環(huán)境下的同伴互評(píng)，在MOOCs中應(yīng)用并不斷完善在線同伴互評(píng)，評(píng)價(jià)學(xué)習(xí)者在復(fù)雜環(huán)境下的問題解決能力、創(chuàng)新能力。目前國(guó)內(nèi)外的同伴互評(píng)方式大多是由3-5個(gè)學(xué)習(xí)者共同給一份作業(yè)打分，在此基礎(chǔ)上教學(xué)設(shè)計(jì)師可以通過多種方法來確保同伴互評(píng)的有效性，如為不同背景的學(xué)習(xí)者搭建“腳手架”，給出明確可實(shí)施的評(píng)價(jià)標(biāo)準(zhǔn)或者提供專家評(píng)分的樣例，通過樣例使學(xué)習(xí)者校正自己對(duì)于評(píng)分規(guī)則的理解。

（三1推進(jìn)學(xué)習(xí)分析的實(shí)踐應(yīng)用，完善基于過程的學(xué)習(xí)評(píng)價(jià)

MOOCs不受時(shí)空限制、靈活的特點(diǎn)吸引了廣泛的受眾，根據(jù)學(xué)習(xí)動(dòng)機(jī)的不同，主要包括以興趣為導(dǎo)向的學(xué)習(xí)者、以充實(shí)個(gè)人內(nèi)涵為目的的學(xué)習(xí)者、促進(jìn)職業(yè)發(fā)展的學(xué)習(xí)者等。目前國(guó)內(nèi)MOOCs多將傳統(tǒng)學(xué)習(xí)評(píng)價(jià)遷移到在線環(huán)境下，單純地面向?qū)W習(xí)結(jié)果，無(wú)法實(shí)現(xiàn)“因材施教”的個(gè)性化評(píng)價(jià)，難以從根本上維持學(xué)習(xí)者的學(xué)習(xí)動(dòng)機(jī)、激發(fā)其內(nèi)在驅(qū)動(dòng)力。

學(xué)習(xí)分析技術(shù)的出現(xiàn)為個(gè)性化學(xué)習(xí)評(píng)價(jià)提供了可能，通過數(shù)據(jù)清洗、數(shù)據(jù)挖掘、數(shù)據(jù)建模等技術(shù)處理學(xué)習(xí)者在線學(xué)習(xí)過程數(shù)據(jù)，從而對(duì)個(gè)體學(xué)習(xí)者的學(xué)習(xí)過程進(jìn)行評(píng)價(jià)、追蹤預(yù)測(cè)和干預(yù)，以了解學(xué)習(xí)者的個(gè)體差異。這種評(píng)價(jià)的主要功能是對(duì)學(xué)生的過程進(jìn)行實(shí)時(shí)的監(jiān)控與引導(dǎo)，有效激勵(lì)學(xué)習(xí)者參與學(xué)習(xí)過程，同時(shí)為教師進(jìn)行及時(shí)有效的學(xué)習(xí)干預(yù)和支持提供依據(jù)。此外，將學(xué)習(xí)過程中的參與納入評(píng)價(jià)框架，可以有效改善以往僅將期末考試、作業(yè)、測(cè)試作為評(píng)價(jià)依據(jù)的局限，彌補(bǔ)總結(jié)性評(píng)價(jià)的片面性問題。目前國(guó)內(nèi)平臺(tái)雖然將學(xué)習(xí)分析融入到了學(xué)習(xí)評(píng)價(jià)中，但是這方面的實(shí)踐才剛剛開始，收集到的評(píng)價(jià)依據(jù)不完整，缺乏對(duì)相關(guān)過程與結(jié)果數(shù)據(jù)的深入分析，導(dǎo)致MOOCs學(xué)習(xí)無(wú)法實(shí)現(xiàn)真正的、全面的“過程性評(píng)價(jià)”。因此，對(duì)學(xué)習(xí)者學(xué)習(xí)過程的評(píng)價(jià)需要構(gòu)建全面衡量學(xué)習(xí)質(zhì)量的綜合評(píng)價(jià)模型，以教學(xué)目標(biāo)作為“基準(zhǔn)線”，從言語(yǔ)信息、認(rèn)知策略、態(tài)度等更充分的維度綜合形成科學(xué)、可操作的評(píng)價(jià)目標(biāo)體系，通過更加立體和多元化的評(píng)價(jià)數(shù)據(jù)為教師進(jìn)行有效的教學(xué)干預(yù)提供支持。