鄭蘭琴 趙家怡 龍妙浪

摘要：在線協(xié)作學(xué)習(xí)已經(jīng)成為“互聯(lián)網(wǎng)+教育”時(shí)代一種重要的學(xué)習(xí)方式，其實(shí)施效果很大程度上取決于協(xié)作學(xué)習(xí)活動(dòng)設(shè)計(jì)的質(zhì)量。然而，已有研究大多關(guān)注某種特定干預(yù)策略的有效性，鮮有從提高在線協(xié)作學(xué)習(xí)設(shè)計(jì)與實(shí)施的一致性角度來(lái)研究如何改善在線協(xié)作學(xué)習(xí)的設(shè)計(jì)質(zhì)量與實(shí)施效果。傳統(tǒng)的有效性研究嚴(yán)重依賴情境并難以重復(fù)，而一致性研究著眼于不一致的真實(shí)來(lái)源和缺陷分析，通過(guò)深入地反思能夠生成可證偽的知識(shí)。基于目標(biāo)知識(shí)點(diǎn)范圍一致性、協(xié)同知識(shí)建構(gòu)水平一致性、交互主題一致性、角色分工一致性、參與度一致性5個(gè)量化指標(biāo)，分兩輪對(duì)在線協(xié)作學(xué)習(xí)設(shè)計(jì)和實(shí)施的一致性進(jìn)行評(píng)估并優(yōu)化，實(shí)驗(yàn)結(jié)果表明：（1）優(yōu)化后的第二輪在線協(xié)作學(xué)習(xí)設(shè)計(jì)和實(shí)施的一致性以及學(xué)習(xí)效果均顯著高于第一輪，且一致性與協(xié)作學(xué)習(xí)效果呈現(xiàn)顯著正相關(guān)關(guān)系;（2）研發(fā)的在線協(xié)作學(xué)習(xí)設(shè)計(jì)與實(shí)施一致性的量化評(píng)估方法不僅克服了基于主觀經(jīng)驗(yàn)進(jìn)行設(shè)計(jì)和優(yōu)化的缺陷，而且基于數(shù)據(jù)驅(qū)動(dòng)的策略使得設(shè)計(jì)和優(yōu)化更加科學(xué)規(guī)范，實(shí)現(xiàn)了“設(shè)計(jì)—實(shí)施—優(yōu)化設(shè)計(jì)—再度實(shí)施”的良性循環(huán);（3）從學(xué)習(xí)任務(wù)、學(xué)習(xí)資源、角色分工、交互策略、評(píng)價(jià)方式等維度進(jìn)行設(shè)計(jì)優(yōu)化，有助于提升在線協(xié)作學(xué)習(xí)設(shè)計(jì)與實(shí)施的一致性與學(xué)習(xí)效果。

關(guān)鍵詞：在線協(xié)作學(xué)習(xí);一致性;學(xué)習(xí)效果;設(shè)計(jì)質(zhì)量;優(yōu)化策略

中圖分類號(hào)：G434 ? 文獻(xiàn)標(biāo)識(shí)碼：A ? ?文章編號(hào)：1009-5195（2022）02-0103-10 ?doi10.3969/j.issn.1009-5195.2022.02.012

基金項(xiàng)目：2019年度教育部人文社會(huì)科學(xué)研究青年項(xiàng)目“多源數(shù)據(jù)驅(qū)動(dòng)的協(xié)作學(xué)習(xí)活動(dòng)設(shè)計(jì)方法及優(yōu)化策略的實(shí)證研究”（19YJC880141）。

作者簡(jiǎn)介：鄭蘭琴，博士，副教授，碩士生導(dǎo)師，北京師范大學(xué)教育學(xué)部教育技術(shù)學(xué)院（北京 100875）;趙家怡、龍妙浪，碩士研究生，北京師范大學(xué)教育學(xué)部教育技術(shù)學(xué)院（北京 100875）。

一、引言

近年來(lái)，云計(jì)算、大數(shù)據(jù)和人工智能技術(shù)的飛速發(fā)展引發(fā)了學(xué)習(xí)方式的深刻變革。傳統(tǒng)的學(xué)習(xí)方式已經(jīng)不能夠滿足社會(huì)發(fā)展的需求，數(shù)字一代更加傾向于通過(guò)與同伴或者教師的在線交流來(lái)獲取信息、建構(gòu)知識(shí)并發(fā)展技能。特別是2020年新冠肺炎疫情背景下，全球數(shù)以億計(jì)的學(xué)生不得不從線下課堂轉(zhuǎn)向在線，在線學(xué)習(xí)成為重要的學(xué)習(xí)方式，在線協(xié)作學(xué)習(xí)也被越來(lái)越多的教育者和學(xué)習(xí)者所接受和采用。在線協(xié)作學(xué)習(xí)是指學(xué)習(xí)者為了共同的學(xué)習(xí)目標(biāo)通過(guò)網(wǎng)絡(luò)進(jìn)行在線學(xué)習(xí)，協(xié)同完成學(xué)習(xí)任務(wù)并解決問(wèn)題（Reeves et al.，2004）。通過(guò)在線協(xié)作學(xué)習(xí)，學(xué)習(xí)者可以隨時(shí)隨地與同伴或老師進(jìn)行交流、分享信息、協(xié)同建構(gòu)知識(shí)與技能（Fu et al.，2018）。然而，并非所有參與在線協(xié)作學(xué)習(xí)的學(xué)習(xí)者都能取得良好的學(xué)習(xí)效果（Osipov et al.，2015）。很多學(xué)習(xí)者僅僅停留于淺層次的信息交流與分享（Lan et al.，2012），小組成員在協(xié)作學(xué)習(xí)過(guò)程中常常出現(xiàn)搭便車（Lan et al.，2012）、跑題偏題等現(xiàn)象（Gu et al.，2015）。在線協(xié)作學(xué)習(xí)活動(dòng)的設(shè)計(jì)質(zhì)量是影響學(xué)習(xí)者在線協(xié)作學(xué)習(xí)效果的主要因素。

縱觀已有研究，大多關(guān)注某種特定干預(yù)策略的有效性，并且有關(guān)在線協(xié)作學(xué)習(xí)活動(dòng)的設(shè)計(jì)主要聚焦于局部要素，如在線協(xié)作學(xué)習(xí)環(huán)境、交互策略、評(píng)價(jià)方法等，鮮有從提高在線協(xié)作學(xué)習(xí)設(shè)計(jì)與實(shí)施的一致性角度來(lái)研究如何改善在線協(xié)作學(xué)習(xí)的設(shè)計(jì)質(zhì)量和實(shí)施效果。事實(shí)上，在線協(xié)作學(xué)習(xí)包含兩種形態(tài)：設(shè)計(jì)態(tài)與實(shí)施態(tài)。在線協(xié)作學(xué)習(xí)設(shè)計(jì)與實(shí)施的一致性指的是所有設(shè)計(jì)要素在實(shí)施過(guò)程中都能夠落實(shí)。之所以研究一致性，是因?yàn)閭鹘y(tǒng)的有效性研究嚴(yán)重依賴情境，結(jié)論難以遷移和推廣，也無(wú)法生成可證偽的知識(shí);而一致性研究著眼于不一致的真實(shí)來(lái)源和缺陷分析，通過(guò)深入地反思能夠生成可證偽的知識(shí)（鄭蘭琴等， 2014），且不依賴情境，研究結(jié)論可以重復(fù)和推廣。對(duì)在線協(xié)作學(xué)習(xí)設(shè)計(jì)與實(shí)施的一致性進(jìn)行深入研究，有助于明確在線協(xié)作學(xué)習(xí)過(guò)程中哪些設(shè)計(jì)要素落實(shí)了，哪些沒(méi)有，進(jìn)而發(fā)現(xiàn)設(shè)計(jì)的問(wèn)題，通過(guò)反復(fù)優(yōu)化生成協(xié)作學(xué)習(xí)設(shè)計(jì)的技術(shù)性知識(shí)，提升教師的教學(xué)設(shè)計(jì)能力。

本研究開(kāi)展兩輪的在線協(xié)作學(xué)習(xí)活動(dòng)，利用研發(fā)的在線協(xié)作學(xué)習(xí)活動(dòng)設(shè)計(jì)與實(shí)施一致性的量化評(píng)估指標(biāo)計(jì)算兩輪在線協(xié)作學(xué)習(xí)活動(dòng)設(shè)計(jì)與實(shí)施的一致性，旨在解決兩個(gè)研究問(wèn)題：第一，通過(guò)評(píng)估和優(yōu)化，在線協(xié)作學(xué)習(xí)活動(dòng)設(shè)計(jì)與實(shí)施的一致性能否提升？第二，改善在線協(xié)作學(xué)習(xí)活動(dòng)設(shè)計(jì)與實(shí)施的一致性，是否可以提高在線協(xié)作學(xué)習(xí)效果？

二、文獻(xiàn)綜述

1.在線協(xié)作學(xué)習(xí)活動(dòng)設(shè)計(jì)和效果評(píng)估的研究現(xiàn)狀

（1）在線協(xié)作學(xué)習(xí)活動(dòng)設(shè)計(jì)研究

當(dāng)前關(guān)于在線協(xié)作學(xué)習(xí)活動(dòng)設(shè)計(jì)的研究主要集中于兩方面：構(gòu)建協(xié)作學(xué)習(xí)活動(dòng)設(shè)計(jì)整體框架以及探索影響協(xié)作學(xué)習(xí)活動(dòng)的局部要素。在構(gòu)建協(xié)作學(xué)習(xí)活動(dòng)設(shè)計(jì)整體框架方面，研究者從不同視角進(jìn)行了探索。比如，余亮等（2012）將任務(wù)、時(shí)序、角色、資源進(jìn)行結(jié)構(gòu)化，構(gòu)建了包括任務(wù)分析、時(shí)序排列、角色定義、資源分配在內(nèi)的協(xié)作學(xué)習(xí)活動(dòng)設(shè)計(jì)框架。馬志強(qiáng)（2012）在已有文獻(xiàn)基礎(chǔ)上構(gòu)建了問(wèn)題解決型在線協(xié)作學(xué)習(xí)活動(dòng)的設(shè)計(jì)框架，主要包含問(wèn)題情境、問(wèn)題解決角色、任務(wù)和資源、工具4個(gè)核心設(shè)計(jì)要素。何文濤（2018）基于學(xué)習(xí)活動(dòng)概念模型提出了協(xié)作學(xué)習(xí)活動(dòng)設(shè)計(jì)框架，包括協(xié)作學(xué)習(xí)活動(dòng)設(shè)計(jì)的過(guò)程模式、學(xué)習(xí)目標(biāo)分析、活動(dòng)分類與任務(wù)設(shè)計(jì)、內(nèi)容分析、結(jié)構(gòu)化設(shè)計(jì)、缺陷分析與改進(jìn)6個(gè)方面。鄭蘭琴等（2020）從目標(biāo)、任務(wù)、交互、資源和評(píng)價(jià)5方面提出了協(xié)作學(xué)習(xí)活動(dòng)設(shè)計(jì)的框架。

在探索影響協(xié)作學(xué)習(xí)活動(dòng)的局部要素方面，Pozzi（2010）探索了切塊拼接、案例研究等交互策略對(duì)促進(jìn)交流和協(xié)作以及提升學(xué)習(xí)成績(jī)的影響。袁夢(mèng)霞等（2017）探索了不同角色設(shè)計(jì)對(duì)學(xué)習(xí)者批判性思維的影響。Shin等（2018）探索了可視化標(biāo)注工具對(duì)促進(jìn)知識(shí)共享、提高知識(shí)建構(gòu)水平的影響。Hasan等（2019）分析了游戲化在線協(xié)作學(xué)習(xí)環(huán)境對(duì)學(xué)生參與度的影響。

（2）在線協(xié)作學(xué)習(xí)活動(dòng)效果評(píng)估研究

有關(guān)在線協(xié)作學(xué)習(xí)活動(dòng)評(píng)估的研究，主要從評(píng)估內(nèi)容和評(píng)估方法兩方面開(kāi)展。從評(píng)估內(nèi)容來(lái)看，主要包括參與度、學(xué)業(yè)成績(jī)、學(xué)習(xí)行為模式等。Hasan等（2019）通過(guò)評(píng)估學(xué)習(xí)者登錄游戲化協(xié)作環(huán)境的次數(shù)、訪問(wèn)資源的次數(shù)、閱讀貼子的次數(shù)以及提交作業(yè)次數(shù)等來(lái)考察游戲化協(xié)作學(xué)習(xí)環(huán)境是否影響學(xué)習(xí)者的參與度，結(jié)果表明游戲化協(xié)作學(xué)習(xí)環(huán)境能顯著提高學(xué)生的參與度。Wang等（2020）探索了不同形式的學(xué)習(xí)材料呈現(xiàn)對(duì)學(xué)習(xí)者參與在線協(xié)作學(xué)習(xí)的行為模式和學(xué)習(xí)效果的影響，結(jié)果表明呈現(xiàn)互動(dòng)性學(xué)習(xí)材料的小組績(jī)效明顯好于僅僅呈現(xiàn)視頻或者文本學(xué)習(xí)材料的小組。

從評(píng)估方法來(lái)看，傳統(tǒng)的方法主要包括問(wèn)卷調(diào)查法、訪談法，近年來(lái)有研究開(kāi)始利用社會(huì)網(wǎng)絡(luò)分析法、行為序列分析法、學(xué)習(xí)分析技術(shù)進(jìn)行在線協(xié)作學(xué)習(xí)效果的評(píng)估。比如，Guiter等（2021）采取問(wèn)卷、訪談的方法，對(duì)學(xué)生在協(xié)作學(xué)習(xí)中的學(xué)習(xí)感受和學(xué)習(xí)成績(jī)進(jìn)行測(cè)量，以此反映協(xié)作學(xué)習(xí)效果。Zhang 等（2017）采用社會(huì)網(wǎng)絡(luò)分析法，分析了學(xué)生在協(xié)作學(xué)習(xí)過(guò)程中的活躍度，進(jìn)而評(píng)估協(xié)作學(xué)習(xí)的效果。Wang等（2017）采用行為序列分析方法來(lái)分析學(xué)生在協(xié)作學(xué)習(xí)過(guò)程中的行為模式和特征，進(jìn)而評(píng)估協(xié)作學(xué)習(xí)效果。Cerro Martínez等（2020）采用學(xué)習(xí)分析方法對(duì)協(xié)作學(xué)習(xí)過(guò)程進(jìn)行監(jiān)控與分析，用以幫助教師實(shí)施個(gè)性化的反饋和干預(yù)。

綜上所述，已有研究從協(xié)作學(xué)習(xí)活動(dòng)的整體框架設(shè)計(jì)和局部要素對(duì)在線協(xié)作活動(dòng)的設(shè)計(jì)進(jìn)行了探索，并采用調(diào)查法、訪談法、社會(huì)網(wǎng)絡(luò)分析法、行為序列分析法、學(xué)習(xí)分析技術(shù)等對(duì)協(xié)作學(xué)習(xí)效果進(jìn)行了評(píng)估。然而，整體框架的設(shè)計(jì)主要停留在理論層面，局部要素的設(shè)計(jì)雖然進(jìn)行了一些實(shí)證分析，但未從協(xié)作學(xué)習(xí)設(shè)計(jì)與實(shí)施的一致性角度進(jìn)行思考，難以分辨到底哪些設(shè)計(jì)要素落實(shí)了、哪些沒(méi)有，也缺乏對(duì)局部要素的進(jìn)一步優(yōu)化。另外，當(dāng)前還鮮有研究從一致性的視角探索如何評(píng)估并提升在線協(xié)作學(xué)習(xí)的效果。

2.教育教學(xué)中的一致性研究現(xiàn)狀

一致性指的是一個(gè)形式系統(tǒng)中不蘊(yùn)含矛盾（Salmon，1977）。教育領(lǐng)域中的一致性指的是期望與評(píng)價(jià)之間彼此一致的程度（Webb，1997）。一致性在教育領(lǐng)域已經(jīng)受到國(guó)內(nèi)外學(xué)者的關(guān)注。國(guó)外學(xué)者主要從評(píng)價(jià)與課程標(biāo)準(zhǔn)之間的一致性進(jìn)行探索。比如，Webb（1999）從類別一致性、知識(shí)深度一致性、知識(shí)范圍一致性、表征平衡性四個(gè)維度考察數(shù)學(xué)和科學(xué)領(lǐng)域中評(píng)價(jià)與課程標(biāo)準(zhǔn)之間的一致性，結(jié)果發(fā)現(xiàn)，知識(shí)深度和知識(shí)范圍上的一致性較低。Martone等（2009）總結(jié)了考察評(píng)價(jià)與課程內(nèi)容標(biāo)準(zhǔn)一致性的三種方法，即Webb方法論（包括上述四個(gè)維度）、達(dá)成方法論（包括項(xiàng)目層次分析和項(xiàng)目集合分析兩個(gè)維度）、調(diào)查實(shí)施的課程方法論（包括內(nèi)容匹配、績(jī)效期望、教學(xué)內(nèi)容分析三個(gè)維度）。國(guó)內(nèi)學(xué)者主要從教材與內(nèi)容標(biāo)準(zhǔn)的一致性（盧群 等，2012）以及高考內(nèi)容與課程標(biāo)準(zhǔn)的一致性（袁令民，2013）進(jìn)行了探索?？梢?jiàn)，已有研究主要聚焦于課程領(lǐng)域的一致性。

筆者認(rèn)為，一致性應(yīng)該貫穿于整個(gè)教育領(lǐng)域，不僅適用于課程領(lǐng)域的研究，而且適用于教學(xué)實(shí)踐領(lǐng)域的研究。教學(xué)領(lǐng)域中的一致性主要包括教學(xué)目標(biāo)和手段的一致性、教學(xué)設(shè)計(jì)與實(shí)施的一致性兩方面。教學(xué)目標(biāo)與手段的一致性指的是教學(xué)目標(biāo)與采取的教學(xué)手段之間的吻合程度，教學(xué)設(shè)計(jì)與實(shí)施的一致性指的是教學(xué)行動(dòng)中的行為和內(nèi)容與教學(xué)方案中所設(shè)定的行為和內(nèi)容的吻合程度（鄭蘭琴，2015）。在目標(biāo)和手段一致性方面，目前已有研究者通過(guò)比較目標(biāo)和手段之間的數(shù)據(jù)依賴關(guān)系來(lái)分析協(xié)作學(xué)習(xí)活動(dòng)存在的缺陷，構(gòu)建系統(tǒng)協(xié)作學(xué)習(xí)活動(dòng)設(shè)計(jì)技術(shù)框架來(lái)促進(jìn)優(yōu)良協(xié)作學(xué)習(xí)過(guò)程的發(fā)生（何文濤，2018）。另外，楊開(kāi)城等（2015）開(kāi)發(fā)了包含目標(biāo)—手段一致性在內(nèi)的6個(gè)指標(biāo)用于評(píng)價(jià)教案質(zhì)量，具有可行性、客觀性及有效性。在教學(xué)方案設(shè)計(jì)與實(shí)施的一致性方面，鄭蘭琴（2015）對(duì)兩個(gè)案例教學(xué)方案進(jìn)行設(shè)計(jì)，以個(gè)案研究的方式考察了設(shè)計(jì)與實(shí)施的一致性，開(kāi)發(fā)了教學(xué)實(shí)施過(guò)程中的信息流序列、激活目標(biāo)知識(shí)點(diǎn)的范圍和激活量三個(gè)一致性指標(biāo)，初步探究了一致性分析的可行性以及如何基于一致性進(jìn)行反思性分析。田爽等（2017）采集小學(xué)信息技術(shù)課程的30個(gè)教學(xué)設(shè)計(jì)與實(shí)施過(guò)程樣本，采用基于信息流的分析方法分析了教學(xué)設(shè)計(jì)方案與實(shí)施過(guò)程在激活知識(shí)點(diǎn)范圍、目標(biāo)知識(shí)點(diǎn)的激活量、信息流序列方面的一致性，并對(duì)教學(xué)過(guò)程進(jìn)行了反思。

綜上所述，已有研究主要對(duì)傳統(tǒng)課堂中的教學(xué)設(shè)計(jì)與實(shí)施的一致性進(jìn)行了探索。然而，鮮有研究探索在線協(xié)作學(xué)習(xí)設(shè)計(jì)與實(shí)施的一致性，并且缺乏對(duì)一致性與學(xué)習(xí)效果關(guān)系的研究。本研究將重點(diǎn)探索在線協(xié)作學(xué)習(xí)設(shè)計(jì)與實(shí)施一致性的評(píng)估方法、提升策略以及一致性與學(xué)習(xí)效果的關(guān)系，目的是為提升協(xié)作學(xué)習(xí)學(xué)習(xí)效果和教師的教學(xué)設(shè)計(jì)水平提供重要參考。

三、研究設(shè)計(jì)與方法

以設(shè)計(jì)為中心的研究范式關(guān)注教育設(shè)計(jì)的一致性，通過(guò)一致性分析判斷教育設(shè)計(jì)的好壞，并關(guān)注不一致的真實(shí)來(lái)源和缺陷分析（楊開(kāi)城，2013）。本研究采取以設(shè)計(jì)為中心的研究范式分析在線協(xié)作學(xué)習(xí)設(shè)計(jì)與實(shí)施的一致性。

1.研究對(duì)象

參與本研究的對(duì)象為北京某“985”高校的90名在校大學(xué)生。所有學(xué)生均具有協(xié)作學(xué)習(xí)相關(guān)的基礎(chǔ)知識(shí)。研究一共開(kāi)展了15個(gè)主題的在線協(xié)作學(xué)習(xí)活動(dòng)，每個(gè)主題實(shí)施2輪在線協(xié)作學(xué)習(xí)，旨在評(píng)估能否通過(guò)一系列策略來(lái)優(yōu)化協(xié)作學(xué)習(xí)活動(dòng)設(shè)計(jì)與實(shí)施的一致性。15個(gè)在線協(xié)作學(xué)習(xí)活動(dòng)主題涵蓋教育學(xué)、教育技術(shù)學(xué)、教育傳播學(xué)、計(jì)算機(jī)科學(xué)、化學(xué)等多個(gè)學(xué)科領(lǐng)域，每個(gè)主題的每一輪協(xié)作學(xué)習(xí)活動(dòng)由3名學(xué)生在線參加。正式實(shí)驗(yàn)前，研究者對(duì)參加同一主題的6名學(xué)生進(jìn)行在線前測(cè)，前測(cè)題型包含選擇題、判斷題、填空題、簡(jiǎn)答題四種題型，旨在評(píng)價(jià)參與兩輪實(shí)驗(yàn)的學(xué)生在已有知識(shí)基礎(chǔ)方面是否存在顯著性差異，從而避免學(xué)生先前知識(shí)對(duì)實(shí)驗(yàn)結(jié)果的影響。經(jīng)配對(duì)樣本T檢驗(yàn)，結(jié)果發(fā)現(xiàn)參與15個(gè)主題兩輪在線協(xié)作學(xué)習(xí)活動(dòng)的學(xué)生在前測(cè)成績(jī)方面均無(wú)顯著性差異（p> 0.05），分析結(jié)果見(jiàn)表1所示。

2.研究程序

本研究包括五個(gè)階段。第一階段，對(duì)所有學(xué)生進(jìn)行前測(cè)，檢驗(yàn)參加兩輪在線協(xié)作學(xué)習(xí)的學(xué)生在已有知識(shí)基礎(chǔ)方面是否存在顯著性差異。第二階段，設(shè)計(jì)15個(gè)主題的在線協(xié)作學(xué)習(xí)活動(dòng)。研究首先從協(xié)作學(xué)習(xí)目標(biāo)、任務(wù)、交互策略、資源和評(píng)價(jià)5個(gè)維度（鄭蘭琴等，2020）進(jìn)行協(xié)作學(xué)習(xí)活動(dòng)設(shè)計(jì)。然后，邀請(qǐng)45名大學(xué)生以3人為一組在不同時(shí)間和地點(diǎn)開(kāi)展15個(gè)主題的第一輪在線協(xié)作學(xué)習(xí)活動(dòng)。在線協(xié)作學(xué)習(xí)工具選擇國(guó)內(nèi)流行的即時(shí)通訊軟件騰訊QQ，每次活動(dòng)持續(xù)2小時(shí)左右。第三階段，在第一輪在線協(xié)作學(xué)習(xí)活動(dòng)結(jié)束后，研究者采用研發(fā)的一致性計(jì)算方法分析第一輪在線協(xié)作學(xué)習(xí)設(shè)計(jì)與實(shí)施的一致性，并根據(jù)分析結(jié)果優(yōu)化第一輪在線協(xié)作學(xué)習(xí)設(shè)計(jì)方案，為第二輪活動(dòng)做準(zhǔn)備。第四階段，另邀請(qǐng)45名大學(xué)生也以3人為一組在不同時(shí)間和地點(diǎn)開(kāi)展第二輪在線協(xié)作學(xué)習(xí)活動(dòng)。在線協(xié)作學(xué)習(xí)的主題、任務(wù)、持續(xù)時(shí)間等方面均與第一輪相同，但在第一輪的基礎(chǔ)上對(duì)協(xié)作學(xué)習(xí)的任務(wù)、交互策略、資源和評(píng)價(jià)進(jìn)行了優(yōu)化。第五階段，分析第二輪在線協(xié)作學(xué)習(xí)設(shè)計(jì)與實(shí)施的一致性，并計(jì)算兩輪一致性的差異及其與在線協(xié)作學(xué)習(xí)效果的關(guān)系。

3.數(shù)據(jù)收集與分析方法

本研究采用準(zhǔn)實(shí)驗(yàn)的方法收集共計(jì)30個(gè)小組的在線協(xié)作學(xué)習(xí)活動(dòng)數(shù)據(jù)。數(shù)據(jù)源包括30個(gè)小組的在線協(xié)作學(xué)習(xí)記錄和作品。在計(jì)算一致性結(jié)果前，需要對(duì)30個(gè)小組的在線協(xié)作學(xué)習(xí)討論記錄進(jìn)行深入分析。這里采用的分析方法包括筆者提出的基于信息流的協(xié)作學(xué)習(xí)分析方法和內(nèi)容分析法，主要用于在線協(xié)作學(xué)習(xí)設(shè)計(jì)與實(shí)施一致性的量化評(píng)估，以及協(xié)作學(xué)習(xí)效果的評(píng)價(jià)。

（1）在線協(xié)作學(xué)習(xí)設(shè)計(jì)與實(shí)施一致性的量化評(píng)估方法

在線協(xié)作學(xué)習(xí)設(shè)計(jì)與實(shí)施一致性的量化評(píng)估方法主要包括三個(gè)步驟：第一步，確定同時(shí)適用于分析設(shè)計(jì)方案與實(shí)施過(guò)程的編碼體系和方法;第二步，對(duì)設(shè)計(jì)方案與實(shí)施過(guò)程采用既定的編碼體系進(jìn)行編碼與分析;第三步，開(kāi)發(fā)特定的量化指標(biāo)和算法計(jì)算二者的一致性。在這三個(gè)步驟中，最關(guān)鍵的是開(kāi)發(fā)一致性的量化評(píng)估指標(biāo)。筆者認(rèn)為，協(xié)作學(xué)習(xí)最核心、最重要的目標(biāo)是提高學(xué)習(xí)者的協(xié)同知識(shí)建構(gòu)水平、調(diào)節(jié)性學(xué)習(xí)的技能和參與程度。因此，可以從五個(gè)方面來(lái)計(jì)算在線協(xié)作學(xué)習(xí)設(shè)計(jì)與實(shí)施一致性，即目標(biāo)知識(shí)點(diǎn)范圍一致性、協(xié)同知識(shí)建構(gòu)水平一致性、交互主題一致性、角色分工一致性和參與度一致性。其中，目標(biāo)知識(shí)點(diǎn)范圍一致性、協(xié)同知識(shí)建構(gòu)水平一致性、交互主題一致性主要反映學(xué)習(xí)者的協(xié)同知識(shí)建構(gòu)水平，角色分工一致性主要考察學(xué)習(xí)者的調(diào)節(jié)性學(xué)習(xí)技能，參與度一致性則反映學(xué)習(xí)者的參與程度是否符合教師的期望。另外，目標(biāo)知識(shí)點(diǎn)范圍一致性和協(xié)同知識(shí)建構(gòu)水平一致性主要采用筆者提出的基于信息流的協(xié)作學(xué)習(xí)交互分析方法進(jìn)行編碼和分析。交互主題一致性、角色分工一致性和參與度一致性主要通過(guò)內(nèi)容分析法進(jìn)行編碼和分析。具體指標(biāo)的計(jì)算方法如下。

①目標(biāo)知識(shí)點(diǎn)范圍一致性

目標(biāo)知識(shí)點(diǎn)范圍一致性旨在衡量目標(biāo)知識(shí)點(diǎn)激活廣度的差異，即在線協(xié)作學(xué)習(xí)設(shè)計(jì)方案中激活的目標(biāo)知識(shí)點(diǎn)與在線協(xié)作學(xué)習(xí)實(shí)施過(guò)程中激活的知識(shí)點(diǎn)范圍的一致性。在線協(xié)作學(xué)習(xí)設(shè)計(jì)方案的目標(biāo)知識(shí)點(diǎn)主要通過(guò)目標(biāo)知識(shí)圖計(jì)算得出，而在線協(xié)作學(xué)習(xí)實(shí)施過(guò)程中激活的知識(shí)點(diǎn)則需要借助于筆者提出的基于信息流的協(xié)作學(xué)習(xí)交互分析方法得出。該方法通過(guò)對(duì)在線協(xié)作學(xué)習(xí)交互過(guò)程中的信息流進(jìn)行切分，進(jìn)而生成每個(gè)小組實(shí)際激活的知識(shí)圖，圖中知識(shí)點(diǎn)的數(shù)量就是在線協(xié)作學(xué)習(xí)實(shí)施過(guò)程中激活的知識(shí)點(diǎn)的數(shù)量。

本研究借鑒Tversky相似系數(shù)（Tversky，1977）計(jì)算在線協(xié)作學(xué)習(xí)活動(dòng)設(shè)計(jì)方案與實(shí)施過(guò)程在目標(biāo)知識(shí)點(diǎn)范圍上的一致性。Tversky相似系數(shù)強(qiáng)調(diào)可以通過(guò)兩個(gè)事物共同擁有的屬性占兩個(gè)事物所有屬性的比例來(lái)衡量相似性，計(jì)算方法見(jiàn)公式（1）所示。

（1）

公式（1）中的A 代表在線協(xié)作學(xué)習(xí)活動(dòng)設(shè)計(jì)方案中包含的目標(biāo)知識(shí)點(diǎn)，B 代表在線協(xié)作學(xué)習(xí)活動(dòng)實(shí)施過(guò)程中激活的目標(biāo)知識(shí)點(diǎn)，f（A ∩B）則表示在線協(xié)作學(xué)習(xí)設(shè)計(jì)方案和活動(dòng)實(shí)施過(guò)程中共同激活的目標(biāo)知識(shí)點(diǎn)數(shù)量，f（A-B）表示在線協(xié)作學(xué)習(xí)設(shè)計(jì)方案中激活而實(shí)施過(guò)程中沒(méi)有激活的目標(biāo)知識(shí)點(diǎn)數(shù)量，f（B-A）表示在線協(xié)作學(xué)習(xí)實(shí)施過(guò)程中激活而設(shè)計(jì)方案中沒(méi)有激活的目標(biāo)知識(shí)點(diǎn)數(shù)量。S為目標(biāo)知識(shí)點(diǎn)范圍一致性。若S在0～0.3間，則表示目標(biāo)知識(shí)點(diǎn)范圍一致性水平較低;若S在0.3～0.8間，則表示中度一致;若S>0.8則表示在線協(xié)作學(xué)習(xí)活動(dòng)設(shè)計(jì)方案與實(shí)施過(guò)程的目標(biāo)知識(shí)點(diǎn)范圍高度一致。

②協(xié)同知識(shí)建構(gòu)水平一致性

協(xié)同知識(shí)建構(gòu)水平一致性旨在衡量教師預(yù)期的協(xié)同知識(shí)建構(gòu)水平與學(xué)習(xí)者實(shí)際達(dá)到的知識(shí)建構(gòu)水平的差異。一致性越高，協(xié)同知識(shí)建構(gòu)水平也越高。教師預(yù)期的協(xié)同知識(shí)建構(gòu)水平主要通過(guò)目標(biāo)知識(shí)圖表征。學(xué)習(xí)者實(shí)際達(dá)到的協(xié)同知識(shí)建構(gòu)水平主要通過(guò)基于信息流的協(xié)作學(xué)習(xí)交互分析方法計(jì)算得出。該方法包括三個(gè)步驟，即繪制目標(biāo)知識(shí)圖、切分信息流和計(jì)算信息流的屬性（激活量并生成帶有激活量的知識(shí)圖）。因此，協(xié)同知識(shí)建構(gòu)水平一致性相當(dāng)于比較目標(biāo)知識(shí)圖與學(xué)習(xí)者實(shí)際生成的知識(shí)圖之間的一致性。具體計(jì)算方法如公式（2）所示（崔盼盼等，2018）。

（2）

公式（2）中，R代表目標(biāo)知識(shí)圖與學(xué)生實(shí)際生成的知識(shí)圖正確命題鏈匹配的得分，W代表學(xué)生實(shí)際生成的知識(shí)圖中新增的正確命題鏈得分，D代表斷裂命題鏈得分，Y代表遺漏的命題鏈得分，F(xiàn)代表錯(cuò)誤的命題鏈得分，Z代表目標(biāo)知識(shí)圖中包含的命題鏈總數(shù)。G為協(xié)同知識(shí)建構(gòu)水平一致性。若G在0～0.3間，則表示協(xié)同知識(shí)建構(gòu)水平一致性較低;若G在0.3～0.8間，則表示協(xié)同知識(shí)建構(gòu)水平中度一致;若G>0.8則表示協(xié)同知識(shí)建構(gòu)水平高度一致。

③交互主題一致性

在線協(xié)作學(xué)習(xí)過(guò)程中學(xué)習(xí)者具有很高的自由度，因此可能發(fā)生跑題、偏題的現(xiàn)象。交互主題一致性主要考察教師預(yù)期的交互主題是否與學(xué)習(xí)者實(shí)際的交互主題一致，如果一致則表示學(xué)習(xí)者沒(méi)有跑題、偏題。借助交互主題一致性能夠深入考察學(xué)習(xí)者在交互主題方面的聚焦程度。本研究利用Deza等人（2009）提出的余弦相似度來(lái)計(jì)算交互主題一致性，計(jì)算方法見(jiàn)公式（3）。

（3）

公式（3）中，X代表在線協(xié)作學(xué)習(xí)設(shè)計(jì)方案中每個(gè)任務(wù)主題的詞頻向量，Y代表在線協(xié)作學(xué)習(xí)實(shí)施過(guò)程每個(gè)任務(wù)主題的詞頻向量，X·Y表示向量X與向量Y的點(diǎn)乘。T為交互主題一致性。若T取值在0～0.3之間，表示交互主題一致性較低;若T取值在0.3～0.8表示中等一致;若T超過(guò)0.8則表示交互主題高度一致。

④ 角色分工一致性

為了更好地評(píng)價(jià)在線協(xié)作學(xué)習(xí)設(shè)計(jì)與實(shí)施的一致性，本研究開(kāi)發(fā)了角色分工一致性的計(jì)算方法，旨在衡量學(xué)習(xí)者是否按照教師預(yù)期的角色職責(zé)履職。研究在設(shè)計(jì)在線協(xié)作學(xué)習(xí)活動(dòng)方案時(shí)，設(shè)計(jì)了小組長(zhǎng)、信息搜索者和監(jiān)控者三種角色，根據(jù)角色職責(zé)構(gòu)建學(xué)習(xí)者角色分工的編碼。小組長(zhǎng)的職責(zé)包括分配任務(wù)、發(fā)起話題、提出問(wèn)題、解決沖突、解釋觀點(diǎn)、協(xié)商調(diào)節(jié);信息搜索者的職責(zé)包括詢問(wèn)需求、搜索信息、整理信息;監(jiān)控者的職責(zé)包括監(jiān)控進(jìn)程、控制進(jìn)程、批判質(zhì)疑。兩位研究者對(duì)每個(gè)小組參與協(xié)作學(xué)習(xí)的角色分工情況進(jìn)行內(nèi)容分析和編碼，最后計(jì)算一致性。本研究通過(guò)計(jì)算在線協(xié)作學(xué)習(xí)活動(dòng)設(shè)計(jì)方案與活動(dòng)實(shí)施過(guò)程角色職責(zé)的相似度來(lái)計(jì)算角色分工的一致性，計(jì)算方法見(jiàn)公式（4）所示。

（4）

公式（4）中，f（A1）、f（A2）、f（A3）分別表示在線協(xié)作學(xué)習(xí)設(shè)計(jì)方案中小組長(zhǎng)、信息搜索者、監(jiān)控者承擔(dān)職責(zé)的數(shù)量，f（B1）、f（B2）、f（B3）分別表示在線協(xié)作學(xué)習(xí)活動(dòng)實(shí)施過(guò)程中小組長(zhǎng)、信息搜索者、監(jiān)控者實(shí)際承擔(dān)職責(zé)的數(shù)量，公式中的f（A1∩B1）、f（A2∩B2）、f（A3∩B3）分別表示在線協(xié)作學(xué)習(xí)方案與實(shí)施過(guò)程中小組長(zhǎng)、信息搜索者、監(jiān)控者承擔(dān)的共同職責(zé)的數(shù)量。R為角色分工一致性。若R在0～0.3之間，表示一致性較低;若R在0.3～0.8間表示中度一致;若R>0.8則表示高度一致。

⑤參與度一致性

在線協(xié)作學(xué)習(xí)參與度一致性旨在衡量教師預(yù)期的參與度與學(xué)習(xí)者實(shí)際參與度的差異。差異越小，一致性越高。本研究的參與度包括認(rèn)知與元認(rèn)知層次的參與程度，其中認(rèn)知層次的參與度主要體現(xiàn)在學(xué)習(xí)者進(jìn)行識(shí)記、理解、應(yīng)用、分析、評(píng)價(jià)和創(chuàng)造等方面;元認(rèn)知層次的參與主要表現(xiàn)在協(xié)作學(xué)習(xí)中設(shè)定目標(biāo)、制定計(jì)劃、實(shí)施策略、監(jiān)控協(xié)調(diào)、反思與評(píng)價(jià)等方面。研究者首先根據(jù)編碼表對(duì)交互文本進(jìn)行分析，然后計(jì)算參與度一致性，具體見(jiàn)公式（5）。

（5）

公式（5）中，t1表示認(rèn)知層次參與的在線交互文本總數(shù)，t2表示元認(rèn)知層次參與的在線交互文本總數(shù)，T表示所有在線協(xié)作學(xué)習(xí)交互文本的總數(shù)，f（A）表示在線協(xié)作學(xué)習(xí)設(shè)計(jì)方案中認(rèn)知層次參與種類的數(shù)量，f（A1）表示在線協(xié)作學(xué)習(xí)實(shí)施過(guò)程中學(xué)習(xí)者所表現(xiàn)的認(rèn)知層次參與種類的數(shù)量，f（B）表示在線協(xié)作學(xué)習(xí)設(shè)計(jì)方案中元認(rèn)知層次參與種類的數(shù)量，f（B1）則表示在線協(xié)作學(xué)習(xí)實(shí)施過(guò)程中學(xué)習(xí)者所表現(xiàn)的元認(rèn)知層次參與種類的數(shù)量。E為參與度一致性。若E在0～0.3間，則表示一致性較低，學(xué)習(xí)者沒(méi)有積極參與;若E在0.3～0.8間，則表示參與度中等一致;若E>0.8則表示一致性很高，學(xué)習(xí)者積極參與。

（2）協(xié)作學(xué)習(xí)效果的評(píng)價(jià)

本研究對(duì)在線協(xié)作學(xué)習(xí)效果的評(píng)價(jià)主要通過(guò)參與在線協(xié)作學(xué)習(xí)后生成的小組作品的成績(jī)衡量。每個(gè)小組在協(xié)作學(xué)習(xí)結(jié)束時(shí)需要提交小組作品，每個(gè)小組的作品都是圍繞協(xié)作學(xué)習(xí)任務(wù)的解決方案，成果形式為Word文檔。筆者制定了如表2所示的量規(guī)來(lái)評(píng)價(jià)所有小組的作品。每個(gè)小組的作品均由兩位研究者獨(dú)立評(píng)判。

（3）研究信度

本研究用Kappa統(tǒng)計(jì)值來(lái)衡量?jī)晌谎芯空咴谠诰€協(xié)作學(xué)習(xí)作品得分、知識(shí)點(diǎn)總激活量、知識(shí)點(diǎn)范圍、知識(shí)建構(gòu)水平、交互主題、學(xué)習(xí)角色分工、參與度方面編碼的一致性。其中，在線協(xié)作學(xué)習(xí)作品的評(píng)分者信度為0.88，其余的都在0.9以上，具有很高的信度。對(duì)于個(gè)別不一致的地方，由兩位研究者進(jìn)行商討后確定最終結(jié)果。

四、研究結(jié)果

1.在線協(xié)作學(xué)習(xí)設(shè)計(jì)與實(shí)施一致性的分析結(jié)果

（1）第一輪一致性分析結(jié)果

本研究對(duì)第一輪在線協(xié)作學(xué)習(xí)設(shè)計(jì)方案、在線協(xié)作學(xué)習(xí)實(shí)施過(guò)程的交互文本采用前文所述的方法進(jìn)行深入分析，得到第一輪一致性結(jié)果，如表3所示。進(jìn)一步計(jì)算5個(gè)指標(biāo)的平均值和標(biāo)準(zhǔn)差，結(jié)果發(fā)現(xiàn)，目標(biāo)知識(shí)點(diǎn)范圍一致性最高（M=0.77，SD=0.08），其次是交互主題一致性（M=0.52，SD=0.13）、協(xié)同知識(shí)建構(gòu)水平一致性（M=0.48，SD=0.23）、角色分工一致性（M=0.47，SD= 0.11），參與度一致性最低（M=0.33，SD=0.13）。這說(shuō)明學(xué)習(xí)者激活的目標(biāo)知識(shí)點(diǎn)范圍較廣，與預(yù)期中度一致，但是協(xié)同知識(shí)建構(gòu)水平較低，處于淺表層次，亟待提升。交互主題呈現(xiàn)中度一致，因此小組在協(xié)作學(xué)習(xí)過(guò)程中交互還不夠聚焦，出現(xiàn)了跑題、偏題的現(xiàn)象。在角色分工方面，學(xué)習(xí)者在協(xié)作學(xué)習(xí)過(guò)程中沒(méi)有充分盡到職責(zé)、小組實(shí)際分工和履職不到位，需要進(jìn)一步優(yōu)化。就參與程度而言，學(xué)習(xí)者的參與度總體偏低，認(rèn)知和元認(rèn)知層次的參與度都不高。

（2）優(yōu)化過(guò)程及策略

從第一輪在線協(xié)作學(xué)習(xí)設(shè)計(jì)與實(shí)施一致性的分析結(jié)果可以發(fā)現(xiàn)，除目標(biāo)知識(shí)點(diǎn)范圍一致性較高之外，其他4個(gè)指標(biāo)的一致性都很低。因此筆者對(duì)這15個(gè)主題第一輪的在線協(xié)作學(xué)習(xí)活動(dòng)設(shè)計(jì)進(jìn)行深入反思，發(fā)現(xiàn)導(dǎo)致在線協(xié)作學(xué)習(xí)設(shè)計(jì)和實(shí)施不一致的原因主要在于很多設(shè)計(jì)要素沒(méi)有落實(shí)，比如時(shí)間分配不合理、任務(wù)完成度不高、履職不到位、學(xué)習(xí)資源沒(méi)有充分利用、缺乏反思與評(píng)價(jià)等。為了進(jìn)一步提升一致性，研究進(jìn)行了五方面的優(yōu)化：

第一，優(yōu)化在線協(xié)作學(xué)習(xí)任務(wù)。根據(jù)第一輪結(jié)果可以發(fā)現(xiàn)，學(xué)習(xí)者的協(xié)同知識(shí)建構(gòu)水平一致性較低并出現(xiàn)了跑題、偏題現(xiàn)象。為此，研究在設(shè)計(jì)第二輪的協(xié)作學(xué)習(xí)任務(wù)時(shí)，明確指出了任務(wù)的目標(biāo)、情境、要解決的問(wèn)題、完成任務(wù)的先后順序、重難點(diǎn)任務(wù)、時(shí)間分配、任務(wù)成果要求和評(píng)價(jià)標(biāo)準(zhǔn)等。通過(guò)對(duì)協(xié)作學(xué)習(xí)任務(wù)的細(xì)化，促使學(xué)習(xí)者提升協(xié)同知識(shí)建構(gòu)水平和交互主題的一致性。

第二，準(zhǔn)備充分的學(xué)習(xí)資源。這不僅包括完成任務(wù)必備的學(xué)習(xí)資源，如與任務(wù)相關(guān)的文獻(xiàn)資料、案例、作品等，還包括各類認(rèn)知和元認(rèn)知類腳手架。認(rèn)知類腳手架包括對(duì)重要和疑難知識(shí)點(diǎn)進(jìn)行解釋、提醒等，另外還提供相關(guān)的思維導(dǎo)圖以幫助學(xué)習(xí)者總結(jié)已有知識(shí)。元認(rèn)知類腳手架包括在協(xié)作學(xué)習(xí)開(kāi)始前進(jìn)行培訓(xùn)，幫助學(xué)習(xí)者掌握一定的社交技能、解決沖突的技巧，以及對(duì)協(xié)作學(xué)習(xí)過(guò)程進(jìn)行監(jiān)控和評(píng)價(jià)的策略等。

第三，明確角色分工和履職要求。由于第一輪很多小組沒(méi)有完成分配角色的既定職責(zé)而導(dǎo)致角色分工一致性很低。為此，第二輪在線協(xié)作學(xué)習(xí)活動(dòng)設(shè)計(jì)在原本的角色職責(zé)上，增加了角色描述、角色提示、角色履職要求等;在實(shí)驗(yàn)開(kāi)始前請(qǐng)每個(gè)小組討論角色分配、明確個(gè)體職責(zé)，并且指定監(jiān)控者在協(xié)作學(xué)習(xí)過(guò)程中實(shí)時(shí)監(jiān)督每種角色的執(zhí)行情況。

第四，設(shè)計(jì)多樣的交互策略。由于第一輪在線協(xié)作學(xué)習(xí)僅僅設(shè)計(jì)了一種互動(dòng)策略，學(xué)習(xí)者容易疲勞和倦怠。為了激發(fā)學(xué)習(xí)者的積極性并主動(dòng)進(jìn)行知識(shí)建構(gòu)，第二輪在線協(xié)作學(xué)習(xí)活動(dòng)設(shè)計(jì)增加了頭腦風(fēng)暴、辯論爭(zhēng)論、切塊拼接、互采互訪等多樣化的交互策略，一方面增加學(xué)習(xí)者的參與度，另一方面也促進(jìn)知識(shí)建構(gòu)，減少跑題、偏題的現(xiàn)象發(fā)生。

第五，采用多種評(píng)價(jià)方式。第二輪在線協(xié)作學(xué)習(xí)活動(dòng)設(shè)計(jì)增加了過(guò)程性評(píng)價(jià)、同伴互評(píng)和獎(jiǎng)勵(lì)機(jī)制，即要求學(xué)習(xí)者在協(xié)作學(xué)習(xí)過(guò)程中對(duì)小組作品進(jìn)行過(guò)程性評(píng)價(jià)、同伴互評(píng)和反思，發(fā)現(xiàn)不足與問(wèn)題并及時(shí)改進(jìn)，活動(dòng)結(jié)束后再次進(jìn)行組內(nèi)的總結(jié)性評(píng)價(jià)，對(duì)作品再次改進(jìn)與完善，最后提交。另外，第二輪在線協(xié)作學(xué)習(xí)活動(dòng)還制定了獎(jiǎng)勵(lì)機(jī)制，對(duì)優(yōu)秀的小組給予獎(jiǎng)勵(lì)，比如得分較高的同學(xué)會(huì)得到更多的獎(jiǎng)勵(lì)金，并具有后續(xù)活動(dòng)報(bào)名的優(yōu)先權(quán)等。

（3）第二輪一致性分析結(jié)果

根據(jù)第一輪一致性的分析結(jié)果并采用上述的策略對(duì)在線協(xié)作學(xué)習(xí)設(shè)計(jì)方案進(jìn)行優(yōu)化后，研究開(kāi)展了第二輪的在線協(xié)作學(xué)習(xí)。根據(jù)5個(gè)一致性指標(biāo)的計(jì)算方法，計(jì)算得出第二輪在線協(xié)作學(xué)習(xí)設(shè)計(jì)與實(shí)施的一致性，結(jié)果如表4所示。從表4可以看出，第二輪的目標(biāo)知識(shí)點(diǎn)范圍一致性（M=0.92，SD=0.07）、協(xié)同知識(shí)建構(gòu)水平一致性（M=0.80，SD=0.14）、交互主題一致性（M=0.82，SD=0.13）、角色分工一致性（M=0.76，SD=0.10）、參與度一致性（M=0.56，SD=0.19）與第一輪相比，均有提升。

2.在線協(xié)作學(xué)習(xí)設(shè)計(jì)與實(shí)施的一致性與學(xué)習(xí)效果的關(guān)系

（1）兩輪一致性及學(xué)習(xí)效果的差異

為了進(jìn)一步檢驗(yàn)兩輪實(shí)驗(yàn)結(jié)果在統(tǒng)計(jì)學(xué)上的差異，研究對(duì)兩輪在線協(xié)作學(xué)習(xí)設(shè)計(jì)與實(shí)施的一致性進(jìn)行了配對(duì)樣本T檢驗(yàn)，結(jié)果如表5所示。從表5可以發(fā)現(xiàn)，無(wú)論在目標(biāo)知識(shí)點(diǎn)范圍一致性（t=6.574，p=0.000）、協(xié)同知識(shí)建構(gòu)水平一致性（t=4.899，p=0.000）、交互主題一致性（t=8.832，p=0.000），還是角色分工一致性（t=6.810，p=0.000）以及參與度一致性（t=5.661，p=0.000），第二輪比第一輪均有顯著提升。另外，通過(guò)對(duì)兩輪在線協(xié)作學(xué)習(xí)的學(xué)習(xí)效果進(jìn)行配對(duì)樣本T檢驗(yàn)（如表6所示），結(jié)果發(fā)現(xiàn)參與第二輪在線協(xié)作學(xué)習(xí)的學(xué)習(xí)效果也顯著優(yōu)于第一輪（t=3.846，p=0.002）。

（2）一致性與學(xué)習(xí)效果的關(guān)系

為了深入分析在線協(xié)作學(xué)習(xí)設(shè)計(jì)與實(shí)施一致性與學(xué)習(xí)效果的關(guān)系，對(duì)15個(gè)主題、30組的一致性與其學(xué)習(xí)效果進(jìn)行相關(guān)分析，結(jié)果如表7所示。從表7可以看出，目標(biāo)知識(shí)點(diǎn)范圍一致性（r=0.876，p=0.000）、協(xié)同知識(shí)建構(gòu)水平一致性（r=0.639，p=0.002）、交互主題一致性（r=0.046，p=0.026）、角色分工一致性（r=0.552，p=0.002）及參與度一致性（r=0.778，p=0.000）與在線協(xié)作學(xué)習(xí)效果均呈顯著正相關(guān)。這個(gè)結(jié)果意味著如果能夠提升這五方面的一致性，則在線協(xié)作學(xué)習(xí)效果也能夠顯著提升。

五、研究結(jié)論及啟示

第一，本研究系統(tǒng)構(gòu)建了在線協(xié)作學(xué)習(xí)設(shè)計(jì)與實(shí)施一致性的量化評(píng)估方法，研發(fā)了目標(biāo)知識(shí)點(diǎn)范圍一致性、協(xié)同知識(shí)建構(gòu)水平一致性、交互主題一致性、角色分工一致性、參與度一致性5個(gè)評(píng)估指標(biāo)，分兩輪對(duì)在線協(xié)作學(xué)習(xí)設(shè)計(jì)和實(shí)施的一致性進(jìn)行評(píng)估并優(yōu)化，結(jié)果發(fā)現(xiàn)：優(yōu)化后的第二輪在線協(xié)作學(xué)習(xí)設(shè)計(jì)和實(shí)施的一致性以及學(xué)習(xí)效果均顯著高于第一輪，且一致性程度越高，協(xié)作學(xué)習(xí)效果越好?？梢?jiàn)，對(duì)在線協(xié)作學(xué)習(xí)設(shè)計(jì)與實(shí)施一致性的評(píng)估與優(yōu)化，不僅可以改善在線協(xié)作學(xué)習(xí)的設(shè)計(jì)質(zhì)量，而且可以提高在線學(xué)習(xí)效果，對(duì)促進(jìn)教師專業(yè)發(fā)展和推進(jìn)在線教育發(fā)展具有重要意義和價(jià)值。

第二，本研究提出的在線協(xié)作學(xué)習(xí)設(shè)計(jì)與實(shí)施的量化評(píng)估方法不僅克服了基于主觀經(jīng)驗(yàn)進(jìn)行設(shè)計(jì)和優(yōu)化的缺陷，而且基于數(shù)據(jù)驅(qū)動(dòng)的策略使得設(shè)計(jì)和優(yōu)化更加科學(xué)規(guī)范，從而實(shí)現(xiàn)“設(shè)計(jì)—實(shí)施—優(yōu)化設(shè)計(jì)—再度實(shí)施”的良性循環(huán)。這種方法不僅能夠提升一致性和學(xué)習(xí)效果，而且能夠生成設(shè)計(jì)的技術(shù)性知識(shí)并切實(shí)提升教師的教學(xué)設(shè)計(jì)能力以及專業(yè)素養(yǎng)。

第三，本研究探索并論證了能夠提升在線協(xié)作學(xué)習(xí)設(shè)計(jì)質(zhì)量和一致性的5種優(yōu)化策略，包括優(yōu)化在線協(xié)作學(xué)習(xí)任務(wù)、優(yōu)化學(xué)習(xí)資源、明確角色分工和履職要求、設(shè)計(jì)多樣的交互策略、采用多種評(píng)價(jià)方式等。通過(guò)這5個(gè)維度的優(yōu)化，不僅能夠進(jìn)一步提升協(xié)作學(xué)習(xí)的3個(gè)核心目標(biāo)，即提升協(xié)同知識(shí)建構(gòu)水平、調(diào)節(jié)技能以及參與度，而且能夠提升設(shè)計(jì)與實(shí)施的一致性和學(xué)習(xí)效果。因此，要想提升在線學(xué)習(xí)的設(shè)計(jì)質(zhì)量，教師和實(shí)踐者需要不斷優(yōu)化在線學(xué)習(xí)活動(dòng)的設(shè)計(jì)方案，通過(guò)對(duì)學(xué)習(xí)任務(wù)、交互策略、學(xué)習(xí)資源和環(huán)境、評(píng)價(jià)方式、激勵(lì)機(jī)制等不斷優(yōu)化，并且評(píng)估一致性、反思不一致之處，然后不斷對(duì)設(shè)計(jì)方案進(jìn)行調(diào)整，進(jìn)而提升設(shè)計(jì)與實(shí)施的一致性和學(xué)習(xí)效果。

本研究提倡以設(shè)計(jì)為中心的研究范式，關(guān)注設(shè)計(jì)與實(shí)施的一致性而非有效性，通過(guò)精準(zhǔn)評(píng)估一致性并反思不一致之處從而發(fā)現(xiàn)教學(xué)設(shè)計(jì)中的缺陷，不斷改進(jìn)教學(xué)設(shè)計(jì)質(zhì)量從而提高教學(xué)效果，這種研究范式和思路對(duì)于促進(jìn)教師的專業(yè)發(fā)展具有重要價(jià)值。傳統(tǒng)的基于設(shè)計(jì)的研究關(guān)注有效性，然而有效性是某種教育干預(yù)受當(dāng)事人滿意的程度，嚴(yán)重受制于情境，研究結(jié)論難以重復(fù)和推廣（鄭蘭琴等，2014）。相比之下，一致性研究具有可重復(fù)性、可推廣性、能夠生成設(shè)計(jì)的技術(shù)性知識(shí)等優(yōu)勢(shì)。需要澄清的是，這里的一致性指的是設(shè)計(jì)要素在實(shí)施過(guò)程中的落實(shí)情況。只要設(shè)計(jì)要素與實(shí)施要素一致，那么設(shè)計(jì)就是成功的，因此并不苛求每個(gè)細(xì)節(jié)都做到一模一樣。同時(shí)，由于實(shí)踐情境的復(fù)雜多變，完全的一致是不可能的。因?yàn)闊o(wú)論對(duì)于教學(xué)系統(tǒng)還是協(xié)作學(xué)習(xí)系統(tǒng)，教師和學(xué)習(xí)者的生成性會(huì)臨場(chǎng)涌現(xiàn)，這在設(shè)計(jì)過(guò)程中無(wú)法預(yù)知。如果這種生成性能夠推動(dòng)教學(xué)目標(biāo)的實(shí)現(xiàn)，則由此產(chǎn)生的不一致性完全可以接受;如果生成性阻礙了教學(xué)目標(biāo)，則教師需要反思并分析產(chǎn)生不一致的原因，并據(jù)此進(jìn)行教學(xué)設(shè)計(jì)的優(yōu)化。

本研究也存在不足之處。首先，收集的樣本量不大，未來(lái)研究需進(jìn)一步擴(kuò)大研究樣本，探索提升設(shè)計(jì)與實(shí)施一致性的其他策略。第二，本研究對(duì)一致性與學(xué)習(xí)效果關(guān)系的研究結(jié)論還需要在其他情境中進(jìn)一步檢驗(yàn)。第三，本研究對(duì)一致性的分析尚未實(shí)現(xiàn)自動(dòng)化，未來(lái)將進(jìn)一步探索實(shí)時(shí)分析一致性的技術(shù)，從而為學(xué)習(xí)者提供個(gè)性化的反饋，也為教師實(shí)時(shí)干預(yù)提供強(qiáng)有力的支撐。

參考文獻(xiàn)：

[1]崔盼盼，鄭蘭琴（2018）.協(xié)作學(xué)習(xí)活動(dòng)設(shè)計(jì)質(zhì)量評(píng)估方法的個(gè)案研究[J].現(xiàn)代教育技術(shù)，28（10）：64-69，106.

[2]何文濤（2018）.協(xié)作學(xué)習(xí)活動(dòng)的結(jié)構(gòu)化設(shè)計(jì)框架[J].電化教育研究，（4）：73-79.

[3]盧群，劉恩山（2012）.高中生物學(xué)教科書與課程標(biāo)準(zhǔn)的一致性研究——以人民教育出版社和浙江科技出版社教科書為例[J].課程·教材·教法，（5）：75-82.

[4]馬志強(qiáng)（2012）.問(wèn)題解決在線學(xué)習(xí)活動(dòng)設(shè)計(jì)與應(yīng)用的實(shí)證研究[J].中國(guó)電化教育，（12）：41-46.

[5]田爽，鄭蘭琴，楊開(kāi)城等（2017）.教學(xué)設(shè)計(jì)方案與實(shí)施過(guò)程一致性的實(shí)證研究[J].電化教育研究，38（3）：104-109.

[6]楊開(kāi)城（2013）.DBR與DCR 哪個(gè)才能架起教育理論與實(shí)踐之間的橋梁[J].電化教育研究，34（12）：11-15.

[7]楊開(kāi)城，張媛媛（2015）.基于IIS圖分析的教案質(zhì)量評(píng)估指標(biāo)體系的構(gòu)建[J].中國(guó)電化教育，（1）：124-130.

[8]余亮，黃榮懷（2012）.協(xié)作學(xué)習(xí)活動(dòng)結(jié)構(gòu)設(shè)計(jì)研究[J].遠(yuǎn)程教育雜志，30（5）：74-81.

[9]袁令民（2013）.物理高考與內(nèi)容標(biāo)準(zhǔn)的一致性研究[D].重慶：西南大學(xué).

[10]袁夢(mèng)霞，俞樹(shù)煜，聶勝欣等（2017）.促進(jìn)批判性思維發(fā)展的在線學(xué)習(xí)活動(dòng)角色設(shè)計(jì)[J].現(xiàn)代遠(yuǎn)距離教育，（2）：76-82.

[11]鄭蘭琴（2015）.教學(xué)設(shè)計(jì)與實(shí)施一致性分析的個(gè)案研究[J].現(xiàn)代遠(yuǎn)程教育研究，（3）：95-103.

[12]鄭蘭琴，楊開(kāi)城（2014）.為什么要研究一致性而不是有效性？[J].中國(guó)電化教育，（9）：20-23，33.

[13]鄭蘭琴，鐘璐，牛佳玉（2020）.聯(lián)結(jié)在線協(xié)作學(xué)習(xí)設(shè)計(jì)與分析模型及應(yīng)用研究[J].電化教育研究，41（11）：63-71.

[14]Cerro Martínez， J. P.， Guitert Catasús， M.， & Romeu Fontanillas， T. （2020）. Impact of Using Learning Analytics in Synchronous Online Discussions in Higher Education[J]. International Journal of Educational Technology in Higher Education， 17（1）：17-39.

[15]Deza， M. M.， & Deza， E. （2009）. Encyclopedia of Distances[M]. Berlin Heidelberg： Springer：103-126.

[16]Fu， Q.-K.， & Hwang， G.-J. （2018）. Trends in Mobile Technology-Supported Collaborative Learning： A Systematic Review of Journal Publications from 2007 to 2016[J]. Computers & Education， 119：129-143.

[17]Gu， X.， Shao， Y.， & Guo， X. et al. （2015）. Designing a Role Structure to Engage Students in Computer-Supported Collaborative Learning[J]. Internet and Higher Education， 24：13-20.

[18]Guiter， G. E.， Sapia， S.， & Wright， A. I. et al. （2021）. Development of a Remote Online Collaborative Medical School Pathology Curriculum with Clinical Correlations， Across Several International Sites， Through the Covid-19 Pandemic[J]. Medical Science Educator， 31（2）：549-556.

[19]Hasan， H. F.， Nat， M.， & Vanduhe， V. Z. （2019）. Gamified Collaborative Environment in Moodle[J]. IEEE Access， 7：89833-89844.

[20]Lan， Y.-F.， Tsai， P.-W.， & Yang， S.-H. et al. （2012）. Comparing the Social Knowledge Construction Behavioral Patterns of Problem-Based Online Asynchronous Discussion in E/M-Learning Environments[J]. Computers & Education， 59（4）：1122-1135.

[21]Martone， A.， & Sireci， S. G. （2009）. Evaluating Alignment Between Curriculum， Assessment， and Instruction[J]. Review of Educational Research， 79（4）：1332-1361.

[22]Osipov， P. N.， & Ziyatdinova， J. N. （2015）. Collaborative Learning： Pluses and Problems[C]// 2015 International Conference on Interactive Collaborative Learning （ICL）. IEEE：361-364.

[23]Pozzi， F. （2010）. Using Jigsaw and Case Study for Supporting Online Collaborative Learning[J]. Computers & Education， 55（1）：67-75.

[24]Reeves， T. C.， Herrington， J.， & Oliver， R. （2004）. A Development Research Agenda for Online Collaborative Learning[J]. Educational Technology Research and Development， 52（4）：53-65.

[25]Salmon， M. H. （1977）. Consistency Proofs for Applied Mathematics[M]// Salmon， W. C. （Eds.）. Hans Reichenbach： Logical Empiricist[M]. Springer， Dordrecht：301-312.

[26]Shin， Y.， Kim， D.， & Jung， J. （2018）. The Effects of Representation Tool （Visible-Annotation） Types to Support Knowledge Building in Computer-Supported Collaborative Learning[J]. Educational Technology & Society， 21（2）：98-110.

[27]Tversky， A. （1977）. Features of Similarity[J]. Psychological Review， 84（4）：327-352.

[28]Wang， C.， Fang， T.， & Gu， Y. （2020）. Learning Performance and Behavioral Patterns of Online Collaborative Learning： Impact of Cognitive Load and Affordances of Different Multimedia[J]. Computers & Education， 143：103683.

[29]Wang， S.-M.， Hou， H.-T.， & Wu， S.-Y. （2017）. Analyzing the Knowledge Construction and Cognitive Patterns of Blog-Based Instructional Activities Using Four Frequent Interactive Strategies （Problem Solving， Peer Assessment， Role Playing and Peer Tutoring）： A Preliminary Study[J]. Educational Technology Research & Development， 65（2）：301-323.

[30]Webb， N. L. （1997）. Criteria for Alignment of Expectations and Assessments in Mathematics and Science Education[J]. Academic Achievement， 1（11）：1-46.

[31]Webb， N. L. （1999）. Alignment of Science and Mathematics Standards and Assessments in Four States[M]. Washington， DC： Council of Chief State School Officers：11-19.

[32]Zhang， S.， Liu， Q.， & Chen， W. et al. （2017）. Interactive Networks and Social Knowledge Construction Behavioral Patterns in Primary School Teachers’Online Collaborative Learning Activities[J]. Computers & Education， 104：1-17.

收稿日期 2021-10-15 責(zé)任編輯 汪燕

How to Improve the Design and Implementation of Online Collaborative Learning

—— The Empirical Study on Evaluation and Optimization of the Alignment

ZHENG Lanqin， ZHAO Jiayi， LONG Miaolang

Abstract： Online collaborative learning has become an important learning approach in the “Internet Plus Education” era and its effectiveness largely depends on the design quality of it. However， most studies focused on the effectiveness of specific intervention strategies and very few studies focused on how to improve the design and the implementation of online collaborative learning from the perspective of improving the alignment between these two. Previous studies on effectiveness heavily rely on contexts and findings， which are very difficult to replicate in other contexts. While the research on the alignment focusing on the reasons of inconsistency and defect analysis can generate falsifiable knowledge through in-depth reflection. Based on five quantitative indicators of alignment， including the alignment of the scope of knowledge， the alignment of the collaborative knowledge building level， the alignment of the interactive topics， the alignment of the role assignment， and the alignment of the learning engagement， this study analyzed the alignment between the design and the implementation of two round online collaborative learning. The results indicated as follows. The alignment and group performance of second round of online collaborative learning were significantly higher than those of the first round. The quantitative evaluation method for the alignment between the design and the implementation of online collaborative learning not only overcomes the defects of design and optimization based on subjective experience， but also makes the design and optimization more scientific and standardized based on data-driven strategies， which can achieve the virtuous cycle of “design-implementation-optimization of design-reimplementation”. Optimization of design from the dimensions of learning tasks， learning resources， role assignment， interaction strategies， and evaluation methods contributes to improving the alignment between design and implementation as well as the learning performance of online collaborative learning.

Keywords： Online Collaborative Learning; Alignment; Learning Performance; Design Quality; Optimization Strategies