尹 瑋

(中國(guó)海洋大學(xué) 外國(guó)語(yǔ)學(xué)院，山東 青島 266100)

一、大學(xué)外語(yǔ)翻轉(zhuǎn)課堂課程評(píng)價(jià)體系構(gòu)建的背景、特點(diǎn)與意義

(一)大學(xué)外語(yǔ)翻轉(zhuǎn)課堂課程評(píng)價(jià)體系研究背景和研究綜述

作為公共基礎(chǔ)課程，大學(xué)外語(yǔ)課程在高校的課程體系和人才培養(yǎng)過(guò)程中起到重要作用，與課程相關(guān)的研究和探索也從未停止過(guò)。最近十年的教學(xué)改革中，國(guó)內(nèi)外在課程教學(xué)領(lǐng)域最主要的改革范式主要采用以翻轉(zhuǎn)課堂為代表的混合式教學(xué)。這些研究主要圍繞翻轉(zhuǎn)課堂的實(shí)施流程和任務(wù)特點(diǎn)兩方面展開(kāi)。翻轉(zhuǎn)課堂實(shí)施流程研究的內(nèi)容主要包括大學(xué)英語(yǔ)學(xué)生因素分析、[1][2][3]開(kāi)發(fā)大學(xué)英語(yǔ)教學(xué)資源、[4][5]設(shè)計(jì)大學(xué)英語(yǔ)教學(xué)流程、[6][7]學(xué)習(xí)過(guò)程研究。[8][9][10]翻轉(zhuǎn)課堂任務(wù)特點(diǎn)方面的研究主要包括自主學(xué)習(xí)、[11]交互式學(xué)習(xí)、[12]個(gè)性化學(xué)習(xí)和現(xiàn)代信息技術(shù)在翻轉(zhuǎn)課堂中的運(yùn)用等。[13][14]作為課程和教學(xué)研究的重要環(huán)節(jié)，課程評(píng)價(jià)是推動(dòng)課程范式形成和教學(xué)質(zhì)量提高的催化劑。教育評(píng)價(jià)之父泰勒曾經(jīng)說(shuō)過(guò)，評(píng)價(jià)過(guò)程是一種測(cè)量課程和教學(xué)方案在多大程度上達(dá)到了教育目標(biāo)的過(guò)程。[15]但在已有成果中，針對(duì)翻轉(zhuǎn)課堂的課程評(píng)價(jià)研究所占的比例卻很小，顯然已成為影響大學(xué)外語(yǔ)課程改革效果的亟待解決的問(wèn)題。

國(guó)內(nèi)對(duì)翻轉(zhuǎn)課堂的有效性、教學(xué)質(zhì)量和教學(xué)效果的研究發(fā)軔于2015年，如喻湘波等人引入過(guò)程性評(píng)價(jià)轉(zhuǎn)變體系，來(lái)完善翻轉(zhuǎn)課堂教學(xué)評(píng)價(jià)。[16]屠麗華從課前材料組織、課堂教學(xué)活動(dòng)評(píng)價(jià)、課下學(xué)習(xí)支持環(huán)境建設(shè)，及教學(xué)成績(jī)考核四維度提出評(píng)價(jià)指標(biāo)體系，[17]劉艷等對(duì)大學(xué)英語(yǔ)翻轉(zhuǎn)課堂教學(xué)模式的有效性的研究，[18][19][20][21][22][23][24]李馨、蔣立兵、賈麗麗等對(duì)翻轉(zhuǎn)課堂的教學(xué)質(zhì)量評(píng)價(jià)體系進(jìn)行研究。[25][26][27]上述研究重點(diǎn)關(guān)注翻轉(zhuǎn)課堂教學(xué)模式的影響效果，缺乏對(duì)于教學(xué)過(guò)程的動(dòng)態(tài)系統(tǒng)關(guān)注。張怡、喬維德將AHP模糊矩陣模型導(dǎo)入翻轉(zhuǎn)課堂綜合評(píng)價(jià)系統(tǒng)設(shè)計(jì)，[28][29]侯建軍、陳海濤將CIPP評(píng)價(jià)模式用于翻轉(zhuǎn)課堂教學(xué)評(píng)價(jià)中，[30][31]開(kāi)始逐步關(guān)注對(duì)于翻轉(zhuǎn)課堂教學(xué)過(guò)程的綜合評(píng)價(jià)。但是針對(duì)大學(xué)英語(yǔ)課程，當(dāng)前對(duì)翻轉(zhuǎn)課堂教學(xué)質(zhì)量評(píng)價(jià)標(biāo)準(zhǔn)和指標(biāo)體系關(guān)注度相對(duì)較低，[32][33]因此成為本文研究重點(diǎn)所在。

(二)大學(xué)英語(yǔ)翻轉(zhuǎn)課堂類課程的特點(diǎn)

1、時(shí)間上的“翻轉(zhuǎn)”

翻轉(zhuǎn)課堂對(duì)傳統(tǒng)教學(xué)模式中的時(shí)間順序進(jìn)行了“反轉(zhuǎn)”，即課前，學(xué)生對(duì)教師提供的視頻和相關(guān)材料進(jìn)行自學(xué)；課堂時(shí)間則用來(lái)解決問(wèn)題，深化概念，參與合作性學(xué)習(xí)，以實(shí)現(xiàn)時(shí)間這一最寶貴的學(xué)習(xí)資源的最大化。Jonathan Bergmann & Aaron Sams在教學(xué)中發(fā)現(xiàn)，“翻轉(zhuǎn)的”課堂可以讓教師有更多的時(shí)間進(jìn)行個(gè)性化的教學(xué)，可以建立更廣泛、更緊密的師生關(guān)系，可以促進(jìn)更強(qiáng)烈、更持久的學(xué)習(xí)動(dòng)機(jī)。[34]翻轉(zhuǎn)后的課堂時(shí)間用于問(wèn)題答疑、小組協(xié)作探究及個(gè)性化輔導(dǎo)等學(xué)習(xí)活動(dòng)，大幅度增強(qiáng)了師生之間、同學(xué)之間及時(shí)有效的輔導(dǎo)與交流。[35]翻轉(zhuǎn)教學(xué)解決了教學(xué)時(shí)間不經(jīng)濟(jì)等集體學(xué)習(xí)導(dǎo)致的問(wèn)題，使每位學(xué)生都得到了個(gè)性化的教育，在真正意義上實(shí)現(xiàn)了“因材施教”。[36]

2、空間上的“翻轉(zhuǎn)”

Bishop & Verleger將翻轉(zhuǎn)課堂定義為課上交互式小組學(xué)習(xí)活動(dòng)和課下基于計(jì)算機(jī)的個(gè)性化教學(xué)相結(jié)合的一種教學(xué)技巧[37]。信息技術(shù)在“翻轉(zhuǎn)前”和“翻轉(zhuǎn)后”的學(xué)習(xí)空間里都起到了重要作用，使教室和課堂不僅是一個(gè)物理空間的延展(比如家或圖書(shū)館)，技術(shù)的參與可以使“課堂”成為“虛擬空間”，實(shí)現(xiàn)了課堂的“無(wú)處不在”。

3、課堂教學(xué)高質(zhì)量的互動(dòng)

Marcey & Brint認(rèn)為翻轉(zhuǎn)課堂模式與傳統(tǒng)教學(xué)模式的另一不同在于知識(shí)傳遞通過(guò)信息技術(shù)實(shí)現(xiàn)，知識(shí)內(nèi)化通過(guò)師生互動(dòng)完成。[38]在翻轉(zhuǎn)課堂中，知識(shí)的輸入由信息技術(shù)輔助學(xué)習(xí)者課外自主完成，而課堂則用來(lái)專注于人與人的輸出型交互活動(dòng)。[39]翻轉(zhuǎn)課堂通過(guò)對(duì)課前的自學(xué)完成事實(shí)性知識(shí)和概念性知識(shí)的記憶和初步理解，并以特定的輸出任務(wù)為目標(biāo)，在課堂中進(jìn)行互動(dòng)，實(shí)現(xiàn)高質(zhì)量的輸出，這個(gè)過(guò)程被稱為“有質(zhì)量的互動(dòng)”。[40]

4、教學(xué)“認(rèn)知”目標(biāo)的“翻轉(zhuǎn)”

傳統(tǒng)的課堂將知識(shí)傳遞作為主要教學(xué)目標(biāo)，將知識(shí)內(nèi)化留到課下；而翻轉(zhuǎn)課堂是把知識(shí)傳遞放到課前，課堂的教學(xué)目標(biāo)是促進(jìn)知識(shí)內(nèi)化，翻轉(zhuǎn)后則繼續(xù)深化學(xué)習(xí)內(nèi)容。從教學(xué)的“認(rèn)知”目標(biāo)來(lái)說(shuō)，課堂教學(xué)的起點(diǎn)和終點(diǎn)都發(fā)生了重大變化。

5、師生角色的“翻轉(zhuǎn)”

Baker曾明確提出，翻轉(zhuǎn)課堂讓教師“成為身邊的指導(dǎo)”替代以前“講臺(tái)上的圣人”。[41]周平認(rèn)為在現(xiàn)代教育技術(shù)的輔助下，知識(shí)傳遞已經(jīng)變得越來(lái)越容易，教師在課堂上的角色完全可以從主講者變成輔導(dǎo)者，側(cè)重指導(dǎo)學(xué)生的互助學(xué)習(xí)和自主學(xué)習(xí)，促進(jìn)學(xué)生對(duì)課堂教學(xué)內(nèi)容的吸收內(nèi)化。[42]

綜合翻轉(zhuǎn)課堂與傳統(tǒng)課堂基本特征的對(duì)比(見(jiàn)表1)，我們可以得出如下結(jié)論：翻轉(zhuǎn)課堂是一種全新的教學(xué)方式，它將知識(shí)傳遞與知識(shí)內(nèi)化的時(shí)間和空間順序進(jìn)行了顛倒，將“教”與“學(xué)”的地位進(jìn)行了翻轉(zhuǎn)，伴隨而來(lái)的是教育理念、教學(xué)內(nèi)容、教學(xué)方式、教學(xué)手段和教學(xué)評(píng)價(jià)的全方位變革。[43]

表1 傳統(tǒng)課堂和翻轉(zhuǎn)課堂基本特征對(duì)比表[44]

(三)大學(xué)外語(yǔ)翻轉(zhuǎn)課堂課程評(píng)價(jià)體系的構(gòu)建意義

綜上，根據(jù)翻轉(zhuǎn)課堂類課程的特點(diǎn)，傳統(tǒng)課程的評(píng)價(jià)方式已經(jīng)遠(yuǎn)遠(yuǎn)不能滿足目前對(duì)大學(xué)外語(yǔ)翻轉(zhuǎn)課堂課程的評(píng)價(jià)要求。基于目前已有的研究，針對(duì)采用課堂教學(xué)模式的課程評(píng)估是動(dòng)態(tài)的多渠道、多途徑、多方位的綜合評(píng)價(jià)，是通過(guò)多維度評(píng)價(jià)指標(biāo)設(shè)定對(duì)課前，課中和課后進(jìn)行的形成性和診斷性評(píng)估。大學(xué)外語(yǔ)翻轉(zhuǎn)課堂課程評(píng)價(jià)體系的構(gòu)建對(duì)以翻轉(zhuǎn)課堂為代表的混合式課程改革具有重要的推動(dòng)作用。大學(xué)英語(yǔ)翻轉(zhuǎn)課堂課程，迫切需要借助評(píng)價(jià)模型，從翻轉(zhuǎn)課堂教和學(xué)的每一個(gè)階段和步驟對(duì)課程進(jìn)行整體評(píng)價(jià)，從而推動(dòng)課程改革的進(jìn)一步深化和推廣。現(xiàn)有研究表明，CIPP評(píng)價(jià)模式因其對(duì)課堂教學(xué)過(guò)程和教學(xué)質(zhì)量的綜合、全面、客觀評(píng)價(jià)已逐步成為當(dāng)前針對(duì)課堂課程評(píng)價(jià)的主流模式。鑒于此，我們將基于CIPP課堂課程評(píng)價(jià)模式對(duì)大學(xué)英語(yǔ)翻轉(zhuǎn)課堂教學(xué)進(jìn)行有效評(píng)估，嘗試構(gòu)建多維度評(píng)價(jià)范式。

二、CIPP課程評(píng)價(jià)模式與翻轉(zhuǎn)課堂課程評(píng)價(jià)

(一)CIPP課程評(píng)價(jià)模式簡(jiǎn)述

CIPP模式是1966年美國(guó)學(xué)者Stufflebeam在俄亥俄州立大學(xué)教育評(píng)價(jià)中心經(jīng)數(shù)年研究提出的一種改進(jìn)績(jī)效問(wèn)責(zé)取向的評(píng)價(jià)模式。這一模式是在當(dāng)時(shí)美國(guó)教育改革運(yùn)動(dòng)中，批判泰勒目標(biāo)評(píng)價(jià)模式的基礎(chǔ)上形成的。Stufflebem把評(píng)價(jià)過(guò)程分成四個(gè)組成部分：即背景評(píng)價(jià)(Context Evaluation)，輸入評(píng)價(jià)(Input Evaluation)，過(guò)程評(píng)價(jià)(Process Evaluation)和結(jié)果評(píng)價(jià)(Product Evaluation)，[45]如圖1所示。

圖1 CIPP模式評(píng)價(jià)圖

1、CIPP評(píng)價(jià)模式的基本觀點(diǎn)

CIPP評(píng)價(jià)模式也稱決策導(dǎo)向或改良導(dǎo)向評(píng)價(jià)模式，其基本觀點(diǎn)是：評(píng)價(jià)最重要的目的不在于證明，而在于改進(jìn)；評(píng)價(jià)是為評(píng)價(jià)者提供有用信息，使得方案更具成效。該模式評(píng)價(jià)目標(biāo)如下：[46]

圖2 CIPP模式評(píng)價(jià)目標(biāo)圖

具體而言，背景評(píng)價(jià)就是在特定的環(huán)境下評(píng)定其需要、問(wèn)題、資源和機(jī)會(huì)?！靶枰敝饕切閷?shí)現(xiàn)目的所必須的、有用的事物；“問(wèn)題”是指在滿足需要時(shí)必須克服的障礙；“資源”是指在本地可以得到的專家和提供的服務(wù)；“機(jī)會(huì)”主要指滿足需要和解決相關(guān)問(wèn)題的時(shí)機(jī)。輸入評(píng)價(jià)是在背景評(píng)價(jià)的基礎(chǔ)上，對(duì)達(dá)到目標(biāo)所需的條件、資源以及各被選方案的相對(duì)優(yōu)點(diǎn)所做的評(píng)價(jià)，其實(shí)質(zhì)是對(duì)方案的可行性和效用性進(jìn)行判斷。過(guò)程評(píng)價(jià)是對(duì)方案實(shí)施過(guò)程中作連續(xù)不斷地監(jiān)督、檢查和反饋。結(jié)果評(píng)價(jià)是對(duì)目標(biāo)達(dá)到程度所做的評(píng)價(jià)，包括：測(cè)量、判斷、解釋方案的成就，確證人們的需要滿足的程度等。[47]

2、CIPP評(píng)價(jià)模式的核心思想

CIPP評(píng)價(jià)模式與課程決策緊密相關(guān)，主要針對(duì)教育的過(guò)程開(kāi)展全面的評(píng)價(jià)。其核心思想為：評(píng)價(jià)為決策服務(wù)。在教育過(guò)程中，可以比較及時(shí)準(zhǔn)確地反饋課程在哪些方面做得較好，在哪些地方還有欠缺，能夠較好地糾正課程決策中的失誤與偏差，保證課程能夠更好地開(kāi)展和實(shí)施。CIPP評(píng)價(jià)模式的優(yōu)勢(shì)在于對(duì)泰勒評(píng)價(jià)模式中的一些疑難問(wèn)題給予了回答，同時(shí)將診斷性評(píng)價(jià)、形成性評(píng)價(jià)和終結(jié)性評(píng)價(jià)進(jìn)行了整合，凸顯了評(píng)價(jià)的發(fā)展性功能。[48]

(二)CIPP評(píng)價(jià)模式與翻轉(zhuǎn)課堂課程評(píng)價(jià)的適切性

如前所述，翻轉(zhuǎn)課堂教學(xué)旨在實(shí)現(xiàn)“課堂時(shí)間利用率最大化”和“個(gè)性化教學(xué)”，是“課前”、“課中”“課后”、“課內(nèi)”和“課外”、“師生”和“生生”交互影響、多維發(fā)展的一個(gè)動(dòng)態(tài)整體。而這一教學(xué)理念恰恰與CIPP評(píng)價(jià)模式的核心思想不謀而合。通過(guò)CIPP評(píng)價(jià)模型能夠?qū)崿F(xiàn)多個(gè)評(píng)價(jià)主體參與、多種評(píng)價(jià)方式整合、多項(xiàng)評(píng)價(jià)過(guò)程統(tǒng)一，為客觀衡量和科學(xué)審視翻轉(zhuǎn)課堂課程質(zhì)量、優(yōu)化翻轉(zhuǎn)課堂教學(xué)資源設(shè)計(jì)與配置、改進(jìn)翻轉(zhuǎn)課堂教學(xué)策略提供參考;不僅如此，CIPP評(píng)價(jià)模型可以提供整體、全面的信息，以幫助確定目標(biāo)、修訂計(jì)劃、實(shí)施方案以及考核結(jié)果，[49][50]與翻轉(zhuǎn)課堂注重教學(xué)過(guò)程與結(jié)果并舉的特點(diǎn)相一致；同時(shí)，該評(píng)價(jià)體系評(píng)價(jià)模型注重目標(biāo)設(shè)置、過(guò)程評(píng)價(jià)與教學(xué)反饋，適用于對(duì)教學(xué)活動(dòng)多維度、全程式評(píng)估，可與翻轉(zhuǎn)課堂課前、課中、課后三階段對(duì)應(yīng)如下圖：[51]

圖3 基于CIPP翻轉(zhuǎn)課堂模式結(jié)構(gòu)圖

三、基于CIPP的大學(xué)外語(yǔ)翻轉(zhuǎn)課堂課程評(píng)價(jià)指標(biāo)體系構(gòu)建

基于CIPP課程評(píng)價(jià)標(biāo)準(zhǔn)，我們對(duì)相關(guān)專家、教師和學(xué)生進(jìn)行問(wèn)卷調(diào)查，嘗試構(gòu)建大學(xué)英語(yǔ)翻轉(zhuǎn)課堂課程評(píng)價(jià)體系，以期對(duì)大學(xué)英語(yǔ)課堂教學(xué)要素進(jìn)行優(yōu)化組合，有效提高教學(xué)效用。

(一)研究設(shè)計(jì)和數(shù)據(jù)分析

1、指標(biāo)初篩

本研究查閱相關(guān)文獻(xiàn)，按照《國(guó)家精品課程評(píng)價(jià)指標(biāo)體系》《普通高等學(xué)校本科教學(xué)工作水平評(píng)估指標(biāo)體系》《國(guó)家中長(zhǎng)期教育改革和發(fā)展規(guī)劃綱要(2010-2020)》及教育部《大學(xué)英語(yǔ)教學(xué)指南(2017版)》等相關(guān)評(píng)估指導(dǎo)文件對(duì)大學(xué)外語(yǔ)課程的基本要求，結(jié)合CIPP相關(guān)評(píng)價(jià)指標(biāo)體系、翻轉(zhuǎn)課堂相關(guān)理論和中國(guó)海洋大學(xué)本科非英語(yǔ)專業(yè)教學(xué)的實(shí)際情況以及大學(xué)外語(yǔ)教師的課堂實(shí)踐，初步構(gòu)建了大學(xué)外語(yǔ)翻轉(zhuǎn)課堂課程評(píng)價(jià)指標(biāo)體系，其中包括一級(jí)指標(biāo)4個(gè)，二級(jí)指標(biāo)13個(gè)和三級(jí)指標(biāo)44個(gè)，其中CIPP評(píng)價(jià)模型與翻轉(zhuǎn)課堂課程評(píng)價(jià)指標(biāo)體系對(duì)應(yīng)關(guān)系如下：

表2CIPP評(píng)價(jià)模型與翻轉(zhuǎn)課堂課程評(píng)價(jià)指標(biāo)體系對(duì)應(yīng)關(guān)系

2、專家咨詢

為了使構(gòu)建的指標(biāo)更科學(xué)合理，本研究采用德?tīng)柗品?Delphi)設(shè)計(jì)了專家咨詢問(wèn)卷，通過(guò)對(duì)收集到的數(shù)據(jù)進(jìn)行分析，結(jié)合專家意見(jiàn)，進(jìn)一步修改完善評(píng)價(jià)體系。其中，專家咨詢問(wèn)卷采用李克特五級(jí)量表對(duì)每一級(jí)每一個(gè)指標(biāo)進(jìn)行程度區(qū)分，同時(shí)在每一個(gè)評(píng)價(jià)指標(biāo)后面設(shè)立了“指標(biāo)增刪或修改建議”一欄，供專家提供修改意見(jiàn)。本研究的對(duì)象為采用翻轉(zhuǎn)課堂教學(xué)模式的大學(xué)外語(yǔ)課程，研究對(duì)象的性質(zhì)和特征決定了所選取的專家一定要具有代表性和權(quán)威性。因此，本研究共邀請(qǐng)了了8位從事大學(xué)外語(yǔ)教學(xué)的專家，其中包括1位教授，4位副教授和3位講師。

(二)數(shù)據(jù)分析及結(jié)果討論

1、統(tǒng)計(jì)分析

本研究運(yùn)用SPSS25.0軟件建立數(shù)據(jù)庫(kù)，將回收的指標(biāo)篩選專家咨詢問(wèn)卷錄入數(shù)據(jù)庫(kù)，進(jìn)行統(tǒng)計(jì)分析。分析指標(biāo)包括專家積極系數(shù)、權(quán)威系數(shù)和意見(jiàn)協(xié)調(diào)程度，其中積極系數(shù)用問(wèn)卷有效回收率表示；權(quán)威系數(shù)用專家本身的學(xué)術(shù)造詣、專家對(duì)指標(biāo)判斷依據(jù)權(quán)值及對(duì)所調(diào)查問(wèn)題熟悉程度權(quán)值的算術(shù)平均數(shù)表示；意見(jiàn)協(xié)調(diào)程度采用肯德?tīng)柡椭C系數(shù)表示。此外，二級(jí)與三級(jí)指標(biāo)的認(rèn)可度基于其各自篩選界值進(jìn)行了判斷。

2、數(shù)據(jù)結(jié)果及討論

(1)專家積極系數(shù)、權(quán)威系數(shù)和意見(jiàn)協(xié)調(diào)程度

本研究的指標(biāo)篩選專家咨詢問(wèn)卷共發(fā)放8份，回收8份，回收率為100%，8份專家咨詢問(wèn)卷全部有效，有效率為100%。因此可以認(rèn)為，本研究中的專家積極性很高；專家的權(quán)威程度(Cr)一般由兩個(gè)因素決定：一個(gè)是專家對(duì)方案做出判斷的依據(jù)(Ca)；一個(gè)是專家對(duì)問(wèn)題的熟悉程度(Cs)。[52]專家權(quán)威程度為判斷系數(shù)與熟悉程度系數(shù)的算術(shù)平均值，咨詢專家對(duì)指標(biāo)體系的綜合熟悉程度系數(shù)等于各一級(jí)指標(biāo)熟悉程度系數(shù)的算數(shù)平均值。其計(jì)算公式為：Cr=(Ca+Cs)/2。將以上判斷系數(shù)與熟悉程度系數(shù)代入公式，Ca=(1*4+0.9*3+0.8*1)/8=0.938，Cs=(0.7+0.75+0.85+0.83)/4=0.78，計(jì)算得出專家權(quán)威程度的系數(shù)為：Cr=(0.938+0.78)/2=0.86。一般認(rèn)為，Cr>0.7可接受程度比較高，Cr值越大，說(shuō)明專家的權(quán)威程度越高，專家意見(jiàn)的價(jià)值越大，咨詢的結(jié)果也越可靠。本研究的專家權(quán)威程度系數(shù)為0.86，說(shuō)明此次專家咨詢的權(quán)威性很高，咨詢結(jié)果可信度較高。

(2)二級(jí)和三級(jí)指標(biāo)認(rèn)可度

數(shù)據(jù)顯示，13項(xiàng)二級(jí)指標(biāo)的適用度均值最小為3.75，最大為4.50，標(biāo)準(zhǔn)差所在范圍為0.35-1.06，而變異系數(shù)在0.09-0.24之間，變異系數(shù)的波動(dòng)幅度較小，說(shuō)明專家的協(xié)調(diào)程度較好，對(duì)于二級(jí)指標(biāo)的認(rèn)可程度較為集中。根據(jù)二級(jí)指標(biāo)的篩選界值可得，二級(jí)指標(biāo)篩選的標(biāo)準(zhǔn)均值>3.72，且變異系數(shù)<0.61。據(jù)統(tǒng)計(jì)結(jié)果中二級(jí)指標(biāo)的均值及變異系數(shù)可得，13項(xiàng)二級(jí)指標(biāo)值均大于3.72，變異系數(shù)均小于0.61。由此可知，13項(xiàng)二級(jí)指標(biāo)均符合篩選條件，因此予以保留。

此外，根據(jù)三級(jí)指標(biāo)的篩選界值可得，其標(biāo)準(zhǔn)為均值>3.36，且變異系數(shù)<0.74。由SPSS的數(shù)據(jù)統(tǒng)計(jì)結(jié)果可知，44項(xiàng)三級(jí)指標(biāo)的適用度均值在3.75-4.50之間，滿足均值的篩選標(biāo)準(zhǔn)；標(biāo)準(zhǔn)差的最小值為0.46，最大值為1.28；其變異系數(shù)在0.12-0.34之間，數(shù)據(jù)說(shuō)明專家對(duì)于三級(jí)指標(biāo)的整體認(rèn)可度較好，滿足變異系數(shù)的篩選標(biāo)準(zhǔn)，因此全部予以保留。

四、大學(xué)外語(yǔ)翻轉(zhuǎn)課堂課程評(píng)價(jià)指標(biāo)體系的確立和解析

(一)大學(xué)外語(yǔ)翻轉(zhuǎn)課堂課程評(píng)價(jià)指標(biāo)體系的確立

通過(guò)指標(biāo)初篩和德?tīng)柗茖＜易稍兎?，初步確立了基于CIPP的大學(xué)外語(yǔ)翻轉(zhuǎn)課堂課程評(píng)價(jià)指標(biāo)體系如下：

1、“背景評(píng)價(jià)”指標(biāo)及解釋

一級(jí)指標(biāo)二級(jí)指標(biāo)三級(jí)指標(biāo)指標(biāo)解釋背景評(píng)價(jià)(課程背景)課前課程目標(biāo)適切性課程目標(biāo)是否符合《國(guó)家中長(zhǎng)期教育改革和發(fā)展規(guī)劃綱要(2010-2010)》及教育部《大學(xué)英語(yǔ)教學(xué)指南(2017版)》要求;教學(xué)目標(biāo)是否適合翻轉(zhuǎn)課堂的教學(xué)方式明確性課程目標(biāo)是否明確提出了預(yù)期教學(xué)效果和教學(xué)要求普適性課程目標(biāo)是否適合大學(xué)英語(yǔ)教學(xué)目標(biāo)人群的基本語(yǔ)言水平和認(rèn)知水平;課程目標(biāo)是否符合目標(biāo)人群的學(xué)習(xí)需求課程作用課程定位課程在人才培養(yǎng)和課程設(shè)置中定位是否清晰課程影響課程在人才培養(yǎng)和課程設(shè)置中是否具有影響力課程理念理論框架課程理念是否具有教育學(xué)和語(yǔ)言學(xué)的理論支持指導(dǎo)作用課程理念是否對(duì)課程具有明確的指導(dǎo)意義創(chuàng)新性課程理念是否具有創(chuàng)新意義和前瞻性

2、“輸入評(píng)價(jià)”指標(biāo)及解釋

一級(jí)指標(biāo)二級(jí)指標(biāo)三級(jí)指標(biāo)指標(biāo)解釋輸入評(píng)價(jià)(課程設(shè)置)課前課程師資師資水平課程任課教師資質(zhì)和教學(xué)水平與課程要求是否相符合師資規(guī)模課程師資隊(duì)伍的規(guī)模是否能夠滿足授課需求,班級(jí)規(guī)模和師生比例是否能滿足授課要求師資結(jié)構(gòu)師資隊(duì)伍學(xué)歷、職稱與年齡結(jié)構(gòu)是否合理,分工是否明確,是否協(xié)作良好師資培訓(xùn)是否對(duì)任課教師有完善的針對(duì)性的培訓(xùn)課程資源教學(xué)設(shè)施課程教學(xué)軟硬件設(shè)施是否完善,是否能滿足翻轉(zhuǎn)課堂授課和互動(dòng)需求課程教材課程教材是否適合教學(xué)目標(biāo)和教學(xué)要求,是否適合翻轉(zhuǎn)課堂的教學(xué)方式網(wǎng)絡(luò)資源課程網(wǎng)絡(luò)教學(xué)資源是否充足,能否很好地輔助線上和線下教學(xué)課程管理課程安排課程開(kāi)課數(shù)量、授課安排是否合理教學(xué)計(jì)劃管理是否制定了科學(xué)的教學(xué)計(jì)劃、形成了規(guī)范的課程教學(xué)管理制度選課管理課程選課系統(tǒng)是否完善,能否滿足絕大多數(shù)學(xué)生的選課需求課程質(zhì)量監(jiān)控學(xué)校對(duì)課程有完善的監(jiān)督質(zhì)量體系,能夠根據(jù)專家反饋意見(jiàn)做出適當(dāng)?shù)母倪M(jìn)

3、“過(guò)程評(píng)價(jià)”指標(biāo)及解釋

一級(jí)指標(biāo)二級(jí)指標(biāo)三級(jí)指標(biāo)指標(biāo)解釋過(guò)程評(píng)價(jià)(課程實(shí)施)課中課程內(nèi)容適用性課程內(nèi)容是否符合教學(xué)目標(biāo)和教學(xué)要求難易度課程內(nèi)容是否難易適中,符合學(xué)生的實(shí)際英語(yǔ)水平和認(rèn)知水平國(guó)際性課程內(nèi)容是否與時(shí)俱進(jìn),具有國(guó)際視野和跨文化特征特色性課程內(nèi)容是否依托學(xué)校優(yōu)勢(shì)學(xué)科,彰顯本校課程特色完成度課程內(nèi)容是否按照教學(xué)計(jì)劃按時(shí)完成課程反饋對(duì)課程自學(xué)內(nèi)容學(xué)習(xí)的反饋是否通過(guò)翻轉(zhuǎn)前后得以實(shí)現(xiàn)課程教學(xué)教學(xué)態(tài)度任課教師是否重視課程和翻轉(zhuǎn)課堂的教學(xué)模式,是否愿意積極參與翻轉(zhuǎn)課堂的教學(xué)改革教學(xué)參與度任課教師對(duì)翻轉(zhuǎn)課堂的教學(xué)模式是否了解,是否能夠采取翻轉(zhuǎn)課堂的教學(xué)模式進(jìn)行教學(xué)和互動(dòng)教學(xué)內(nèi)容教學(xué)內(nèi)容是否緊扣課程目標(biāo),并具有相應(yīng)的廣度與深度教學(xué)方法與手段任課教師是否采用翻轉(zhuǎn)課堂的教學(xué)模式和靈活多樣的教學(xué)方法以及其他有效的教學(xué)輔助手段教學(xué)組織形式教學(xué)組織形式是否合理,師生互動(dòng)是否充分有效學(xué)習(xí)參與度學(xué)生是否積極參與課程線上和線下的學(xué)習(xí)課程評(píng)價(jià)課程考核方式課程是否采用形成性評(píng)價(jià)方式,考核方法是否多樣且科學(xué)合理課程評(píng)教方式課程是否具有針對(duì)性的授課評(píng)教系統(tǒng)

4、“結(jié)果評(píng)價(jià)”指標(biāo)及解釋

一級(jí)指標(biāo)二級(jí)指標(biāo)三級(jí)指標(biāo)指標(biāo)解釋結(jié)果評(píng)價(jià)(課程效果)課后學(xué)習(xí)效果知識(shí)目標(biāo)通過(guò)課程學(xué)習(xí),學(xué)生是否掌握了本門(mén)課程的核心知識(shí),達(dá)到了預(yù)期教學(xué)效果語(yǔ)言目標(biāo)通過(guò)課程學(xué)習(xí),學(xué)生是否提高了英語(yǔ)水平,達(dá)到了預(yù)期教學(xué)效果文化目標(biāo)通過(guò)課程學(xué)習(xí),學(xué)生是否能夠提高對(duì)多元文化的理解和認(rèn)同,達(dá)到了預(yù)期教學(xué)效果能力目標(biāo)通過(guò)課程學(xué)習(xí),學(xué)生是否提高了自主學(xué)習(xí)、合作學(xué)習(xí)、跨文化交際和批判性思維能力和元認(rèn)知水平,達(dá)到了預(yù)期教學(xué)效果情感目標(biāo)通過(guò)課程學(xué)習(xí),學(xué)生是否增加對(duì)大學(xué)外語(yǔ)課程的理解、興趣和熱愛(ài)課程滿意度(學(xué)生)課程設(shè)置滿意度對(duì)課程的設(shè)置是否滿意課程實(shí)施滿意度對(duì)課程的實(shí)施是否滿意課程效果滿意度對(duì)課程的效果是否滿意教學(xué)效果教師教學(xué)效果是否與教學(xué)目標(biāo)相符教師發(fā)展和成長(zhǎng)教學(xué)學(xué)術(shù)教師的教學(xué)是否有助于學(xué)術(shù)水平的提高教學(xué)反思教師是否通過(guò)教學(xué)反思得到成長(zhǎng)

(二)大學(xué)外語(yǔ)翻轉(zhuǎn)課堂課程評(píng)價(jià)指標(biāo)體系的補(bǔ)充說(shuō)明

1、一級(jí)指標(biāo)背景評(píng)價(jià)，主要采取專家評(píng)價(jià)、教師自評(píng)和學(xué)生自評(píng)的方式，在開(kāi)課前進(jìn)行一次，其中課程目標(biāo)明確性中的預(yù)期教學(xué)效果和教學(xué)要求應(yīng)該在課前告知所有選課學(xué)生；課程目標(biāo)的普適性應(yīng)體現(xiàn)在通過(guò)問(wèn)卷和前測(cè)的方式了解目標(biāo)學(xué)生群體的學(xué)習(xí)需求、語(yǔ)言水平和認(rèn)知水平。

2、一級(jí)指標(biāo)輸入評(píng)價(jià)中，主要采取專家評(píng)價(jià)和教師自評(píng)的方式，在開(kāi)課前進(jìn)行一次。

3、一級(jí)指標(biāo)過(guò)程評(píng)價(jià)中，主要采取專家評(píng)價(jià)、教師自評(píng)、同行評(píng)價(jià)和學(xué)生自評(píng)的方式，在教學(xué)過(guò)程不同階段中至少進(jìn)行三次。其中對(duì)課程內(nèi)容中反饋部分和評(píng)估機(jī)制和課程考核方式的評(píng)價(jià)，需要在課前、課中和課下三個(gè)階段分別進(jìn)行評(píng)價(jià)和測(cè)量，對(duì)課程教學(xué)的評(píng)價(jià)需要結(jié)合課堂觀察和課后訪談共同進(jìn)行評(píng)價(jià)。

4、一級(jí)指標(biāo)結(jié)果評(píng)價(jià)中，主要采取專家評(píng)價(jià)、教師自評(píng)、同行評(píng)價(jià)、學(xué)生自評(píng)和學(xué)生互評(píng)，在結(jié)課時(shí)通過(guò)問(wèn)卷和后測(cè)的方式進(jìn)行。其中對(duì)學(xué)習(xí)效果部分的評(píng)價(jià)可以結(jié)合學(xué)生平日表現(xiàn)、課堂觀察和訪談的形式共同完成評(píng)價(jià)。

5、四個(gè)一級(jí)指標(biāo)之間密切關(guān)聯(lián)，如課程目標(biāo)中的預(yù)期學(xué)習(xí)效果與課程內(nèi)容反饋和學(xué)習(xí)效果評(píng)價(jià)之間存在的高度一致性，課程教學(xué)與評(píng)估機(jī)制的高度嵌入，教師發(fā)展和成長(zhǎng)中的反思對(duì)課程內(nèi)容和課程教學(xué)的反哺。

6、專家評(píng)估與同行評(píng)估，尤其是結(jié)合課堂觀察進(jìn)行評(píng)估時(shí)，需要提前和參與評(píng)估的教師進(jìn)行溝通，充分了解課堂觀察內(nèi)容、課程目標(biāo)和預(yù)期教學(xué)效果后再進(jìn)行評(píng)估。

7、鑒于大學(xué)外語(yǔ)課程類型的多樣化，不同類型和教學(xué)目的的課程評(píng)價(jià)標(biāo)準(zhǔn)會(huì)有不同。如語(yǔ)言技能類和語(yǔ)言文化類課程在課程目標(biāo)、課程內(nèi)容上會(huì)有很大差別；學(xué)術(shù)型拓展課程和語(yǔ)言基礎(chǔ)課程的課程評(píng)價(jià)也應(yīng)區(qū)別對(duì)待。

8、在專家咨詢和訪談過(guò)程中，部分專家提到，翻轉(zhuǎn)課堂的背景評(píng)價(jià)中要充分尊重學(xué)生和教師參與翻轉(zhuǎn)課堂教學(xué)模式的意愿，合理控制翻轉(zhuǎn)課堂課前和課后學(xué)生的作業(yè)量和認(rèn)知負(fù)荷，重視學(xué)生元認(rèn)知能力的培養(yǎng)和情感目標(biāo)的達(dá)成，激發(fā)對(duì)大學(xué)英語(yǔ)課程的興趣和熱愛(ài)；在教師和發(fā)展和成長(zhǎng)方面，首先將教師看做“經(jīng)濟(jì)人”，鼓勵(lì)和支持他們將翻轉(zhuǎn)課堂的教學(xué)實(shí)踐與教學(xué)學(xué)術(shù)緊密聯(lián)結(jié)，通過(guò)教學(xué)活動(dòng)收集相關(guān)教學(xué)研究數(shù)據(jù)，發(fā)表相關(guān)學(xué)術(shù)論文，通過(guò)對(duì)翻轉(zhuǎn)課堂教學(xué)模式的應(yīng)用提高業(yè)務(wù)水平和課堂效率，通過(guò)教學(xué)反思使教師發(fā)展規(guī)劃更為清晰，實(shí)現(xiàn)真正意義的“教學(xué)相長(zhǎng)”。

五、結(jié)論

(一)研究總結(jié)

翻轉(zhuǎn)課堂教學(xué)模式對(duì)高等教育改革帶來(lái)深刻影響，在大學(xué)英語(yǔ)改革實(shí)踐中已經(jīng)進(jìn)入內(nèi)涵式發(fā)展階段，對(duì)其教學(xué)全過(guò)程進(jìn)行綜合評(píng)價(jià)，并建立科學(xué)合理的教學(xué)評(píng)價(jià)體系，是推進(jìn)翻轉(zhuǎn)課堂深入發(fā)展的重要命題。CIPP評(píng)價(jià)模型注重過(guò)程改進(jìn)和過(guò)程評(píng)價(jià)，強(qiáng)調(diào)教學(xué)的反饋?zhàn)饔?，兼顧?jì)劃、組織、實(shí)施和再循環(huán)的決策類型，因而特別適用于教育改革活動(dòng)對(duì)教育評(píng)價(jià)的需要，也契合于翻轉(zhuǎn)課堂教學(xué)目標(biāo)的多樣性和教學(xué)過(guò)程的進(jìn)階性等特點(diǎn)。[53]本研究采用CIPP評(píng)價(jià)模型與翻轉(zhuǎn)課堂課程評(píng)價(jià)指標(biāo)體系進(jìn)行對(duì)應(yīng)，初步構(gòu)建了大學(xué)外語(yǔ)翻轉(zhuǎn)課堂課程評(píng)價(jià)指標(biāo)體系，通過(guò)德?tīng)柗茖＜易稍兎ê徒y(tǒng)計(jì)分析，對(duì)指標(biāo)進(jìn)行了篩選和確認(rèn)，最終保留了13個(gè)二級(jí)指標(biāo)44個(gè)和三級(jí)指標(biāo)?；贑IPP的大學(xué)外語(yǔ)翻轉(zhuǎn)課堂課程評(píng)價(jià)指標(biāo)體系的初步確立可以為后續(xù)研究奠定基礎(chǔ)。這一指標(biāo)體系的建立可以為翻轉(zhuǎn)課堂教學(xué)模式的課程提供評(píng)價(jià)范式，從而豐富翻轉(zhuǎn)課堂研究的維度，提高翻轉(zhuǎn)類課程的教學(xué)質(zhì)量。

(二)研究不足和研究展望

本研究仍然存在著很多不足，比如專家樣本數(shù)和多元化的欠缺。后續(xù)研究應(yīng)該邀請(qǐng)更多高等教育學(xué)和其他專業(yè)領(lǐng)域參與翻轉(zhuǎn)課堂教學(xué)的專家參與；同時(shí)對(duì)課程目標(biāo)、課程內(nèi)容、課程教學(xué)、評(píng)估機(jī)制、學(xué)習(xí)效果等二級(jí)指標(biāo)應(yīng)該繼續(xù)設(shè)計(jì)細(xì)化評(píng)價(jià)子量表進(jìn)行進(jìn)一步測(cè)量評(píng)價(jià)，尤其是凸顯對(duì)課前、課中和課后的評(píng)價(jià)內(nèi)容。

后續(xù)研究可以在評(píng)價(jià)指標(biāo)體系的權(quán)重，二級(jí)指標(biāo)的細(xì)化評(píng)價(jià)量表等方面繼續(xù)完善課程評(píng)價(jià)指標(biāo)體系，并通過(guò)學(xué)生和教師的問(wèn)卷調(diào)查，完成對(duì)翻轉(zhuǎn)課堂課程評(píng)價(jià)的實(shí)證研究。

課程改革的最終落腳點(diǎn)是教師教學(xué)和學(xué)生學(xué)習(xí)的雙重改變，優(yōu)質(zhì)的教學(xué)，就是促使絕大多數(shù)的學(xué)生都能采用那些優(yōu)秀學(xué)生自覺(jué)使用的認(rèn)知水平，以達(dá)到預(yù)期的學(xué)習(xí)成效。[54]而以“學(xué)生為中心”的評(píng)價(jià)體系中，評(píng)價(jià)必須向?qū)W生發(fā)出正確的信號(hào)，告訴學(xué)生應(yīng)該學(xué)什么，怎么學(xué)。大學(xué)外語(yǔ)翻轉(zhuǎn)課堂課程評(píng)價(jià)指標(biāo)體系的構(gòu)建，正是尊重和體現(xiàn)這種改變的應(yīng)然之舉。