謝利民 徐小華
課堂是學(xué)校教育教學(xué)的主陣地,課堂教學(xué)質(zhì)量是學(xué)校辦學(xué)質(zhì)量的一個重要方面。課堂教學(xué)評估是診斷課堂教學(xué)水平,引導(dǎo)課堂教學(xué)改革,提高教學(xué)質(zhì)量的有效途徑。在課堂教學(xué)評估中,定量分析和定性分析是最常用的分析方法,兩種分析方法辯證統(tǒng)一、互為補充。評估數(shù)據(jù)的定量分析又是課堂教學(xué)定性分析的基礎(chǔ)和依據(jù),做好定性分析至關(guān)重要。本文以無錫市職業(yè)教育綜合督導(dǎo)課堂教學(xué)評估為例,闡述了課堂教學(xué)評估數(shù)據(jù)的統(tǒng)計分析方法,并運用Excel、SPSS軟件分析出相應(yīng)的圖表結(jié)果。
一、課堂教學(xué)評估數(shù)據(jù)的分布形態(tài)分析
1.課堂教學(xué)評估量表
評估量表是評估的標(biāo)尺,量表評估法是各類評估中應(yīng)用最為廣泛的評估方法。在無錫市職業(yè)教育綜合督導(dǎo)課堂教學(xué)評估中采用五級評估量表。量表分為教學(xué)目標(biāo)、教學(xué)內(nèi)容、教學(xué)方法、教學(xué)過程、教學(xué)技能、教學(xué)效果六個評價維度,每個評價維度有若干個觀測點。每個維度的評價等級分為A、B+、B-、C、D五個等級,分別表示優(yōu)秀、良好、一般、合格、不合格五種不同的評價程度。綜合評價等級由六個維度的評價等級確定:單項評價高于等于4個A以上且沒有B-、C和D,綜合評價為A;單項評價高于等于5個B+以上且沒有C和D,綜合評價為B+(綜合評價低于A);單項評價高于等于5個B-以上且沒有D,綜合評價為B-(綜合評價低于B+);單項評價高于等于5個C以上,綜合評價為C(綜合評價低于B-);低于綜合評價C標(biāo)準(zhǔn)的為D。
2.評估數(shù)據(jù)統(tǒng)計分布形態(tài)分析
在對無錫市職業(yè)學(xué)校進(jìn)行綜合督導(dǎo)課堂教學(xué)評估中,專家們走進(jìn)課堂進(jìn)行大規(guī)模聽課并通過評估量表對每一堂課作了教學(xué)評價。通過對綜合評價等級的統(tǒng)計,計算出每個等級的百分比。畫出各等級百分比柱狀圖,得到被評估學(xué)校課堂教學(xué)評估數(shù)據(jù)形態(tài)。無錫市各職業(yè)學(xué)校課堂教學(xué)評估數(shù)據(jù)基本呈正偏態(tài)分布,課堂教學(xué)生態(tài)良好。如某職業(yè)學(xué)校共聽課154節(jié),其中A等級課27節(jié),占所聽課數(shù)的17.53%,B+等級課63節(jié),占所聽課數(shù)的40.91%,B-等級課52節(jié),占所聽課數(shù)的33.77%,C等級課12節(jié),占所聽課數(shù)的7.79%,無D等級課,運用Excel軟件生成評價等級分布形態(tài),如下圖所示。
無錫市某職業(yè)學(xué)校評價等級分布形態(tài)
在大規(guī)模課堂教學(xué)評估中,多位專家獨立給出的群體評判結(jié)果近似服從正態(tài)分布。根據(jù)這一規(guī)律,在評估前需要對專家的評判心理尺度進(jìn)行調(diào)適,使專家們的評判心理尺度趨于一致。如根據(jù)正態(tài)分布規(guī)律給出各等級的參考比例范圍,A為15%、B+為35%、B-為35%、C為13%、D為2%,考慮到各校教育教學(xué)水平有高有低,各等級比例差異范圍控制在±3%以內(nèi)。通過專家心理評判尺度的調(diào)適,可以有效控制評課質(zhì)量。
二、課堂教學(xué)評估數(shù)據(jù)的描述性分析
在課堂教學(xué)評估中,運用教育評估計算學(xué)的方法處理教學(xué)評價過程中專家記錄的原始數(shù)據(jù),以挖掘更多的教育信息,來診斷一所學(xué)校教學(xué)運行的整體狀況,以達(dá)到有效指導(dǎo)學(xué)校教學(xué)的目的。為了便于計算,通過等級賦值的方法先將定序數(shù)據(jù)轉(zhuǎn)換為定距數(shù)據(jù)。常用的數(shù)據(jù)統(tǒng)計分析方法有反映數(shù)據(jù)集中程度的眾數(shù)、中位數(shù)、平均數(shù),以及反映數(shù)據(jù)離散程度的異眾數(shù)、平均差、標(biāo)準(zhǔn)差、差異系數(shù)等。通過數(shù)據(jù)分析,有利于進(jìn)一步描述學(xué)校的教學(xué)狀態(tài)與教師的教學(xué)水平。
1.課堂教學(xué)好評度
該指標(biāo)為評價學(xué)校教學(xué)質(zhì)量的一個重要指標(biāo)。首先運用組距數(shù)列平均數(shù)的計算原理計算出每位被評教師的課堂教學(xué)好評度,計算公式為:
式中xp為各組中值,f為各組次數(shù)。如某被評教師的評價量表中六個評價維度有1個A、2個B+、2個B-、1個C,無D等級,如表1所示。按照上述公式計算,該教師的課堂教學(xué)好評度為79.5分。在此基礎(chǔ)上,再計算該校所有教師的好評度算術(shù)平均值,即為該校的課堂教學(xué)好評度。
2.教學(xué)水平標(biāo)準(zhǔn)差
標(biāo)準(zhǔn)差是評價事物或現(xiàn)象內(nèi)部差異情況的一個指標(biāo),該指標(biāo)反映出學(xué)校教師間教學(xué)水平的差異程度,計算公式為:
式中xi皆為實數(shù)的數(shù)值,μ為平均值。標(biāo)準(zhǔn)差可運用Excel軟件中的STDVEP函數(shù)直接計算生成結(jié)果。標(biāo)準(zhǔn)差結(jié)果落在5-9之間屬正常水平(即評價總分的5%-10%以內(nèi))。
3.教學(xué)水平差異系數(shù)
差異系數(shù)又稱變異系數(shù),是測算數(shù)據(jù)離散程度的相對指標(biāo),該指標(biāo)反映校際之間教學(xué)水平的差異程度,是一組數(shù)據(jù)的標(biāo)準(zhǔn)差與其均值的比值,計算公式為:
式中σ為標(biāo)準(zhǔn)差,為均值。差異系數(shù)可運用Excel軟件先計算出標(biāo)準(zhǔn)差和均值,再計算差異系數(shù)。
以上闡述了在大規(guī)模課堂教學(xué)評估中對學(xué)校課堂教學(xué)質(zhì)量評估的三個重要數(shù)據(jù)的計算方法。表2是四所學(xué)校在接受無錫市職業(yè)教育綜合督導(dǎo)課堂教學(xué)評估中計算所得的相關(guān)數(shù)據(jù)。通過數(shù)據(jù)比較表明:D學(xué)校的課堂教學(xué)好評度最高;標(biāo)準(zhǔn)差最小表明該校教師教學(xué)水平比較接近;差異系數(shù)最小表明該校在四所學(xué)校中教學(xué)水平最高。
三、課堂教學(xué)元評估中的計算分析
所謂元評估(Meta-evaluation)指按照一定的評估理論和價值標(biāo)準(zhǔn)對評估的質(zhì)量及結(jié)論進(jìn)行評估,即對評估項目的評估。教育元評估的主要目的是檢驗教育評估中可能出現(xiàn)的各種偏差,判斷評估工作的質(zhì)量、規(guī)范與完善教育評估活動。在20世紀(jì)90年代,Stufflebeam,D.L.教授設(shè)計公布的JCSEE元評估量表在元評估中應(yīng)用廣泛,影響深遠(yuǎn)。一般傳統(tǒng)的元評估方法是專家通過使用元評估量表的形式進(jìn)行的。
如今信息技術(shù)高速發(fā)展,教學(xué)評估過程中大量工作都利用計算機網(wǎng)絡(luò)來完成,過程性數(shù)據(jù)被記錄在評估系統(tǒng)的數(shù)據(jù)庫中。在教育評估系統(tǒng)中導(dǎo)出可在SPSS軟件中運行的數(shù)據(jù)即可計算元評估的相關(guān)指標(biāo)數(shù)據(jù),如在課堂教學(xué)評估中通過計算斯皮爾曼相關(guān)系數(shù)、肯德爾和諧系數(shù)來確定評判者的信度。
1.斯皮爾曼相關(guān)系數(shù)計算分析
在課堂教學(xué)評估中提供給評判者評估指標(biāo)和觀測點,在多位專家同時對同一個評估對象進(jìn)行評判時,評判者評判的分?jǐn)?shù)越一致,評分的信度越高。在無錫市職業(yè)教育大規(guī)模課堂教學(xué)評估中,部分課堂安排兩位專家同時聽課,通過計算兩位專家的斯皮爾曼等級相關(guān)系數(shù)來確定評判的信度。斯皮爾曼等級相關(guān)系數(shù)計算公式為:
式中xi、yi為兩個數(shù)據(jù)集合,有N個元素。斯皮爾曼等級相關(guān)系數(shù)的計算也可運用SPSS軟件中的相關(guān)分析功能來實現(xiàn)。如表3是運用SPSS軟件計算兩位專家在某校課堂教學(xué)評估中的評分結(jié)果的等級相關(guān)系數(shù)Rs=0.854,為顯著相關(guān),專家的評判信度較高,運用SPSS軟件分析輸出結(jié)果如表3所示。
2.肯德爾和諧系數(shù)計算分析
在無錫市職業(yè)教育大規(guī)模課堂教學(xué)評估中,部分課堂安排3位專家評價同一節(jié)課,在3位及以上多位評判者同時評判時需通過計算肯德爾和諧系數(shù)來確定評判的信度,計算公式為:
式中n為被評的對象數(shù),m為評分者人數(shù)或評分所依據(jù)的標(biāo)準(zhǔn)數(shù),S為每個被評對象所評等級之和Ri與所有這些和的平均數(shù)的離差平方和。肯德爾和諧系數(shù)的計算也可運用SPSS軟件中的相關(guān)分析功能來實現(xiàn)。如表4是運用SPSS軟件計算3位專家在某校課堂教學(xué)評估中的評分結(jié)果的等級相關(guān)系數(shù)Kendall W,檢驗得Rw=0.890,為顯著相關(guān),專家的評判信度較高,運用SPSS軟件分析輸出結(jié)果如表4所示。
四、結(jié)束語
在無錫市職業(yè)教育綜合督導(dǎo)課堂教學(xué)評估中,除了由課堂教學(xué)專家評課外,今年還增加了企業(yè)專家參與課堂教學(xué)評價、課堂教學(xué)學(xué)生問卷調(diào)查兩個環(huán)節(jié),使學(xué)??梢粤私獾狡髽I(yè)對職業(yè)學(xué)校的辦學(xué)期盼及課堂教學(xué)的要求,讓學(xué)校傾聽課堂教學(xué)親歷者對課堂教學(xué)的訴求。這種以課堂教學(xué)專家評估為主,多方參與評估的課堂教學(xué)評估形式,將為學(xué)校的課堂教學(xué)改革提供更全面的可資借鑒的決策依據(jù),同時多方評估的數(shù)據(jù)合成處理也將成為新的研究熱點。
無錫市職業(yè)教育綜合督導(dǎo)課堂教學(xué)評估開展一年多來,無錫市教育評估院共計組織評估專家500多人次,聽評課1000多節(jié),形成高質(zhì)量的評估報告8份。其中對6000多個評估數(shù)據(jù)的統(tǒng)計分析為無錫市職業(yè)教育課堂教學(xué)水平進(jìn)行了診斷,為課堂教學(xué)評估的定性分析、等級評價分析、評語鑒定分析、寫實分析提供了數(shù)據(jù)支撐,也為相關(guān)職業(yè)學(xué)校后續(xù)的教學(xué)工作改進(jìn)提供了真實可信的依據(jù)。endprint