張秋君 闕勇平
(廣西工商職業(yè)技術(shù)學(xué)院 廣西南寧 530008)
國(guó)務(wù)院于2019年2月出臺(tái)了《國(guó)家職業(yè)教育改革實(shí)施方案》;教育部、財(cái)政部于2019年3月出臺(tái)了《實(shí)施中國(guó)特色高水平高職學(xué)校和專(zhuān)業(yè)建設(shè)計(jì)劃的意見(jiàn)》;廣西于2019年8月出臺(tái)了《廣西職業(yè)教育改革實(shí)施方案》和《實(shí)施廣西高水平高職學(xué)校和高水平專(zhuān)業(yè)建設(shè)計(jì)劃的通知》[1]。這一系列文件要求高職院校優(yōu)化學(xué)校、專(zhuān)業(yè)布局,深化辦學(xué)體制改革和育人機(jī)制改革,完善教育教學(xué)相關(guān)標(biāo)準(zhǔn),推進(jìn)高等職業(yè)教育高質(zhì)量發(fā)展。要完成“雙高”建設(shè)目標(biāo),高職院校的教學(xué)評(píng)級(jí)體系必須不斷改革和完善,才能不斷推進(jìn)高職院校教學(xué)質(zhì)量。構(gòu)建和完善教學(xué)評(píng)級(jí)體系的重要組成部分之一則是教學(xué)效果的評(píng)價(jià),而學(xué)生是教學(xué)中最直接的教育對(duì)象和服務(wù)對(duì)象,對(duì)教學(xué)的是否有效的評(píng)價(jià)比教師之間和專(zhuān)家評(píng)價(jià)更真實(shí),更具有說(shuō)服力發(fā)言權(quán)。但是,學(xué)生評(píng)教工作逐漸暴露出很多問(wèn)題,對(duì)學(xué)生評(píng)教結(jié)果的有效性和評(píng)教的信度產(chǎn)生了很?chē)?yán)重的影響,也在一定程度上影響了師生之間的感情,挫傷了教師的教學(xué)積極性。因此,本研究基于調(diào)研的基礎(chǔ)上,針對(duì)高職院校學(xué)生在教學(xué)效果評(píng)價(jià)中存在的問(wèn)題,采用定量的科學(xué)研究方法,提出了影響學(xué)生對(duì)教師教學(xué)效果評(píng)價(jià)的影響因素,從而優(yōu)化了學(xué)生的評(píng)價(jià)問(wèn)卷,這對(duì)完善教學(xué)評(píng)級(jí)體系,推動(dòng)教學(xué)質(zhì)量有著重要意義。
在研究中發(fā)現(xiàn),部分高職院校編制的教學(xué)效果方面關(guān)于學(xué)生評(píng)價(jià)問(wèn)卷存在的問(wèn)題包含:一是問(wèn)卷的內(nèi)容忽視了教學(xué)信息化手段帶來(lái)的變化,也沒(méi)有結(jié)合當(dāng)下新冠肺炎疫情帶來(lái)的影響,特別是學(xué)生網(wǎng)課后,教師的教學(xué)的有效性會(huì)受這些變化的影響,因此教學(xué)效果的學(xué)生評(píng)價(jià)問(wèn)卷需要結(jié)合網(wǎng)絡(luò)在線(xiàn)學(xué)習(xí)的因素進(jìn)行設(shè)計(jì)。二是教學(xué)效果的學(xué)生評(píng)價(jià)問(wèn)卷較少?gòu)膶W(xué)生的角度和視角去設(shè)計(jì)。許多高職院校的教學(xué)效果學(xué)生評(píng)價(jià)問(wèn)卷都是從教學(xué)管理的角度提出的,更多的是以教師為本位的立場(chǎng)出發(fā),無(wú)法體現(xiàn)出學(xué)生的主體地位,缺乏對(duì)學(xué)生訴求的了解。三是教學(xué)效果學(xué)生評(píng)價(jià)問(wèn)卷的指標(biāo)所占權(quán)重大部分是教師之間或者專(zhuān)家們按照個(gè)人經(jīng)驗(yàn)來(lái)打分,缺乏對(duì)評(píng)價(jià)指標(biāo)的定量分析,導(dǎo)致對(duì)問(wèn)卷的科學(xué)性和合理性設(shè)計(jì)產(chǎn)生影響[2]。
評(píng)價(jià)問(wèn)卷設(shè)計(jì)完成后,問(wèn)卷的結(jié)構(gòu)維度合理與否,信度和效度可靠與否,大部分由專(zhuān)家的經(jīng)驗(yàn)進(jìn)行主觀(guān)決定,實(shí)證的定量分析不足。
調(diào)查研究發(fā)現(xiàn),許多的高職院校對(duì)于教學(xué)效果的學(xué)生評(píng)價(jià)數(shù)據(jù)的處理一般只是進(jìn)行簡(jiǎn)單的相加平均,接著加權(quán)后直接把其當(dāng)作最后的教學(xué)效果評(píng)價(jià)結(jié)果,但因?qū)W生的認(rèn)知差異,打分的區(qū)間會(huì)有很大的差別。僅僅是把數(shù)據(jù)進(jìn)行簡(jiǎn)單的相加平均,無(wú)法體現(xiàn)出學(xué)生評(píng)分的實(shí)際意義,導(dǎo)致評(píng)價(jià)結(jié)果的誤差很大[3]。
國(guó)內(nèi)外許多學(xué)者對(duì)教學(xué)效果的學(xué)生評(píng)價(jià)問(wèn)卷設(shè)計(jì)做了大量研究。最經(jīng)典的學(xué)生評(píng)價(jià)教學(xué)效果的問(wèn)卷是SEEQ,即《大學(xué)教師教學(xué)效果評(píng)價(jià)問(wèn)卷(學(xué)生用)》,SEEQ問(wèn)卷由Marsh教授于1986年首次撰寫(xiě),在新西蘭、印度、澳大利亞、美國(guó)、西班牙等眾多國(guó)家應(yīng)用時(shí)效果都很好。1994年,國(guó)內(nèi)學(xué)者將SEEQ問(wèn)卷翻譯成中文,并對(duì)問(wèn)卷的表達(dá)方式和題目的內(nèi)容進(jìn)行了適當(dāng)?shù)恼{(diào)整和修改因其問(wèn)卷的科學(xué)性、全面性,結(jié)構(gòu)的穩(wěn)定性和有效性,中國(guó)臺(tái)灣、香港和內(nèi)地的許多高校都廣泛運(yùn)用這一工具對(duì)教學(xué)效果進(jìn)行測(cè)量[4]。
SEEQ問(wèn)卷由9大維度構(gòu)成,其中包含41個(gè)指標(biāo),根據(jù)題目?jī)?nèi)容和表達(dá)方式,主要適用于本科院校。研究發(fā)現(xiàn),高職院校在實(shí)際中對(duì)教學(xué)效果的進(jìn)行學(xué)生評(píng)價(jià)問(wèn)卷設(shè)計(jì)時(shí),都是直接采用本科院校的SEEQ問(wèn)卷標(biāo)準(zhǔn),或者直接自行編制,缺乏設(shè)計(jì)的科學(xué)和合理性,大部分的高職院校也沒(méi)有對(duì)問(wèn)卷的效度與信度進(jìn)行檢驗(yàn)。所以,本研究的主要目的為:首先結(jié)合SEEQ的問(wèn)卷內(nèi)容,編制高職院校教學(xué)效果學(xué)生評(píng)價(jià)問(wèn)卷,其次利用探索性因素分析驗(yàn)證HVC-VSEEQ 的維度結(jié)構(gòu),最后通過(guò)對(duì)HVC-VSEEQ的信度和效度檢驗(yàn),測(cè)試其穩(wěn)定性和準(zhǔn)確性。
SEEQ問(wèn)卷的穩(wěn)定性?xún)H在本科院校得到有效證明,并且有些表達(dá)超出了高職學(xué)生的認(rèn)知范圍。因此,本研究根據(jù)SEEQ問(wèn)卷編制HVC-VSEEQ,編制的原則為:一是結(jié)合“雙高”建設(shè)的背景,對(duì)高職院校的人才培養(yǎng)方向和學(xué)生職業(yè)綜合素質(zhì)的要求;二是根據(jù)新冠肺炎疫情防控的教學(xué)安排情況和教學(xué)信息化的趨勢(shì);三是結(jié)合與高職院校學(xué)生就教師的課堂教學(xué)效果評(píng)價(jià)的訪(fǎng)談結(jié)果。在對(duì)教學(xué)效果問(wèn)卷進(jìn)行初步設(shè)計(jì)后,
邀請(qǐng)副教授(含副教授)以上職稱(chēng)的專(zhuān)家們對(duì)指標(biāo)進(jìn)行評(píng)價(jià)和修改,使問(wèn)卷在評(píng)價(jià)內(nèi)容、結(jié)構(gòu)、表述等方面更能夠符合高職院校的特點(diǎn),在此基礎(chǔ)上設(shè)計(jì)了HVC-SEEQ問(wèn)卷。HVCSEEQ問(wèn)卷總包含16個(gè)指標(biāo):“學(xué)習(xí)/價(jià)值、教學(xué)組織/清晰、個(gè)人親和力、在線(xiàn)學(xué)習(xí)、考試/成績(jī)”5大維度。項(xiàng)目評(píng)價(jià)形式采用5點(diǎn)量表,當(dāng)被要求填寫(xiě)問(wèn)卷時(shí),要明確項(xiàng)目的指標(biāo)重要的程度。
本次研究選取了廣西工商職業(yè)技術(shù)學(xué)院一、二年級(jí)學(xué)生為試驗(yàn)對(duì)象,共發(fā)放了問(wèn)卷445份,收回了有效問(wèn)卷420份。被試的樣本總量是420人。樣本的描述性統(tǒng)計(jì)見(jiàn)圖1至圖4。
圖1 樣本的性別統(tǒng)計(jì)
圖2 樣本所在的年級(jí)統(tǒng)計(jì)
圖3 樣本所在的系部統(tǒng)計(jì)
圖4 樣本所學(xué)的專(zhuān)業(yè)統(tǒng)計(jì)
本次研究通過(guò)SPSS 23.0,運(yùn)用了探索性因素分析,進(jìn)行數(shù)據(jù)統(tǒng)計(jì)分析,討論了HVC-SEEQ問(wèn)卷的評(píng)價(jià)指標(biāo),檢驗(yàn)了HVC-SEEQ問(wèn)卷的信度和結(jié)構(gòu)效度。
采用SPSS統(tǒng)計(jì)軟件計(jì)算各因子的負(fù)荷,表1中KMO的統(tǒng)計(jì)量0.956>0.6,Bartlett球形檢驗(yàn)的P值0<0.05,說(shuō)明適合探索性因子分析。
表1 因素分析KMO系數(shù)與Bartlett球形檢驗(yàn)表
提取公因子。圖2列出了特征值大于1的因子,所以在HVC-SEEQ中總共提取了5個(gè)公因子。從表2可以看出,5個(gè)公因子的累積解釋變異為73.243(%),并且其中的第1個(gè)公因子的貢獻(xiàn)為73.243(%),與其他因子有較大差異。
表2 HVC-SEEQ總方差解釋
3 .649 4.055 82.645 4 .564 3.525 86.170 5 .325 2.034 88.203 6 .277 1.729 89.932 7 .252 1.574 91.506 8 .222 1.385 92.891 9 .190 1.185 94.076 10 .184 1.153 95.229 11 .168 1.052 96.281 12 .153 .953 97.234 13 .144 .903 98.136 14 .120 .752 98.888 15 .109 .679 99.567 16 .069 .433 100.000
提取目的:主成分分析法。
本次研究采用了探索性因子分析將16個(gè)項(xiàng)目中提取5個(gè)公因子。從表3可以看出,每個(gè)因子都有一組負(fù)載較高的變量,這些變量的公共信息構(gòu)成了該因子的隱藏特征。根據(jù)因子分析結(jié)果,把HVC-SEEQ的5個(gè)因子(維度)命名為:學(xué)習(xí)/價(jià)值、教學(xué)組織/清晰、個(gè)人親和力、在線(xiàn)學(xué)習(xí)、考試/成績(jī)。
表3 HVC-SEEQ因子負(fù)荷表
本文運(yùn)用SPSS 23.0統(tǒng)計(jì)分析軟件計(jì)算得到16項(xiàng)指標(biāo)的總體α系數(shù)為0.975(表4),大于0.7,說(shuō)明該問(wèn)卷的信度很好,具有使用價(jià)值。
表4 HVC-SEEQ問(wèn)卷信度檢驗(yàn)
表5 HVC-SEEQ問(wèn)卷效度檢驗(yàn)
檢驗(yàn)效度的方法有許多種,效度也可以分為結(jié)構(gòu)效度、外部效度、內(nèi)部效度、測(cè)評(píng)效度和統(tǒng)計(jì)結(jié)論效度。本研究主要采用效度檢驗(yàn)中的結(jié)構(gòu)效度去檢驗(yàn)HVC-SEEQ問(wèn)卷的效度。結(jié)構(gòu)效度表示的是測(cè)評(píng)的結(jié)果所表現(xiàn)出來(lái)的某種結(jié)構(gòu)和測(cè)量值間的對(duì)應(yīng)程度。對(duì)結(jié)構(gòu)效度的檢查常常使用因子分析方法,在上述的因子分析中,已經(jīng)檢驗(yàn)了各個(gè)指標(biāo)的相關(guān)性的KMO和Bartlett球形檢驗(yàn),當(dāng)KMO趨向于1,則說(shuō)明效度越高。因子分析得出,HVC-SEEQ問(wèn)卷的KMO值為0.956,在0.6以上,說(shuō)明整體的效度還是很高的。
1.本研究以經(jīng)典教學(xué)評(píng)價(jià)問(wèn)卷《高校教師教學(xué)效果評(píng)價(jià)問(wèn)卷(學(xué)生用)》的結(jié)果為基礎(chǔ),創(chuàng)新提出高職院校教學(xué)效果學(xué)生問(wèn)卷(HVC-SEEQ)。
2.本研究利用探索性因素分析的方法,科學(xué)合理的設(shè)計(jì)出高職院校教學(xué)效果的學(xué)生評(píng)價(jià)問(wèn)卷(HVC-SEEQ)的5個(gè)維度:學(xué)習(xí)/價(jià)值、教學(xué)組織/清晰、個(gè)人親和力、在線(xiàn)學(xué)習(xí)、考試/成績(jī)。
3.本研究編制的HVC-SEEQ問(wèn)卷,基本符合高職院校特色,問(wèn)卷共有5個(gè)維度,16個(gè)指標(biāo),通過(guò)對(duì)教學(xué)效果的評(píng)價(jià)問(wèn)卷進(jìn)行結(jié)構(gòu)效度和信度檢驗(yàn),實(shí)證了HVC-SEEQ問(wèn)卷的穩(wěn)定性和準(zhǔn)確性。
從統(tǒng)計(jì)分析得出,HVC-SEEQ問(wèn)卷的信度和效度科學(xué)合理,可以作為“雙高”建設(shè)背景下的高職院校教學(xué)效果的學(xué)生評(píng)價(jià)工具。