李珍
【摘要】學(xué)生接受度問(wèn)卷的編制可以為英語(yǔ)智能課堂的構(gòu)建提供先決條件,在經(jīng)過(guò)問(wèn)卷?xiàng)l目制定,初測(cè),修改,信度效度檢測(cè)后,該問(wèn)卷具有一定的可信度和準(zhǔn)確性,能夠運(yùn)用于英語(yǔ)寫(xiě)作的教學(xué)與研究中。
【關(guān)鍵詞】智能評(píng)閱 接受度 問(wèn)卷編制
引言
寫(xiě)作自動(dòng)評(píng)價(jià)最先起源于美國(guó)。20世紀(jì)90年代以來(lái),新開(kāi)發(fā)的英語(yǔ)作文評(píng)價(jià)系統(tǒng),如Criterion, MY Access!和Writing Roadmap得到不斷發(fā)展,成為了英語(yǔ)寫(xiě)作課堂較為重要的輔助工具。而在我國(guó),英語(yǔ)作文在線評(píng)閱系統(tǒng)主要有外研社研制的“冰果智能作文評(píng)閱系統(tǒng)”和“iwrite大學(xué)英語(yǔ)寫(xiě)作教學(xué)系統(tǒng)”??v觀國(guó)內(nèi)外文獻(xiàn),在對(duì)智能評(píng)閱系統(tǒng)的研究中,從學(xué)生的角度來(lái)考慮系統(tǒng)的可接受度的研究較少,針對(duì)這一問(wèn)題,筆者編制了“英語(yǔ)作文智能評(píng)閱系統(tǒng)”學(xué)生接受度量表,以期為智能評(píng)閱系統(tǒng)的實(shí)踐研究提供更加量化的依據(jù)。
一、研究方法
1.問(wèn)卷編制的依據(jù)。本研究通過(guò)文獻(xiàn)查閱,開(kāi)放式問(wèn)卷調(diào)查并且借鑒國(guó)內(nèi)外的量表來(lái)編制問(wèn)卷的條目。
(1)文獻(xiàn)查閱。通過(guò)查閱Warschauer & Grimes (2008), Warschauer &Ware;(2011) 等學(xué)者的相關(guān)著作和文獻(xiàn),了解自動(dòng)評(píng)分系統(tǒng)的起源,工作原理以及在課堂中的應(yīng)用效果。同時(shí)通過(guò)查閱《高等學(xué)校英語(yǔ)專業(yè)英語(yǔ)教學(xué)大綱》也了解到對(duì)英語(yǔ)專業(yè)學(xué)生寫(xiě)作能力的具體要求和評(píng)價(jià)手段。
(2)教師、學(xué)生的訪談?wù){(diào)查。筆者訪談了富有寫(xiě)作教學(xué)經(jīng)驗(yàn)的教師3名,具體問(wèn)題如下:①您認(rèn)為學(xué)生的寫(xiě)作能力應(yīng)該從哪幾個(gè)方面進(jìn)行評(píng)價(jià)?②您愿意在課堂上使用智能評(píng)閱系統(tǒng)來(lái)輔助教學(xué)嗎?筆者也訪談了不同年級(jí)的20名學(xué)生,具體的問(wèn)題如下:①你喜歡在電腦上寫(xiě)作文嗎?②你愿意將由智能評(píng)閱系統(tǒng)來(lái)評(píng)價(jià)你的作文嗎?
(3)借鑒國(guó)內(nèi)外的問(wèn)卷。該研究主要借鑒了Pei-ling Wang(2015)所編制的考察學(xué)生對(duì)Criterion適應(yīng)度的量表。同時(shí)還參考其他研究者的問(wèn)卷與研究。根據(jù)問(wèn)卷編制的原則,初始問(wèn)卷一共有25個(gè)條目,均為“李克特型”問(wèn)題,即五點(diǎn)式問(wèn)題。初始問(wèn)卷編制完成后,筆者請(qǐng)一名心理學(xué)教師和一名英語(yǔ)寫(xiě)作教師仔細(xì)閱讀了問(wèn)卷,去除了較為重復(fù),有歧義的條目,修正了問(wèn)卷的部分表達(dá)問(wèn)題,得到了由22個(gè)條目組成的初測(cè)問(wèn)卷。
2.初測(cè)對(duì)象及問(wèn)卷的預(yù)測(cè)。2015年10月,筆者選取了所任教的南方翻譯學(xué)院2013級(jí)英語(yǔ)專業(yè)兩個(gè)班的學(xué)生作為初測(cè)對(duì)象,采取以班級(jí)為單位的團(tuán)體測(cè)量方式,測(cè)試時(shí)間為10分鐘,問(wèn)卷當(dāng)場(chǎng)回收,共發(fā)放問(wèn)卷58份,收回56份,有效問(wèn)卷為53份。最后用spss16.0進(jìn)行數(shù)據(jù)錄入和分析。通過(guò)數(shù)據(jù)分析,得出初測(cè)問(wèn)卷的內(nèi)部一致性信度,即克隆巴赫系數(shù)為.837,同時(shí),結(jié)果顯示,如果去除掉條目3,系數(shù)值會(huì)有所上升。通過(guò)因子分析,可以看出,條目7的因子負(fù)荷最低,表明為了保證問(wèn)卷的效度,該條目不適宜保留。
3.最終問(wèn)卷的形成。基于初測(cè)問(wèn)卷的結(jié)果反饋,該問(wèn)卷經(jīng)過(guò)了幾次修訂,刪除了相關(guān)度低以及不必要的條目,保證了問(wèn)卷的信度與效度。最終的問(wèn)卷由兩個(gè)部分組成,第一部分是施測(cè)對(duì)象的個(gè)人信息,第二部分為由20個(gè)條目組成的問(wèn)卷內(nèi)容。問(wèn)卷的總分為100分,每個(gè)條目根據(jù)學(xué)生的選擇,從1分到5分不等。
二、正式問(wèn)卷的信度與效度分析
在修訂初測(cè)問(wèn)卷后,筆者重新選取了2013級(jí)兩個(gè)班的學(xué)生進(jìn)行了問(wèn)卷的正式測(cè)試,共發(fā)放問(wèn)卷53份,收回50份,有效問(wèn)卷為48份。
1.信度檢驗(yàn)。通過(guò)運(yùn)用spss16.0進(jìn)行數(shù)據(jù)分析,得出量表的內(nèi)部一致性信度,即克隆巴赫系數(shù)為.899。
2.效度檢驗(yàn)。本問(wèn)卷是基于文獻(xiàn)研究和已有的經(jīng)典問(wèn)卷,問(wèn)卷的條目與所研究的學(xué)生對(duì)智能評(píng)分系統(tǒng)的接受度是相一致的,并且在正式施測(cè)前進(jìn)行了預(yù)測(cè),運(yùn)用因子分析的方法,刪除了因子負(fù)荷低的條目,改進(jìn)和修訂了相關(guān)條目,所以問(wèn)卷的結(jié)構(gòu)效度是得到保證的。
三、討論
該問(wèn)卷的編制為構(gòu)建英語(yǔ)智能化課堂提供量化標(biāo)準(zhǔn)和數(shù)據(jù)支持,并且通過(guò)學(xué)生的反饋信息,使智能系統(tǒng)不僅能夠有助于教師評(píng)閱作文,更有助于學(xué)生形成自主化的學(xué)習(xí)模式,提高自我認(rèn)知的能力。
參考文獻(xiàn):
[1]唐錦蘭,吳一安 在線英語(yǔ)寫(xiě)作自動(dòng)評(píng)價(jià)系統(tǒng)應(yīng)用研究述評(píng)[J].外語(yǔ)教學(xué)與研究,2011(2).
[2]Warschauer,M & D.Grimes.Automated writing assessment in the classroom[J].Pedagogies:An International Journal,2008(3).
[3]Warschauer,M & P.Ware.Automated writing evaluation:Defining the classroom research agenda[J].Language Teaching Research,2006,(2).
[4]Pei-ling Wang.Effect of an automated writing evaluation program:student experiences and perceptions[J],Electronic Journal of Foreign Language Teaching,2015(1).