劉海舟
(江西中醫(yī)藥大學(xué),江西 南昌 330004)
《國家中長(zhǎng)期教育改革和發(fā)展綱要(2010-2020年)》提出“信息技術(shù)對(duì)教育發(fā)展具有革命性影響,必須予以高度重視”。作文自動(dòng)評(píng)改系統(tǒng)通過語料庫與網(wǎng)絡(luò)技術(shù)對(duì)作文進(jìn)行自動(dòng)評(píng)估,其研究和應(yīng)用在國內(nèi)外已成為計(jì)算機(jī)輔助寫作教學(xué)的熱點(diǎn)。國內(nèi)梁茂成教授主持開發(fā)了“大規(guī)??荚囉⒄Z作文自動(dòng)評(píng)分系統(tǒng)”,外研社開發(fā)了“新視野大學(xué)英語作文自動(dòng)評(píng)分系統(tǒng)”。同時(shí),一些企業(yè)也開發(fā)了此類軟件,比較著名的有“冰果”和“句酷”。國外研發(fā)成功并投入使用的自動(dòng)評(píng)改系統(tǒng)有十余種,其中最具代表性的是PEG、BETSY、IEA、MY Access和E-rater,但都不太適用于我國外語教學(xué)的實(shí)際情況。
北京詞網(wǎng)科技有限公司開發(fā)的 “句酷批改網(wǎng)”(以下簡(jiǎn)稱批改網(wǎng))是基于語料庫和云計(jì)算的英語作文自動(dòng)批改在線服務(wù),于2011年6月上線,免費(fèi)使用,操作簡(jiǎn)單。批改網(wǎng)將學(xué)生的作文分為詞匯、句子、篇章結(jié)構(gòu)、內(nèi)容相關(guān)四大維度,192個(gè)子維度,在各個(gè)子維度上和給定的標(biāo)準(zhǔn)語料庫做一個(gè)比對(duì),即可“測(cè)量”出學(xué)生作文的分?jǐn)?shù),并可自動(dòng)識(shí)別拼寫、詞匯、語法、中式英語等方面的常見錯(cuò)誤,逐句進(jìn)行點(diǎn)評(píng),并提出改進(jìn)的建議。系統(tǒng)還提供抄襲檢測(cè)、同伴互改、優(yōu)秀作文共享及論壇等功能。根據(jù)實(shí)驗(yàn),其批改作文的分?jǐn)?shù)與人工批改的擬合度可以達(dá)到92%,有較高的信度和效度。目前批改網(wǎng)已經(jīng)在國內(nèi)不少高校使用,但對(duì)于其使用效果的研究卻還很少。
雖然諸多專家學(xué)者對(duì)大學(xué)英語作文反饋?zhàn)隽舜罅康难芯浚际腔趥鹘y(tǒng)的紙質(zhì)寫作及批改模式,對(duì)計(jì)算機(jī)及網(wǎng)絡(luò)反饋的研究卻屈指可數(shù),鑒于此,很有必要對(duì)作文自動(dòng)評(píng)分系統(tǒng)這一現(xiàn)代教育技術(shù)在大學(xué)英語寫作反饋中的應(yīng)用及影響進(jìn)行深入探討。
本文旨在探討以批改網(wǎng)為代表的在線寫作自動(dòng)評(píng)改系統(tǒng)對(duì)提高大學(xué)生英語寫作能力的有效性。鑒于此,具體研究問題為:
(1)作為一種在線自動(dòng)評(píng)改系統(tǒng),批改網(wǎng)能否有效地幫助學(xué)生提高英語寫作水平?
(2)有了在線批改,學(xué)生是否還需要老師的人工批改?
(3)批改網(wǎng)在作文評(píng)改與反饋方面還存在哪些局限性?如何改進(jìn)?
(1)師生注冊(cè),建立句酷批改網(wǎng)的學(xué)習(xí)平臺(tái)(網(wǎng)址:www.pigai.org);(2)教師通過批改網(wǎng)布置作文,寫明要求(也可從系統(tǒng)里選擇題目),系統(tǒng)生成唯一的作文號(hào);(3)學(xué)生獲得作文號(hào),在學(xué)生帳戶頁面搜索作文號(hào)找到教師布置的作文題目,并進(jìn)行答題(學(xué)生可以反復(fù)修改并提交作文直至滿意的分?jǐn)?shù))。在作文提交完畢后,學(xué)生也可查看同學(xué)的作文并批改;(4)系統(tǒng)對(duì)學(xué)生作文進(jìn)行分析,給出打分及評(píng)語,并生成詳細(xì)的圖文報(bào)表;(5)教師獲得學(xué)生作文分析統(tǒng)計(jì)結(jié)果,對(duì)部分學(xué)生作文人工批改并將反饋意見上傳到系統(tǒng)里。
我們?cè)诮髦嗅t(yī)藥大學(xué)2013級(jí)大一學(xué)生中進(jìn)行了為期一年的教學(xué)實(shí)驗(yàn)。我們選取營銷1班作為實(shí)驗(yàn)班,營銷2班為對(duì)照班,營銷1班53人,營銷2班49人。實(shí)驗(yàn)前對(duì)實(shí)驗(yàn)班與對(duì)照班進(jìn)行了英語寫作水平的前測(cè),然后用SPSS對(duì)成績(jī)進(jìn)行統(tǒng)計(jì)與分析,發(fā)現(xiàn)2個(gè)班級(jí)的寫作成績(jī)無明顯差異。
實(shí)驗(yàn)班進(jìn)行了為期一年的教學(xué)實(shí)驗(yàn)。實(shí)驗(yàn)班的學(xué)生使用批改網(wǎng)進(jìn)行在線寫作練習(xí),對(duì)照班用傳統(tǒng)的紙質(zhì)寫作、老師批閱的方式。兩個(gè)班級(jí)由同一個(gè)老師教授。每?jī)芍茏笥也贾脤W(xué)生一次作文,實(shí)驗(yàn)班與對(duì)照班采用同一題目,一年的作文練習(xí)不少于20次。在為期一年的教學(xué)實(shí)驗(yàn)結(jié)束之后,對(duì)實(shí)驗(yàn)班與對(duì)照班進(jìn)行了英語寫作水平的后測(cè)。
在教學(xué)實(shí)驗(yàn)結(jié)束后我們對(duì)實(shí)驗(yàn)班的全體學(xué)生進(jìn)行了問卷調(diào)查。問卷分兩部分,第一部分是一個(gè)五分量表,針對(duì)學(xué)生使用批改網(wǎng)的效果、情感及對(duì)英語作文的反撥作用等方面展開,第二部分為開放式設(shè)計(jì),學(xué)生可以自由寫下使用體會(huì)、意見和建議。問卷調(diào)查主要有以下幾個(gè)問題:①你是否喜歡使用批改網(wǎng)或者類似的作文自動(dòng)評(píng)分系統(tǒng)?②你覺得批改網(wǎng)對(duì)英語寫作的幫助有多大?③批改網(wǎng)與傳統(tǒng)的教師批閱相比各有哪些優(yōu)缺點(diǎn)?④有了批改網(wǎng),你是否還需要教師的指導(dǎo)?⑤你覺得批改網(wǎng)對(duì)作文的評(píng)分及批語準(zhǔn)確度如何?⑥批改網(wǎng)還有哪些需要改進(jìn)的地方?
我們對(duì)問卷調(diào)查的結(jié)果進(jìn)行了定量與定性相結(jié)合的分析,研究學(xué)生對(duì)批改網(wǎng)的態(tài)度和看法,以及作文進(jìn)行大規(guī)模網(wǎng)絡(luò)批改的可行性,并提出批改網(wǎng)需要改進(jìn)的地方。
在為期一年的實(shí)驗(yàn)結(jié)束之后,我們對(duì)實(shí)驗(yàn)班與對(duì)照班采用同一套試卷進(jìn)行英文寫作水平的后測(cè),作文由2名老師分別人工批閱,然后取平均分,并使用SPSS軟件分析兩個(gè)班學(xué)生的寫作成績(jī)。通過分析我們發(fā)現(xiàn):實(shí)驗(yàn)班的學(xué)生英語平均分為85分,對(duì)照班的平均分為78分;77%的同學(xué)表示喜歡或比較喜歡使用批改網(wǎng)寫作,64%的同學(xué)表示批改網(wǎng)的反饋對(duì)提高寫作有幫助,41%的同學(xué)表示批改的反饋比較籠統(tǒng)或不太準(zhǔn)確,81%的同學(xué)表示希望老師的批改和機(jī)器的批改相結(jié)合。
(1)批改網(wǎng)能激發(fā)學(xué)生反復(fù)修改作文的積極性,批改網(wǎng)將學(xué)生的寫作視作一個(gè)過程,符合“過程寫作理論”。由于反饋及時(shí),學(xué)生可以在線反復(fù)修改自己的作文直至得到滿意的分?jǐn)?shù),從而養(yǎng)成良好的寫作習(xí)慣。(2)幫助學(xué)生自主學(xué)習(xí)。批改網(wǎng)能指出作文中存在的拼寫、語法、詞匯、搭配、中式英語等錯(cuò)誤,并一一給出修改建議,還為學(xué)生提供特定知識(shí)點(diǎn)的擴(kuò)展訓(xùn)練、搭配推薦、參考例句等,學(xué)生在網(wǎng)上還可以看到其他同學(xué)的作文并進(jìn)行點(diǎn)評(píng),這些都有助于學(xué)生自主學(xué)習(xí)。(3)大幅減輕教師負(fù)擔(dān)。批改網(wǎng)能實(shí)時(shí)對(duì)用戶提交的作文進(jìn)行批改,并立刻給出作文分?jǐn)?shù)及評(píng)語,大幅提高作文批改的效率,節(jié)省老師批改簡(jiǎn)單、重復(fù)錯(cuò)誤的時(shí)間,減輕老師的工作量。(4)為老師提供教學(xué)管理和科研的便利。批改網(wǎng)能夠積累大量的教學(xué)數(shù)據(jù),詳細(xì)記錄教師的教學(xué)軌跡和學(xué)生的學(xué)習(xí)軌跡,同時(shí)還提供分類管理、深度挖掘、數(shù)據(jù)分析等功能,為老師進(jìn)行教學(xué)管理及科研提供了極大的便利。
自動(dòng)評(píng)分系統(tǒng)應(yīng)和教師人工批閱結(jié)合使用。批改網(wǎng)作為一種新型的在線英語作文評(píng)改系統(tǒng),有著寬廣的發(fā)展前景,對(duì)于學(xué)生的英語寫作訓(xùn)練有較好的輔助作用,但也存在一些缺陷,如機(jī)械化、程式化,由于語言的靈活性及復(fù)雜性,機(jī)器不能完全取代人腦的智慧。我們不能盲目地、武斷地接受網(wǎng)上所提供的所有的點(diǎn)評(píng),對(duì)它還要進(jìn)行客觀的評(píng)價(jià)和分析。為了降低批改網(wǎng)上不準(zhǔn)確的點(diǎn)評(píng)對(duì)學(xué)生帶來的不良的影響,教師需要視情況添加人工批閱意見,將人工批閱與機(jī)器批閱結(jié)合起來。經(jīng)過批改網(wǎng)批改后,學(xué)生作文中的基本錯(cuò)誤已經(jīng)找了出來,教師可以從內(nèi)容、邏輯等宏觀層面進(jìn)行指導(dǎo),更好的發(fā)揮老師的作用。
[1]http:www.pigai.org[OL].
[2]顧城華,王麗.基于句庫批改網(wǎng)的大學(xué)英語寫作教學(xué)實(shí)證研究[J].揚(yáng)州大學(xué)學(xué)報(bào):高教研究版,2012(8):92-96.
[3]梁茂成,文秋芳.國外作文自動(dòng)評(píng)分系統(tǒng)評(píng)述及啟示[J].外語電化教學(xué),2007(5):18-24.
[4]石曉玲.在線寫作自動(dòng)評(píng)改系統(tǒng)在大學(xué)英語寫作教學(xué)中的應(yīng)用研究——以句庫批改網(wǎng)為例[J].現(xiàn)代教育技術(shù),2012(10):61-71.