[摘 要] 中國(guó)英語(yǔ)寫(xiě)作教學(xué)智能導(dǎo)師系統(tǒng)句酷批改網(wǎng)在取得一定成就的同時(shí)也面臨著一定的挑戰(zhàn)。文章首先探討了批改網(wǎng)的工作原理，即通過(guò)將學(xué)生的作文和語(yǔ)料庫(kù)進(jìn)行對(duì)比，通過(guò)192個(gè)維度對(duì)學(xué)生的作文給出相應(yīng)的得分，并給出批改提示。然后通過(guò)實(shí)例分析了句酷批改網(wǎng)如何對(duì)學(xué)生的作文進(jìn)行智能批改。文章最后指出句酷批改網(wǎng)作為智能導(dǎo)師系統(tǒng)所面臨的挑戰(zhàn)。如：只能從語(yǔ)言上判斷水平，不能從語(yǔ)義上判斷內(nèi)容，無(wú)法對(duì)作文內(nèi)容錯(cuò)誤進(jìn)行識(shí)別、部分語(yǔ)言錯(cuò)誤無(wú)法識(shí)別，這些則是智能寫(xiě)作批改系統(tǒng)研究繼續(xù)努力的方向。

[關(guān)鍵詞] 智能導(dǎo)師系統(tǒng)； 人工智能； 英語(yǔ)寫(xiě)作； 批改網(wǎng)

[中圖分類號(hào)] G434 [文獻(xiàn)標(biāo)志碼] A

[作者簡(jiǎn)介] 蔣艷（1981—），女，重慶人。講師，碩士，主要從事外語(yǔ)教育技術(shù)理論與實(shí)踐研究。E-mail：jiangyan@cqdd.cq.cn 。

一、引 言

計(jì)算機(jī)輔助教學(xué)（CAI）一直存在著這樣的缺陷：計(jì)算機(jī)不了解學(xué)生當(dāng)前的學(xué)習(xí)狀況，當(dāng)學(xué)生學(xué)習(xí)發(fā)生困難時(shí)，不能診斷原因并提出有針對(duì)性的指導(dǎo)，無(wú)法做到因材施教，即不能靈活輔助老師的 “教”；也不能實(shí)現(xiàn)主動(dòng)的、智能化的信息服務(wù)，即不能靈活輔助學(xué)生的“學(xué)”；除此之外，它也缺乏把人工智能技術(shù)與超媒體先進(jìn)的信息組織、管理方式結(jié)合在一起的手段，因此不能發(fā)揮各自的優(yōu)點(diǎn)，彌補(bǔ)各自的不足。[1]故多年來(lái)，智能計(jì)算機(jī)輔助語(yǔ)言教學(xué)研究（Intelligent Computer Assisted Language Learning， 即ICALL）進(jìn)展緩慢。具有智能導(dǎo)師系統(tǒng)功能的句酷批改網(wǎng)盡管仍然存在不少缺點(diǎn)，但也是將智能導(dǎo)師系統(tǒng)應(yīng)用于中國(guó)英語(yǔ)寫(xiě)作教學(xué)的嘗試。

智能導(dǎo)師系統(tǒng)是指“具有某一學(xué)科領(lǐng)域的學(xué)科知識(shí)和相關(guān)的教學(xué)知識(shí)、能對(duì)學(xué)生學(xué)習(xí)進(jìn)行個(gè)別化教學(xué)，即根據(jù)學(xué)生對(duì)知識(shí)的理解掌握程度，選擇相應(yīng)的教學(xué)策略，在一定程度上模擬人類教學(xué)專家進(jìn)行教學(xué)活動(dòng)的軟件系統(tǒng)”。[2]一個(gè)完整的智能導(dǎo)師系統(tǒng)一般由三個(gè)基本模塊組成：一是領(lǐng)域知識(shí)模塊（又稱專家模塊），它包含了系統(tǒng)試圖傳授給學(xué)生的知識(shí)，代表了專家的智能；二是學(xué)生模型，它指學(xué)生已經(jīng)知道什么和不知道什么以及學(xué)生的認(rèn)知特點(diǎn)，代表了學(xué)生的智能；三是教師模型（又稱教學(xué)策略模塊），主要提供有針對(duì)性的教學(xué)策略，代表了教師的智能。此外，智能導(dǎo)師系統(tǒng)還包括一個(gè)能理解自然語(yǔ)言的人機(jī)接口模塊，即智能導(dǎo)師系統(tǒng)的用戶界面。智能導(dǎo)師系統(tǒng)的一般結(jié)構(gòu)圖如圖1所示。

二、智能導(dǎo)師系統(tǒng)在英語(yǔ)寫(xiě)作

教學(xué)中的應(yīng)用現(xiàn)狀

智能導(dǎo)師系統(tǒng)在英語(yǔ)教學(xué)中應(yīng)用的研究始于上世紀(jì)中葉。就語(yǔ)言學(xué)科而言，早期的智能導(dǎo)師系統(tǒng)在外語(yǔ)學(xué)科中的研究集中體現(xiàn)在自然語(yǔ)言處理（Natural Language Processing）上，通過(guò)分析利用計(jì)算機(jī)技術(shù)對(duì)語(yǔ)言進(jìn)行智能分析，屬于人工智能在語(yǔ)言研究和教學(xué)中的應(yīng)用，研究涉及翻譯、詞匯、口語(yǔ)、語(yǔ)法、語(yǔ)義網(wǎng)絡(luò)以及寫(xiě)作等。智能導(dǎo)師系統(tǒng)在英語(yǔ)教學(xué)中的應(yīng)用主要在口語(yǔ)和寫(xiě)作兩方面?？谡Z(yǔ)主要是機(jī)器人模擬人類陪學(xué)習(xí)者聊天，但是智能性還不夠。寫(xiě)作方面主要體現(xiàn)在對(duì)作文進(jìn)行智能批改，提供修改建議。

智能導(dǎo)師系統(tǒng)在寫(xiě)作方面的研究進(jìn)展較快。智能寫(xiě)作評(píng)價(jià)系統(tǒng)對(duì)學(xué)生提交的作文通過(guò)多個(gè)維度進(jìn)行智能批改，指出學(xué)生作文存在的問(wèn)題。早期的系統(tǒng)如 Project Essay Grade （PEG），通過(guò)對(duì)一篇文章語(yǔ)言特征的分析來(lái)評(píng)估作文的水平。[4]后來(lái)的E-rater IntelliMetric 等則增加了對(duì)語(yǔ)篇內(nèi)容和結(jié)構(gòu)的分析，功能有所提升。Intelligent Essay Assessor 則更多關(guān)注對(duì)文章思想內(nèi)容的評(píng)估。[5]由以上評(píng)分引擎衍生的寫(xiě)作自動(dòng)評(píng)價(jià)系統(tǒng)（如My Access、Criterion、Writing Roadmap、Write to Learn、冰果英語(yǔ)、體驗(yàn)英語(yǔ)和批改網(wǎng)等）不僅提供作文總分，還包含內(nèi)容、組織、語(yǔ)體、詞匯和語(yǔ)法以及格式規(guī)范單項(xiàng)分與個(gè)性化反饋。寫(xiě)作自動(dòng)評(píng)價(jià)系統(tǒng)已經(jīng)取得了長(zhǎng)足進(jìn)展，其功能正在逐漸滿足英語(yǔ)寫(xiě)作教學(xué)與評(píng)價(jià)的需求。但是個(gè)性化反饋能力還是有限。基于此，我國(guó)研究者依托云計(jì)算和Web 2.0 強(qiáng)大功能，結(jié)合中國(guó)學(xué)習(xí)者特點(diǎn)自主研發(fā)的句酷批改網(wǎng)實(shí)現(xiàn)了頁(yè)面按句點(diǎn)評(píng)的功能，以及修改提示等功能，使得智能化寫(xiě)作教學(xué)質(zhì)量有了進(jìn)一步的提升。

Criterion 是美國(guó)教育測(cè)試服務(wù)中心（Education Testing Service）的分支機(jī)構(gòu)ETS科技公司所研發(fā)的線上英文練習(xí)系統(tǒng)（Online English Writing Practice）。采用TOEFL、GRE等考試的類似的整體評(píng)分（Holistic Scoring）原則，學(xué)生提交作文后20秒內(nèi)給出整體性獎(jiǎng)勵(lì)分以及分析報(bào)告。中國(guó)自主研發(fā)的批改網(wǎng)和Criterion功能類似，但是在某些方面更具便捷性，而且在某些方面具有獨(dú)創(chuàng)性。其他軟件/平臺(tái)由于功能相比較而言稍有欠缺，在文中不作贅述。

三、句酷批改網(wǎng)簡(jiǎn)介及其原理概述

（一）句酷批改網(wǎng)簡(jiǎn)介

句酷批改網(wǎng)（簡(jiǎn)稱“批改網(wǎng)”）是一款基于語(yǔ)料庫(kù)和云計(jì)算的英語(yǔ)作文自動(dòng)批改在線服務(wù)系統(tǒng)，通過(guò)計(jì)算學(xué)生作文和標(biāo)準(zhǔn)語(yǔ)料庫(kù)之間的距離即時(shí)生成學(xué)生作文的得分、評(píng)語(yǔ)以及內(nèi)容分析結(jié)果，學(xué)生根據(jù)批改網(wǎng)的提示自主修改作文，多次提交，直至達(dá)到滿意程度為止，通過(guò)這種方式幫助學(xué)生提升寫(xiě)作能力。提示分為宏觀提示和微觀提示，宏觀提示主要給學(xué)生給出整體評(píng)價(jià)，微觀提示則是逐句提示。

句酷批改網(wǎng)通過(guò)“內(nèi)容相關(guān)、篇章結(jié)構(gòu)、句子、詞組搭配、詞匯和流暢度”等六個(gè)維度對(duì)學(xué)生的作文進(jìn)行全面智能評(píng)價(jià)，并給教師和學(xué)生提供 “按句點(diǎn)評(píng)”、“按段點(diǎn)評(píng)”、“學(xué)生互評(píng)”、“論壇”等功能，供師生在系統(tǒng)智能評(píng)價(jià)基礎(chǔ)上進(jìn)行人工評(píng)價(jià)，確保評(píng)價(jià)的準(zhǔn)確性?！鞍淳潼c(diǎn)評(píng)”內(nèi)容包括“句子錯(cuò)誤”提示、“拼寫(xiě)錯(cuò)誤”提示、“疑似中式英語(yǔ)低頻警示”、“學(xué)習(xí)提示”、“批改提示”、“高分短語(yǔ)”、“搭配統(tǒng)計(jì)”和“語(yǔ)法檢查”等，系統(tǒng)完成按句點(diǎn)評(píng)后，學(xué)生根據(jù)系統(tǒng)的提示完善自己的作文直至滿意，然后接受“教師點(diǎn)評(píng)”或者“同伴互評(píng)”。教師點(diǎn)評(píng)對(duì)學(xué)生的自主寫(xiě)作訓(xùn)練給予了極大的支持，在功能設(shè)置（特別是網(wǎng)頁(yè)界面設(shè)計(jì)）方面更適合我國(guó)學(xué)生的學(xué)習(xí)特點(diǎn)。

學(xué)生提交作文后，批改網(wǎng)開(kāi)始對(duì)學(xué)生的作文實(shí)時(shí)進(jìn)行“按句點(diǎn)評(píng)”，并對(duì)作文進(jìn)行評(píng)分（含“總分”、“詞匯分”、“句子分”、“篇章結(jié)構(gòu)分”和“內(nèi)容相關(guān)分”以及評(píng)語(yǔ)），給出“句酷提示”和“體檢報(bào)告”（如圖2所示）。其中“作文評(píng)分”和“按句點(diǎn)評(píng)”功能對(duì)學(xué)生完善作文非常重要，批改網(wǎng)通過(guò)這兩個(gè)欄目指出學(xué)生作文存在的問(wèn)題，學(xué)生依據(jù)提示完善作文并提交，系統(tǒng)再次進(jìn)行批改，學(xué)生再次完善并提交，如此重復(fù)直至作文達(dá)到最佳狀態(tài)。

（二）批改原理

批改網(wǎng)將學(xué)生作文視為一個(gè)學(xué)習(xí)者語(yǔ)料（Learner Corpus），每篇作文的成績(jī)由 192 個(gè)子維度構(gòu)成，通過(guò)對(duì)比學(xué)生的作文和標(biāo)準(zhǔn)語(yǔ)料庫(kù)，將測(cè)量出來(lái)的距離通過(guò)映射轉(zhuǎn)化成學(xué)生作文的分?jǐn)?shù)、評(píng)語(yǔ)和反饋。整個(gè)學(xué)生作文的批改過(guò)程就像一個(gè)教師從多個(gè)維度對(duì)學(xué)生的作文進(jìn)行批改，給出一個(gè)整體反饋，并進(jìn)行“按句點(diǎn)評(píng)”，指出每個(gè)句子存在的問(wèn)題，同時(shí)該系統(tǒng)基于Web2.0，支持教師通過(guò)網(wǎng)絡(luò)在線批改學(xué)生作文，教師在系統(tǒng)提示的基礎(chǔ)上進(jìn)行進(jìn)一步的批改。

在圖3中，“語(yǔ)料庫(kù)”相當(dāng)于智能導(dǎo)師系統(tǒng)的“專家模塊”、“作文”等同于智能導(dǎo)師系統(tǒng)“學(xué)生模型”，“評(píng)語(yǔ)”、“句評(píng)”和“分?jǐn)?shù)”相當(dāng)于智能導(dǎo)師系統(tǒng)“教師模型”。192個(gè)維度（如圖4所示）相當(dāng)于智能導(dǎo)師系統(tǒng)“診斷規(guī)則”。學(xué)生提交作文后，系統(tǒng)自動(dòng)通過(guò)192個(gè)維度“診斷規(guī)則”將學(xué)生作文與專家模塊目標(biāo)語(yǔ)“語(yǔ)料庫(kù)”進(jìn)行匹配，打出相應(yīng)的作文分?jǐn)?shù)，給出相應(yīng)的評(píng)語(yǔ)，并將學(xué)生的作文進(jìn)行逐句分析，指出問(wèn)題所在。

批改網(wǎng)打分引擎是綜合自然語(yǔ)言處理技術(shù)、語(yǔ)料庫(kù)分析技術(shù)和教育測(cè)量技術(shù)研發(fā)的英語(yǔ)作文自動(dòng)打分系統(tǒng)，該系統(tǒng)能夠自動(dòng)提取作文中反映英語(yǔ)寫(xiě)作水平的數(shù)據(jù)指標(biāo)。

目前批改網(wǎng)有15個(gè)不同類別的語(yǔ)料庫(kù)，其中語(yǔ)段庫(kù)有33億個(gè)，而且所使用的語(yǔ)料庫(kù)進(jìn)行每天更新。[6]然后學(xué)生通過(guò)“完善作文”的功能，按照“逐句分析”的批改提示對(duì)文章進(jìn)行修改，修改完成后再次向系統(tǒng)提交作文，系統(tǒng)再次進(jìn)行即時(shí)分析，通過(guò)“按句點(diǎn)評(píng)”給出修改建議，如此反復(fù)，指導(dǎo)學(xué)生進(jìn)行寫(xiě)作，直至最好。在整個(gè)寫(xiě)作批改過(guò)程中，批改網(wǎng)扮演著一個(gè)寫(xiě)作教師的角色，是一個(gè)比較典型的智能導(dǎo)師系統(tǒng)。

批改網(wǎng)對(duì)學(xué)生的作文進(jìn)行批改時(shí)參考了篇章結(jié)構(gòu)、詞匯、句子等子維度，然后在子維度下又有更低一層的子維度，如類型比ttr、平均詞長(zhǎng)、平均詞長(zhǎng)均差、平均句長(zhǎng)以及學(xué)術(shù)詞匯所占比例等維度。通過(guò)分析學(xué)生作文的這些屬性并與標(biāo)準(zhǔn)語(yǔ)料庫(kù)進(jìn)行對(duì)比后得出相應(yīng)的成績(jī)和批改提示。

（三）智能批改實(shí)例分析

1. 系統(tǒng)按句點(diǎn)評(píng)

學(xué)生作文一旦提交，批改網(wǎng)會(huì)即時(shí)給出批改結(jié)果（圖2右側(cè)），以及逐句點(diǎn)評(píng)結(jié)果（圖4），學(xué)生通過(guò)處理系統(tǒng)提出的諸如“句子錯(cuò)誤”、“低頻警示”、“批改提示”、“學(xué)習(xí)提示”等問(wèn)題完善作文，系統(tǒng)會(huì)詳細(xì)記錄下學(xué)生根據(jù)批改網(wǎng)的提示每次進(jìn)行修改的痕跡。圖2左下角“提交次數(shù)17”說(shuō)明該學(xué)生按照系統(tǒng)提示對(duì)本篇作文進(jìn)行了16次的修改?；诖?，學(xué)生可以在批改網(wǎng)的提示下不斷完善作文，最終提高自己的寫(xiě)作水平。

2. 教師在線點(diǎn)評(píng)

批改網(wǎng)基于Web2.0平臺(tái)，支持評(píng)論功能，教師點(diǎn)評(píng)的內(nèi)容可以即時(shí)出現(xiàn)在網(wǎng)絡(luò)上供學(xué)生查閱。教師只要點(diǎn)擊每個(gè)句子末尾的“點(diǎn)評(píng)”即可對(duì)這句話進(jìn)行點(diǎn)評(píng)，可以對(duì)學(xué)生的作文作出更好的評(píng)判。如系統(tǒng)對(duì)這句錯(cuò)誤句子沒(méi)有識(shí)別出來(lái)，這時(shí)候老師可以幫助系統(tǒng)指出這個(gè)句子的問(wèn)題，這是批改網(wǎng)非常重要的組成部分。國(guó)外開(kāi)發(fā)的系統(tǒng)中Criterion亦實(shí)現(xiàn)了教師和學(xué)生按句點(diǎn)評(píng)，但是在原文中“插入”批注的形式進(jìn)行點(diǎn)評(píng)的，顯得不夠直觀。

3. 學(xué)生修改作文的痕跡

由于系統(tǒng)會(huì)詳細(xì)記錄學(xué)生每次修改作文的痕跡，教師和學(xué)生均可以對(duì)每次修改的內(nèi)容進(jìn)行對(duì)比（系統(tǒng)自動(dòng)提供最近兩個(gè)版本的作文的對(duì)比，要對(duì)比更多的版本，需要學(xué)生或者老師手工對(duì)照），圖5是學(xué)生對(duì)作文的第一次修改痕跡，從圖上可以清楚看出學(xué)生在寫(xiě)作過(guò)程中對(duì)內(nèi)容的處理情況。圖中灰色部分為刪除內(nèi)容，黃色為修改增加內(nèi)容。

4. 成績(jī)軌跡

系統(tǒng)除了提供每次學(xué)生根據(jù)批改提示進(jìn)行修改作文的痕跡外，系統(tǒng)同樣提供每次修改后學(xué)生的成績(jī)痕跡（如圖6所示）。從圖6上可以形象直觀地看出學(xué)生的作文進(jìn)步情況。該同學(xué)的成績(jī)由剛開(kāi)始的72.5分，經(jīng)過(guò)系統(tǒng)智能批改和學(xué)生自主修改后，最終成績(jī)提升到了82分。

5. 機(jī)器學(xué)習(xí)功能

批改網(wǎng)通過(guò)收集全國(guó)教師的反饋（含報(bào)錯(cuò)）并及時(shí)處理這些反饋意見(jiàn)，使系統(tǒng)的功能得以日趨完善。全國(guó)用戶把使用過(guò)程中發(fā)現(xiàn)的問(wèn)題通過(guò)批改網(wǎng)論壇的報(bào)錯(cuò)功能及時(shí)提供給批改網(wǎng)官方，官方會(huì)第一時(shí)間處理這些問(wèn)題，并把處理結(jié)果寫(xiě)入系統(tǒng)，完成一輪系統(tǒng)學(xué)習(xí)，避免再犯類似錯(cuò)誤?；诖耍木W(wǎng)的機(jī)器學(xué)習(xí)能力非常強(qiáng)大，遙遙領(lǐng)先于其他類似產(chǎn)品。例如，當(dāng)教師發(fā)現(xiàn)學(xué)生作文中使用了“Before you go to bed， you should close the light.”，那么如果有老師指出“close the light”這個(gè)用法是錯(cuò)誤的，并給出建議“表達(dá)關(guān)燈需要使用固定搭配 turn off the light”后，批改網(wǎng)會(huì)記錄和學(xué)習(xí)老師的本次批改經(jīng)驗(yàn)，并將該知識(shí)點(diǎn)添加至系統(tǒng)知識(shí)庫(kù)中，從而使得千千萬(wàn)萬(wàn)個(gè)使用批改網(wǎng)的學(xué)生從中受益。接下來(lái)，任何使用批改網(wǎng)的學(xué)生如果使用了“close the light”、“close the desk light”甚至“the light will be closed”等類似用法，則批改網(wǎng)可以識(shí)別這些錯(cuò)誤用法，并提供修改建議。

6. 優(yōu)秀作文共享功能及論壇功能

目前國(guó)內(nèi)外開(kāi)發(fā)的所有智能寫(xiě)作批改系統(tǒng)中只有批改網(wǎng)具有優(yōu)秀作文共享的功能，而該功能對(duì)提升同伴寫(xiě)作水平非常重要。以Writing Roadmap為例，學(xué)生“不能及時(shí)了解自己與優(yōu)秀作文之間的差距”。[7]批改網(wǎng)提供的教師個(gè)人網(wǎng)站具有“最新作文”、“優(yōu)秀作文”和“共享文檔”等三大功能，學(xué)生可以通過(guò)訪問(wèn)教師的個(gè)人網(wǎng)站直接進(jìn)入寫(xiě)作平臺(tái)開(kāi)始寫(xiě)作，學(xué)生也可以通過(guò)教師推薦的“優(yōu)秀作文”查閱每一次教師布置的同一主題作文中最優(yōu)秀的作文，供學(xué)生相互借鑒。學(xué)生可以通過(guò)“共享文檔”下載教師提供的資源。這個(gè)功能解決了國(guó)外智能寫(xiě)作批改系統(tǒng)（即使是功能最強(qiáng)大的Criterion）也無(wú)法共享優(yōu)秀作文的弊端。

批改網(wǎng)建立了自己的寫(xiě)作論壇（http：//bbs.pigai.org/），供同學(xué)們?cè)谡搲辖涣鲗?xiě)作訓(xùn)練心得與體會(huì)，教師可以參與其中對(duì)學(xué)生寫(xiě)作進(jìn)行宏觀指導(dǎo)。該平臺(tái)收集了國(guó)內(nèi)外所有重要寫(xiě)作考試的信息及相關(guān)訓(xùn)練，如雅思，GRE，托福，SAT等國(guó)外考試和國(guó)內(nèi)公共英語(yǔ)四級(jí)、六級(jí)，專業(yè)英語(yǔ)四級(jí)、八級(jí)、PETS以及考研作文等模塊。目前有會(huì)員831400人（截至2013年1月23日），帖子158030個(gè)。

四、效度分析

效度（Validity）即有效性，它是指測(cè)量工具或手段能夠準(zhǔn)確測(cè)出所需測(cè)量的事物的程度。效度是指所測(cè)量到的結(jié)果反映所想要考察內(nèi)容的程度，測(cè)量結(jié)果與要考察的內(nèi)容越吻合，則效度越高；反之，則效度越低。

從定性的角度來(lái)看，為了測(cè)試句酷批改網(wǎng)對(duì)學(xué)生作文的批改效度，作者將句酷批改網(wǎng)批改結(jié)果和美國(guó)Writing Roadmap的批改結(jié)果（如圖7所示）進(jìn)行了對(duì)比。Writing Roadmap批改的總分為4.0分（滿分選擇5分制標(biāo)準(zhǔn)，中國(guó)百分制為80分，下同），結(jié)構(gòu)4.2分（84分）、發(fā)展3.3分（66分）、句子結(jié)構(gòu)5.0分（100分）、詞匯選擇和語(yǔ)法運(yùn)用3.3分（66分）、寫(xiě)作規(guī)范3.3分（66分）。盡管單項(xiàng)分評(píng)分標(biāo)準(zhǔn)不同，但是兩個(gè)系統(tǒng)對(duì)學(xué)生作文批改的總分卻基本相同，句酷批改網(wǎng)的分?jǐn)?shù)為82分，Writing Roadmap 批改的結(jié)果是80分（即4.0分），這說(shuō)明兩者在對(duì)學(xué)生同一篇作文的評(píng)定的吻合度非常高。

研究者對(duì)學(xué)生的作文從內(nèi)容、篇章結(jié)構(gòu)和句子結(jié)構(gòu)、詞匯運(yùn)用等方面進(jìn)行批改，得到與網(wǎng)絡(luò)批改結(jié)果基本一致的成績(jī)。不過(guò)，教師在批改過(guò)程中發(fā)現(xiàn)了幾處沒(méi)有被計(jì)算機(jī)發(fā)現(xiàn)的語(yǔ)言錯(cuò)誤。如“As is known to us， different people have the different stories”在此句話中出現(xiàn)定冠詞the的濫用明顯錯(cuò)誤，此處由于有了different 修飾限定stories，the是不應(yīng)該出現(xiàn)的。不在此一一列出。

五、存在問(wèn)題分析

自本世紀(jì)初，隨著寫(xiě)作自動(dòng)評(píng)價(jià)系統(tǒng)功能的進(jìn)一步開(kāi)發(fā)，有關(guān)系統(tǒng)在課堂教學(xué)中的應(yīng)用研究也逐漸開(kāi)展起來(lái)。研究表明，寫(xiě)作評(píng)價(jià)系統(tǒng)對(duì)于學(xué)生語(yǔ)言錯(cuò)誤的糾正起到了一定的積極作用，[8]但是教師對(duì)于寫(xiě)作評(píng)價(jià)系統(tǒng)的定位以及如何將評(píng)價(jià)系統(tǒng)使用到教學(xué)中認(rèn)識(shí)不清。[9]國(guó)內(nèi)近年來(lái)有學(xué)者關(guān)注寫(xiě)作評(píng)價(jià)系統(tǒng)在教學(xué)中的應(yīng)用，[10] [11]但關(guān)注重點(diǎn)仍然在于評(píng)價(jià)系統(tǒng)對(duì)學(xué)生寫(xiě)作能力的影響。[12]

上述討論的寫(xiě)作自動(dòng)評(píng)價(jià)系統(tǒng)批改作文的過(guò)程畢竟是由電腦完成的，而非由具有主觀能動(dòng)性的人完成的，計(jì)算機(jī)可以模仿教師對(duì)作文進(jìn)行批改，但機(jī)器批改畢竟建立在預(yù)先設(shè)定的程序上，機(jī)械性是其最大特點(diǎn)，無(wú)法靈活處理一些特殊語(yǔ)言現(xiàn)象。再加上，語(yǔ)言本身的特殊性和靈活性，批改網(wǎng)批改作文的結(jié)果可以無(wú)限接近人批改的結(jié)果，但不可能完全一致。作為智能導(dǎo)師系統(tǒng)，批改網(wǎng)目前仍然存在很多問(wèn)題。

（一）無(wú)法判斷內(nèi)容錯(cuò)誤

批改網(wǎng)像其他寫(xiě)作自動(dòng)評(píng)價(jià)系統(tǒng)一樣，目前還無(wú)法判斷學(xué)生的作文是不是按照要求寫(xiě)的，包括Summary寫(xiě)作，有一個(gè)學(xué)生寫(xiě)了一篇完全無(wú)關(guān)的Summary，但是系統(tǒng)并沒(méi)有識(shí)別出來(lái)，而是給了86分的高分。批改網(wǎng)目前也無(wú)法識(shí)別“The moon is cooking in the kitchen for my husband”（月亮正在廚房給我丈夫做飯），由于該句子在語(yǔ)法上是正確的，所以系統(tǒng)直接給了高分而不會(huì)進(jìn)行辯證思維“月亮怎么會(huì)在廚房給我丈夫做飯呢？”故批改網(wǎng)目前還無(wú)法從語(yǔ)義上判斷句子是否正確。

此外，盡管批改網(wǎng)聲稱能夠檢測(cè)學(xué)生是否跑題，但對(duì)于跑題的作文，只檢測(cè)，不扣分。但作者測(cè)試發(fā)現(xiàn)，無(wú)論你寫(xiě)什么題目，只要語(yǔ)言沒(méi)有問(wèn)題，都能拿80多的高分。批改網(wǎng)目前通過(guò)“內(nèi)相關(guān)和外相關(guān)”來(lái)檢測(cè)作文是否“跑題”，內(nèi)相關(guān)就是句子之間是否相關(guān)，外相關(guān)就是學(xué)生作文和教師給的范文相關(guān)程度，就是教師在布置作文時(shí)，同時(shí)提供范文（作文期間，學(xué)生不可見(jiàn)），目的一方面是讓學(xué)生在截止時(shí)間后，看到教師提供的范文，可以自動(dòng)學(xué)習(xí)，另一方面是幫助系統(tǒng)識(shí)別“跑題”。

（二）指出了問(wèn)題所在，但無(wú)法提供正確示例

批改網(wǎng)能夠指出學(xué)生作文中的“疑似中式英語(yǔ)”（有時(shí)候不是很準(zhǔn)確），但是目前還無(wú)法提供修改方法，學(xué)生知道某個(gè)句子是中式英語(yǔ)，但是還沒(méi)有辦法得到修改建議。作者進(jìn)行訪談時(shí)發(fā)現(xiàn)學(xué)生希望批改網(wǎng)能夠提供修改建議，也有學(xué)生指出“在詞匯連接上需要改進(jìn)，搜索引擎不夠智能、不夠人性化，不能進(jìn)行交流”。部分學(xué)生則反映批改網(wǎng)“沒(méi)有根據(jù)作文的具體內(nèi)容進(jìn)行評(píng)價(jià)和提出修改意見(jiàn)”。

批改網(wǎng)在全國(guó)教師的支持下建成了中國(guó)學(xué)生寫(xiě)作“常見(jiàn)錯(cuò)誤庫(kù)”，這是英語(yǔ)寫(xiě)作智能導(dǎo)師系統(tǒng)在中國(guó)語(yǔ)言環(huán)境下的又一創(chuàng)新之處，是任何一家國(guó)外軟件無(wú)法比擬的。系統(tǒng)通過(guò)學(xué)習(xí)這些常見(jiàn)錯(cuò)誤，強(qiáng)化自身的功能，逐步給學(xué)生提供更加完善的修改建議。

（三）部分嚴(yán)重語(yǔ)法錯(cuò)誤識(shí)別不了

作者在使用中發(fā)現(xiàn)，只要學(xué)生作文的句子結(jié)構(gòu)正確，有時(shí)候系統(tǒng)是無(wú)法正確識(shí)別學(xué)生用詞錯(cuò)誤的。這和作者談到的局限性的第一條有點(diǎn)類似，該缺陷會(huì)是致命的，它會(huì)引導(dǎo)學(xué)生按錯(cuò)誤的方式修改自己的文章，這樣會(huì)對(duì)提升學(xué)生寫(xiě)作質(zhì)量具有負(fù)面作用，在這種情況下就需要教師的在線點(diǎn)評(píng)了。

“Whether should the college life mapping out their future， the student's viewpoint is differently. Some students think that there should be a clear goal and brace ourselves for future， to prepare the challenges in the future. Others don't think too much about the future， because of the uncertainty of the future.”

上面這段話錯(cuò)誤百出，第一句的正確句型應(yīng)該是Whether should sb （a certain person） do sth，sb’s viewpoint differs，但是系統(tǒng)并沒(méi)有把錯(cuò)誤句型識(shí)別出來(lái)。第二個(gè)句子句型結(jié)構(gòu)顯然正確，但是用詞錯(cuò)誤，而批改網(wǎng)并沒(méi)有識(shí)別出來(lái)，這使得有些教師不敢用批改網(wǎng)。

（四）在邏輯和篇章結(jié)構(gòu)上功能有待加強(qiáng)

由于批改網(wǎng)評(píng)斷學(xué)生作文好壞的標(biāo)準(zhǔn)主要集中在語(yǔ)言本身，故學(xué)生作文的邏輯和篇章結(jié)構(gòu)對(duì)成績(jī)的影響還不是很大。作者曾經(jīng)將一篇《紐約時(shí)報(bào)》的文章節(jié)選3段交由批改網(wǎng)系統(tǒng)評(píng)判，第一次提交和原文保持一致（以三段的形式提交），批改網(wǎng)給出的成績(jī)是84.5，第二次提交改為兩段，提交后成績(jī)?yōu)?5分，第三次整合為一段，提交后成績(jī)?yōu)?4分。盡管系統(tǒng)的192個(gè)評(píng)判維度涉及了段落數(shù)，而且給出了3～5段的范圍值，但是在最后給分時(shí)體現(xiàn)并不明顯。三次不同段落結(jié)構(gòu)方式得出的成績(jī)差距在0.5分左右。不管怎么說(shuō)，該系統(tǒng)的功能在篇章結(jié)構(gòu)上還是稍有體現(xiàn)，但是在文章的邏輯結(jié)構(gòu)上就沒(méi)有任何體現(xiàn)了。

六、結(jié) 論

毫無(wú)疑問(wèn)，批改網(wǎng)是智能導(dǎo)師系統(tǒng)在高等教育中大規(guī)模應(yīng)用的典型，全國(guó)已有近200所大學(xué)數(shù)萬(wàn)學(xué)生在正式使用批改網(wǎng)進(jìn)行寫(xiě)作訓(xùn)練，還有很多院校的學(xué)生正在試用該系統(tǒng)。該系統(tǒng)也已經(jīng)上線了手機(jī)版終端和平板版終端，廣大師生已經(jīng)在該系統(tǒng)中獲益匪淺。排除自身具備的弊端，批改網(wǎng)是智能導(dǎo)師系統(tǒng)教學(xué)實(shí)踐的一大進(jìn)步。

（1） 批改網(wǎng)能夠進(jìn)行智能批改作文，并提出部分建議，學(xué)生根據(jù)建議完善自己的作文，該環(huán)節(jié)已經(jīng)代替了教師的部分教學(xué)工作。

（2）批改網(wǎng)支持系統(tǒng)自動(dòng)批閱和教師人工批閱的完美結(jié)合，打破以往機(jī)器批閱和人工批閱無(wú)法整合的弊端，取兩者之長(zhǎng)，優(yōu)勢(shì)互補(bǔ)，為混合式寫(xiě)作教學(xué)搭建了完美平臺(tái)。

（3）批改網(wǎng)實(shí)現(xiàn)了優(yōu)秀作文共享。通過(guò)批改網(wǎng)提供的教師個(gè)人網(wǎng)站，實(shí)現(xiàn)了優(yōu)秀作文和精批改作文的共享，使同伴學(xué)習(xí)變得非常便捷。

此外，批改網(wǎng)可以同時(shí)承擔(dān)部分英譯漢教學(xué)任務(wù)，學(xué)生把自己的翻譯結(jié)果錄入批改網(wǎng)，批改網(wǎng)仍然會(huì)進(jìn)行按句點(diǎn)評(píng)，翻譯內(nèi)容越長(zhǎng)，效果越好。句酷批改網(wǎng)可以幫助學(xué)生養(yǎng)成反復(fù)修改作文的習(xí)慣，在關(guān)注學(xué)習(xí)結(jié)果的同時(shí)，關(guān)注學(xué)習(xí)過(guò)程，強(qiáng)化智能導(dǎo)師系統(tǒng)指導(dǎo)下的形成性評(píng)估。

但機(jī)器畢竟是機(jī)器，由于語(yǔ)言自身的靈活性和發(fā)展性，在使用的過(guò)程中會(huì)出現(xiàn)各種程序無(wú)法識(shí)別的錯(cuò)誤，這就需要教師的親力親為，給學(xué)生指點(diǎn)迷津。同時(shí)這些都預(yù)示著智能導(dǎo)師系統(tǒng)在教學(xué)中的定位仍然是輔助教與學(xué)，系統(tǒng)不能取代教師，教師仍是教學(xué)的主導(dǎo)。將智能批改技術(shù)融入寫(xiě)作教學(xué)，為教學(xué)服務(wù)，仍然需要教師將課堂講授和在線寫(xiě)作訓(xùn)練進(jìn)行有機(jī)的結(jié)合，避其弊端，發(fā)揮兩者的優(yōu)勢(shì)，不能過(guò)分依靠英語(yǔ)寫(xiě)作智能導(dǎo)師系統(tǒng)。

[參考文獻(xiàn)]

[1] [2] [3] 何克抗，李文光. 教育技術(shù)學(xué)[M]. 北京：北京師范大學(xué)出版社，2005：245，246，247.

[4] [5] M.D. Shermis J.C. Burstein （Eds.）. Automated Essay.Scoring and Annotation of Essays with the Intelligent Essay Assessor[M]. NJ： Lawrence Erlbaum， 2003：43～54，87～112.

[6] 批改網(wǎng)論壇.批改網(wǎng)使用常見(jiàn)問(wèn)題——學(xué)生篇.[DB/OL].（2012-3-13）[2013-5-16]. http：//bbs.pigai.org/forum.php？mod=viewthreadtid=1031reltid=13174pre_thread_id=0pre_pos=3ext=.

[7] [8] Attali， Y.. Exploring the Feedback and Revision Features of Criterion [C]. Paper Presented at the Meeting of the National Council on Measurement in Education （NCME）， San Diego，CA，2004.

[9] Warschauer，M. Grimes， D.. Automated Writing Assessment in the Classroom [J].Pedagogies：An International Journal， 2008，（3）：22～36.

[10] 王淑雯. 如何利用Writing Roadmap 2.0 進(jìn)行在線英語(yǔ)寫(xiě)作反饋[J]. 現(xiàn)代教育技術(shù)，2011，（3）：76～81.

[11] 周穎. 在線形成性評(píng)價(jià)工具在英語(yǔ)寫(xiě)作中的應(yīng)用——困難及對(duì)策探究[J].現(xiàn)代教育技術(shù)，2011，（9）：88～93.

[12] 蔣學(xué)清，蔡靜，唐錦蘭. 探析自動(dòng)作文評(píng)價(jià)系統(tǒng)對(duì)大學(xué)生英語(yǔ)寫(xiě)作能力發(fā)展的影響[J].山東外語(yǔ)教學(xué)，2011，（6）：36～43.