(上海海事職業(yè)技術(shù)學(xué)院,上海 200120)
航海英語聽力會(huì)話評(píng)估項(xiàng)目已經(jīng)實(shí)施多年,隨著STCW公約馬尼拉修正案的生效,以及隨后的一些履約文件的實(shí)施,對(duì)船員的航海英語水平的要求也隨之提高,因此提高航海英語聽力和會(huì)話網(wǎng)上閱卷系統(tǒng)的科學(xué)性就顯得更加重要。
航海英語會(huì)話網(wǎng)上閱卷系統(tǒng)(以下簡(jiǎn)稱“系統(tǒng)”)的網(wǎng)絡(luò)環(huán)境為局域網(wǎng)(LAN)??忌诳荚嚨倪^程中將三個(gè)部分的答案通過“系統(tǒng)”錄音設(shè)備錄制然后存儲(chǔ)在電腦中。待所有考生考試完畢,每位評(píng)估員使用自己的登錄名和密碼登錄“系統(tǒng)”中的評(píng)估頁(yè)面,待考卷下載完畢后,“系統(tǒng)”即自動(dòng)地將考生存儲(chǔ)在電腦中的答案隨機(jī)地分發(fā)給聯(lián)機(jī)在“系統(tǒng)”服務(wù)器上的各評(píng)估員終端,供評(píng)估員評(píng)閱。
1.航海英語會(huì)話網(wǎng)上閱卷系統(tǒng)的優(yōu)點(diǎn)
航海英語聽力會(huì)話評(píng)估項(xiàng)目已經(jīng)實(shí)施多年,它是評(píng)估船員英語水平的一個(gè)重要項(xiàng)目,經(jīng)多次改版升級(jí),英語評(píng)估系統(tǒng)在版面設(shè)計(jì)、題目難度和主觀題評(píng)判方式方面日趨成熟。其中的會(huì)話考試部分,利用計(jì)算機(jī)網(wǎng)絡(luò)存儲(chǔ)考生的答題錄音,并由評(píng)估員對(duì)考試錄音進(jìn)行評(píng)判。該系統(tǒng)的實(shí)施大大提高了閱卷的公正性。
(1)對(duì)閱卷行為的實(shí)時(shí)監(jiān)控[1]
“系統(tǒng)”自動(dòng)隱藏了所有考生的真實(shí)身份,而且評(píng)估員批閱的只是考生總共12道題目中的隨機(jī)的某幾道題目,此種做法能夠更好地體現(xiàn)公平公正的原則。評(píng)估員的閱卷過程經(jīng)歷了以下的幾個(gè)步驟:
① 評(píng)估員的自我實(shí)時(shí)監(jiān)督
這種監(jiān)督建立在“系統(tǒng)”自動(dòng)對(duì)評(píng)估員所評(píng)出分?jǐn)?shù)的統(tǒng)計(jì)分析基礎(chǔ)上。在閱卷過程中,評(píng)估員本人只需輕擊鼠標(biāo)就能在自己的終端屏幕分?jǐn)?shù)一欄給出該題的分?jǐn)?shù),在點(diǎn)擊確定之前,還能對(duì)自己給出的評(píng)判作出修改。如果給出的分?jǐn)?shù)在該題的范圍之外,“系統(tǒng)”會(huì)在屏幕上進(jìn)行提示,以便評(píng)估員修正。
② 評(píng)估員之間的相互修正
在評(píng)判有疑問的情況下,評(píng)估員可以通過自發(fā)的相互討論的方式,對(duì)所給出的分?jǐn)?shù)進(jìn)行重新評(píng)判。
網(wǎng)上閱卷提高了效率,隨機(jī)分發(fā)試卷增加了考試評(píng)判的公正性。
(2)對(duì)評(píng)估員的質(zhì)量控制
首先,海事局對(duì)學(xué)院選派的相關(guān)的教師進(jìn)行資格審批,以確保閱卷工作的質(zhì)量。在閱卷過程中,評(píng)估員也會(huì)遵循海事局編制的《適任評(píng)估大綱和規(guī)范》,對(duì)不確定的題目分值相互之間進(jìn)行討論以取得公正的評(píng)判。
2.航海英語會(huì)話網(wǎng)上閱卷系統(tǒng)存在的缺陷
雖然“系統(tǒng)”擁有以上諸多優(yōu)點(diǎn),但筆者發(fā)現(xiàn)該“系統(tǒng)”仍存在一些缺陷。
(1)航海英語口語考試的評(píng)分標(biāo)準(zhǔn)
整個(gè)會(huì)話考試共有三個(gè)部分,即朗讀題、口述題和回答問題。評(píng)估的要素分別為發(fā)音、朗讀流利程度、內(nèi)容、語法等。評(píng)分的標(biāo)準(zhǔn)如表1所示。
在這些評(píng)分標(biāo)準(zhǔn)中,只是給了評(píng)估員一個(gè)大概的分值范圍,沒有具體的評(píng)分說明。所以在評(píng)估過程中,不同專業(yè)背景的評(píng)估員給出的分?jǐn)?shù)會(huì)差別很大。如果是英語專業(yè)教師的評(píng)估員,在評(píng)估的過程中,他不僅會(huì)對(duì)考生回答的內(nèi)容作出評(píng)判,而且還會(huì)考慮到考生的發(fā)音和回答的句子的完整性,如此,考生的分?jǐn)?shù)就不會(huì)很高;如果是專業(yè)教師的評(píng)估員,在評(píng)估的過程中,他往往更加注重考生回答的關(guān)鍵詞,這樣給出的分?jǐn)?shù)也相對(duì)會(huì)高一些。而且還存在著同一位評(píng)估員在評(píng)分的過程中,連續(xù)數(shù)次對(duì)不同考生相同的題目給出相同的分?jǐn)?shù)的情況。所以在評(píng)估之前對(duì)評(píng)估員進(jìn)行評(píng)判培訓(xùn)尤其顯得重要。
表1 航海英語評(píng)估會(huì)話部分評(píng)估要素及評(píng)估標(biāo)準(zhǔn)[2]
例如,在回答問題里有這樣一道題:Can you list some restricted areas on board? 可能有各種各樣答案,有的學(xué)生會(huì)說:Yes, I can.像這樣的情況,不同的評(píng)估員給出的分?jǐn)?shù)也會(huì)不一樣,具備英語專業(yè)背景的評(píng)估員會(huì)覺得這個(gè)回答不正確,只能在0~2分的分值范圍內(nèi)給分;而具備專業(yè)背景的評(píng)估員可能給的分?jǐn)?shù)會(huì)高一些。這就需要評(píng)估員在評(píng)估之前接受培訓(xùn),統(tǒng)一思想。我們知道,從英語的文化背景來說:很多的問題都是通過婉轉(zhuǎn)的口氣提出的,這個(gè)時(shí)候并不需要得到“Yes”或者“No”的回答,而是需要得到問題的正確答案。會(huì)話中的第三部分占到60%的分值,這個(gè)部分的成績(jī)直接關(guān)系到考生會(huì)話的整體成績(jī),所以,評(píng)估員在打分之前一定要按照標(biāo)準(zhǔn)執(zhí)行,同時(shí),海事局最好能在評(píng)估之前對(duì)評(píng)估員進(jìn)行培訓(xùn)。
(2)評(píng)估員的培訓(xùn)
雖然評(píng)估員都是有多年航海英語教學(xué)經(jīng)驗(yàn)的教師,由于以上出現(xiàn)的問題,海事局有必要對(duì)評(píng)估員進(jìn)行培訓(xùn)。培訓(xùn)可以在以下三個(gè)方面進(jìn)行;
① 針對(duì)所有評(píng)估員的強(qiáng)制性培訓(xùn)。在正式閱卷開始前,“系統(tǒng)”有必要要求所有評(píng)估員參加培訓(xùn),統(tǒng)一思想,對(duì)“評(píng)分標(biāo)準(zhǔn)”進(jìn)行講解,對(duì)以往的評(píng)估過程中的案例進(jìn)行分析。以此加強(qiáng)評(píng)分的規(guī)范性和公正性。
② 對(duì)個(gè)別評(píng)估員強(qiáng)制性培訓(xùn)。海事局主考官可以強(qiáng)制培訓(xùn)那些閱卷期間評(píng)分嚴(yán)重偏離“評(píng)分標(biāo)準(zhǔn)”的評(píng)估員。
③ 選擇性培訓(xùn)。在評(píng)估的過程中,如果評(píng)估員認(rèn)為有必要,隨時(shí)可以進(jìn)行自我培訓(xùn)。
(3)評(píng)估員配員的合理性
筆者在多年的評(píng)估實(shí)踐中發(fā)現(xiàn),評(píng)估員的評(píng)分合理與否與評(píng)估員的配員情況存在著很大的關(guān)系。
以每200名考生配備5名評(píng)估員為例,平均每個(gè)評(píng)估員要評(píng)估40名考生。由于評(píng)估過程主要靠評(píng)估員的聽力進(jìn)行評(píng)判,在開始的30min內(nèi),評(píng)估員能夠精力集中地評(píng)判每一道題目,而且作出的判斷也比較合理。30min以后,如果不強(qiáng)制要求評(píng)估員進(jìn)行休息,往往會(huì)出現(xiàn)視覺疲勞和聽、覺感覺等疲勞問題,這些疲勞現(xiàn)象會(huì)導(dǎo)致評(píng)估質(zhì)量的下降,集中體現(xiàn)在某些題目的評(píng)分出現(xiàn)分?jǐn)?shù)居中,有些題目的評(píng)判不在評(píng)分范圍之內(nèi)等現(xiàn)象上。而且由于考生的英語發(fā)音各不相同,有的考生帶有濃重的口音導(dǎo)致在評(píng)估的過程中必須反復(fù)幾次進(jìn)行聽音,延長(zhǎng)了評(píng)估的時(shí)間。如果每一道題目都從頭聽到尾,以這樣的評(píng)估速度和配員往往需要一個(gè)工作日。所以,制定一個(gè)合理的評(píng)估員配員標(biāo)準(zhǔn)并且保證該標(biāo)準(zhǔn)的正確實(shí)施是保證評(píng)估質(zhì)量的一個(gè)非常重要的前提。
為了更加完善航海英語會(huì)話評(píng)估系統(tǒng),建議成立課題組,完成以下問題的研究。
(1)完善評(píng)估系統(tǒng)
在評(píng)估的過程中,評(píng)估員經(jīng)常會(huì)遇到電腦死機(jī)、界面更新太慢等問題,拖延了評(píng)估時(shí)間。建議海事局相關(guān)部門對(duì)該“系統(tǒng)”進(jìn)行優(yōu)化和升級(jí),確保評(píng)估過程能夠正常運(yùn)轉(zhuǎn),縮短閱卷的時(shí)間。
(2)解決閱卷疲勞問題
閱卷疲勞是指在長(zhǎng)時(shí)間連續(xù)過度地盯看電腦屏幕和戴耳機(jī)全神貫注地收聽考生的答案后引起的視覺、聽覺的疲勞和工作績(jī)效下降的現(xiàn)象。長(zhǎng)時(shí)間的精神高度集中,致使大腦中樞神經(jīng)系統(tǒng)從興奮轉(zhuǎn)為抑制狀態(tài),導(dǎo)致思維活動(dòng)遲緩,注意力不集中,動(dòng)作反應(yīng)遲鈍,從而出現(xiàn)疲勞狀態(tài),導(dǎo)致閱卷效率和準(zhǔn)確性也有所下降。
根據(jù)學(xué)者們?cè)趯?shí)驗(yàn)性監(jiān)視作業(yè)中,以準(zhǔn)確反應(yīng)、誤反應(yīng)、延遲反應(yīng)以及其他生理反應(yīng)作為指標(biāo),研究注意的維持性。他們發(fā)現(xiàn),基準(zhǔn)值的相對(duì)下降均發(fā)生在作業(yè)開始后30min內(nèi),從而說明注意的持續(xù)性不超過30min。因此,“系統(tǒng)”應(yīng)該在評(píng)估過程持續(xù)30min后,屏幕上應(yīng)出現(xiàn)強(qiáng)制休息的提醒。除此之外,評(píng)估員還可以在評(píng)估的過程中自行選擇休息的時(shí)間。
由此可以看出,合理配備評(píng)估員人數(shù)是解決閱卷疲勞的一個(gè)重要手段。
(3)完善評(píng)估員的激勵(lì)機(jī)制
探討這個(gè)問題的前提是:每一位評(píng)估員應(yīng)具備良好的道德修養(yǎng),嚴(yán)守職業(yè)道德,不徇私舞弊,保持評(píng)估公正的客觀公正。除此之外,還應(yīng)具備良好的英語和專業(yè)業(yè)務(wù)水平。[2]
目前的評(píng)估員待遇制度已經(jīng)延續(xù)了10年以上了,顯然和目前的用工報(bào)酬現(xiàn)狀差距甚大,格式塔學(xué)派心理學(xué)家勒溫的心理學(xué)的場(chǎng)理論認(rèn)為:人是一個(gè)場(chǎng),包括這個(gè)人和他的心理環(huán)境的生活空間(LSP),行為是由這個(gè)場(chǎng)決定的。即:
B( 行為 ) = f [ P ( 人 ),E( 環(huán)境 )] = f ( LSP( 生活空間) )[3]
根據(jù)勒溫的這個(gè)學(xué)說,可以看出:行為的實(shí)職就是人對(duì)環(huán)境外在的可觀察的反應(yīng),是人類內(nèi)在的心里活動(dòng)的反映,行為是隨人和環(huán)境的改變而改變的。需要和激勵(lì)的循環(huán)關(guān)系如圖1所示。
圖1 需要和激勵(lì)
圖1可見,一個(gè)人有了某種需要,便產(chǎn)生一種激勵(lì)狀態(tài),這時(shí)人就會(huì)采取某種行為,以達(dá)到他的目的。當(dāng)目的達(dá)到后,需要得到滿足,心理緊張狀態(tài)便解除了,隨后又會(huì)有新的需要激勵(lì)人去努力達(dá)到新的目的。
目前的評(píng)估閱卷報(bào)酬對(duì)評(píng)估員的激勵(lì)作用已經(jīng)微乎其微,建立一個(gè)完善的激勵(lì)機(jī)制并貫徹執(zhí)行也是保障評(píng)估質(zhì)量的一個(gè)重要前提。
航海英語聽力會(huì)話評(píng)估考試體現(xiàn)了每個(gè)參加海船適任證書考試船員的英語聽力和口語水平,該項(xiàng)目的網(wǎng)上閱卷評(píng)估系統(tǒng)的科學(xué)與否關(guān)系到每一位參加考試學(xué)員的成績(jī)是否公正,評(píng)判是否合理。建議海事局盡快和相關(guān)的航海院校的資深教師組成專家小組共同探討,制定和完善相關(guān)制度。
[1]王躍武.大學(xué)英語四、六級(jí)考試作文網(wǎng)上閱卷實(shí)驗(yàn)研究[J].外語界, 2004(5).
[2]王 濤.船員專業(yè)英語評(píng)估隊(duì)伍建設(shè)探討[J].航海教育研究,2012(1).
[3]葉 龍,李 森.安全行為學(xué)[M].北京:清華大學(xué)出版社,2005.