溫煜東
全國高等學(xué)校法語專業(yè)四級考試(Test national de fran?ais destiné aux étudiants spécialisés en études fran?aises dans lesétablissements d’enseignement supérieur—Niveau IV,以下簡稱TFS4)自2004年以來每年舉辦一次,至2021年已進(jìn)行16屆(2020年暫??荚嚕Kc全國高等學(xué)校法語專業(yè)八級考試共同構(gòu)成了完整的法語專業(yè)等級考試體系[1],其重要性不言而喻。
經(jīng)過十幾年的發(fā)展,目前法語界對TFS4的研究已覆蓋其大部分的題型。余春紅在2014年從任務(wù)類型及評分標(biāo)準(zhǔn)兩方面探究了TFS4聽寫平均分偏低的原因,并提出了聽寫在難度等級上應(yīng)保持連續(xù)性和一致性等建議[2]。同年,王文新對比了TFS4作文的新、舊題型,并介紹了“看圖寫作”這一新題型的編設(shè)緣由、目的和特點(diǎn)[3]。田禾在2016年從寫作成績分析入手,反思了法語寫作教學(xué)中存在的缺乏系統(tǒng)理論指導(dǎo)和教材不足等問題,并提出要科學(xué)安排寫作訓(xùn)練、合理運(yùn)用寫作教學(xué)策略改變原有教學(xué)模式等建議[4]。2017年,贠冰潔論述了聽力理解部分對考生語言能力、社會語言能力和心理素質(zhì)等方面的要求,并提供了一些捕捉聽力關(guān)鍵詞的策略[5]。2018年,盧曉帆在對TFS4考試的研究和評估中引入了效度分析:以真題為樣本對TFS4閱讀理解語篇的內(nèi)容效度進(jìn)行歷時(shí)分析,并認(rèn)為其具有較高的內(nèi)容效度,但仍存在語篇長度不夠穩(wěn)定和文章布局不夠合理等問題[6]。宋玉婷在2019年驗(yàn)證了銜接理論在TFS4完形填空分析中的適用性,并建議從銜接理論角度切入進(jìn)行解題和教學(xué)[7]。然而在現(xiàn)有研究中,對TFS4第五部分“語法”(II)(以下稱為“動詞的適當(dāng)形式填空”)的研究極少。本文以2010年至2017年TFS4動詞的適當(dāng)形式填空真題為研究對象,結(jié)合《全國高等學(xué)校法語專業(yè)四級考試試題提綱(修訂)》[8](以下簡稱《提綱》)和《高等學(xué)校法語專業(yè)基礎(chǔ)階段教學(xué)大綱》[9](以下簡稱《大綱》),對TFS4動詞的適當(dāng)形式填空內(nèi)容效度進(jìn)行歷時(shí)分析,以期為后續(xù)命題的改進(jìn)提供參考。
1.理論依據(jù)和研究框架
語言測試的評價(jià)可以從多角度進(jìn)行。文秋芳和王凌指出,“效度”是評價(jià)測試質(zhì)量最重要的標(biāo)準(zhǔn)[10]。而檢驗(yàn)效度的方法有多種,“內(nèi)容相關(guān)性”是重要的證據(jù)之一。內(nèi)容相關(guān)性可以理解為傳統(tǒng)的“內(nèi)容效度”。根據(jù)Hughes的觀點(diǎn),內(nèi)容效度越高越能準(zhǔn)確地測到應(yīng)該測到的內(nèi)容[11]。具體到本研究中,就是通過對TFS4動詞的適當(dāng)形式填空部分真題和答案的分析來檢測其與《提綱》和《大綱》中相應(yīng)部分的一致性。
本研究的理論框架參考了Bachman和Palmer的測試任務(wù)特征框架[12]以及李筱菊的考點(diǎn)效度[13]理論。Bachman和Palmer的框架包含五部分:環(huán)境特征、測試規(guī)則特征、輸入特征、期望回答的特征以及輸入和回答之間的關(guān)系。李筱菊認(rèn)為,分析考點(diǎn)效度可以從考點(diǎn)層次和焦點(diǎn)因素切入。由于本文主要從內(nèi)容效度角度進(jìn)行分析,因此筆者結(jié)合TFS4動詞的適當(dāng)形式填空試題特點(diǎn)以及《提綱》和《大綱》中動詞部分的相關(guān)要求,對測試任務(wù)特征框架和考點(diǎn)效度理論進(jìn)行了調(diào)整和融合。改進(jìn)后的研究框架主要包括語篇輸入特征分析和期望回答特征分析。研究語篇輸入特征,本文將從篇章長度和篇章難度入手;研究預(yù)期回答特征,本文將從考點(diǎn)內(nèi)容分布、考點(diǎn)層次以及動詞變位難度等角度切入。據(jù)此,筆者確定了TFS4動詞的適當(dāng)形式填空內(nèi)容效度的五個(gè)分析項(xiàng)目:文章長度、文章難度、考點(diǎn)分布、考點(diǎn)層次和動詞變位難度。
2.研究對象和方法
本文以《全國高等學(xué)校法語專業(yè)四級考試指南(2018版)》[14]中提供的2010年至2017年TFS4動詞的適當(dāng)形式填空試題和答案為研究對象,對各分析項(xiàng)目進(jìn)行分類、統(tǒng)計(jì)、對比和量化處理,進(jìn)而分析TFS4動詞的適當(dāng)形式填空試題內(nèi)容效度及其變化趨勢。
1.《大綱》中關(guān)于動詞的表述以及《提綱》中相應(yīng)部分的說明
在《大綱》附表七“測試參考方案”中推薦了第二學(xué)年“語法”項(xiàng)目的測試方式:多項(xiàng)選擇、填空、將動詞原形改成適當(dāng)?shù)臅r(shí)態(tài)語式、翻譯句子等。檢測的目的是檢查學(xué)生對基礎(chǔ)語法的掌握情況,分值占總分的18%。TFS4對語法的直接考查主要集中在兩個(gè)部分:第四部分“語法”(I)(單項(xiàng)選擇)和第五部分“語法”(II)(即本研究討論的“動詞的適當(dāng)形式填空”)。TFS4總分100分,這兩部分分別為20分和10分,共30分,占總分的30%。與《大綱》中要求的18%相比,占比較高。由此可見TFS4較為側(cè)重對學(xué)生基礎(chǔ)語法知識的考查。動詞的適當(dāng)形式填空作為《大綱》推薦的語法知識檢測方式之一,占TFS4語法部分分值的33%,且是TFS4中唯一一個(gè)對單一詞類進(jìn)行考查的題型,可見TFS4對動詞相關(guān)知識點(diǎn)的重視。
《大綱》“基礎(chǔ)語法表”中對于法語專業(yè)基礎(chǔ)教學(xué)階段應(yīng)完成的內(nèi)容,涉及動詞的部分(詳見《大綱》第18-21頁)可簡略表述為:種類、變位、形式、語態(tài)、無人稱動詞、語式及時(shí)態(tài)。其中,語式及時(shí)態(tài)又細(xì)分為24項(xiàng):直陳式現(xiàn)在時(shí)、直陳式最近將來時(shí)、直陳式最近過去時(shí)、直陳式簡單將來時(shí)、直陳式先將來時(shí)、直陳式復(fù)合過去時(shí)、直陳式愈過去時(shí)、直陳式未完成過去時(shí)、直陳式簡單過去時(shí)、直陳式先過去時(shí)、條件式現(xiàn)在時(shí)、條件式過去時(shí)、虛擬式現(xiàn)在時(shí)、虛擬式過去時(shí)、虛擬式未完成過去時(shí)、虛擬式愈過去時(shí)、命令式現(xiàn)在時(shí)、用虛擬式表示間接命令、不定式現(xiàn)在時(shí)、不定式過去時(shí)、過去分詞、復(fù)合過去分詞、現(xiàn)在分詞和副動詞??傊洞缶V》中的要求涉及了法語動詞常見的時(shí)態(tài)、語式和語態(tài),對于動詞相關(guān)語法點(diǎn)的要求較為細(xì)致、全面。
而《提綱》中關(guān)于動詞的適當(dāng)形式填空部分的說明則較為籠統(tǒng),僅用50余字介紹了出題形式:一篇由20余個(gè)句子組成的文章,其中有20個(gè)空格,每個(gè)空格前面的括號內(nèi)是一個(gè)動詞原形,要求填上其合適的語式和時(shí)態(tài)形式。
2.TFS4動詞的適當(dāng)形式填空分析
(1)文章長度
TFS4動詞的適當(dāng)形式填空試題的載體為語篇,因此語篇長度是試題設(shè)計(jì)者需要考慮的問題之一。在《大綱》和《提綱》中都沒有規(guī)定動詞的適當(dāng)形式填空試題的具體語篇長度。但《提綱》中明確了文章應(yīng)由20余個(gè)句子組成。
考慮到TFS4動詞的適當(dāng)形式填空語篇中含有20處空格,因此本研究在統(tǒng)計(jì)文章長度時(shí)將答案填入對應(yīng)空格并刪除題干中提供的動詞原形,以語篇原本的形式統(tǒng)計(jì)字?jǐn)?shù)。本研究借助Microsoft Word軟件,對2010年至2017年TFS4動詞的適當(dāng)形式填空的文章長度等信息進(jìn)行了統(tǒng)計(jì),結(jié)果如表1所示:
表1 2010-2017年TFS4動詞的適當(dāng)形式填空文章長度統(tǒng)計(jì)表
由表1可知,除2010年(257詞)和2011年(150詞)外,2012年至2017年TFS4動詞的適當(dāng)形式填空文章長度在167-207詞之間浮動,波動幅度較小。從句子數(shù)量角度來看,句數(shù)最多的是2010年(18句),最少的是2015年(6句),八年平均數(shù)為12.8句。每句平均單詞數(shù)波動也較大,最高的為2015年的29詞,最低的為2016年的10.4詞。
由上述數(shù)據(jù)可以看出:(1)動詞的適當(dāng)形式填空文章長度整體上較為穩(wěn)定;(2)八年間(2010年-2017年)句子總數(shù)均低于《提綱》中規(guī)定的“20余個(gè)句子”,說明在文章長度基本穩(wěn)定的前提下,句子長度偏長,在一定程度上增加了試題的難度;(3)每句平均單詞數(shù)波動較大,說明平均句長穩(wěn)定性稍差,這會在一定程度上影響不同年份考試的公平性。
(2)文章難度
除語篇長度外,語篇難度也可以作為考察試題內(nèi)容效度的角度之一。評價(jià)語篇難度有多種方法,易讀度是常用的指標(biāo)之一,本研究將易讀度作為考量篇章難度的主要指標(biāo)。易讀度即篇章易于閱讀的程度。近一個(gè)世紀(jì)以來,許多專家和學(xué)者都提出了計(jì)算易讀度的方法,其中應(yīng)用較廣泛的是Flesch易讀度公式、Lorge易讀度公式等。但這些研究主要針對的是英語文本,對法語文本的適應(yīng)性不強(qiáng),因此本研究借助蒙特利爾Influence Communication公司研發(fā)的法語在線易讀度分析工具Scolarius(https://www.scolarius.com/)對2010年至2017年TFS4動詞的適當(dāng)形式填空試題的篇章易讀度進(jìn)行分析,量化每篇文章的易讀度數(shù)值。數(shù)值越大,說明文章越難。考慮到TFS4動詞的適當(dāng)形式填空的試題形式,因此在量化易讀度數(shù)值的過程中,采用了與前文中計(jì)算文章長度類似的方法,使用帶入答案后的文章原本形式作為基礎(chǔ)數(shù)據(jù)。經(jīng)過計(jì)算,結(jié)果如表2所示:
表2 2010-2017年TFS4動詞的適當(dāng)形式填空語篇易讀度統(tǒng)計(jì)表
根據(jù)Scolarius對于易讀度指數(shù)和學(xué)業(yè)水平的劃分,50-89為Primaire(小學(xué)),90-119為Secondaire(初中),120-149為Collégial(高中),150-189為Universitaire(大學(xué))。鑒于此水平劃分以母語為法語者作為參考,而TFS4的受試為大學(xué)二年級學(xué)生,且大部分學(xué)生學(xué)習(xí)法語的時(shí)間不超過兩年,因此本研究中借用此水平劃分只具有相對意義,并不代表絕對水平。
由表2中的數(shù)據(jù)可知,除2014年和2015年外,其他六年的文章易讀度數(shù)值均落在primaire區(qū)間內(nèi)。據(jù)此可以認(rèn)為,2010年至2017年TFS4動詞的適當(dāng)形式填空整體上語篇難度適中,比較穩(wěn)定。
(3)考點(diǎn)分布
《大綱》“基礎(chǔ)語法表”中雖然詳盡列舉了基礎(chǔ)階段動詞相關(guān)的教學(xué)內(nèi)容,卻沒有明確規(guī)定教學(xué)的重點(diǎn)和難點(diǎn)。但是仔細(xì)閱讀后不難發(fā)現(xiàn),《大綱》對未完成過去時(shí)和直陳式現(xiàn)在時(shí)的要求最為詳細(xì):兩者均涉及六項(xiàng)用法。對于未完成過去時(shí),《大綱》還特意制定了“未完成過去時(shí)與復(fù)合過去時(shí)的區(qū)別”這項(xiàng)教學(xué)內(nèi)容,這也是“基礎(chǔ)語法表”中唯一正面提及的時(shí)態(tài)區(qū)分。由此可見未完成過去時(shí)、直陳式現(xiàn)在時(shí)和復(fù)合過去時(shí)在《大綱》中的重要地位。
本研究將2010年至2017年TFS4動詞的適當(dāng)形式填空題涉及的時(shí)態(tài)、語式和語態(tài)考點(diǎn)按照考查次數(shù)由高到低整理如下:直陳式未完成過去時(shí)(imp)、直陳式復(fù)合過去時(shí)(pc)、直陳式現(xiàn)在時(shí)(pré)、不定式現(xiàn)在時(shí)(inf)、直陳式簡單過去時(shí)(ps)、直陳式愈過去時(shí)(pqp)、過去分詞(p.passé)、直陳式簡單將來時(shí)(fs)、直陳式過去將來時(shí)(fp)、被動語態(tài)(vp)、虛擬式現(xiàn)在時(shí)(subj)、現(xiàn)在分詞(p.pré)、條件式過去時(shí)(cond.passé)、命令式現(xiàn)在時(shí)(impé)、不定式過去時(shí)(inf.passé)、直陳式先過去時(shí)(pa)、虛擬式未完成過去時(shí)(subj.imp)、副動詞(gér)和復(fù)合過去分詞(ppc)。其具體的考查次數(shù)如表3所示:
表3 2010-2017年TFS4動詞的適當(dāng)形式填空時(shí)態(tài)、語式和語態(tài)統(tǒng)計(jì)表
由表3數(shù)據(jù)可知,考查最多的是直陳式未完成過去時(shí)(53次)、直陳式復(fù)合過去時(shí)(32次)和直陳式現(xiàn)在時(shí)(12次)。這說明TFS4試題對《大綱》中核心語法知識點(diǎn)的考查力度較大,能夠有效檢測學(xué)生對重要語法知識的掌握情況。
通過逐條對比表3中涉及的時(shí)態(tài)、語式和語態(tài)①由于直陳式過去將來時(shí)的構(gòu)成方式與條件式現(xiàn)在時(shí)完全相同,且條件式現(xiàn)在時(shí)可用于表示過去時(shí)間里的將來時(shí)[15],因此本研究將試題和答案中出現(xiàn)的直陳式過去將來時(shí)視為對條件式現(xiàn)在時(shí)的側(cè)面考查。(19項(xiàng))和《大綱》中的動詞相關(guān)知識點(diǎn)(24項(xiàng)時(shí)態(tài)語式+被動語態(tài))可以發(fā)現(xiàn),TFS中的考點(diǎn)覆蓋了《大綱》規(guī)定內(nèi)容的76%,考點(diǎn)覆蓋面較廣。但同時(shí)《大綱》中規(guī)定的直陳式最近將來時(shí)、直陳式最近過去時(shí)、直陳式先將來時(shí)、虛擬式過去時(shí)、虛擬式愈過去時(shí)和用虛擬式表示間接命令這幾項(xiàng)在2010年至2017年TFS4動詞的適當(dāng)形式填空中均未被正面設(shè)題,建議后續(xù)試題可適當(dāng)加大對它們的考查力度。
綜上所述可以認(rèn)為:(1)TFS4的考查重點(diǎn)與《大綱》核心知識點(diǎn)一致;(2)TFS4的考點(diǎn)設(shè)置緊密圍繞《大綱》要求,考點(diǎn)覆蓋面較全,但試題對個(gè)別時(shí)態(tài)和語式的考查尚顯不足。
(4)考點(diǎn)層次
李筱菊(1997)認(rèn)為,動詞的適當(dāng)形式填空是完形填空的一種變體題型,而研究完形填空試題的效度可以從考點(diǎn)層次切入??键c(diǎn)層次由低到高依次為單詞層次(W)、詞組層次(P)、句子層次(S)和語篇層次(D)。簡單地說,單詞層次的填空只看單詞本身就能判定答案;詞組層次的填空則需要考慮所填詞與其前后詞的搭配關(guān)系;句子層次的填空需閱讀整句才能解題;而語篇層次的空缺需通過上下文信息推斷。她認(rèn)為命題者應(yīng)當(dāng)著力使考點(diǎn)層次盡可能地高。考點(diǎn)層次越高,試題的效度越高。本研究從考點(diǎn)層次角度切入,將2010年至2017年TFS4動詞的適當(dāng)形式填空考點(diǎn)層次統(tǒng)計(jì)如表4:
表4 2010-2017年TFS4動詞的適當(dāng)形式填空考點(diǎn)層次統(tǒng)計(jì)表
由表4數(shù)據(jù)可知,2010年至2017年TFS4動詞的適當(dāng)形式填空試題考點(diǎn)層次主要集中在語篇層次和句子層次。本研究涉及的八年試題中,最高的考點(diǎn)層次(語篇層次)占比一直較高且穩(wěn)定(在70%-90%之間波動,平均占比76.9%),且沒有出現(xiàn)較低層次的考點(diǎn),這說明2010年至2017年TFS4動詞的適當(dāng)形式填空試題考點(diǎn)層次分布合理,試題效度較高。
(5)動詞變位難度
實(shí)際教學(xué)中發(fā)現(xiàn),對于動詞的適當(dāng)形式填空試題,法語學(xué)習(xí)者即使判斷出空缺動詞所需的時(shí)態(tài)、語式和語態(tài),也不一定能夠正確填空。造成這種情況較為常見的原因是未能正確地動詞變位。鑒于法語動詞變位的特點(diǎn)和復(fù)雜性,第一組動詞和第二組動詞變位規(guī)律,而第三組動詞變位特殊需要逐個(gè)記憶,因此試題中出現(xiàn)較高比例的第三組動詞會增加變位的難度。本研究將動詞變位難度作為研究切入角度之一,并對2010年至2017年TFS4動詞的適當(dāng)形式填空中的動詞組別進(jìn)行統(tǒng)計(jì),結(jié)果如表5所示:
表5 2010-2017年TFS4動詞的適當(dāng)形式填空動詞組別統(tǒng)計(jì)表
觀察表5中的數(shù)據(jù)可知:在2010年至2017年TFS4動詞的適當(dāng)形式填空試題中,對第三組特殊動詞的考查平均占比為53.1%,且八年間有七年在50%±10%范圍內(nèi)小幅度波動,據(jù)此可以認(rèn)為試題的動詞變位難度適中。此外第一組、第二組、第三組動詞占比均相對穩(wěn)定,可以認(rèn)為試題的動詞變位難度穩(wěn)定。然而還需要注意的是,在2011、2013、2014、2016和2017年沒有出現(xiàn)第二組動詞,說明這些年份的試題缺乏對第二組動詞變位的正面考查,建議今后適當(dāng)增加第二組動詞在該部分試題中的出現(xiàn)次數(shù)。
通過對2010年至2017年TFS4動詞的適當(dāng)形式填空的實(shí)證研究,本文得出以下結(jié)論:
1.2010年至2017年TFS4動詞的適當(dāng)形式填空試題長度、難易程度適中,考查知識點(diǎn)較為全面,基本符合《大綱》的要求??键c(diǎn)層次較高,對動詞變位的考查難度適中且穩(wěn)定??傊?,整體上來說具有較高的內(nèi)容效度。
2.TFS4動詞的適當(dāng)形式填空在命題方面仍存在一些不足,如語篇句子總數(shù)偏少、句子長度偏長、對個(gè)別時(shí)態(tài)和語式的考查尚顯不足等。
根據(jù)以上結(jié)論,為進(jìn)一步優(yōu)化TFS4動詞的適當(dāng)形式填空命題質(zhì)量,筆者嘗試提出以下建議:
1.盡快更新并完善《提綱》中的相應(yīng)部分。目前使用的《提綱》內(nèi)容相對簡單,對試題篇章長度、難易程度及考查的時(shí)態(tài)、語式和語態(tài)范圍等方面均未作出具體規(guī)定。
2.調(diào)控句子數(shù)量和長度,避免過多的長句。
3.增加對個(gè)別時(shí)態(tài)和語態(tài)的考查。
為確保研究的準(zhǔn)確性,本文以教育部高等學(xué)校外語專業(yè)教學(xué)指導(dǎo)委員會法語分委會公布的真題和答案為基礎(chǔ)數(shù)據(jù)。截至目前,其公布的最新試題為2017年真題。因此,本研究暫未涉及2018年和2019年數(shù)據(jù)。后續(xù)研究者可利用之后更新的試題進(jìn)行更為全面的分析。