張宗瑩
【摘要】二語習(xí)得一直是外語研究領(lǐng)域的熱點(diǎn)和焦點(diǎn),隨著其研究內(nèi)容的不斷深入和研究視角的不斷拓展,對(duì)研究方法的要求也越來越高,而元分析作為一種新型研究方法便開始進(jìn)入二語研究者的視野,并且越來越受關(guān)注。本文將從元分析的發(fā)展歷史與概念界定、主要優(yōu)點(diǎn)與局限性、研究步驟與應(yīng)用軟件這三大方面對(duì)這一研究方法進(jìn)行全面剖析,并且會(huì)對(duì)元分析在二語習(xí)得領(lǐng)域的應(yīng)用現(xiàn)狀進(jìn)行評(píng)述,以及對(duì)未來的發(fā)展方向進(jìn)行展望。
【關(guān)鍵詞】元分析 研究方法 二語習(xí)得 應(yīng)用與發(fā)展
一、引言
元分析是心理學(xué)、教育學(xué)、民族學(xué)及醫(yī)學(xué)等科學(xué)領(lǐng)域內(nèi)新近出現(xiàn)的一種研究方法,它主要是借助統(tǒng)計(jì)方法,對(duì)針對(duì)同一問題的大量研究進(jìn)行綜合分析與評(píng)價(jià),從而概括出其研究結(jié)果所反映的共同效應(yīng)。元分析在二語研究領(lǐng)域的應(yīng)用是近年來在國際研究者中逐漸興起的,國內(nèi)對(duì)元分析的認(rèn)識(shí)和應(yīng)用仍處于初級(jí)階段。面對(duì)同一研究問題已有大量研究存在而結(jié)果卻又不盡相同的現(xiàn)狀,越來越多的國內(nèi)二語研究者意識(shí)到需要對(duì)前人研究進(jìn)行及時(shí)的分析與總結(jié),也就是綜述。傳統(tǒng)的綜述是描述性綜述,即把以前的研究情況總結(jié)出來,基本是文字性描述,只是對(duì)現(xiàn)有研究進(jìn)行籠統(tǒng)的總結(jié)和評(píng)論。而隨著研究的不斷發(fā)展,傳統(tǒng)綜述方法已經(jīng)無法滿足研究者對(duì)大量實(shí)證研究結(jié)果進(jìn)行精確整合與分析的要求,但是元分析恰恰能滿足這一要求——對(duì)現(xiàn)有研究文獻(xiàn)中的數(shù)據(jù)進(jìn)行統(tǒng)計(jì)分析。
目前,元分析在心里學(xué)、教育學(xué)以及醫(yī)學(xué)領(lǐng)域已有較廣泛的應(yīng)用,算是一種比較成熟的研究方法了,但在二語習(xí)得領(lǐng)域尤其是國內(nèi)二語研究中卻很少見到,不少學(xué)者甚至還不了解元分析究竟是什么,因此有必要對(duì)元分析的方法進(jìn)行介紹和討論。本文將從元分析的發(fā)展歷史與概念界定、主要優(yōu)點(diǎn)與局限性、研究步驟與應(yīng)用軟件進(jìn)行闡述,并對(duì)元分析在二語習(xí)得領(lǐng)域的應(yīng)用現(xiàn)狀與發(fā)展方向進(jìn)行評(píng)述與展望。
二、元分析基本概況
1.元分析的發(fā)展歷史與概念界定。最早開始介紹元分析技術(shù)的是美國教育學(xué)家Gene V. Glass,他認(rèn)為元分析就是對(duì)分析本身的分析,即為了綜合研究結(jié)果,采用統(tǒng)計(jì)手段分析某個(gè)領(lǐng)域內(nèi)各項(xiàng)研究的結(jié)果。之后在1977年,Glass 和Smith對(duì)心理療法的效果進(jìn)行了首次元分析。到了21世紀(jì)初,元分析已經(jīng)發(fā)展成為一個(gè)獨(dú)立的統(tǒng)計(jì)學(xué)領(lǐng)域,在醫(yī)學(xué)、教育和社會(huì)科學(xué)領(lǐng)域被廣泛使用。就二語研究領(lǐng)域來說,Sahari在1997年做了第一個(gè)元分析,是關(guān)于學(xué)習(xí)策略的一項(xiàng)研究。緊接著在1998年Ross做了另外一項(xiàng)關(guān)于二語測試的元分析。之后隨著其他一些相關(guān)研究的發(fā)表,元分析在二語研究領(lǐng)域的應(yīng)用越來越廣泛,也越來越受二語研究者的青睞。
對(duì)于元分析的定義,Glass早期給出的:以綜合已有的發(fā)現(xiàn)為目的,對(duì)單個(gè)研究結(jié)果進(jìn)行綜合的統(tǒng)計(jì)學(xué)分析方法(1976)。之后的許多統(tǒng)計(jì)學(xué)家也作了類似定義,即把元分析僅看作是對(duì)以往研究結(jié)果進(jìn)行定量合并的統(tǒng)計(jì)分析方法。隨著元分析方法應(yīng)用范圍的擴(kuò)大和自身的發(fā)展,學(xué)者們認(rèn)識(shí)到元分析中應(yīng)該既有定量分析也有定性分析,因此不再將元分析簡單看作一種統(tǒng)計(jì)分析,而是作為綜合多個(gè)同類研究的結(jié)果,對(duì)研究效應(yīng)進(jìn)行定量合并的分析研究過程和系統(tǒng)方法,正如Ellenberg對(duì)其下的定義:對(duì)具有共同研究目的相互獨(dú)立的多個(gè)研究結(jié)果給予定量分析、合并分析,剖析研究差異特征,綜合評(píng)價(jià)研究結(jié)果(1988)。從某種意義上講,分析其實(shí)是一種統(tǒng)計(jì)工具,是對(duì)一系列表面看來是研究同一問題的實(shí)證研究所涉及的各個(gè)變量之間的關(guān)系以數(shù)據(jù)統(tǒng)計(jì)的方式進(jìn)行再分析與整合,以期挖掘出影響這一問題的各變量之間的一個(gè)普遍關(guān)系,從而得出某一研究領(lǐng)域的再綜合結(jié)論,是一種帶有科學(xué)性與創(chuàng)新性的整合研究方法。
2.元分析的主要優(yōu)點(diǎn)與局限性。
(1)元分析的優(yōu)點(diǎn)。元分析是在綜合了大量個(gè)別研究結(jié)果基礎(chǔ)上進(jìn)行的再分析,它不僅整合了結(jié)論,而且彌補(bǔ)了單項(xiàng)研究的不足,所以相對(duì)于其他類型的文獻(xiàn)分析或統(tǒng)計(jì)分析,元分析有著不可比擬的優(yōu)點(diǎn)。
第一,元分析使整合研究成為一個(gè)科學(xué)的過程。首先,元分析最大的特點(diǎn)就是遵照嚴(yán)格的步驟,采取統(tǒng)計(jì)手段對(duì)定量研究進(jìn)行整合分析,能較客觀地總結(jié)以往研究的結(jié)果。另外,元分析以其獨(dú)有的精確數(shù)據(jù)來說明結(jié)果,可信度自然比傳統(tǒng)的綜述高。再有,元分析的每一個(gè)過程都需要精心策劃,從選取研究報(bào)告到做出結(jié)論,無不需要研究者認(rèn)真總結(jié)每一項(xiàng)研究,尤其是對(duì)研究文獻(xiàn)的挑選、研究質(zhì)量的評(píng)定及研究特征的編碼更容不得一絲含糊,這都使整合研究變得科學(xué)化。
第二,元分析能最大限度地減少偏見。一項(xiàng)元分析所選取的受試是眾多第一手研究,其篩選過程是一個(gè)系統(tǒng)的有根有據(jù)的過程,包含了大量的研究而不是基于偏見的選擇;元分析的結(jié)果是以數(shù)據(jù)統(tǒng)計(jì)結(jié)果呈現(xiàn)的,采取最直截了當(dāng)?shù)膱?bào)告方式,這就大大避免了不必要的主觀論斷,也減少了偏見。
第三,元分析能夠發(fā)現(xiàn)一些第一手研究未發(fā)掘的潛在效應(yīng),而且其研究結(jié)果能指導(dǎo)實(shí)踐。元分析通過整合大量相關(guān)研究,發(fā)現(xiàn)影響某一效應(yīng)的變量,與此同時(shí),能夠發(fā)現(xiàn)一些單獨(dú)研究所不能發(fā)現(xiàn)的潛在規(guī)律,從而為研究者開辟研究新視角,為實(shí)踐者和決策者提供決策新思路。
(2)元分析的局限性。盡管元分析在分析和整合已有研究結(jié)果方面有著顯著優(yōu)勢(shì),但其自身也帶有一些需要研究者注意的問題。第一個(gè)問題,由于一項(xiàng)元分析結(jié)果是基于對(duì)諸多已有研究結(jié)果基礎(chǔ)之上的,而已有研究所采用的研究方法和研究實(shí)驗(yàn)材料等難免會(huì)不一致,因此對(duì)其結(jié)果進(jìn)行整合有可能是不適合的;第二個(gè)問題,元分析的結(jié)果中可能存在發(fā)表偏見的問題,因?yàn)槠诳诎l(fā)表文章時(shí),研究結(jié)果顯著的比不顯著的更容易得到發(fā)表的機(jī)會(huì),如果針對(duì)某個(gè)研究主題僅收集所有已發(fā)表出版的文獻(xiàn)研究并對(duì)其進(jìn)行統(tǒng)計(jì)分析,那么這種發(fā)表偏見就會(huì)對(duì)研究結(jié)果產(chǎn)生誤導(dǎo),歪斜效應(yīng)值的方向,那么其結(jié)果的可靠性就無法保證;第三個(gè)問題,時(shí)間跨度較長:一方面,元分析工作本身就是一項(xiàng)耗費(fèi)時(shí)間的工作,它需要花費(fèi)較長的時(shí)間嚴(yán)格履行元分析的每一個(gè)步驟;另一方面,因?yàn)樵治鲂枰罅康南嚓P(guān)研究文獻(xiàn),所以所收集資料的時(shí)間跨度可能會(huì)很大,盡管在收集研究文獻(xiàn)時(shí)建議搜索一些新進(jìn)的研究,但仍不能排除有若干年前的研究進(jìn)入文獻(xiàn)研究系統(tǒng),而這些比較古老的研究所采用的研究方法、實(shí)驗(yàn)材料是否仍然適合于當(dāng)前的研究,這是需要考慮的。endprint
3.元分析的研究步驟與應(yīng)用軟件。
(1)研究步驟。一項(xiàng)元分析的研究步驟類似于一項(xiàng)實(shí)證研究,首先要明確研究方向、確定研究問題;然后依次選取研究文獻(xiàn)作為受試對(duì)象;對(duì)數(shù)據(jù)進(jìn)行編碼;分析解釋效果量;最后總結(jié)討論并將結(jié)果寫成報(bào)告。
1)系統(tǒng)地闡述研究問題。研究方向的確立還是比較籠統(tǒng)的,只有對(duì)具體研究問題有了系統(tǒng)詳盡的描述,才能進(jìn)行下一步。系統(tǒng)描述所要研究的問題,對(duì)于問題中所涉及的概念要有一個(gè)全面的理解,不僅要明白其理論定義,操作定義也要搞清楚。問題中所涉及的變量之間的關(guān)系狀態(tài)(偶然的,相關(guān)性的,或概率的)要闡述清楚??傊?,要將研究問題從理論上,歷史上和實(shí)際上這三個(gè)層面進(jìn)行闡述,要讓讀者與其他研究者明白研究該問題的意義所在。
2)檢索研究文獻(xiàn)。首先文獻(xiàn)檢索有一些通用策略,對(duì)第一手研究中的參考文獻(xiàn)進(jìn)行追蹤檢索,計(jì)算機(jī)搜索:數(shù)據(jù)庫、期刊和搜索引擎,瀏覽(圖書館書架上的書籍和期
刊),咨詢業(yè)內(nèi)專家等。另外,具體到元分析中的文獻(xiàn)檢索,最常見的搜索數(shù)據(jù)庫有LLBA和ERIC,其他數(shù)據(jù)庫包括PsycINFO,Google Scholar,Web of Science,以及ProQuest Dissertations and Theses。另外最常見的查詢期刊有 Language Learning, Studies in Second Language Acquisition, TESOL Quarterly, Applied Linguistics, Modern Language Journal,以及 Second Language Research。當(dāng)明確了一個(gè)研究問題,就可以選取與其相關(guān)一些術(shù)語或者關(guān)鍵詞進(jìn)行搜索。除此之外,要通過一系列嚴(yán)格的包含與排除標(biāo)準(zhǔn)對(duì)初步篩選的文獻(xiàn)作進(jìn)一步甄選,以確定最終文獻(xiàn)。標(biāo)準(zhǔn)的制定可以從以下幾個(gè)方面入手:受試對(duì)象、年齡,發(fā)表時(shí)間、語言,研究設(shè)計(jì)方式、方法,語言測量方法,語言產(chǎn)出方式等。另外需要單獨(dú)強(qiáng)調(diào)的一點(diǎn)就是發(fā)表偏見問題,通常元分析在篩選一手文獻(xiàn)的時(shí)候大多采用的都是發(fā)表文章,介于發(fā)表文章的權(quán)威性、科學(xué)性與引用性。當(dāng)然這也并不意味著將未發(fā)表的文章一竿子打死,有些元分析就包含了一些會(huì)議報(bào)告,碩博論文等有價(jià)值、有意義的文章。
3)數(shù)據(jù)編碼。正如定量研究中要對(duì)受試信息進(jìn)行編碼一樣,元分析也要求對(duì)它的“受試”進(jìn)行編碼。編碼的第一步就是定義編碼類別,反映各個(gè)第一手研究中的基本特征,包括:出版特征(文章標(biāo)題、作者姓名、發(fā)表時(shí)間、期刊信息等);實(shí)體特征(第一手研究的工具、假設(shè)、自變量和因變量等);方法特征(受試特點(diǎn)和統(tǒng)計(jì)方法)。這些編碼類別構(gòu)成了編碼表初稿。一般先有至少兩人根據(jù)編碼表制定初稿,分別對(duì)少數(shù)第一手研究進(jìn)行編碼,然后核對(duì)并討論,解決不一致之處,并加以完善,形成最終版編碼表,作為正式編碼的依據(jù)。
對(duì)于編碼類別的制定,一般有兩種做法。一是使用接近于第一手研究中所涉及的變量,或者從第一手研究中抽象出額外的層次,即元分析中的變量可以從各第一手研究中找到原型;二是從各第一手研究中總結(jié)出一些沒有測量到的變量作為編碼類別。例如,很多語言教學(xué)的研究在設(shè)計(jì)上都區(qū)別了“干預(yù)時(shí)長”,但并未將其納入研究變量中。在使用元分析進(jìn)行整合研究時(shí),就可以把“干預(yù)時(shí)長”作為單獨(dú)的變量來編碼。
4)分析解釋效果量。在元分析中,效果量是核心概念,指的是效果或關(guān)系的廣度。效果量主要包括Cohen的d(標(biāo)準(zhǔn)平均差)、Pearson的r(相關(guān)指數(shù))、OR(概率比),相應(yīng)的也都有計(jì)算公式,研究者可根據(jù)具體研究內(nèi)容的不同加以選擇。具體來說,對(duì)于d的編碼,一般要涉及兩個(gè)組的數(shù)據(jù),例如實(shí)驗(yàn)組和對(duì)照/比較組,控制組在實(shí)際操作中是不同的。有關(guān)變量的編碼是這樣的,自變量是從第一手研究中獲取的(例如反饋類型),調(diào)節(jié)變量一般都是第一手研究中有關(guān)方法論的特征(例如測試形式、處理時(shí)長、年齡、性別等)。分析解釋效果量時(shí)需要注意的是從一項(xiàng)研究里提出的效果量往往不止一個(gè),這個(gè)時(shí)候一般有兩種做法,一是從每項(xiàng)研究中只拿出一個(gè)效果量;二是把所有效果量都包括進(jìn)來,然后進(jìn)行謹(jǐn)慎的描述統(tǒng)計(jì)分析。
5)總結(jié)討論并將結(jié)果寫成報(bào)告。元分析的結(jié)果呈現(xiàn)方式是一目了然的,即研究結(jié)果是什么就報(bào)告什么,然后解釋原因,與一篇實(shí)證研究是比較相像的,也是包含引言介紹、方法、結(jié)果、討論和總結(jié)。不同的有兩點(diǎn),一是匯總以往相關(guān)研究的定量結(jié)果,同時(shí)總結(jié)某一實(shí)驗(yàn)干預(yù)的影響結(jié)果或變量之間的關(guān)系;二是確定在第一手研究中,會(huì)使研究結(jié)果變動(dòng)的變量或影響因素,它們也是解釋結(jié)果的有力根據(jù)。
(2)元分析應(yīng)用軟件。元分析既然是一種整合研究,尤其是對(duì)諸多已有實(shí)證研究進(jìn)行整合時(shí),難免會(huì)產(chǎn)生大量的計(jì)算,比如前文提到的d值、r值、OR值等,如果采用人工計(jì)算,不僅會(huì)耗費(fèi)大量的時(shí)間和精力,而且計(jì)算結(jié)果也不精確,基于這種情況,一種應(yīng)用軟件便應(yīng)運(yùn)而生了,即Comprehensive Meta-analysis Version(CMA)。CMA作為一種統(tǒng)計(jì)軟件,有三大優(yōu)勢(shì)。第一,數(shù)據(jù)能夠直接導(dǎo)入,所有的編碼表信息都可以直接進(jìn)入CMA;第二,計(jì)算便捷,只需要簡單輸入原始相關(guān)數(shù)據(jù)和樣本量,此程序就能夠計(jì)算出相關(guān)的效果量,置信水平等目標(biāo)數(shù)據(jù),并能夠得到最終的分析結(jié)果;第三,輸出功能強(qiáng)大,它能解釋多個(gè)步驟的元分析統(tǒng)計(jì)過程,而且能夠提供多種檢測出版偏差的方法。
三、元分析在二語習(xí)得研究領(lǐng)域的應(yīng)用與未來發(fā)展方向
1.元分析在二語研究中的應(yīng)用。首先是對(duì)學(xué)習(xí)者個(gè)體差異的元分析研究。最早,Sahari(1997)對(duì)29項(xiàng)有關(guān)學(xué)習(xí)策略的第一手研究進(jìn)行了元分析,結(jié)果證實(shí),闡述策略能促進(jìn)高層次的學(xué)習(xí),其運(yùn)用與直接教學(xué)等有關(guān)。后來Masgoret & Gardner(2003)對(duì)態(tài)度/動(dòng)機(jī)研究與二語成績的關(guān)系做了一項(xiàng)元分析,不同的受試中采用不同的成績測量方法,并在具體結(jié)果的基礎(chǔ)上提出了關(guān)于態(tài)度、動(dòng)機(jī)和傾向與二語學(xué)習(xí)成績關(guān)系的不同假設(shè)。而通過元分析可以對(duì)這些研究結(jié)果進(jìn)行很好的整合。endprint
其次是對(duì)糾正性反饋的元分析。面對(duì)前人對(duì)糾正性反饋所做的大量研究,Li(2010)對(duì)33篇相關(guān)研究進(jìn)行了一項(xiàng)元分析整合研究,他的研究有兩大突破點(diǎn)。一是在篩選文獻(xiàn)時(shí)就采用了尚未發(fā)表的博士論文;二是考察了前人未考慮的調(diào)節(jié)變量。Li的研究對(duì)元分析在二語研究中的應(yīng)用做出了突出貢獻(xiàn),也推動(dòng)著整個(gè)元分析領(lǐng)域向新紀(jì)元發(fā)展。
最后就是元分析在二語測試研究中的應(yīng)用。二語測試是二語教學(xué)中不可忽視的環(huán)節(jié),因此也涌現(xiàn)了大量研究,但是各項(xiàng)研究得出的結(jié)果卻不盡一致,亟需一項(xiàng)元分析作以整合與分析。為此,Ross(1998)就做了一項(xiàng)有關(guān)二語測試的元分析。結(jié)果發(fā)現(xiàn):二語閱讀標(biāo)準(zhǔn)變量同閱讀的自我評(píng)估呈顯著性相關(guān),但在各項(xiàng)研究中相關(guān)系數(shù)有較大變異;自我評(píng)估與閱讀水平的相關(guān)系數(shù)最高,最適合自我評(píng)估,其次是聽力水平,最后是口語和寫作水平。
2.元分析在二語研究領(lǐng)域的未來發(fā)展方向。在二語研究領(lǐng)域,元分析已經(jīng)有了很好地應(yīng)用。但還有一些領(lǐng)域和課題,也已經(jīng)發(fā)表了相當(dāng)數(shù)量的實(shí)證研究,但結(jié)果不盡一致,急需用元分析方法加以整合。首先,對(duì)于學(xué)習(xí)者個(gè)體差異,除了學(xué)習(xí)策略、動(dòng)機(jī),另外一些個(gè)體因素像年齡、學(xué)能、焦慮等也有大量研究亟待整合,而且學(xué)習(xí)策略與其他個(gè)體差異之間的關(guān)系問題也是一個(gè)突破口;其次,糾正性反饋只是互動(dòng)研究中的冰山一角,還有許多互動(dòng)問題需要進(jìn)行元分析整合,比如任務(wù)式互動(dòng)與二語習(xí)得的關(guān)系,影響課堂互動(dòng)的因素,課堂互動(dòng)與實(shí)驗(yàn)室互動(dòng)對(duì)二語習(xí)得的影響差異等;最后,有關(guān)于二語測試的單項(xiàng)研究更是層出不窮,可以進(jìn)行元分析的方向也有很多:二語測試對(duì)教學(xué)的反作用有沒有顯著效應(yīng)?口語測試與書面測試的差異以及影響因素有哪些?
除了在已有的二語元分析領(lǐng)域找新視角之外,其他二語研究領(lǐng)域也可以大膽嘗試,比如過渡語的研究,輸入與輸出的作用,語言特征習(xí)得順序等都是二語研究熱點(diǎn),已有大量研究存在而且急需整合。此外,有關(guān)元分析的研究方式方法、研究工具、編碼方式等,也要不斷創(chuàng)新與改進(jìn),力求做出可信度更高、可復(fù)制性更強(qiáng)、實(shí)踐性更廣的元分析。
參考文獻(xiàn):
[1]Ellenberg,S.Meta-analysis:the quantitative approach to reseach review[J].Seminars Oncol,1988,15(5):427.
[2]Glass,G.V.Primary,secondary and meta-analysis of research[J].Education Research,1976,6(5):3-8.
[3]Li,S.The effectiveness of corrective feedback in SLA:A meta-analysis[J].Language Learning,2010,60:309-365.
[4]Masgoret,A.&R.Gardner.Attitudes,motivation,and second language learning:A meta-analysis of studies conducted by Gardner and associates[J].Language Learning,2003,53:123-163.
[5]Norris,J.&L.Ortega.Effectiveness of L2 instruction:A research synthesis and quantitative meta-analysis[J].Language Learning,2000,50:417-528.
[6]Ross,S.Self-assessment in second language testing:A meta-analysis and analysis of experiential factors[J].Language Testing,1998,15:1-20.
[7]Sahari,M.Elaboration as a text-processing strategy:Ameta-analytic review.[J].RELC,1997,28:15-27.
[8]毛良斌,鄭全全.元分析的特點(diǎn)、方法及其應(yīng)用的現(xiàn)狀分析[J].應(yīng)用心理學(xué),2005,37(3):1-9.
[9]夏凌翔.元分析方法的幾個(gè)基本問題[J].山西師大學(xué)報(bào)(社會(huì)科學(xué)版),2005,32(3):34-38.endprint