趙琪鳳
效度論據(jù)理論及其在留學(xué)生預(yù)科教學(xué)與測評中的應(yīng)用
趙琪鳳
本研究運(yùn)用當(dāng)前效度研究的主導(dǎo)理論——解釋性效度論據(jù)理論,為留學(xué)生預(yù)科漢語綜合統(tǒng)一考試建立了一整套細(xì)化的效度證據(jù)研究框架。該框架由范圍界定、評估、推廣、解釋、推斷和應(yīng)用六個(gè)推導(dǎo)過程組成,每一個(gè)推導(dǎo)過程都呈現(xiàn)出具體的研究和調(diào)查取證程序。我們從中發(fā)現(xiàn),效度論據(jù)的收集貫穿整個(gè)教學(xué)和測評的始終,是一個(gè)動(dòng)態(tài)、連貫、長期的積累過程。效度論據(jù)取證過程所體現(xiàn)的整體性、系統(tǒng)性和多樣性的特點(diǎn),同樣適用于預(yù)科漢語教學(xué)。本研究所呈現(xiàn)的細(xì)化程序,試圖為預(yù)科漢語教學(xué)提供盡可能詳盡的信息,從而有助于預(yù)科漢語教學(xué)的開展和完善。
效度;解釋性論據(jù);預(yù)科漢語考試;預(yù)科教學(xué)
效度研究一直以來作為測試領(lǐng)域的核心問題,是任何考試研究都不可或缺的重要組成部分。當(dāng)前的效度研究是以Kane(1990,2001,2006,2012)提出的效度論據(jù)法為主導(dǎo)思想的研究。來華留學(xué)生預(yù)科漢語結(jié)業(yè)考試,作為國內(nèi)大學(xué)預(yù)科教育測評的測量工具和評判標(biāo)準(zhǔn),其效度研究關(guān)系到對整個(gè)考試質(zhì)量的探究。本文將運(yùn)用當(dāng)前效度研究領(lǐng)域占據(jù)主導(dǎo)地位的解釋性論據(jù)理論,對預(yù)科漢語綜合統(tǒng)一考試這一新興的考試類型,做細(xì)致的構(gòu)想效度探析,并結(jié)合各類論據(jù),為預(yù)科教學(xué)與測評提供盡可能具體詳細(xì)的信息,體現(xiàn)教學(xué)與測試效度研究的有機(jī)結(jié)合。
所謂“效度”是指一個(gè)測驗(yàn)在多大程度上測到了它試圖去測的那個(gè)東西(Courtis,1921)。在效度研究的歷史進(jìn)程中,研究者們從最初關(guān)注測驗(yàn)的預(yù)測功能和范圍分類,逐漸演變?yōu)楫?dāng)前的效度論據(jù)理論,從解釋的角度建立一系列的論據(jù)分析過程。
2.1 解釋性論據(jù)的特征
在效度論據(jù)理論中,解釋性論據(jù)是核心,Kane(1990)概括了解釋性論據(jù)的五個(gè)特征,分別是:
(1)解釋性論據(jù)是根據(jù)測驗(yàn)分?jǐn)?shù)由人為創(chuàng)立和關(guān)聯(lián)的。解釋性論據(jù)可以根據(jù)需要被繼續(xù)開發(fā)、修改甚至刪除。解釋性論據(jù)是被創(chuàng)立的,而不是被發(fā)現(xiàn)的。(2)解釋性論據(jù)是具有結(jié)構(gòu)的,通過一些測驗(yàn)分?jǐn)?shù)與規(guī)則的假說建立起來的。(3)解釋性論據(jù)是不斷變化的,會(huì)隨時(shí)根據(jù)情況得到調(diào)整。(4)解釋性論據(jù)可能在具體情況下需要調(diào)整以適應(yīng)新的情境。(5)解釋性論據(jù)是開放的,會(huì)根據(jù)進(jìn)一步的發(fā)展得以調(diào)整和完善。(Kane,1990:28)
我們根據(jù)上述的特征可以認(rèn)為,解釋性論據(jù)處于發(fā)展變化的過程中,是一個(gè)動(dòng)態(tài)的解釋過程,沒有固定的模式或公式,它是根據(jù)情況的變化和需要加以調(diào)整的,隨時(shí)有可能被修改、刪除。因此,不同測驗(yàn)的解釋性效度論據(jù)也會(huì)有所不同。
2.2 解釋性論據(jù)的邏輯
2006年Kane在《教育測量》第四版中給出了解釋性論據(jù)實(shí)現(xiàn)的流程圖,試圖以更為直觀的視角說明解釋性論的效度檢驗(yàn)作用。圖1為Kane描繪的解釋性論據(jù)圖(2006:p.33)。
心理測量的測量目標(biāo)是某種心理特質(zhì),即圖1中左上方圖形中所表示的特質(zhì),目標(biāo)范圍指的是與特質(zhì)有關(guān)聯(lián)的所有可能觀察到的現(xiàn)象,可以看出,潛在特質(zhì)雖然由目標(biāo)范圍來表示,但是范圍中也會(huì)受到其他特質(zhì)、情境以及觀測方法等因素的影響,通過抽樣將得到一個(gè)概括全域,從全域中抽取出觀測樣本。解釋性論據(jù)呈現(xiàn)在圖示的右側(cè),可以看出解釋性論據(jù)在解釋測驗(yàn)對特質(zhì)的測量結(jié)果時(shí)運(yùn)用了四種主要的推導(dǎo)過程,通過對觀測樣本的評分得到一個(gè)觀測分?jǐn)?shù),觀測分?jǐn)?shù)通過概括形成全域分?jǐn)?shù),然后通過對全域分?jǐn)?shù)的推斷形成目標(biāo)分?jǐn)?shù),也就是對目標(biāo)范圍的預(yù)期值。最后,結(jié)合對目標(biāo)分?jǐn)?shù)的應(yīng)用得到對特質(zhì)的解釋。
2.3 評估解釋性論據(jù)的標(biāo)準(zhǔn)
關(guān)于評估解釋性論據(jù)的標(biāo)準(zhǔn),Kane(2012:p.13)做出了解釋,主要包括三個(gè)方面:
(1)論據(jù)的清晰度:指觀測表現(xiàn)、結(jié)論以及決策的表述都要清晰,盡量細(xì)化。
(2)論據(jù)的一致性:指觀測表現(xiàn)、結(jié)論、決策之間應(yīng)當(dāng)是一致的。
(3)推斷和假設(shè)的合理性:指整個(gè)研究假設(shè)、分析、解釋的過程都要是合理的。
也就是說,Kane要求解釋性論據(jù)在解釋的過程中,對論據(jù)的說明要清楚細(xì)致,做到細(xì)化和可操作性,同時(shí)在觀測表現(xiàn)、結(jié)論、分析之間做到推導(dǎo)的一致性,在推導(dǎo)過程中所提出的研究假設(shè)、提供的支持證據(jù)、以及之后的推斷和應(yīng)用都要合理可靠。只有達(dá)到這些標(biāo)準(zhǔn),才可以說對一項(xiàng)測驗(yàn)的效度檢驗(yàn)提供了解釋性論據(jù)的研究。
圖1 Kane(2006)描繪的解釋性論據(jù)
2.4 小結(jié)
效度的解釋性論據(jù)理論研究,由評分、推廣、推導(dǎo)和應(yīng)用等推導(dǎo)過程組成,每一個(gè)推導(dǎo)過程都會(huì)呈現(xiàn)具體的研究和調(diào)查程序,這些效度研究證據(jù)代表了一種不同的效度檢驗(yàn)方法,這種方法不同于以往教育測量(Cronbach&Meehl,1955;Messick,1989)和教育評估中所采用的積累證據(jù)的方法(Bachman,1990;Weir,2005)。因?yàn)橐酝e累證據(jù)的方法很難確定需要搜集哪種證據(jù),也不能確定需要多少種證據(jù)才足以實(shí)現(xiàn)效度檢驗(yàn)(Shepard,1993)。而解釋性效度論據(jù)由不同種類的推導(dǎo)過程組成,不同的推導(dǎo)程序能夠?qū)πФ妊芯克璧牟煌愋妥龀鼍唧w檢驗(yàn)(Chapelle,2008)。正因?yàn)榻忉屝哉摀?jù)推導(dǎo)過程的系統(tǒng)性和可操作性,這一效度研究思路得到了效度研究者們的關(guān)注和認(rèn)可。在實(shí)際應(yīng)用方面,當(dāng)前國外考試運(yùn)用解釋性效度論據(jù)進(jìn)行分析的報(bào)告非常少見,目前只有國際大規(guī)模語言水平測試TOEFL考試運(yùn)用解釋性論據(jù)理論對TOEFL機(jī)考(IBT)做了詳細(xì)的效度研究(Chapelle等,2008)。國內(nèi)心理與教育測量界也關(guān)注到這一論據(jù)理論,田霖、韋小滿等(2014)結(jié)合該理論對自學(xué)考試的效度研究做了初步的設(shè)想,但尚未發(fā)現(xiàn)對某一具體測驗(yàn)進(jìn)行解釋性論據(jù)檢驗(yàn)的細(xì)化研究?!斑@種缺乏效度論證的情況,很容易導(dǎo)致考試分?jǐn)?shù)的誤用,也很容易使考試收到批評和攻擊?!保ㄖx小慶,2013)可以說,運(yùn)用解釋性論據(jù)展開的效度檢驗(yàn)成為當(dāng)前效度研究值得探索與應(yīng)用的領(lǐng)域。
3.1 留學(xué)生預(yù)科漢語綜合統(tǒng)一考試
來華留學(xué)生預(yù)科漢語綜合統(tǒng)一考試(以下簡稱為“預(yù)科漢語考試”)是針對外國留學(xué)生進(jìn)入我國大學(xué)進(jìn)行相關(guān)專業(yè)學(xué)習(xí)的入學(xué)考試,根據(jù)教育部的要求,漢語預(yù)科教育考核應(yīng)不同于一般的語言水平考試,它所測的東西是語言與專業(yè)、知識與能力的統(tǒng)一體。因此,預(yù)科漢語考試專門設(shè)計(jì)成一種集基礎(chǔ)漢語和專業(yè)漢語為一體的考試,它具備普通語言水平測試(例如HSK)和專門用途的語言測試雙重性質(zhì)。在基礎(chǔ)漢語部分的設(shè)計(jì)上,以語言能力為考查核心,兼顧語言知識的考查,實(shí)現(xiàn)對語言能力的全面測評。在專業(yè)漢語部分的設(shè)計(jì)上,目的是測試預(yù)科生運(yùn)用漢語獲取專業(yè)漢語知識的能力。預(yù)科漢語考試作為一個(gè)測評預(yù)科教育效果的測量工具,其測試效度如何關(guān)系到整個(gè)考試的質(zhì)量,應(yīng)當(dāng)進(jìn)行深入的探究。本文將根據(jù)解釋性論據(jù)理論包含的一系列推導(dǎo)過程,對留學(xué)生預(yù)科漢語考試的效度進(jìn)行檢驗(yàn),為國內(nèi)漢語測試的效度研究提供一個(gè)全新的視角,并實(shí)現(xiàn)對這一理論的首次運(yùn)用。
3.2 預(yù)科漢語考試中解釋性論據(jù)的細(xì)化與探析
本文主要呈現(xiàn)預(yù)科漢語考試“解釋性效度論據(jù)所需要的一些證據(jù)”(Kane,1990,1992,2001,2004,2006,2012)。圍繞解釋性論據(jù)的研究,目的就是更加清楚地對測驗(yàn)分?jǐn)?shù)做出解釋和使用,進(jìn)而為預(yù)科漢語教學(xué)提供相應(yīng)的信息。
根據(jù)解釋性論據(jù)所具有的開放性的特點(diǎn),論據(jù)可以根據(jù)需要被繼續(xù)開發(fā)、修改甚至刪除。本文結(jié)合預(yù)科漢語考試的特點(diǎn),將該考試的解釋性論據(jù)擴(kuò)展為由范圍界定、評估、推廣、解釋、推斷和應(yīng)用六個(gè)推導(dǎo)過程組成,經(jīng)過一系列假設(shè)、求證的推導(dǎo)過程,最后推導(dǎo)出最終結(jié)論,即“預(yù)科漢語考試測驗(yàn)分?jǐn)?shù)反應(yīng)了被試在大學(xué)學(xué)習(xí)環(huán)境下,在聽力、寫作和閱讀方面理解和使用漢語的能力。這個(gè)分?jǐn)?shù)對于幫助學(xué)校錄取學(xué)生,進(jìn)行分班決策和指導(dǎo)漢語教學(xué)都是有用的”。下面具體說明預(yù)科漢語考試解釋性論據(jù)推導(dǎo)的每一個(gè)細(xì)化過程。
3.2.1 范圍界定
范圍界定推導(dǎo)過程的研究依據(jù)是“我們所觀察到的被試在預(yù)科漢語考試上的行為表現(xiàn),揭示出被試在目標(biāo)范圍的代表性情境下,運(yùn)用漢語的相關(guān)知識,技能的能力。”而這個(gè)依據(jù)又是以三個(gè)假設(shè)為基礎(chǔ)的,我們用表1呈現(xiàn)范圍界定過程中的三個(gè)假設(shè)及其支持證據(jù)。
總體來說,預(yù)科漢語考試的解釋性論據(jù)中目標(biāo)范圍界定的推導(dǎo)過程如圖2所示。
3.2.2 評估
評估推導(dǎo)過程同樣基于一個(gè)研究依據(jù),即“通過觀測被試在預(yù)科漢語考試任務(wù)上的表現(xiàn),我們發(fā)現(xiàn)觀測分?jǐn)?shù)反映了被試的漢語語言能力”,這個(gè)依據(jù)是以三個(gè)假設(shè)為基礎(chǔ)的,具體的假設(shè)和支持證據(jù)包含在評估過程的流程中,如表2所示。
我們將預(yù)科漢語考試的解釋性論據(jù)中評估的推導(dǎo)過程概括如圖3所示。
表1 范圍界定推導(dǎo)過程
圖2
表2 評估推導(dǎo)過程
圖3
3.2.3推廣
推廣推導(dǎo)過程基于的研究依據(jù)為“觀測分?jǐn)?shù)是對理想分?jǐn)?shù)的估計(jì),需要通過相應(yīng)的平行任務(wù)、平行測驗(yàn)以及平行評分員評分等一系列過程”,如表3所示。
這個(gè)復(fù)雜的推廣推導(dǎo)過程概括如圖4所示。
3.2.4 解釋
解釋推導(dǎo)過程的研究依據(jù)是“理想分?jǐn)?shù)被認(rèn)為體現(xiàn)了被試的專業(yè)語言能力”,如表4所示。
我們將解釋過程概括如圖5所示。
3.2.5 推斷
推斷過程包含的研究依據(jù)為“根據(jù)被試在大學(xué)漢語學(xué)習(xí)中表現(xiàn)出的語言學(xué)能力,說明預(yù)科漢語考試對專業(yè)漢語能力構(gòu)想做出了評估”,具體研究過程如表5所示。
預(yù)科漢語考試解釋性論據(jù)的推斷過程概括如圖6所示。
3.2.6 應(yīng)用
應(yīng)用推導(dǎo)過程同樣基于一個(gè)研究依據(jù),即“預(yù)科漢語考試對被試在大學(xué)期間使用漢語的能力進(jìn)行估計(jì)而得到的信息,對大學(xué)錄取考生、以及為考生提供恰當(dāng)?shù)恼n程都是有用的”,如表6所示。
表3 推廣推導(dǎo)過程
圖4
表4 解釋推導(dǎo)過程
圖5
表5 推斷推導(dǎo)過程
圖6
預(yù)科漢語考試解釋性論據(jù)的應(yīng)用過程如圖7所示。
3.3 小結(jié)
從上文所呈現(xiàn)的預(yù)科漢語考試效度檢驗(yàn)的整個(gè)推導(dǎo)過程可以看出,解釋性論據(jù)研究貫穿整個(gè)測驗(yàn)運(yùn)行過程的始終。從最初的范圍界定開始,要著力確定測驗(yàn)任務(wù)范圍、內(nèi)容范圍以及知識技能范圍等,這個(gè)過程需要預(yù)先細(xì)致考慮并提出假設(shè)來明確,然后搜集相應(yīng)的證據(jù)逐一支持這些假設(shè)的成立。第二步的評估推導(dǎo)過程,同樣需要考慮一些注意事項(xiàng),包括評分體系的恰當(dāng)性、任務(wù)管理是否適當(dāng)、題目的統(tǒng)計(jì)測量等研究假設(shè),從而指導(dǎo)具體操作,提供支持證據(jù)證明假設(shè)成立。推廣過程包含了對測驗(yàn)信度的研究,通過運(yùn)用概化理論檢驗(yàn)測驗(yàn)的一致性程度,并通過等值實(shí)現(xiàn)不同測驗(yàn)之間分?jǐn)?shù)的可比性,體現(xiàn)測驗(yàn)的整體質(zhì)量。解釋推導(dǎo)過程則包含了傳統(tǒng)研究中對不同效度類型的檢驗(yàn)過程,運(yùn)用相關(guān)分析法做測驗(yàn)的共識效度檢驗(yàn),運(yùn)用因素分析法做構(gòu)想效度檢驗(yàn)等,從多個(gè)角度搜集證據(jù)檢驗(yàn)構(gòu)想效度。推斷過程則從測驗(yàn)的外界環(huán)境中尋找效度標(biāo)準(zhǔn),例如個(gè)人評價(jià)、教師評價(jià)、課堂測驗(yàn)成績等,實(shí)現(xiàn)多種效度來源的效標(biāo)關(guān)聯(lián)效度檢驗(yàn),進(jìn)一步證明測驗(yàn)的有效性。最后的應(yīng)用推導(dǎo)過程,則是關(guān)注于預(yù)科漢語考試的使用效果方面,例如測驗(yàn)分?jǐn)?shù)的含義以及為決策提供信息等,這些內(nèi)容也被納入到解釋性論據(jù)當(dāng)中,共同組成了豐富多樣的解釋性論據(jù)。
表6 應(yīng)用推導(dǎo)過程
圖7
根據(jù)解釋性論據(jù)的檢驗(yàn)要求和對其的評判標(biāo)準(zhǔn),本研究對預(yù)科漢語考試論據(jù)檢驗(yàn)的每一個(gè)過程都進(jìn)行了細(xì)化和分類,并提出相應(yīng)的假設(shè)和支持證據(jù),實(shí)現(xiàn)研究假設(shè)和證據(jù)推斷的合理性。同時(shí)在六大推導(dǎo)過程中確保論據(jù)的一致性和邏輯性,力爭清晰地表明觀測分?jǐn)?shù)與最終解釋及其應(yīng)用的整體過程?;谏鲜鲅芯克枷?,形成了本研究中的具體說明,實(shí)現(xiàn)對預(yù)科漢語考試解釋性效度論據(jù)的檢驗(yàn)和證明的細(xì)化和可操作性。
測試作為對外漢語教學(xué)的四大組成部分之一,其效度研究是必不可少的。我們運(yùn)用效度論據(jù)理論對預(yù)科漢語考試進(jìn)行效度研究,一方面是為了促進(jìn)預(yù)科漢語考試起到積極后效的作用,推動(dòng)教學(xué)大綱的貫徹執(zhí)行,使預(yù)科漢語考試更好地為教學(xué)服務(wù);另一方面是通過一系列的效度檢驗(yàn)的整體過程,為預(yù)科漢語教學(xué)提供動(dòng)態(tài)信息。另外,在本研究的基礎(chǔ)上,促進(jìn)教學(xué)與考試的有機(jī)結(jié)合與理論探討。
從預(yù)科漢語考試中解釋性效度論據(jù)的檢驗(yàn)過程中,我們能夠發(fā)現(xiàn),效度論據(jù)的證明過程具有整體性、系統(tǒng)性和多樣性的特點(diǎn),這些特征同樣體現(xiàn)在預(yù)科漢語教學(xué)當(dāng)中,對教學(xué)和測評具有一定的啟示。
4.1 整體性
從效度論據(jù)的取證來看,效度檢驗(yàn)需要貫穿整個(gè)測驗(yàn)的全過程,包括測驗(yàn)的開發(fā)、實(shí)施和最終的評價(jià)。這種研究的整體性同樣適用于預(yù)科漢語教學(xué)的開展。為確保漢語教學(xué)的教學(xué)質(zhì)量和測評效度,在預(yù)科教學(xué)實(shí)施之初,就需要制定相應(yīng)的教學(xué)大綱,根據(jù)大綱編制配套的教材,明確教學(xué)所需的重點(diǎn)、難點(diǎn),同時(shí)考慮對教學(xué)效果進(jìn)行評定的測驗(yàn)編制問題,可以說制定教學(xué)大綱、編制配套教材以及開發(fā)測驗(yàn),為整個(gè)預(yù)科漢語教學(xué)搭起了總體框架。在這個(gè)總體框架下,預(yù)科漢語教學(xué)的安排和開展可以得到一些啟發(fā)和提示,提前規(guī)劃一系列教學(xué)任務(wù),是后續(xù)教學(xué)和測評工作順利開展的基石,避免預(yù)科教學(xué)過分關(guān)注教材開發(fā)和課堂教學(xué),忽略制定教學(xué)大綱和測試評估等問題的發(fā)生。
4.2 系統(tǒng)性
系統(tǒng)性是指整個(gè)教學(xué)和測評的實(shí)施是遵循一定的邏輯性的,是一個(gè)系統(tǒng)性的工程,而非雜亂無章、無序可依。根據(jù)上文對預(yù)科漢語考試解釋性論據(jù)的六個(gè)推導(dǎo)環(huán)節(jié)的細(xì)化和探析,我們不難看到,每一個(gè)推導(dǎo)過程都是基于一定的研究依據(jù)的,同時(shí)提出幾個(gè)具體的研究假設(shè),并在實(shí)際檢驗(yàn)中找到對應(yīng)的支持證據(jù)來支持假設(shè),從而證明研究假設(shè)的成立,完成對研究依據(jù)的證明。每一個(gè)推導(dǎo)過程都必須遵循研究的邏輯性,整個(gè)解釋性論據(jù)的檢驗(yàn)過程體現(xiàn)了研究的系統(tǒng)性和嚴(yán)謹(jǐn)性。根據(jù)這一特征,預(yù)科漢語教學(xué)在組織教學(xué)和進(jìn)行測評中也同樣需要遵循一定的科學(xué)性和邏輯性,根據(jù)教學(xué)需求提出研究假設(shè),同時(shí)收集和提供證據(jù)來支持假設(shè),從而實(shí)現(xiàn)對教學(xué)相關(guān)課題的研究和論證。
4.3 多樣性
在解釋性效度論據(jù)的檢驗(yàn)過程中,多方收集效度證據(jù)是效度檢驗(yàn)的重要組成部分,同時(shí)也體現(xiàn)了效度證據(jù)的多樣性。這一特征也反映出預(yù)科漢語教學(xué)和測評同樣需要收集多樣、全面的信息。本文所說的多樣性,包括信息種類的多樣性和資料調(diào)查范圍的多樣性。具體來看,信息種類的多樣性是指在教學(xué)實(shí)施過程中留意來自學(xué)校、學(xué)生、教師、錄取大學(xué)等多方面的資料和信息。例如在分析預(yù)科漢語考試的效標(biāo)關(guān)聯(lián)效度時(shí),需要收集的效度標(biāo)準(zhǔn)包括學(xué)生的平日成績、教室評價(jià)、學(xué)生自評、學(xué)生背景情況,以及進(jìn)入大學(xué)學(xué)習(xí)后的考試成績等,這些方面的資料都需要在總體規(guī)劃和具體實(shí)施教學(xué)中隨時(shí)獲取。資料調(diào)查范圍的多樣性是指獲取所需的資料信息需要從不同的范圍中尋找,例如從預(yù)科生所在的院系、預(yù)科生考入的大學(xué)所在院系、招收預(yù)科學(xué)生的相關(guān)大學(xué)的招生管理部門,以及社會(huì)上對預(yù)科漢語考試的評價(jià)等方面,可見信息來源的范圍是比較廣泛的。
在對外漢語教學(xué)中,教學(xué)與測試互相影響,在研究中應(yīng)作為一個(gè)整體來對待。效度檢驗(yàn)不僅為了證明測驗(yàn)的有效性,還能夠給教學(xué)以反饋信息。本文運(yùn)用解釋性論據(jù)理論為預(yù)科漢語考試建立了一整套細(xì)化的效度研究框架。我們從中可以看到,效度論據(jù)的收集貫穿整個(gè)教學(xué)和測評的始終,是一個(gè)動(dòng)態(tài)、連貫、長期的積累過程,很多信息都需要提前規(guī)劃和布置,并在具體的教學(xué)實(shí)踐當(dāng)中及時(shí)搜集。整個(gè)效度論證中突顯出的整體性、系統(tǒng)性和多樣性的特點(diǎn),同樣適用于預(yù)科漢語教學(xué)的整體過程,也就是說,效度論據(jù)取證過程是伴隨預(yù)科漢語教學(xué)和測評過程始終的,充分了解論據(jù)理論在預(yù)科漢語考試中的應(yīng)用,有利于預(yù)科漢語教學(xué)和測評的開展和完善。
[1]Bachman,L.F.Fundamental Consideration in Language Testing [M].New York:Oxford University Press,1990.
[2]Carl A.Chapell,Mary K.Enright,Joan Routled(eds.)Building a Validity Argument for The Test of Engligh As A Foreign Language [M].London:Routledge,2008.
[3]Courtis,S.Report of the standardization committee[J].Journal of Educational Research,1921(4):78-80.
[4]Cronbach,L.J.,Meehl.P.E.Construct validity in psychological tests [J].Psychological Bulletin,1955(52):281-302.
[5]Kane,M.T.Irish J.Med.Sci,1990(160):17-22.
[6]Kane,M.T.Current concerns in validity theory[J].Journcnal of Edu-cationa Measurement,2001(38):319-342.
[7]Kane,M.T.Validation[M].In R.L.Brennan(Ed.),Educational measurement(4th ed.,17-64).Westport:National Council on Mea-surement in Education and American Council on Education,2006.
[8]Kane,M.T.Terminology,emphasis,and utility in validation[J].Ed-ucational Researcher,2008,37(2),76-82.
[9]Kane,M.T.Validating the Interpretations and Uses of Test Scoces. The concept of validity:revisions,new directions,and applications [M].edited by Robert W.Lissitz.Information Age Publishing Inc,2009:39-64.
[10]Kane,M.T.Validating score interpretations and uses[J].Language Testing,Vol.29,No.1,2012:3-18.
[11]Messick,S.Meaning and Values in Test Validation:The Science and Ethics of Assessment[J].Educational Researcher,1989(18): 2,5-11.
[12]Shepard,L.A.Evaluating test validity[J].Review of Research in Education,1993(19):405-450.
[13]Weir.Language Testing And Validation:An Evidence-based Ap-proach[M].Palgrave Macmillan,2005.
[14]田霖,韋小滿,等.2014自學(xué)考試的效度及其證據(jù)來源探析[J].中國考試,2014(6):18-23.
[15]謝小慶.效度:從分?jǐn)?shù)的合理解釋道可接受解釋[J].中國考試,2013(7):3-9.
Application to Preparatory Students Teaching and Assessment from Argument-based Approach to Validation
ZHAO Qifeng
This study uses the dominant theory of the validity research:Interpretive Argument-based Approach to Validation,and sets up a set of detailed validity evidence research framework for Chinese preparatory test.This framework includes six derivation processes,such as the scope definition,evaluation,generalization,the explanation,inference and application.Each process presents the specific research and investigation procedures. The study finds that collecting the evidences of validity runs through the teaching and assessment.This process is a dynamic,coherent,long-term accumulation process.The process which obtaining validity evidence has the characteristics of wholeness,systemic and diversity.These characteristics also apply to preparatory Chinese language teaching.This study tries to provide detailed information for preparatory Chinese language teaching as much as possible.This study also want to help to carry out and perfect the preparatory Chinese language teaching.
Validity;Interpretive Argument;Chinese Preparatory Test;Chinese Preparatory Teaching
G405
A
1005-8427(2016)02-0014-9
本課題受到北京語言大學(xué)校級科研項(xiàng)目(中央高校基本科研業(yè)務(wù)專項(xiàng)基金資助),項(xiàng)目編號為13YBG16的資助,并“受北京語言大學(xué)青年英才培養(yǎng)計(jì)劃資助”,特致謝忱!
趙琪鳳,女,北京語言大學(xué)語言科學(xué)院漢語考試與教育測量研究所,副研究員,博士(北京 100083)