關(guān)鍵詞 迫選測(cè)驗(yàn) 變點(diǎn)分析 后程隨機(jī)作答 MUPP-2PL模型
1 引言
在心理與教育測(cè)驗(yàn)中,被試常會(huì)出現(xiàn)以下現(xiàn)象:因作答動(dòng)機(jī)不高而隨意選擇答案;因作答時(shí)間有限而加速作答;因疲勞而在作答過(guò)程中出現(xiàn)表現(xiàn)下降。因此,被試在作答過(guò)程中出現(xiàn)異常反應(yīng)是非常普遍的現(xiàn)象。Berry 等人(1992)的研究表明,有超過(guò)52% 的被試在測(cè)驗(yàn)中存在隨機(jī)作答現(xiàn)象。在所有的異常反應(yīng)中,后程隨機(jī)作答(back random response,BRR;指被試從最初的基于測(cè)試內(nèi)容的作答反應(yīng)改變?yōu)樵跍y(cè)試中某個(gè)項(xiàng)目開(kāi)始進(jìn)行隨機(jī)作答,并在其余的測(cè)試項(xiàng)目中繼續(xù)這種作答反應(yīng))是最常見(jiàn)的異常反應(yīng)之一 (Berry et al., 1992; Clark et al., 2003)。
當(dāng)前常用的異常作答偵測(cè)方法,主要針對(duì)能力測(cè)驗(yàn)中常見(jiàn)的異常反應(yīng)開(kāi)發(fā),而用于偵測(cè)人格測(cè)驗(yàn)中異常作答的方法則十分薄弱。隨著人格測(cè)驗(yàn)在人才測(cè)評(píng)領(lǐng)域的廣泛應(yīng)用,被試在測(cè)驗(yàn)過(guò)程中存在異常作答反應(yīng)的問(wèn)題也逐漸顯露出來(lái)。迫選測(cè)驗(yàn)雖然規(guī)避了傳統(tǒng)人格測(cè)驗(yàn)的部分弊端(如社會(huì)稱許性),但是鑒于人格測(cè)驗(yàn)的特殊性,比如測(cè)驗(yàn)項(xiàng)目較多、被試缺乏作答動(dòng)機(jī),偶爾也會(huì)受到時(shí)間壓力因素的影響,后程隨機(jī)作答反應(yīng)仍然存在,且后程隨機(jī)作答的存在可能會(huì)導(dǎo)致被試潛在特質(zhì)估計(jì)存在較大誤差,還會(huì)影響測(cè)驗(yàn)的信度和效度。
目前關(guān)于偵測(cè)后程隨機(jī)作答的研究十分有限,只有Yu 和Cheng(2019)、佘夢(mèng)華(2021)在測(cè)驗(yàn)中使用變點(diǎn)分析法(change point analysis, CPA)偵查后程隨機(jī)作答,且統(tǒng)計(jì)檢驗(yàn)力較理想。變點(diǎn)分析法相比于傳統(tǒng)的偵查方法,優(yōu)勢(shì)在于不僅可以識(shí)別被試在測(cè)驗(yàn)過(guò)程中是否存在異常反應(yīng),還可以檢測(cè)異常變點(diǎn)發(fā)生的具體位置(Shao, 2016; Yu amp; Cheng,2019)。一旦確定了發(fā)生異常反應(yīng)的位置,即可對(duì)存在異常反應(yīng)的部分?jǐn)?shù)據(jù)進(jìn)行清洗,而不用刪除掉異常被試的全部數(shù)據(jù)。變點(diǎn)分析方法可最大限度地保留有效數(shù)據(jù),降低異常反應(yīng)的影響,提高參數(shù)估計(jì)精度以及測(cè)驗(yàn)的信度和效度。然而,當(dāng)前國(guó)內(nèi)外將變點(diǎn)分析方法應(yīng)用在迫選測(cè)驗(yàn)下的異常偵查的研究還是空白。
鑒于迫選測(cè)驗(yàn)在偵測(cè)異常作答反應(yīng)領(lǐng)域的空白以及變點(diǎn)分析方法在偵測(cè)異常反應(yīng)領(lǐng)域中的優(yōu)越性,本研究擬在變點(diǎn)分析法框架下采用基于似然比檢驗(yàn)的個(gè)人擬合統(tǒng)計(jì)量(L max)、基于加權(quán)殘差的個(gè)人擬合統(tǒng)計(jì)量(Rmax)和基于Wald 檢驗(yàn)的個(gè)人擬合統(tǒng)計(jì)量(Wmax)三種指標(biāo)對(duì)迫選測(cè)驗(yàn)中的后程隨機(jī)作答反應(yīng)進(jìn)行偵測(cè)。已有研究表明Morillo 等人(2016)提出的基于優(yōu)勢(shì)模型的MUPP-2PL 模型(multiunidimensional pairwise-preference two-parameterlogistic model)相比其他模型更具有優(yōu)越性:第一,人格測(cè)驗(yàn)中包含的某些結(jié)構(gòu)(例如人格的病理方面)更符合優(yōu)勢(shì)模型的假設(shè)(Cho et al., 201; De FranciscoCarvalho et al., 2015);第二,在參數(shù)估計(jì)方面,優(yōu)勢(shì)模型比展開(kāi)模型更簡(jiǎn)潔(Morillo et al., 2016);第三,采用優(yōu)勢(shì)模型形成的量表往往具有更好的心理測(cè)量學(xué)特性,例如更高的信度以及效度(Huang amp; Mead,2014)。因此,本研究擬在MUPP-2PL 框架下,將變點(diǎn)分析方法引入迫選測(cè)驗(yàn)的異常偵查中,比較并驗(yàn)證三種變點(diǎn)分析指標(biāo)在迫選測(cè)驗(yàn)中的效果,為迫選測(cè)驗(yàn)提供有效、合理的異常作答偵查方法。
2 常用的變點(diǎn)分析方法
變點(diǎn)分析法構(gòu)造個(gè)人擬合統(tǒng)計(jì)指標(biāo)( person fitstatistic, PFS)的原理為:若某被試在測(cè)驗(yàn)中存在變點(diǎn),那么這個(gè)測(cè)驗(yàn)可以題目s 為分界線,將測(cè)驗(yàn)劃分為兩個(gè)子測(cè)驗(yàn):子測(cè)驗(yàn)1 為X 1, X 2, ..., Xs,子測(cè)驗(yàn)2 為Xs +1, Xs+2, ..., XJ。這兩個(gè)子測(cè)驗(yàn)在某種統(tǒng)計(jì)學(xué)屬性上具有根本性差異,而變點(diǎn)分析方法構(gòu)造的PFS 可對(duì)這種差異進(jìn)行量化。若構(gòu)造的個(gè)人擬合統(tǒng)計(jì)指標(biāo)在變點(diǎn)取s 值時(shí)達(dá)到最大,且超出顯著性水平則說(shuō)明第s 題為變點(diǎn)位置(張龍飛等, 2020)。以下是幾種常用的變點(diǎn)分析指標(biāo):
4 變點(diǎn)分析方法在大五人格問(wèn)卷中的應(yīng)用
4.1 數(shù)據(jù)描述
實(shí)證數(shù)據(jù)選用Morillo 等人(2016)收集的大五人格問(wèn)卷數(shù)據(jù),他們對(duì)來(lái)自兩所西班牙大學(xué)的567名學(xué)生進(jìn)行了FCQ 測(cè)試,以測(cè)量五大特征(宜人性Ag、嚴(yán)謹(jǐn)性Co、外向性Ex、神經(jīng)質(zhì)Ne、開(kāi)放性O(shè)E)。19人因缺漏數(shù)據(jù)被刪除,剩下548 人有待分析。原問(wèn)卷由30 個(gè)block 組成,每個(gè)block 包含2個(gè)陳述。本研究選擇開(kāi)放性這個(gè)維度進(jìn)行了分析,開(kāi)放性是指對(duì)待已有經(jīng)驗(yàn)所持有的勇于求新、對(duì)待新鮮事物不斷探索的態(tài)度,且已有研究表明,開(kāi)放性可正向預(yù)測(cè)大學(xué)生的心理健康( 羅薇, 2020)。
另外,在偵測(cè)異常作答時(shí)借助額外信息(如反應(yīng)時(shí)間)來(lái)改善偵查結(jié)果。已有研究表明,在能力測(cè)驗(yàn)中偵測(cè)具有加速作答的被試時(shí),帶有反應(yīng)時(shí)數(shù)據(jù)的變點(diǎn)分析法的統(tǒng)計(jì)檢驗(yàn)力非常理想(Shao et al.,2016)。被試在迫選測(cè)驗(yàn)是否也會(huì)受到反應(yīng)時(shí)的影響,反應(yīng)時(shí)對(duì)偵測(cè)迫選測(cè)驗(yàn)中的異常反應(yīng)是否具有積極作用值得進(jìn)一步研究。
最后,隨著人格測(cè)驗(yàn)的廣泛應(yīng)用,開(kāi)發(fā)專門針對(duì)迫選測(cè)驗(yàn)的異常反應(yīng)偵測(cè)方法也變得尤為迫切。針對(duì)迫選測(cè)驗(yàn)特點(diǎn),開(kāi)發(fā)新的檢測(cè)方法無(wú)論是對(duì)研究人員還是對(duì)被試都具有重要的理論與實(shí)際意義。