張 興

《美國(guó)新聞與世界報(bào)道》(U.S.News&WorldReport)1948年由《美國(guó)新聞》《世界報(bào)道》《美國(guó)周刊》三種雜志合并而成，目前為僅次于《時(shí)代》和《新聞周刊》的第三大新聞雜志。1983年，該雜志第一次推出針對(duì)美國(guó)本科院校的最好大學(xué)排名，獲得了很好的市場(chǎng)反響。從那以后，該雜志發(fā)布了一系列排行榜。最好研究生院、最好高中、最好醫(yī)院、汽車排行榜等不斷被推出，排名范圍從教育領(lǐng)域擴(kuò)大到日常生活領(lǐng)域。目前，各種類型的排行榜已經(jīng)成為該雜志的特色內(nèi)容。

在這些排名中，1983年發(fā)布的“美國(guó)本科院校最好大學(xué)排名”(以下簡(jiǎn)稱“美新大學(xué)排名”)歷史最長(zhǎng)、影響最廣。它被認(rèn)為是大學(xué)排名領(lǐng)域的分水嶺，也是大學(xué)排名史上的里程碑，對(duì)全球各國(guó)大學(xué)排名產(chǎn)生了巨大影響[1]。另外，該排名的排名方法已經(jīng)發(fā)展成為一套完整的排名體系，注重主觀指標(biāo)與客觀指標(biāo)的結(jié)合，具有一定的研究和借鑒意義[2]。

美新大學(xué)排名對(duì)它所評(píng)估的學(xué)院和大學(xué)進(jìn)行了分類，同時(shí)，它還包括性價(jià)比最高大學(xué)排名、本科教學(xué)最佳大學(xué)排名、次優(yōu)學(xué)生可選擇的頂尖大學(xué)排名、傳統(tǒng)黑人大學(xué)排名等具有明確方向的排名信息，可以滿足不同客戶個(gè)性化的需求[3]。國(guó)內(nèi)文獻(xiàn)較多關(guān)注該排名的優(yōu)點(diǎn)，對(duì)該排名的不足討論較少，且多為理論分析，缺乏證據(jù)支持；國(guó)外文獻(xiàn)以批評(píng)為主，且多為實(shí)證分析。任何一個(gè)排名都不是完美的，本研究將分別從指標(biāo)體系、數(shù)據(jù)計(jì)算以及動(dòng)機(jī)和結(jié)果層面梳理美國(guó)最好大學(xué)排名存在的問(wèn)題，以更客觀、更全面地評(píng)價(jià)大學(xué)排名。

一、最好大學(xué)排名指標(biāo)存在的問(wèn)題

美新大學(xué)排名通常于每年8月發(fā)布，該排名誕生之初并不具備完整的評(píng)估指標(biāo)體系，最初三期以大學(xué)校長(zhǎng)的主觀調(diào)查為依據(jù)，并不包括客觀評(píng)估指標(biāo)。直至1988年，才正式推出兼具主觀評(píng)價(jià)和客觀指標(biāo)的評(píng)估指標(biāo)體系。從1998年開(kāi)始，排名評(píng)估指標(biāo)體系的一級(jí)指標(biāo)相對(duì)固定，二級(jí)指標(biāo)或計(jì)算方法不斷調(diào)整。本研究以最新的2019年指標(biāo)體系為例進(jìn)行分析，如表1所示。

表1 2019年美新大學(xué)排名評(píng)估指標(biāo)體系

(一)學(xué)術(shù)聲譽(yù)指標(biāo)存在的問(wèn)題

學(xué)術(shù)聲譽(yù)指標(biāo)在所有指標(biāo)中占20%權(quán)重，對(duì)于不同類型的高校有不同的二級(jí)指標(biāo)。高中輔導(dǎo)員評(píng)價(jià)得分在2011年首次被引入評(píng)價(jià)指標(biāo)體系，用于評(píng)價(jià)全國(guó)性大學(xué)、全國(guó)性文理學(xué)院的學(xué)術(shù)聲譽(yù)。根據(jù)2019年的指標(biāo)體系，在全國(guó)性大學(xué)、全國(guó)性文理學(xué)院的學(xué)術(shù)聲譽(yù)調(diào)查中，相同類型高校的校長(zhǎng)、教務(wù)長(zhǎng)、招生院長(zhǎng)(或同等職務(wù))等學(xué)術(shù)同行評(píng)價(jià)和高中輔導(dǎo)員評(píng)價(jià)分別占15%和5%的權(quán)重，地區(qū)性大學(xué)和地區(qū)性學(xué)院的學(xué)術(shù)聲譽(yù)則只包括學(xué)術(shù)同行評(píng)估得分。

研究者對(duì)該指標(biāo)的批評(píng)集中在學(xué)術(shù)聲譽(yù)不能客觀反映各高校的教學(xué)質(zhì)量。結(jié)構(gòu)方程模型評(píng)估的結(jié)果發(fā)現(xiàn)，同行評(píng)估聲譽(yù)在很大程度上受已發(fā)布的大學(xué)排名的影響，與組織質(zhì)量和績(jī)效的變化無(wú)關(guān)[4]。也有研究發(fā)現(xiàn)，相對(duì)于畢業(yè)生的表現(xiàn)而言，一所高校的聲譽(yù)實(shí)際上與政府人均教師經(jīng)費(fèi)支出相關(guān)性更大[5]。換句話說(shuō)，該排名的目的是幫助學(xué)生選擇學(xué)校和判斷學(xué)校的教學(xué)質(zhì)量，但事實(shí)上，該排名中使用的聲譽(yù)指標(biāo)無(wú)法實(shí)現(xiàn)上述目標(biāo)。

(二)教學(xué)成效指標(biāo)存在的問(wèn)題

教學(xué)成效是2019年新增的一級(jí)指標(biāo)，用以衡量高校教育成果，包含社會(huì)流動(dòng)性、畢業(yè)率和保留率、畢業(yè)率表現(xiàn)3個(gè)二級(jí)指標(biāo)，社會(huì)流動(dòng)性為新增，故現(xiàn)有文獻(xiàn)主要關(guān)注后兩個(gè)指標(biāo)。研究者普遍認(rèn)為，學(xué)術(shù)領(lǐng)導(dǎo)者應(yīng)該支持提高學(xué)生的保留率和畢業(yè)成績(jī)，故畢業(yè)率和保留率相關(guān)指標(biāo)本身有意義。高保留率和較好的畢業(yè)成績(jī)不僅可以通過(guò)提高學(xué)生的教育經(jīng)歷和經(jīng)濟(jì)支持來(lái)實(shí)現(xiàn)，還可以通過(guò)降低學(xué)生的學(xué)業(yè)要求來(lái)實(shí)現(xiàn)，但是排名數(shù)據(jù)只關(guān)注了保留率和畢業(yè)成績(jī)的最終結(jié)果，而沒(méi)有關(guān)注實(shí)現(xiàn)的方法[6]。

(三)教師資源指標(biāo)存在的問(wèn)題

教師資源指標(biāo)包括班級(jí)規(guī)模、教師薪資水平、有本學(xué)科最高學(xué)位的全職教師的比例、師生比和全職教師占比5個(gè)二級(jí)指標(biāo)，研究者批評(píng)較多的是教師薪資水平指標(biāo)。

在微觀層面，阿斯丁(Astin)的實(shí)證研究發(fā)現(xiàn)，教師薪酬指標(biāo)更多地反映教師的科研活動(dòng)，該指標(biāo)甚至與學(xué)生的科研學(xué)習(xí)呈負(fù)相關(guān)[7]。在宏觀層面，埃倫伯格(Ehrenberg)指出該排名使用的教師平均薪資指標(biāo)沒(méi)有考慮由于教師的專業(yè)領(lǐng)域和年齡分布不同產(chǎn)生的平均工資差異[6]。在另一篇文章中他指出，教師工資指標(biāo)可能促使大學(xué)持續(xù)增加教師工資，這可能是過(guò)去20年中私立研究型大學(xué)相對(duì)于公立研究型大學(xué)教師工資上漲的部分原因[8]。

(四)學(xué)生選拔性指標(biāo)存在的問(wèn)題

學(xué)生的選拔性指標(biāo)包含學(xué)生入學(xué)考試成績(jī)和原高中班級(jí)前10%新生比例2個(gè)二級(jí)指標(biāo)，它們均受到了諸多批評(píng)。

入學(xué)考試成績(jī)對(duì)低收入和少數(shù)群體不公平。許多機(jī)構(gòu)早在20世紀(jì)90年代早期就對(duì)這一指標(biāo)不再作強(qiáng)制要求，另外，排名中強(qiáng)調(diào)的標(biāo)準(zhǔn)化測(cè)試成績(jī)可能對(duì)低收入和代表性不足的少數(shù)群體學(xué)生申請(qǐng)者不公平，各高校也希望在更廣泛的范圍內(nèi)評(píng)判入學(xué)申請(qǐng)者，并鼓勵(lì)高中學(xué)生花時(shí)間準(zhǔn)備測(cè)試之外的其他活動(dòng)[8]。同樣，這些戰(zhàn)略性招生政策可能會(huì)傷害低收入申請(qǐng)者，他們?cè)跇?biāo)準(zhǔn)化考試中得分相對(duì)較低，并且經(jīng)濟(jì)條件通常不允許他們提前招生[9]。標(biāo)準(zhǔn)化測(cè)試不能代表學(xué)生的整體質(zhì)量，只根據(jù)排名作出的錄取決定沒(méi)有關(guān)注學(xué)生的整體素質(zhì)[10]，比如領(lǐng)導(dǎo)力這樣難以量化但已經(jīng)被證明與學(xué)校成功有關(guān)的質(zhì)量因素就沒(méi)有被考慮到[11]。

學(xué)生選拔性中包含的第二個(gè)指標(biāo)是進(jìn)入高中排名前10%的學(xué)生的比例，這一標(biāo)準(zhǔn)對(duì)那些在競(jìng)爭(zhēng)激烈學(xué)校就讀的學(xué)生不利[6]。此外，除了少數(shù)地區(qū)，許多高中不再對(duì)學(xué)生進(jìn)行排名。根據(jù)2005年調(diào)查數(shù)據(jù)，康奈爾大學(xué)的新生中排名前10%的一年級(jí)新生占80%，但35%的康奈爾大學(xué)新生所在的高中沒(méi)有進(jìn)行排名[8]。

(五)財(cái)務(wù)資源指標(biāo)存在的問(wèn)題

財(cái)務(wù)資源指標(biāo)衡量生均經(jīng)費(fèi)資源，占10%權(quán)重。生均經(jīng)費(fèi)資源是一項(xiàng)典型的高校投入指標(biāo)，相關(guān)研究認(rèn)為，投入指標(biāo)對(duì)學(xué)生學(xué)習(xí)產(chǎn)生的作用是高等教育中最大的謎團(tuán)之一。特倫齊尼(Terenzini)和帕斯卡雷拉(Pascarella)在控制了學(xué)生進(jìn)入學(xué)校時(shí)的特征、能力、背景等因素之后發(fā)現(xiàn)，學(xué)生的成長(zhǎng)與這些投入指標(biāo)之間沒(méi)有關(guān)系[12]。瑞恩(Ryan)的研究報(bào)告也指出，教學(xué)、學(xué)術(shù)支持和學(xué)生服務(wù)支出對(duì)于學(xué)生學(xué)習(xí)和發(fā)展密切相關(guān)的學(xué)生參與度沒(méi)有顯著影響[13]。除此之外，給學(xué)生帶來(lái)的經(jīng)濟(jì)壓力是該指標(biāo)的另一個(gè)問(wèn)題。高校為了排名更靠前，不敢輕易降低每名學(xué)生的支出增長(zhǎng)率，這不利于本科學(xué)費(fèi)的減少。簡(jiǎn)而言之，該排名鼓勵(lì)高?；ǜ噱X，這對(duì)低收入家庭的學(xué)生不利[6]。

(六)校友捐贈(zèng)指標(biāo)存在的問(wèn)題

校友捐贈(zèng)指標(biāo)指校友的平均捐贈(zèng)率，占5%權(quán)重。校友捐贈(zèng)率是一項(xiàng)容易被操控的指標(biāo)，越來(lái)越多的大學(xué)為了提高排名而操縱此項(xiàng)數(shù)據(jù)[14]。例如，南加利福尼亞大學(xué)沒(méi)有26%校友的聯(lián)系信息，因此便沒(méi)有將這部分計(jì)入報(bào)告的校友捐贈(zèng)率。該校捐贈(zèng)主管稱，學(xué)校的目標(biāo)是提高捐贈(zèng)率，而不是捐贈(zèng)總額。研究者認(rèn)為，為了提高排名而向每位校友索要1美元以提高捐贈(zèng)率的做法是沒(méi)有意義的。

二、最好大學(xué)排名數(shù)據(jù)計(jì)算存在的問(wèn)題

美新大學(xué)排名的指標(biāo)體系始終在不斷變化和完善。自發(fā)布排名以來(lái)，指標(biāo)系統(tǒng)出現(xiàn)了許多重要的轉(zhuǎn)折點(diǎn)。盡管如此，該排名仍然存在數(shù)據(jù)不準(zhǔn)確、指標(biāo)不全面、指標(biāo)體系頻繁改變和權(quán)重任意分配等問(wèn)題。

(一)數(shù)據(jù)不準(zhǔn)確

由于美新大學(xué)排名的公式是公開(kāi)的，各高校能夠很容易地操縱他們的一些措施，以便在關(guān)鍵指標(biāo)上獲得更高的分?jǐn)?shù)，例如，入學(xué)選擇性、生均財(cái)務(wù)資源、全職教師工資等指標(biāo)，排名數(shù)據(jù)的可靠性不夠。埃倫伯格(Ehrenberg)觀察到，為提高排名，康奈爾大學(xué)在計(jì)算校友捐贈(zèng)比例之前清除未順利畢業(yè)的校友，這一變化提高了康奈爾的校友捐贈(zèng)率，即使它與康奈爾大學(xué)的基本學(xué)術(shù)質(zhì)量沒(méi)有關(guān)系[6]。

排名的巨大影響力和大學(xué)校長(zhǎng)對(duì)排名的過(guò)度關(guān)注，使各高校很有可能通過(guò)操縱制度的各個(gè)方面來(lái)“操控?cái)?shù)據(jù)”[15-16]。雖然大學(xué)校長(zhǎng)公開(kāi)宣稱美新大學(xué)排名不能充分衡量大學(xué)質(zhì)量，但他們努力從幕后最優(yōu)化他們的排名[6]。比如在聲譽(yù)調(diào)查中，許多校長(zhǎng)和教務(wù)長(zhǎng)因不想?yún)⒓印斑x美比賽”而拒絕填寫(xiě)，但是其中一部分可能出于自身利益，故意將與他們關(guān)系密切的大學(xué)評(píng)價(jià)得非常差[6]?；羲箻?lè)(Hossler)、波洛克(Pollock)和斯特克洛(Stecklow)提出，有證據(jù)表明大學(xué)提供了不準(zhǔn)確的數(shù)據(jù)來(lái)提高排名，比如偽造考試成績(jī)和錄取數(shù)據(jù)等[17-19]。

(二)指標(biāo)不全面

大學(xué)排名經(jīng)常因指標(biāo)使用不完整而受詬病，諸多研究者對(duì)美新大學(xué)排名指標(biāo)的全面性進(jìn)行了研究。瓜里諾(Guarino)構(gòu)建了貝葉斯?jié)撛谧兞磕Ｐ?，發(fā)現(xiàn)學(xué)生擇校是衡量大學(xué)“質(zhì)量”的主要指標(biāo)[20]。美新大學(xué)排名對(duì)相關(guān)指標(biāo)給予了一定重視，不過(guò)該排名對(duì)學(xué)業(yè)優(yōu)秀的學(xué)生群體(在該學(xué)者提出的模式中，該變量本身就是一個(gè)應(yīng)該予以重視的潛在變量)和與之相關(guān)的其他質(zhì)量指標(biāo)不夠重視。韋伯斯特(Webster)采用主成分回歸分析法對(duì)大學(xué)排名11個(gè)指標(biāo)的相關(guān)貢獻(xiàn)度進(jìn)行了實(shí)證研究[1]，發(fā)現(xiàn)11個(gè)指標(biāo)之間存在嚴(yán)重的多重共線性。因此，在此基礎(chǔ)上賦予各指標(biāo)的權(quán)重不能準(zhǔn)確反映每個(gè)指標(biāo)對(duì)排名的貢獻(xiàn)。

(三)指標(biāo)體系頻繁改變和權(quán)重隨意分配

美新大學(xué)排名在20世紀(jì)90年代多次改變排名方法(指標(biāo)或指標(biāo)權(quán)重)，即使高校教育質(zhì)量沒(méi)有發(fā)生變化，學(xué)校的排名也會(huì)與之前不同。1998年之后，一級(jí)指標(biāo)在一定時(shí)期內(nèi)透明且相對(duì)穩(wěn)定，但這些指標(biāo)的計(jì)算方法既不一貫，也不完全透明[21]。指標(biāo)體系的頻繁改變和權(quán)重的隨意分配是兩個(gè)不可分割的問(wèn)題，正如薩爾米(Salmi)和薩羅揚(yáng)(Saroyan)在研究中指出的那樣，權(quán)重分配的主觀性和隨意性是該排名的根本缺陷[22]。在權(quán)重分配時(shí)，排名毫無(wú)理性地為了強(qiáng)調(diào)某些指標(biāo)而賦予相應(yīng)權(quán)重，而不是根據(jù)指標(biāo)的重要性賦予權(quán)重[17]。在結(jié)果上，排名相差若干名的學(xué)校在各項(xiàng)數(shù)據(jù)的對(duì)比上也可能沒(méi)有顯著差異[20]。針對(duì)這個(gè)問(wèn)題，埃倫伯格(Ehrenberg)也指出該排名方法的微小變化如何導(dǎo)致大學(xué)的排序發(fā)生重大變化，比如加利福尼亞理工學(xué)院從1998年的第9位躍升至1999年秋季美國(guó)新聞排名的第1位的主要原因就是排名計(jì)算方法的變化[23]。迪切夫(Dichev)進(jìn)行時(shí)間序列數(shù)據(jù)的實(shí)證研究后發(fā)現(xiàn)，隨著時(shí)間的推移，大學(xué)排名得分中只有10%的變化來(lái)自大學(xué)質(zhì)量的變化，其余的變化主要是來(lái)自計(jì)算方式的變化[24]。

三、最好大學(xué)排名動(dòng)機(jī)和結(jié)果存在的問(wèn)題

(一)排名的動(dòng)機(jī)過(guò)度商業(yè)化

《美國(guó)新聞與世界報(bào)道》是世界規(guī)模最大的新聞雜志之一，是典型的商業(yè)機(jī)構(gòu)。作為商業(yè)機(jī)構(gòu)，該公司以營(yíng)利為最終目標(biāo)，但是當(dāng)大學(xué)排名涉及商業(yè)利益時(shí)，可能會(huì)給消費(fèi)者帶來(lái)像“商業(yè)廣告”一樣的誤導(dǎo)。國(guó)內(nèi)學(xué)者李函穎和劉寶存指出該排名的商業(yè)化邏輯：大學(xué)排名作為一件商品，如果其連續(xù)兩年的排名結(jié)果完全保持不變，消費(fèi)者就沒(méi)有購(gòu)買的必要[2]。也就是說(shuō)，如果排行榜的結(jié)果不發(fā)生變化，該排名的銷量就會(huì)急劇下降，這將帶來(lái)嚴(yán)重的經(jīng)濟(jì)損失。埃倫伯格(Ehrenberg)意識(shí)到了同樣的問(wèn)題，并指出這可能是該排名指標(biāo)體系、指標(biāo)權(quán)重或計(jì)算方法經(jīng)常改變的內(nèi)在原因[6]。

(二)排名無(wú)法有效衡量高校的教育質(zhì)量

大學(xué)排名是否能夠真正反映各高校教育質(zhì)量一直是研究者關(guān)心的問(wèn)題?，F(xiàn)有研究表明，美新大學(xué)排名和質(zhì)量之間存在脫節(jié)。在方法上，該排名無(wú)法有效衡量各高校的質(zhì)量。同時(shí)，排名行為本身擴(kuò)大了學(xué)校之間微不足道的差異并創(chuàng)造以前根本不存在的差異，無(wú)法真正反映大學(xué)的質(zhì)量[25]。許多實(shí)證研究支持了此觀點(diǎn)。14所公立研究型大學(xué)的全國(guó)學(xué)生參與度調(diào)查(NSSE)分?jǐn)?shù)與該排名比較的數(shù)據(jù)發(fā)現(xiàn)，排名標(biāo)準(zhǔn)與學(xué)生接受的教育質(zhì)量關(guān)系不大[26]；研究者對(duì)Wabash系統(tǒng)和該排名數(shù)據(jù)的分層線性模型發(fā)現(xiàn)，排名并不能預(yù)測(cè)學(xué)生是否參與良好實(shí)踐[16]?？死锼雇蟹?Christopher)通過(guò)建立貝葉斯層次潛在特征模型，并使用包括美新排名在內(nèi)的全球八個(gè)大學(xué)排名的數(shù)據(jù)，發(fā)現(xiàn)現(xiàn)有排名在測(cè)量大學(xué)質(zhì)量上有很大誤差，排名100與排名30、排名300與排名250的大學(xué)在質(zhì)量上很難區(qū)分。在這八個(gè)排名中，美新大學(xué)排名是最不準(zhǔn)確的排名之一，這可能是因?yàn)槭褂昧舜罅繜o(wú)關(guān)緊要的指標(biāo)[27]。

(三)排名引導(dǎo)高校偏離高等教育價(jià)值

高等教育的價(jià)值一直是高等教育界爭(zhēng)論不休的話題。高等教育發(fā)展離不開(kāi)一定的價(jià)值導(dǎo)向，高等教育實(shí)踐也必須遵循一定的價(jià)值取向，并表現(xiàn)為一個(gè)價(jià)值實(shí)現(xiàn)的過(guò)程[28]。即便不爭(zhēng)論高等教育人才培養(yǎng)、科學(xué)研究與社會(huì)服務(wù)三大職能孰輕孰重，單純追求“排名靠前”不應(yīng)該是一個(gè)高等教育機(jī)構(gòu)的價(jià)值追求。

然而，在排名影響下，高校管理人員感受到了以排名為導(dǎo)向作出決策的壓力，而不是以質(zhì)量為導(dǎo)向的趨勢(shì)[29]，這就容易引發(fā)一系列不合理決策，比如，“通過(guò)經(jīng)濟(jì)行為與排名公司搞好關(guān)系”“賄賂評(píng)估人員”“片面強(qiáng)調(diào)畢業(yè)率而忽視畢業(yè)生質(zhì)量”“強(qiáng)制校友捐贈(zèng)”，甚至數(shù)據(jù)造假。在排名影響下，學(xué)術(shù)機(jī)構(gòu)紛紛試圖改變他們的行為以提升排名，其中一些行為可能在教育上有意義，其中一些可能在教育上沒(méi)有任何意義，甚至不符合國(guó)家的高等教育體系的整體利益[6]。

四、結(jié)語(yǔ)

《美國(guó)新聞與世界報(bào)道》大學(xué)排名在美國(guó)和全世界的大學(xué)排行榜中有非常重要的地位，推動(dòng)了世界上其他大學(xué)排名實(shí)踐和高等教育評(píng)估理論的發(fā)展，對(duì)學(xué)生及家長(zhǎng)、高校、政府部門(mén)都有不可磨滅的影響。但不可忽視的是，該排行不是完美的，國(guó)內(nèi)外研究者尤其是國(guó)外研究者指出了該排名存在的許多問(wèn)題，涉及該排名的指標(biāo)體系、數(shù)據(jù)來(lái)源、計(jì)算方法等方方面面。學(xué)生在使用時(shí)要理性對(duì)待，各國(guó)在借鑒時(shí)也要理性分析。

秦 云紋