盧 娜
(河南工業(yè)大學 教務處,河南 鄭州450001)
關于大學評定問題的研究與實踐,一直以來都頗受關注,無論是政府部門,還是社會各界都迫切需要獲得反映各個高校辦學質量水平的信息,大學評定對大學的發(fā)展也起著非常重要的引導和激勵作用。然而,學術界對大學評定機制并未形成統(tǒng)一的認識,不同學者觀點不一,焦點主要集中在大學評定方法和評定結果的合理性上。但總結已有研究成果,更多的是對已有的評定方法和指標體系進行比較分析,指出不合理處,并提出大學評定的應然性,但缺乏可實踐性,不具有太強的現(xiàn)實意義。因此,立足于大學職能和世界一流大學的特征,針對大學評定的內(nèi)容、主體和方式三個方面提出理論依據(jù)和技術層面的建議,具有重要的理論和實踐意義。
這一點涉及到歷史上一個比較有爭議的問題,大學的職能,即大學作為一種社會機構所應承擔的職責和應發(fā)揮的作用。程方平認為,大學評價機制要以大學的功能為前提,這樣得出的評價結果才有說服力[1]。職責是否承擔,作用是否發(fā)揮,這就是評定大學的內(nèi)容,但是如果沒有相應的參照物,不僅無法下結論,而且缺少了評定的意義。因此,評定指標體系應考慮兩個因素:大學的基本職能和一流大學的特征。大學的職能包括教學、研究與服務。教學即人才培養(yǎng),研究體現(xiàn)在師資隊伍和學科建設兩個方面,服務則要根據(jù)政府的撥款確定應提供的服務。一流大學的特征可以從多種角度去考察概括,但最核心的要素不外乎以下五個方面:卓越的師資隊伍、一流的學生、有效的管理、高水平的學科建設、充裕的物質條件和經(jīng)費[2]。
其他一些要素主要包括如廣泛的國際聯(lián)系、綜合化的學科結構、高校與社會的密切聯(lián)系、注重通識教育等特征,這些要素雖不是核心,但也考察了一所大學的國際化趨勢程度。
從具體的測評角度看,評定指標體系的一級結構應清晰簡潔,有理論涵蓋力。二級指標重點突出,內(nèi)涵清楚。三級指標則要具體準確,且便于量化分析。一級指標的確定可采用歸納和演繹兩種方法,即首先在設計指標體系之初由專家歸納重要的評定方面,接下來隨著二級和三級指標的落實,再回過頭調整一級指標。如果調整比較得當,可最終取消二級指標。三級指標是最終測評的關鍵所在,因為數(shù)據(jù)的采集和分析都依賴于三級指標。三級指標應選擇容易獲得準確數(shù)據(jù)的定量資料,這些資料來自院校提供的統(tǒng)計數(shù)據(jù),但獨立評價機構能夠監(jiān)控其準確性。從國際慣例看,三級指標的數(shù)量不能太多。太多將導致對指標準確性的監(jiān)控能力下降,也會造成權重安排上的困難。由于指標體系將直接影響評價結果,并最終影響資金流向,獨立評價機構應投入相當大的力量,花費比較長的時間用于指標體系的研討和論證。
教育評價理論指出,在設計指標體系過程中,應遵循以下原則:科學性原則,即指標體系具有合理的邏輯框架,體系中的各項指標內(nèi)涵清楚,最能反映一流大學的特質;方向性原則,即指標體系應當體現(xiàn)國際高等教育的發(fā)展趨勢,反映我國高等院校的特點與發(fā)展方向;可測性原則,每一項評價指標的可測性,都需要通過操作化定義實現(xiàn);簡單性原則,即指標體系力求簡單,使評價工作切實可行,要求在評定過程中不要主次不分,盲目求全。以上四大原則可概括為八個字:客觀準確、簡單可測??陀^性是科學性的基本保證,而準確性也包括對評價方向的正確把握。簡單可測則是測量技術對評定的基本要求。只有符合這些原則,才能形成既具有篩選功能又具有良好導向性的評定指標體系。這樣的指標體系也容易得到受評學校的認同,并最終在多次實踐中提高其社會認可度。
英國著名高等教育家阿什比指出:“任何類型的大學都是遺傳和環(huán)境的產(chǎn)物。”[3]2同時,阿什比還指出:“在過去,每所大學都是獨立的有機體,各按其內(nèi)在規(guī)律去吸收營養(yǎng)和發(fā)育成長。如今的大學已成為經(jīng)濟發(fā)展和國家生存絕對不可缺少的事物……它們在向前演化的過程中,正經(jīng)歷著遺傳體系經(jīng)常遇到的進退兩難的困境:一方面它們本身必須改變以適應社會的新形勢,否則將遭受社會的拋棄;另一方面,它們在適應社會的改變中,又不能破壞大學的完整性,不然將無法完成它們所承擔的社會職責。”[3]13所以大學要能很好地履行職責,就需要接受三種力量的評定,也就是說大學評定要借助于專家、獨立機構和政府部門三股力量的通力合作,這三股力量恰恰反映了影響高等教育的三大因素,即學術權利、市場和官僚機構。國外經(jīng)驗證明,獨立機構具有很大的發(fā)展空間,能通過信息服務方式影響政府對高等教育的撥款與決策。獨立機構的信譽是在開展資格認證和評定分等過程中建立起來的,一旦信譽建立了起來,就會獲得資金贊助,并通過有償信息服務方式盈利。獨立機構在開展認證與評定過程中,要依靠學術團體和學者的支持。獨立機構的活動,則會受到行政力量或學者團體的影響和干預。可見,三股力量各有其獨特優(yōu)勢,并通過具體的評定工作形成制衡關系。
專家比較了解國內(nèi)外高等教育的理念與發(fā)展動態(tài),對評價的各種模式及具體測評技術掌握得也比較透徹和嫻熟。獨立機構能夠做到人力、物力、財力等方面統(tǒng)籌管理,在大學評定過程中起到組織、協(xié)調和項目管理作用。行政力量可以通過行政命令及任務批件對受評學校提出評價要求并反饋評價結果。
專家的作用主要是提供決策咨詢,如指標體系的確定和評價方法的選擇,即研究與咨詢功能。獨立機構的任務是啟動具體的評價活動,為政府部門提供評價結果和評價報告,即統(tǒng)籌與管理。政府部門主要是部署實際評價任務,協(xié)調評價機構和院校間的信息溝通,參考評價結果進行撥款與行政干預,即監(jiān)督與控制功能。
這是一個偏重于技術層面的問題,涉及評價指標體系的構建、評價方法的選擇和應用以及評價的程序??茖W性、真實性以及公正性是解決“怎么評”這個問題所必須堅守的。因為對大學的“評”并不是最終目的,“更進一步還可以從大學評價和排名的變化和發(fā)展中洞察高等教育和大學發(fā)展的一些信息和意義”[4],最終是為了國家教育政策的制定,為了正確引導大學的健康發(fā)展。
評價過程主要包括四個階段:確定評價指標體系和評價方法;收集相關統(tǒng)計數(shù)據(jù)并開展專家調查;分析原始數(shù)據(jù),計算各類統(tǒng)計量,并撰寫評價報告;提交評價結果和評價報告,并提供撥款或干預建議。
第一階段,確定評價指標體系和評價方法(在獨立機構領導下由專家完成)包括專家提供評價計劃;集體研討,形成初步評價指標體系;采用特而菲方法(專家咨詢法)修正評價方案,并確定指標的權重。
第二階段,收集相關統(tǒng)計數(shù)據(jù)并開展專家調查(在獨立機構協(xié)調下完成),包括教育部向參評院校提出評價任務,要求這些學校提供指標體系所涉及的統(tǒng)計資料;獨立評價機構開展專家調查(可以網(wǎng)上進行),獲得有關學術聲譽等項目的評價數(shù)據(jù),對專家的選擇采用分層抽樣方法,分層方法為地區(qū)和學校類型;獨立評價機構從某些重要相關部門,如教育部、科技部、基金委、計委等部門索取與指標體系相關的年度統(tǒng)計信息;獨立評價機構核查數(shù)據(jù)并建立數(shù)據(jù)庫。
第三階段,分析原始數(shù)據(jù),計算各類統(tǒng)計量,并撰寫評價報告(獨立評價機構委托專家進行),包括對定量數(shù)據(jù)進行統(tǒng)計分析、建立各種單項和綜合排名以及撰寫定性評價報告。
第四階段,提交評價結果和評價報告,并提供撥款或干預建議(獨立機構和專家共同完成),包括向教育部提交評價定量排名榜;向教育部呈報各校定性評價報告;由教育部將部分評價結果反饋給被評學校;由教育部將部分評價結果向社會及相關機構公布。
(1)定性與定量分析怎樣結合
定量測評的好處是便于比較,但礙于測評手段的限制,某些統(tǒng)計結果特別是經(jīng)過加權后的統(tǒng)計數(shù)據(jù)會丟失一些重要信息。我們可以通過模特比賽的結果來分析定量測評的局限,如果僅僅知道排名,還是很難全面了解某位獲獎選手,只有親自觀看了現(xiàn)場比賽,才能更深入地把握這位模特的綜合素質及特點。定性分析報告就像現(xiàn)場比賽一樣具有情景性、可描述性和生動性。定性與定量分析能互相補充,具體的運用方法有以下兩種模式。
定量加定性,但定性只起參考作用。此時,定性報告對財政撥款等重要決策幾乎沒有影響,但定性報告對學校起到反饋作用,也有助于有需要的人士了解各校具體情況。
定量加定性,定量作為定性的重要補充。此時,定性分析結果會影響財政撥款及其他行政決策。影響方式通過某些政府項目或干預政策實現(xiàn)。例如,某校在本科教育和人才培養(yǎng)上獨樹一幟,則政府可將其作為實驗基地,培養(yǎng)科學與技術等方面的杰出人才。而另一學校開展國際合作的經(jīng)驗則可能為其他學校提供了成功范例。
(2)定量數(shù)據(jù)怎樣采集
定量數(shù)據(jù)主要來自兩種渠道:一是學校直接以統(tǒng)計報表形式提供;二是由教育部、科技部、基金委等政府機構提供統(tǒng)計數(shù)據(jù)。這兩個渠道的信息既相互補充,又互相核對。獨立評價機構要從高校和相關部門盡可能獲取多的信息,將其輸入信息系統(tǒng),并進行檢核與驗證。這些定量數(shù)據(jù)的收集可采用發(fā)放調查表的方式進行,表中內(nèi)容有清楚的界定,并規(guī)定填寫方法。除此之外,個別指標如學校的學術聲望還需通過發(fā)放問卷而獲得。此時,抽樣方案、發(fā)放方法以及數(shù)據(jù)的錄入與分析應事先設計好工作程序,并經(jīng)專家審議后進行。定量指標的運算,應采用標準分數(shù),使參與運算的各類數(shù)據(jù)具有可比性,即具有相同的平均數(shù)與標準差。
(3)定性評價報告如何撰寫
定性評價報告的素材來自學校的各類文件與報告及專家實地考察的記錄。定性評價報告在撰寫前,應確定報告的基本框架。這一框架應圍繞定量指標體系的一級指標展開,但內(nèi)容上要突出定量不宜描述到的方面,如辦學理念、學校特色、學校的管理水平等。在收集定性材料時,應充分利用學校在網(wǎng)頁以及各種文件中提供的信息,如學校的目標與使命、管理結構、政策與規(guī)定等。為了提高信息的真實性,應盡量采用二手材料。只有當某些問題無法透過二手材料了解時,才進行實地考察。實地考察的范圍小一些,內(nèi)容明確一點,被評學校對實地考察的重視就會低一些,過度配合的可能性也會減小。定性評價報告還要在評定模式上實現(xiàn)突破,如引入斯塔弗爾比姆所提出的CIPP評價模式,即評價要考慮背景(context)、投入(input)、過程(process)和結果(product)。
(4)如何運用評定結果
國外大學評定的成功經(jīng)驗說明,中介性評價機構具有很大的發(fā)展?jié)摿?。隨著我國高等教育競爭機制的逐步完善,各級政府及社會團體在實施決策時,急需中介機構提供的信息服務。社會、學生和家長也會推動中介機構的發(fā)展,成為信息的重要消費者。在實施大學評定的初期,評價結果不宜于直接向社會公布,因為評定活動是否完善要在實踐中檢驗,評定方案也需在實施評定過程中得以發(fā)展。隨著評定活動的深入,評價結果可逐漸全面公開,并通過市場起到重要影響作用。具體而言,評價結果可在雜志和網(wǎng)上發(fā)布,也可以以參考資料形式出版發(fā)行。這些評價信息既能為某些撥款或基金委員會提供了決策參考,也能夠給學生及家長提供決策咨詢。
[1]我們怎樣評價大學[EB/OL].(2005-11-06)[2012-01-02]http://theory.people.com.cn/GB/40553/3831532.html
[2]張風蓮,江丕權.從美國幾所著名大學看世界一流大學的成因[J].中國高教研究,1994(1).
[3]阿什比.科技發(fā)達時代的大學教育[M].藤大春,藤大生,譯.北京:人民教育出版社,1983.
[5]葉賦桂.大學評價和排名:最新的發(fā)展及其對大學的意義[J].清華大學教育研究,2008(2).