徐雅娜　胡曉旭　趙萍

摘 要：為實現(xiàn)高職院校專業(yè)自主調(diào)控機制，在分析和研究現(xiàn)有高職院校內(nèi)部專業(yè)評價體系不足的基礎上，采用Delphi法建立高職院校內(nèi)部專業(yè)評價指標集，基于系統(tǒng)工程的理論構(gòu)建評價體系的三級分層結(jié)構(gòu)框架，采用層次分析法計算各指標的權(quán)重，并且進行了判斷矩陣一致性檢驗。通過對遼寧省交通高等?？茖W校4年專業(yè)發(fā)展狀態(tài)的測評，證明該系統(tǒng)能科學、穩(wěn)定、實時地監(jiān)控專業(yè)的發(fā)展軌跡，可以為高職院校的專業(yè)建設、診斷和結(jié)構(gòu)調(diào)整提供依據(jù)。

關(guān)鍵詞：專業(yè)評價體系；Delphi法；系統(tǒng)工程；層次分析法

作者簡介：徐雅娜（1970-），女，遼寧蓋州人，遼寧省交通高等?？茖W校副校長，教授，研究方向為高等職業(yè)教育管理研究。

基金項目：遼寧省教育廳項目“高職院校專業(yè)發(fā)展狀態(tài)評價與監(jiān)測機制研究與實踐”（編號：W2015235），主持人：徐雅娜。

中圖分類號：G710 文獻標識碼：A 文章編號：1001-7518（2016）06-0021-05

人才培養(yǎng)質(zhì)量是學校發(fā)展的生命線，目前我國高等教育正從精英教育經(jīng)過大眾教育步入普及教育，在正常的招生制度規(guī)范下，生源的水平是一個非主動性的影響質(zhì)量的客觀因素。因此，對學校來說，人才培養(yǎng)質(zhì)量的高低主要取決于學校的人才培養(yǎng)工作質(zhì)量，取決于學校各個層次、各個部門、各個崗位工作的有效性。其中，專業(yè)建設水平高低是保障人才培養(yǎng)質(zhì)量最根本的因素。如何客觀、科學、合理地評價專業(yè)的發(fā)展狀態(tài)、及時預警和糾正專業(yè)發(fā)展過程中可能存在的偏差，保障專業(yè)正確的發(fā)展方向和發(fā)展軌跡，對保障專業(yè)正確的發(fā)展方向、保障人才培養(yǎng)質(zhì)量來說都是一個十分現(xiàn)實的關(guān)鍵問題。

教育部關(guān)于《推進高等職業(yè)教育改革創(chuàng)新引領(lǐng)職業(yè)教育科學發(fā)展的若干意見》（教職成[2011]12 號文件）中提出圍繞專業(yè)建設構(gòu)建專業(yè)建設評價機制，建立高職專業(yè)建設評價機制是高職院校專業(yè)質(zhì)量提升的需要，也是高職自身專業(yè)規(guī)范化發(fā)展、加強自律的需要。專業(yè)評價涉及面大，數(shù)據(jù)量大，頭緒繁雜，定性與定量難度很大。目前大多數(shù)關(guān)于高校內(nèi)部專業(yè)評價的研究停留在理論研究范疇[1-6]，且大都停留在臆斷、定性評價的階段，還沒有形成規(guī)范的專業(yè)評價機制，評價系統(tǒng)不完善，評價標準不規(guī)范，隨意性較大，很難起到預警、診斷、改進與提高的作用。筆者根據(jù)多年的教學管理經(jīng)驗，以構(gòu)建科學、合理、具有可操作性的專業(yè)評價監(jiān)控體系為目標，通過對“人才培養(yǎng)工作質(zhì)量數(shù)據(jù)平臺”數(shù)據(jù)和輔助性教學、管理數(shù)據(jù)的采集、整理、量化和建模計算，實現(xiàn)了對專業(yè)發(fā)展狀態(tài)的客觀評價，使學校的專業(yè)發(fā)展更加科學化、合理化。

一、基于Delphi法建立高職院校內(nèi)部專業(yè)評價指標集

專業(yè)是高職院校人才培養(yǎng)的基本單位，專業(yè)建設工作涉及人才培養(yǎng)的方方面面，如培養(yǎng)目標定位、培養(yǎng)規(guī)格、課程體系、課程建設、師資隊伍、實驗條件、培養(yǎng)效果、招生就業(yè)等等，為此，筆者采用Delphi法[7]科學系統(tǒng)地確定了專業(yè)評價指標集。首先通過文獻檢索、專業(yè)調(diào)研、專家訪談等方式將涉及專業(yè)建設和專業(yè)發(fā)展的所有因素列出，以此為依據(jù)，設計調(diào)查問卷。其次組建由各評價相關(guān)部門的負責人、各專業(yè)主任組成的專家組。然后向?qū)＜医M專家進行了三輪的問卷調(diào)查，調(diào)查采用Likert 5級評價法（5分表示很重要；4分表示比較重要；3分表示一般重要；2分表示不重要；1分表示很不重要）。經(jīng)過三輪反復，專家意見逐漸集中，最后通過Delphi法計算得出滿意的指標因素集。

二、基于系統(tǒng)工程的理論構(gòu)建系統(tǒng)結(jié)構(gòu)框架

專業(yè)評價是一個耦合因素較多、復雜度較高的系統(tǒng)工程，涉及面很多，數(shù)據(jù)量極大，因此本文以系統(tǒng)工程的思想來構(gòu)建系統(tǒng)結(jié)構(gòu)框架，盡可能以較少的指標（數(shù)量較少，層次較少）較全面系統(tǒng)地反映各專業(yè)的發(fā)展態(tài)勢，既要避免指標體系過于龐雜，又要避免單因素選擇，追求的是評價指標體系的總體最優(yōu)或滿意[8]。并且基于以下原則遴選各級評價指標：

客觀性原則。評價指標盡可能細化、量化，以提高評價的“客觀性”、“可靠性”。

系統(tǒng)合理性與可操作性兼顧原則。評價指標體系既能全面、完整地反映各專業(yè)的發(fā)展態(tài)勢，又易于調(diào)查和采集相關(guān)數(shù)據(jù)。

可比性和靈活性相結(jié)合原則。所選指標的分類、計量方法、口徑應相互統(tǒng)一，相互可比，以實現(xiàn)不同時期同一專業(yè)的縱向?qū)Ρ群屯粫r期不同專業(yè)的橫向?qū)Ρ取Ｔ谕ㄓ每杀鹊脑瓌t下，盡可能照顧不同專業(yè)的特點，靈活設計指標，使該評價指標體系具有最大的可行性。

通過專家組反復論證，最終確定本系統(tǒng)三級分層的結(jié)構(gòu)框架，其中一級指標有9個，二級指標24個，觀測點70個。從專業(yè)內(nèi)涵建設、人才培養(yǎng)效果、特色建設三個維度較全面地測量了學校各專業(yè)的發(fā)展狀態(tài)。

專業(yè)建設指標測量了專業(yè)的市場適應情況、專業(yè)的建設水平以及現(xiàn)狀，對應的二級指標是專業(yè)調(diào)查、專業(yè)建設方案及規(guī)劃、專業(yè)自評報告、專業(yè)建設亮點。師資隊伍建設指標測量了專業(yè)教師團隊結(jié)構(gòu)和素質(zhì)，對應的二級指標是師資結(jié)構(gòu)、師資建設亮點、師資培養(yǎng)。課程建設指標測量了專業(yè)課程建設和教學改革的狀態(tài)，對應的二級指標是課程建設規(guī)劃與實施、教學文件、課程資源建設、課程建設亮點。實踐教學指標測量了專業(yè)實踐教學的體系和效果，對應的二級指標是校企合作、校內(nèi)實訓。教科研指標測量了專業(yè)教師團隊整體的教科研水平和能力，對應的二級指標是教科研項目、論文著作和學術(shù)交流。學生素質(zhì)指標測量了學生的培養(yǎng)情況，考慮到各專業(yè)學生的差異性，在確定觀測點時按照通用可比原則盡可能找出各專業(yè)的共同點，根據(jù)專家討論的結(jié)果，對應二級指標為職業(yè)素質(zhì)、外語能力。招生就業(yè)是專業(yè)發(fā)展的生命線，同時也反映了專業(yè)的人才培養(yǎng)質(zhì)量，對應的二級指標為招生、就業(yè)、培養(yǎng)效果。為鼓勵專業(yè)創(chuàng)新教育，本文在系統(tǒng)中增加了特色項目指標，主要包括兩個二級指標：一是自創(chuàng)性項目，主要是指取得的有利于專業(yè)發(fā)展的自創(chuàng)性、特色性項目或成果，且系統(tǒng)的其余八個方面沒有涵蓋的；二是學校專項，該項是指學校在不同時期開展的專項創(chuàng)新教育活動。

三、基于層次分析法計算權(quán)重

層次分析法（AHP）是美國運籌學家匹茨堡大學教授薩蒂（T.L.Saaty）于上世紀70年代初提出的，其特征是合理地將定性與定量的決策結(jié)合起來，按照思維、心理的規(guī)律把決策過程層次化、數(shù)量化，是系統(tǒng)科學中常用的一種系統(tǒng)分析方法[8]。本文采用這種方法計算構(gòu)建系統(tǒng)框架的各級指標權(quán)數(shù)，并且進行了一致性檢驗，見表1-表10。

采用本系統(tǒng)對遼寧省交通高等?？茖W校2011-2014年度各專業(yè)的發(fā)展狀態(tài)進行了測評，測評結(jié)果符合實際情況，能夠達到滿意的結(jié)果，證明了該系統(tǒng)的科學性和穩(wěn)定性。本文構(gòu)建評價系統(tǒng)的一、二級指標及其權(quán)重詳見表11。

表2 專業(yè)建設判斷矩陣與權(quán)重

注：判斷矩陣一致性比例：0.0000，對總目標的權(quán)重：0.0611：＼lambda_{max}：4.0000

表3 師資隊伍判斷矩陣與權(quán)重

注：判斷矩陣一致性比例：0.0000，對總目標的權(quán)重：0.0897：＼lambda_{max}：3.0000

表4 課程建設判斷矩陣與權(quán)重

注：判斷矩陣一致性比例：0.0012，對總目標的權(quán)重：0.1302：＼lambda_{max}：4.0104

表5 教學管理判斷矩陣與權(quán)重

注：判斷矩陣一致性比例：0.0000，對總目標的權(quán)重：0.0251：＼lambda_{max}：3.0000

表6 實踐教學判斷矩陣與權(quán)重

注：判斷矩陣一致性比例：0.0000，對總目標的權(quán)重：0.1335：＼lambda_{max}：2.0000

表7 教科研判斷矩陣與權(quán)重

注：判斷矩陣一致性比例：0.0000，對總目標的權(quán)重：0.0875：＼lambda_{max}：3.0000

表8 學生素質(zhì)判斷矩陣與權(quán)重

注：判斷矩陣一致性比例：0.0000，對總目標的權(quán)重：0.0479：＼lambda_{max}：2.0000

表9 招生就業(yè)判斷矩陣與權(quán)重

注：判斷矩陣一致性比例：0.0053，對總目標的權(quán)重：0.4067：＼lambda_{max}：3.0055

表10 特色項目判斷矩陣與權(quán)重

注：判斷矩陣一致性比例：0.0000，對總目標的權(quán)重：0.0184：＼lambda_{max}：2.0000

表11 專業(yè)評價系統(tǒng)指標及權(quán)重

四、分析與探討

本文基于系統(tǒng)工程的研究方法，構(gòu)建了高職院校內(nèi)部專業(yè)評價體系，從涉及專業(yè)建設和專業(yè)人才培養(yǎng)質(zhì)量的各個層面全面地評價了專業(yè)的發(fā)展狀態(tài)；在指標的設置上，綜合了Delphi法和系統(tǒng)工程理論的優(yōu)點，指標體系全面、系統(tǒng)，體現(xiàn)了系統(tǒng)構(gòu)建的廣度和深度；在權(quán)重賦值上，采用了定性與定量相結(jié)合的層次分析法，保證了系統(tǒng)的科學性、客觀性。通過對遼寧省交通高等?？茖W校的2011-2014年度連續(xù)4年全校40多個專業(yè)發(fā)展狀態(tài)的測評，測評結(jié)果得到了全校廣泛的認可。

分析專業(yè)建設等9個一級指標對專業(yè)評價總分的影響（見圖1），可以發(fā)現(xiàn)，招生就業(yè)對評價總分的影響最大，招生就業(yè)曲線與評價總分曲線變化趨勢的正相關(guān)性很明顯；教科研、專業(yè)建設、師資隊伍、課程建設、實踐教學等對評價總分的影響程度次之，形成了“招生就業(yè)決定專業(yè)的基本走向，其它指標共同決定專業(yè)的最終位次”的變化規(guī)律，符合本文對系統(tǒng)設計的基本思想。

圖1 評價體系的9個方面對專業(yè)評價總分影響

的定性分析圖

測量評價體系與人才培養(yǎng)系統(tǒng)構(gòu)成一個帶反饋的閉環(huán)結(jié)構(gòu)，支持人才培養(yǎng)系統(tǒng)按照“計劃-實施-檢查-改進”的循環(huán)不斷向前發(fā)展[9]，因此，一個有效的測量評價體系不僅要具備系統(tǒng)性、科學性的特點，更要具有標準化和穩(wěn)定性的特點，使系統(tǒng)能有效地實施對專業(yè)發(fā)展狀態(tài)的實時監(jiān)測。評價指標的細化、量化是保障系統(tǒng)評價結(jié)果客觀、不失真的關(guān)鍵環(huán)節(jié)。為此，在使用本系統(tǒng)實施專業(yè)評價時，首先盡可能地細化評價指標，每個二級指標下設2-4個觀測點，每個觀測點確定明確的評價標準。如“師資結(jié)構(gòu)”指標下設了4個觀測點，即“年齡結(jié)構(gòu)”、“職稱結(jié)構(gòu)”、“學位結(jié)構(gòu)”、“外聘教師”，其對應評價標準分別為“老、中、青教師比例接近1：1：1”、“高級職稱以上教師占專任教師比例高于30%”、“碩士學位以上教師占專任教師比例高于80%”、“外聘教師比例達到30%以上”、“外聘教師具有中級及以上專業(yè)技術(shù)職稱或技術(shù)級別”。其次是盡可能地量化評價指標。本系統(tǒng)的70個觀測點中有40個是基于二元判斷原則評價的，即滿足評價標準得滿分，不滿足評價標準得零分；對于能方便獲得基本工作參數(shù)的指標，如招生、就業(yè)、教科研等，以反映各評價指標和觀測點的基本參數(shù)為變量，建立數(shù)學模型，通過計算直接獲得評價分值。如系統(tǒng)中計算報到率評價分值的公式是

E=（（3+S/200）*R-2）*5

式中，S是招生計劃人數(shù)，R是報到率。該公式不僅考慮了報到率對招生指標的影響，還考慮了專業(yè)招生規(guī)模對招生指標的影響。從評價結(jié)果來看，這種計算方法在兼顧大專業(yè)在工作難度的同時，也保留了競爭力特別強的小專業(yè)在該項指標競爭中的機會。

五、結(jié)論

專業(yè)評價體系的構(gòu)建是一個復雜的系統(tǒng)工程，體系的科學性、可操作性、穩(wěn)定性是關(guān)系到系統(tǒng)的評價結(jié)果能否客觀地反映專業(yè)發(fā)展狀態(tài)的關(guān)鍵。實踐證明，本文結(jié)合系統(tǒng)工程理論和層次分析法構(gòu)建的系統(tǒng)能夠起到專業(yè)實時監(jiān)控、預警的作用，可以為學校的專業(yè)建設和專業(yè)調(diào)整提供依據(jù)。但在實施的過程中，還需要進一步研究系統(tǒng)的運行機制，構(gòu)建“招生—培養(yǎng)—就業(yè)”的聯(lián)動運行機制，借助相互合作、整體協(xié)調(diào)的機制，形成學校部門間聯(lián)動育人的協(xié)同力，促進專業(yè)的健康成長，保證人才培養(yǎng)質(zhì)量。

參考文獻：

[1]林桂花.提高高職院校專業(yè)建設校本評價有效性的策略研究[J].湖南工業(yè)職業(yè)技術(shù)學院學報，2014，14（3）：78-80.

[2]孫愛東.高校專業(yè)自主調(diào)控模式下的專業(yè)評價機制研究[J].黑龍江高教研究，2013（3）：44-46.

[3]姜慶偉，王曉江.高職院校專業(yè)建設評價體系分析與構(gòu)建——以陜西高職院校專業(yè)建設為例[J].職業(yè)技術(shù)教育，2013（26）：14-16.

[4]胡燕紅.校本專業(yè)評估指標體系的矛盾與重構(gòu)[J].煤炭高等教育，2012（1）：87-90.

[5]張文毅，肖萬里，李漢邦.高校內(nèi)部專業(yè)評估指標核心要素探析[J].昆明理工大學學報，2011（2）：91-96.

[6]劉經(jīng)蘭，劉松林.影響高職專業(yè)評價真實性的因素及對策[J].職教論壇，2010（7）：42-46.

[7]張炳江.層次分析法及其應用案例[M].北京：電子工業(yè)出版社，2014.

[8]胡曉旭，趙萍，閆丹.以教學系為視角的人才培養(yǎng)質(zhì)量評價體系的構(gòu)建研究[J].遼寧省交通高等專科學校學報，2014（5）：48-50

[9]余明輝，郭錫泉.現(xiàn)代職業(yè)教育體系下專業(yè)人才培養(yǎng)質(zhì)量的測量與評價[J].中國高教研究，2015（9）：98-101.

責任編輯 殷新紅