宋素娟+趙成柏

摘要：實(shí)踐教學(xué)評(píng)價(jià)指標(biāo)及其權(quán)重的確定是對(duì)實(shí)踐教學(xué)質(zhì)量評(píng)價(jià)的前提，文章運(yùn)用層次分析法結(jié)合模糊評(píng)價(jià)法，分析實(shí)踐教學(xué)評(píng)價(jià)指標(biāo)的權(quán)重。計(jì)算結(jié)果表明，建立的所有判斷矩陣一致性比例均小于0.1，具有較好的一致性，層次單排序結(jié)果均滿(mǎn)足一致性檢驗(yàn)的要求，各指標(biāo)的層次總排序順序與實(shí)踐教學(xué)的實(shí)際情況較為相符。因此，用層次分析法計(jì)算實(shí)踐教學(xué)質(zhì)量評(píng)價(jià)指標(biāo)的權(quán)重值比較準(zhǔn)確、可信，可為下一步提高經(jīng)管類(lèi)專(zhuān)業(yè)實(shí)踐教學(xué)質(zhì)量提供管理支持。

關(guān)鍵詞：層次分析法；實(shí)踐教學(xué)評(píng)價(jià)；指標(biāo)權(quán)重

基金項(xiàng)目：高校經(jīng)管類(lèi)專(zhuān)業(yè)實(shí)踐教學(xué)評(píng)價(jià)改革的研究與實(shí)踐，2013JSJG127。

中圖分類(lèi)號(hào)：G647

引言

本文主要采用層次分析法（AHP）確定指標(biāo)權(quán)重。層次分析法由美國(guó)運(yùn)籌學(xué)家薩蒂于20世紀(jì)70年代初期提出的。其基本思路是：將評(píng)價(jià)對(duì)象或問(wèn)題視為一個(gè)系統(tǒng)，根據(jù)問(wèn)題的性質(zhì)和要達(dá)到的總目標(biāo)，將問(wèn)題分解成不同的組成要素，并按照要素間的相互關(guān)聯(lián)度及隸屬關(guān)系，將要素按不同層次聚集組合，從而形成一個(gè)多層次的分析結(jié)構(gòu)系統(tǒng)，從而把問(wèn)題條理化、層次化。它是將定量分析與定性分析相結(jié)合，采用比例標(biāo)度法，對(duì)不同情況的評(píng)比給出數(shù)量標(biāo)度，用決策者的經(jīng)驗(yàn)判斷各衡量標(biāo)準(zhǔn)之間的相對(duì)重要程度，構(gòu)造兩兩比較判斷矩陣，采用方根法對(duì)建立的兩兩判斷矩陣進(jìn)行求解，進(jìn)而求取權(quán)重，最后對(duì)求取的權(quán)重進(jìn)行一致性檢驗(yàn)，通過(guò)一致性檢驗(yàn)方可認(rèn)為所求權(quán)重合理，否則對(duì)判斷矩陣進(jìn)行調(diào)整，重新計(jì)算，直至通過(guò)檢驗(yàn)為止，在此基礎(chǔ)上，利用權(quán)數(shù)求出各方案的優(yōu)劣次序。層次分析法對(duì)于求解指標(biāo)的權(quán)重值具有較好的適應(yīng)性和準(zhǔn)確性，能有效地處理那些難以用定量方法解決的問(wèn)題。

1研究對(duì)象

本研究選取了7位長(zhǎng)期從事經(jīng)濟(jì)管理專(zhuān)業(yè)教學(xué)管理工作的資深專(zhuān)家教授進(jìn)行專(zhuān)業(yè)咨詢(xún)。其中2人有擔(dān)任校級(jí)教學(xué)管理單位主管經(jīng)歷，5人為現(xiàn)任或曾任商學(xué)院的教學(xué)與行政主管，2人為商學(xué)院基層骨干。他們一直從事經(jīng)管類(lèi)相關(guān)實(shí)踐環(huán)節(jié)的教學(xué)以及二級(jí)學(xué)院和學(xué)校的教學(xué)管理工作，平均高校工作年限超過(guò)25年，均為高級(jí)職稱(chēng)，對(duì)經(jīng)管類(lèi)專(zhuān)業(yè)的實(shí)踐教學(xué)體系有深切的體會(huì)與管理心得。總體上可以認(rèn)為幾位專(zhuān)家據(jù)偶較強(qiáng)的代表性和權(quán)威性。

2研究方法

本研究采用了層次單排序和總排序的AHP法。所謂層次單排序是指根據(jù)判斷矩陣計(jì)算對(duì)于上一層某因素而言本層次與之有聯(lián)系的因素的重要性次序的權(quán)值，先將指標(biāo)體系分為一級(jí)指標(biāo)和二級(jí)指標(biāo)兩個(gè)層次，再分別得出這兩個(gè)層次的指標(biāo)權(quán)重，最后將兩個(gè)層次的指標(biāo)權(quán)重相乘得出最終的指標(biāo)權(quán)重。層次總排序是基于層次分析法中層次單排序的基礎(chǔ)上給出的。層次總排序的過(guò)程與層次單排序的過(guò)程大致相同，是為了得到層次結(jié)構(gòu)中某層指標(biāo)對(duì)于總體目標(biāo)組合權(quán)重和它們與上層指標(biāo)的相互影響，需要利用該層所有層次單排序的結(jié)果，計(jì)算出該層元素的組合權(quán)重，這個(gè)過(guò)程稱(chēng)為層次總排序。層次總排序這一步，需要從上到下逐層排序進(jìn)行，最終計(jì)算結(jié)果得到最低層次元素，即要決策方案優(yōu)先次序的相對(duì)權(quán)重。整個(gè)過(guò)程可分為以下幾個(gè)步驟：

1）建立層次結(jié)構(gòu)

本研究在前期研究中通過(guò)多批次的訪談與問(wèn)卷調(diào)研，運(yùn)用主成分分析和因子分析相結(jié)合的方式，構(gòu)建了以CIPP模型（背景評(píng)價(jià)C、投入評(píng)價(jià)I、過(guò)程評(píng)價(jià)P和效果評(píng)價(jià)P）的四個(gè)要素作為經(jīng)管類(lèi)專(zhuān)業(yè)實(shí)踐教學(xué)評(píng)價(jià)指標(biāo)體系的第一層指標(biāo)，在此基礎(chǔ)上構(gòu)建第二層8個(gè)指標(biāo)和第三層15指標(biāo)的評(píng)價(jià)體系。

針對(duì)經(jīng)管類(lèi)專(zhuān)業(yè)實(shí)踐教學(xué)評(píng)價(jià)的27項(xiàng)指標(biāo)構(gòu)建了AHP分析模型。該模型主要分4個(gè)層次，即：目標(biāo)層T，是模型的最終核算和決策最終目標(biāo)，即實(shí)踐教學(xué)質(zhì)量；準(zhǔn)則層A，是該模型指標(biāo)要素層的分類(lèi)要素，即CIPP四類(lèi)要素為一級(jí)指標(biāo)；中間層B，指CIPP四個(gè)要素所包含的8個(gè)二級(jí)指標(biāo)；指標(biāo)層C，為模型中衡量實(shí)踐教學(xué)質(zhì)量的具體指標(biāo)，共15個(gè)三級(jí)指標(biāo)。本研究針對(duì)指標(biāo)層、中間層和準(zhǔn)則層對(duì)實(shí)踐教學(xué)質(zhì)量的權(quán)重進(jìn)行研究。

2）構(gòu)造判斷矩陣

建立層次分析結(jié)構(gòu)模型之后，需要對(duì)每一層次中各指標(biāo)相對(duì)于上一層的重要性進(jìn)行兩兩比較，構(gòu)造出比較判斷矩陣，判斷矩陣的構(gòu)建采用1-9比例標(biāo)度法，分別對(duì)每一層次評(píng)價(jià)指標(biāo)的相對(duì)重要性進(jìn)行定性描述，并用準(zhǔn)確的數(shù)字進(jìn)行量化表示，判斷矩陣中數(shù)字1表示兩元素對(duì)某一屬性具有同樣重要性，數(shù)字9表示兩元素相比較前者比后者極端重要，中間數(shù)字表示意義以此類(lèi)推，并最終得到多個(gè)判斷矩陣，課題組根據(jù)前期的指標(biāo)體系構(gòu)建結(jié)果設(shè)計(jì)專(zhuān)家調(diào)查問(wèn)卷，請(qǐng)具有豐富經(jīng)驗(yàn)的專(zhuān)家進(jìn)行AHP法問(wèn)卷調(diào)查，調(diào)查內(nèi)容是請(qǐng)他們按照九級(jí)判斷尺度表分別為一二三級(jí)指標(biāo)兩兩之間的相對(duì)重要性評(píng)分，從而得到相應(yīng)的判斷矩陣（例見(jiàn)表1）。下表為甲專(zhuān)家對(duì)實(shí)踐教學(xué)質(zhì)量準(zhǔn)則層CIPP四個(gè)要素在經(jīng)管類(lèi)專(zhuān)業(yè)實(shí)踐中的重要性程度進(jìn)行兩兩評(píng)價(jià)的評(píng)價(jià)矩陣，其余類(lèi)推。

從表1可以看出背景評(píng)價(jià)A1和投入評(píng)價(jià)A2相比較，A2明顯重要，背景評(píng)價(jià)A1和過(guò)程評(píng)價(jià)A3相比，后者比前者明顯重要，投入評(píng)價(jià)A2和效果評(píng)價(jià)A4相比，兩者同等重要。過(guò)程評(píng)價(jià)A3和效果評(píng)價(jià)A4相比，A4稍微重要，相反A3比A4稍微次要。

3）層次排序結(jié)果及判斷矩陣一致性檢驗(yàn)

層次分析法分為層次的單排序和層次總排序。層次單排序就是指根據(jù)判斷矩陣計(jì)算對(duì)于上一層某因素的排序而言本層次與之有聯(lián)系的因素的重要性次序的權(quán)值?？梢詺w結(jié)為，求解矩陣的最大特征根和對(duì)應(yīng)的特征的向量，即對(duì)判斷矩陣A，計(jì)算滿(mǎn)足：AW=λmaxW的特征根與特征向量。式中，λmax為A的最大特征根；W為對(duì)應(yīng)于λmax的正規(guī)化特征向量；W的分量Wi即是相應(yīng)因素單排序的權(quán)值。

層次的總排序?yàn)榇_定某層所有因素對(duì)于總目標(biāo)相對(duì)重要性的排序權(quán)值過(guò)程。這一過(guò)程是最高層次到最低層次逐層進(jìn)行的。對(duì)于最高層下面的第二層，若上一層次A包含m個(gè)因素， A1，A2，… Am，其層次總排序權(quán)值分別為a1，a2，… am，下一層次B包含n個(gè)元素B1，B2，… Bn，它們對(duì)于因素Aj的層次單排序權(quán)值分別為bj1，bj2，… bjn（當(dāng)Bi與Aj無(wú)聯(lián)系時(shí)，bji=0），此時(shí)B層次總排序權(quán)值分別為 ，當(dāng)然。

比較判斷矩陣的辦法雖能減少其它因素的干擾，較客觀地反映出一對(duì)因子影響力的差別，但為了避免出現(xiàn)A比B重要，B比C重要，而C又比A重要這樣的矛盾情況出現(xiàn)，需要檢驗(yàn)判斷矩陣是否具有滿(mǎn)意的一致性，以便確定是否接受。判斷矩陣的一致性用隨機(jī)一致性比率CR表示，CR=CI/RI，其中，RI為平均一致性指標(biāo)，CI為一致性指標(biāo)，CI=（λmax-n）/（n-1），λmax-n越大，CI越大，矩陣的一致性就越差。當(dāng)CR<0.1時(shí)，認(rèn)為判斷矩陣的一致性是可以接受的，否則應(yīng)該對(duì)判斷矩陣做適當(dāng)修正以使其具有滿(mǎn)意的一致性。層次單排序和總排序的一致性比率的計(jì)算原理是相同的，總排序的一致性比率CR=CI/RI=/

4 結(jié)果與分析

1）通過(guò)計(jì)算，第一層CIPP四個(gè)要素的權(quán)重分別為：0.17、0.17、0.23、0.43，其中成果評(píng)價(jià)A4所占比重最大，背景評(píng)價(jià)A1和投入評(píng)價(jià)A2所占比重最小。說(shuō)明專(zhuān)家們一致認(rèn)為實(shí)踐效果評(píng)價(jià)最為重要，背景評(píng)價(jià)和投入評(píng)價(jià)的重要性最低，這和本課題中另一項(xiàng)學(xué)生實(shí)踐滿(mǎn)意度調(diào)查分析中的結(jié)論是一致的，學(xué)生滿(mǎn)意度與投入評(píng)價(jià)的相關(guān)性較弱。

第二中間層要素中：背景環(huán)境A1中管理機(jī)制B2比目標(biāo)定位B1更重要（0.62>0.38）；投入環(huán)境A2中師資B3比實(shí)踐基地與經(jīng)費(fèi)投入B4更重要 （0.62>0.38）；過(guò)程評(píng)價(jià)A3中教學(xué)過(guò)程的組織B6遠(yuǎn)遠(yuǎn)重要于實(shí)踐資料B5（0.83>0.17）；對(duì)于成果評(píng)價(jià)A4要素中，滿(mǎn)意度與成果B8的重要性遠(yuǎn)大于就業(yè)率B7（0.8>0.2）?？傮w而言，第二層指標(biāo)的重要性依次為滿(mǎn)意度與成果>教學(xué)過(guò)程的組織>師資隊(duì)伍>目標(biāo)定位>就業(yè)率>管理機(jī)制>基地經(jīng)費(fèi)>教學(xué)資料。

在第三層次要素中，排除師資和就業(yè)率指標(biāo)外，重要性排在前5位的分別為實(shí)踐成果C15>實(shí)踐教學(xué)過(guò)程的考核與反饋C13>實(shí)踐教學(xué)定位C2>實(shí)踐教學(xué)方法C11>學(xué)生的實(shí)踐教學(xué)滿(mǎn)意度C14，排在倒數(shù)后5位的重要性為教學(xué)文件C9<實(shí)踐管理機(jī)構(gòu)與人員C5<實(shí)踐教材C8<實(shí)踐基地C6<實(shí)踐教學(xué)內(nèi)容C10。從排序情況看，專(zhuān)家們更多的關(guān)注結(jié)果，包括實(shí)踐績(jī)效和滿(mǎn)意度；而對(duì)實(shí)踐基地以及實(shí)踐教學(xué)資料中的三個(gè)因素（實(shí)踐教材、教學(xué)內(nèi)容的個(gè)性化差異化以及可操作性、教學(xué)文件）的關(guān)注度都很低。

2）對(duì)于各項(xiàng)指標(biāo)的重要性程度，專(zhuān)家們的意見(jiàn)也存在差異，甚至做出完全相反的結(jié)論。

在所有的指標(biāo)中，大家一致認(rèn)為實(shí)踐教學(xué)過(guò)程的組織相對(duì)于教學(xué)資料非常重要，學(xué)生滿(mǎn)意度和體現(xiàn)實(shí)踐的成果相對(duì)于就業(yè)率而言更加重要，實(shí)踐管理機(jī)構(gòu)與人員的安排在相應(yīng)體系中重要性最低。其余指標(biāo)的重要性各位專(zhuān)家都有不同的看法甚至完全相反。

判斷完全相反的指標(biāo)主要有：一級(jí)指標(biāo)中的背景評(píng)價(jià)（2人認(rèn)為很重要）和成果評(píng)價(jià)（5人認(rèn)為很重要）；二級(jí)指標(biāo)中管理機(jī)制與目標(biāo)定位（6人認(rèn)為管理機(jī)制相對(duì)重要或特別重要）以及師資與基地經(jīng)費(fèi)（5位專(zhuān)家認(rèn)為師資非常重要）；三級(jí)指標(biāo)中經(jīng)費(fèi)投入比實(shí)踐基地更加重要（5位贊成），教材的選用建設(shè)不重要（5位專(zhuān)家贊成），實(shí)踐的考核反饋特別重要（6人贊成），實(shí)踐過(guò)程的安排（只有1位專(zhuān)家認(rèn)為很重要），對(duì)于學(xué)生的滿(mǎn)意度與體現(xiàn)成果的要素比較中，只有1位專(zhuān)家強(qiáng)調(diào)學(xué)生滿(mǎn)意度的重要性。

在這些判斷相反的指標(biāo)中，易考核與衡量的指標(biāo)權(quán)重較高，相反權(quán)重較低，同時(shí)專(zhuān)家直接負(fù)責(zé)的領(lǐng)域權(quán)重賦值也較高。基地的建設(shè)管理由于社會(huì)關(guān)系的問(wèn)題難以穩(wěn)定，多數(shù)專(zhuān)家自動(dòng)忽略，而經(jīng)費(fèi)的投入是非常容易考核衡量的，因此只有負(fù)責(zé)實(shí)踐基地的專(zhuān)家以及一直從事實(shí)習(xí)工作的專(zhuān)家認(rèn)為基地建設(shè)很重要，對(duì)于實(shí)踐教材的重要性只有曾經(jīng)在學(xué)校教務(wù)部門(mén)從事工作的專(zhuān)家更加關(guān)注。盡管學(xué)校常規(guī)檢查重點(diǎn)針對(duì)教學(xué)文件以及教材的選用，但多數(shù)專(zhuān)家認(rèn)為教學(xué)文件的重要性相對(duì)很低?？墒墙虒W(xué)內(nèi)容的重要性盡管重要，但由于專(zhuān)業(yè)知識(shí)的特點(diǎn)導(dǎo)致內(nèi)容的考核難以進(jìn)行。

5 結(jié)論

從前文的分析中可以得出專(zhuān)家們更多的關(guān)注實(shí)踐的結(jié)果、實(shí)踐過(guò)程的組織、師資的實(shí)踐能力以及實(shí)踐定位，對(duì)于難以控制、難以考核的要素關(guān)注度都較低。對(duì)各項(xiàng)指標(biāo)重要性的確定各方面，往往結(jié)合了專(zhuān)業(yè)實(shí)際使用情況，同時(shí)不同專(zhuān)家所處位置以及從事實(shí)踐教學(xué)活動(dòng)的種類(lèi)的差異性對(duì)各要素的重要性的人是也不同。

參考文獻(xiàn)：

[1]孫宏才等.網(wǎng)絡(luò)層次分析法與決策科學(xué)[M]. 北京：國(guó)防工業(yè)出版社，2011