李立民 LI Li-min

（中國民用航空飛行學(xué)院，廣漢 618307）

（Civil Aviation Flight University of China，Guanghan 618307，China）

0 引言

在我國，隨著現(xiàn)代化大型飛機的大量引進，對外交流的不斷加強，新的訓(xùn)練理念和手段的不斷引入，機組資源管理的研究日漸盛行。盡管機組資源管理在國內(nèi)民航界已經(jīng)普遍被接受和重視，它也被認為是保證航空飛行安全的重要保障措施之一，但是國內(nèi)機組資源管理研究水平和發(fā)展仍然落后于歐美發(fā)達國家。

但是由于目前的CRM培訓(xùn)工作缺乏合理的評價指標(biāo)體系，從而導(dǎo)致培訓(xùn)效果的評估工作仍舊處于初級階段。此外，由于不能夠明確評估內(nèi)容的重要度，因此，評估很難得到準(zhǔn)確的結(jié)果。在飛行員培訓(xùn)中，飛行員培訓(xùn)效果評估作為一個重要的環(huán)節(jié)，只有構(gòu)建一套科學(xué)合理的培訓(xùn)效果評估指標(biāo)體系才能有效保證飛行員培訓(xùn)的質(zhì)量和效益。

1 評估指標(biāo)體系構(gòu)建

1.1 評估指標(biāo)體系構(gòu)建原則

①評估指標(biāo)應(yīng)當(dāng)與培訓(xùn)目標(biāo)相關(guān)。培訓(xùn)能否達到并完成了預(yù)期的目標(biāo)和任務(wù)作為培訓(xùn)效果評估的一個重要作用，因此，選取的培訓(xùn)指標(biāo)因培訓(xùn)目標(biāo)的不同而不同。

②評估指標(biāo)應(yīng)當(dāng)具有可操作性。由于本研究的模型是針對民航飛行學(xué)院構(gòu)建的，因此，要求模型具有較強的實用性和易操作性。為了避免學(xué)員難以回答或涉及隱私的指標(biāo)，應(yīng)當(dāng)在選取指標(biāo)的時候選擇易理解和易實現(xiàn)數(shù)據(jù)收集的項目。

③為了確保評估指標(biāo)體系具有系統(tǒng)性和全面性，本研究除了參考Kirkpatrick的四層次評估模型，從培訓(xùn)的反應(yīng)層、學(xué)習(xí)層、行為層和結(jié)果層等各層次來合理選取指標(biāo)外，還結(jié)合了培訓(xùn)的目的、民航飛行學(xué)院的實際情況等因素。

1.2 評估指標(biāo)選取的程序

保證飛行員培訓(xùn)效果評估成功的前提就是要建立一套層次關(guān)系清晰合理以及內(nèi)容豐富全面的評估指標(biāo)體系。本文在選擇指標(biāo)的時候采用了專家咨詢法，此方法包括經(jīng)驗預(yù)選和咨詢專家后確定指標(biāo)兩個步驟。

①通過研究并參考國內(nèi)外相關(guān)文獻和有關(guān)培訓(xùn)效果評估的研究成果，在結(jié)合我國飛行員培訓(xùn)特點的基礎(chǔ)上，預(yù)選出符合該指標(biāo)體系構(gòu)建目的及構(gòu)建原則的一定數(shù)量有代表性的指標(biāo)，將其構(gòu)成預(yù)選指標(biāo)集。

②采用專家匿名發(fā)表意見的方式獲取專家意見，該方式要求專家只能與調(diào)查人員聯(lián)系，專家之間不得互相討論、不得發(fā)生橫向聯(lián)系。通過多輪次調(diào)查專家對預(yù)選指標(biāo)集所提問題的看法，經(jīng)過反復(fù)征詢、歸納、修改，最后匯總成專家基本一致的看法，作為預(yù)測的結(jié)果，這種方法具有廣泛的代表性，較為可靠。

1.3 評估指標(biāo)體系的構(gòu)成

根據(jù)飛行員培訓(xùn)的目的和特點，將飛行員培訓(xùn)效果評估指標(biāo)分為反應(yīng)層、學(xué)習(xí)層、行為層、結(jié)果層四個一級指標(biāo)，并在一級指標(biāo)下設(shè)立了12個二級指標(biāo)（具體構(gòu)成見表1）。

2 評估指標(biāo)權(quán)重確定

培訓(xùn)效果評估指標(biāo)體系中存在包括培訓(xùn)內(nèi)容的系統(tǒng)性、受訓(xùn)者的紀(jì)律性等在內(nèi)的難以準(zhǔn)確量化的指標(biāo)。在處理這些目標(biāo)時就要引入模糊性的概念。模糊層次綜合評價法具有同時考慮了事物內(nèi)部關(guān)系的錯綜復(fù)雜性和價值系統(tǒng)的模糊性的優(yōu)點，非常適合對模糊性指標(biāo)的評價。其基本計算步驟如下：

①構(gòu)建層次結(jié)構(gòu)模型，即確定目標(biāo)層、準(zhǔn)則層和評價因素層；

②建立判斷矩陣群，假設(shè)有n個評價指標(biāo)，通過因素間兩兩對比方法構(gòu)造判斷矩陣其中 bij為第 i個元素相對于第j個元素的重要程度；

③計算判斷矩陣的特征向量 W=[w1，w2，…，wn]T，其中wi的求取通常采用和法，計算如下：

④檢驗判斷矩陣的一致性，首先計算一致性指標(biāo)為CI=（λmax-n）/（n-1），然后可得一致性比率CR=CI/RI，并檢驗判斷矩陣的一致性：當(dāng)CR＜0.1時，認為判斷矩陣具有一致性，可以接受；當(dāng)CR≥0.1時，認為應(yīng)該對判斷矩陣做適當(dāng)修正，返回步驟①直到通過一致性檢驗為止。

根據(jù)12位專家給定的判斷矩陣，運用幾何平均法將專家意見綜合平均，即得到最終的指標(biāo)評價判斷矩陣。根據(jù)Matlab7.0計算結(jié)果，各指標(biāo)權(quán)重保留兩位小數(shù)，構(gòu)建出完整的飛行員CRM培訓(xùn)效果評估模型，如表1所示。

表1 飛行員CRM培訓(xùn)效果評估指標(biāo)權(quán)重及評價匯總

3 模糊綜合評估

在結(jié)合層次分析法確定各指標(biāo)的權(quán)重的基礎(chǔ)上，進一步應(yīng)用模糊綜合評判法來評估飛行員培訓(xùn)的效果。其基本流程為：

①建立評估因素集。飛行員培訓(xùn)效果的主要素評估指標(biāo)集 U：反應(yīng)層 U1、學(xué)習(xí)層 U2、行為層 U3、結(jié)果層 U4。飛行員培訓(xùn)效果的子要素評估指標(biāo)集，反應(yīng)層指標(biāo)要素U1：課程設(shè)置情況U11，課堂參與程度U12，教師授課情況U13，教學(xué)設(shè)施情況U14；學(xué)習(xí)層指標(biāo)要素U2：相關(guān)知識的掌握情況U21；行為層指標(biāo)要素U3：管理能力的提高U31，應(yīng)急處理能力的提高U32，人際溝通能力的提高U33，計劃協(xié)調(diào)能力的提高U34；結(jié)果層指標(biāo)要素U4：團隊合作精神的加強U41，組織文化安全的提高U42，人為差錯的減少U43。

②建立評估因素權(quán)重集。確定評估主要素集和子要素集中各要素的權(quán)重值，根據(jù)表1可知，一級指標(biāo)權(quán)重為：U={Ui}={0.28，0.22，0.20，0.30}，i=1，2，3，4

二級指標(biāo)權(quán)重為：W11={0.24，0.25，0.32，0.19}，W22={1.00}，W33={0.32，0.24，0.20，0.24}，W44={0.30，0.26，0.44}

③建立評判集。由于評估指標(biāo)的重要性都具有模糊性，因此，首先按照重要性由大到小給出某個指標(biāo)重要性的區(qū)間集。根據(jù)實際情況，本文給出的培訓(xùn)效果評估集為：

某飛行學(xué)院在開展培訓(xùn)后通過收集、匯總、整理和分析各種指標(biāo)的評價數(shù)據(jù)，同時結(jié)合層次分析的各個指標(biāo)權(quán)重得到表1。

④進行各級指標(biāo)因素的綜合評價。通過對相關(guān)人員的詢問調(diào)查得到了模糊綜合評價矩陣R。對課程設(shè)置情況、課堂參與程度、教師授課情況以及教學(xué)設(shè)施情況的模糊綜合評價矩陣為：

然后與二級指標(biāo)的權(quán)重向量相乘得二級指標(biāo)的綜合評價結(jié)果：

同理可得其他三級指標(biāo)的綜合評價結(jié)果A2、A3、A4。將二級指標(biāo)的綜合評價結(jié)果作為一個模糊綜合評價矩陣與一級指標(biāo)的權(quán)重向量相乘得一級指標(biāo)因素的綜合評價結(jié)果：

⑤計算每個評價對象的綜合分值。假定評語等級v1、v2、v3、v4的分數(shù)重心依次為 95、85、75、65，于是計算飛行員CRM培訓(xùn)效果評估的綜合得分為90.978。

從反應(yīng)層、行為層、學(xué)習(xí)層和結(jié)果層四個一級指標(biāo)的評價結(jié)果來看，反應(yīng)層隸屬于“好”的程度較低，僅達到0.661，這說明培訓(xùn)的準(zhǔn)備工作做得還不夠充分，需要加強課程的設(shè)置、教學(xué)設(shè)施、以及提高授課教師的水平。

4 結(jié)語

本文為了能夠?qū)哟畏置鞯姆从吵雠嘤?xùn)評估的內(nèi)容，在Kirkpatrick四層次培訓(xùn)效果評估模型理論的基礎(chǔ)上結(jié)合飛行員CRM的熱點構(gòu)建了飛行員CRM培訓(xùn)效果評估指標(biāo)體系，因此，該指標(biāo)體系能夠直觀全面的對培訓(xùn)效果進行評估。此外，由于此體系中存在難以精確量化的指標(biāo)，因此，為了正確評估飛行員學(xué)院的而培訓(xùn)效果并找出存在的問題，本文在計算指標(biāo)的時候采用了模糊層次綜合評價法。

[1]Kirkpatrick D.L.Techniques for evaluating training problems[J].Journal of ASTD，1959，13（11）：3-10.

[2]秦壽康.綜合評價原理與應(yīng)用[M].北京：電子工業(yè)出版社，2003.

[3]王蓮芬，許樹柏.層次分析法引論[M].北京：中國人民大學(xué)出版社，1990.