趙 鑫

(中國石化青島安全工程研究院，山東青島 266071)

0 前言

英國管理服務(wù)委員會(huì)對(duì)培訓(xùn)效果評(píng)估給出了相關(guān)定義[1]，一是培訓(xùn)機(jī)構(gòu)自測(cè)；二是培訓(xùn)機(jī)構(gòu)上級(jí)或企業(yè)考察[2]，檢驗(yàn)是否達(dá)到了組織的預(yù)期目標(biāo)，因此以目標(biāo)為導(dǎo)向的評(píng)估才有意義。關(guān)于培訓(xùn)評(píng)估的理論較多[3-8]，其中較為常用的包括唐·柯克帕特里克(Donald.Kirkpatrick)的四級(jí)評(píng)估法、考夫曼(Kaufman)的五層次評(píng)估、CIPP模型等。無論使用哪種模型，評(píng)估指標(biāo)體系的構(gòu)建是關(guān)鍵。因?yàn)椴煌钠髽I(yè)特點(diǎn)不同、培訓(xùn)目標(biāo)不同，所以評(píng)估指標(biāo)的選擇和權(quán)重確定必須符合企業(yè)的特點(diǎn)，評(píng)估工作才有意義。

本文基于石化企業(yè)的特點(diǎn)分析其安全培訓(xùn)目標(biāo)，并以目標(biāo)為導(dǎo)向分析石化企業(yè)安全培訓(xùn)效果評(píng)估的內(nèi)容。利用德爾菲法篩選出評(píng)估指標(biāo)，然后基于ISM模型，建立各評(píng)估指標(biāo)間的結(jié)構(gòu)關(guān)系，有助于為評(píng)估效果的不足查明原因來源。最后采用AHP方法確定各評(píng)估指標(biāo)的權(quán)重，形成石化企業(yè)的安全培訓(xùn)評(píng)估指標(biāo)體系。

1 石化企業(yè)安全培訓(xùn)目標(biāo)

石化企業(yè)作為事故多發(fā)的高危行業(yè)企業(yè)，如何降低因安全事故造成的人員傷亡和財(cái)產(chǎn)損失是企業(yè)關(guān)注的焦點(diǎn)。同時(shí)高危企業(yè)具有安全培訓(xùn)實(shí)施的強(qiáng)制性[9]，因此安全培訓(xùn)是企業(yè)安全運(yùn)營(yíng)的必要工作，降低事故率、減少人員傷亡和財(cái)產(chǎn)損失是企業(yè)安全培訓(xùn)的最終目標(biāo)。要達(dá)到最終目標(biāo)，則要求所有員工具備所在崗位需要的安全能力，實(shí)現(xiàn)崗位安全績(jī)效合格；要具備崗位安全能力則需要掌握相應(yīng)的安全知識(shí)和技能；員工缺乏的安全知識(shí)和技能可通過安全培訓(xùn)途徑來補(bǔ)充。因此石化企業(yè)安全培訓(xùn)的目標(biāo)滿足PDCA循環(huán)，如圖1所示。

圖1 石化企業(yè)安全培訓(xùn)目標(biāo)PDCA循環(huán)

2 安全培訓(xùn)評(píng)估內(nèi)容

實(shí)施安全培訓(xùn)評(píng)估的最終目的是明確培訓(xùn)是否實(shí)現(xiàn)了預(yù)期目標(biāo)以及實(shí)現(xiàn)程度，因此基于各階段的培訓(xùn)目標(biāo)，確定對(duì)應(yīng)的評(píng)估內(nèi)容可保證評(píng)估的全面性和可靠性。石化企業(yè)各階段安全培訓(xùn)目標(biāo)對(duì)應(yīng)的評(píng)估內(nèi)容如表1所示。

由表1可以看出，要評(píng)估安全培訓(xùn)項(xiàng)目是否成功，需要對(duì)學(xué)員參加培訓(xùn)前后掌握的知識(shí)和技能進(jìn)行測(cè)評(píng)，反映安全知識(shí)和技能的學(xué)習(xí)成果；要評(píng)估學(xué)習(xí)的知識(shí)是否能滿足崗位需求，需要對(duì)學(xué)員培訓(xùn)前后的在崗表現(xiàn)進(jìn)行評(píng)估；最后評(píng)估是否達(dá)到了企業(yè)總體的安全目標(biāo)，并對(duì)培訓(xùn)項(xiàng)目有相應(yīng)的反饋。因此以目標(biāo)為導(dǎo)向的評(píng)估內(nèi)容同樣滿足PDCA循環(huán)，并與安全培訓(xùn)目標(biāo)構(gòu)成雙向循環(huán)，如圖2所示。

圖2 石化企業(yè)安全培訓(xùn)目標(biāo)和評(píng)估雙向PDCA循環(huán)

由圖2可見，外側(cè)循環(huán)為安全培訓(xùn)項(xiàng)目評(píng)估PDCA循環(huán)，該循環(huán)可用于評(píng)估安全培訓(xùn)過程及培訓(xùn)后的各階段取得的效果；內(nèi)側(cè)循環(huán)為安全培訓(xùn)目標(biāo)PDCA循環(huán)，結(jié)合各階段的評(píng)估結(jié)果，用于查找培訓(xùn)不足的原因，從而制定改進(jìn)措施。例如，若培訓(xùn)后員工的安全績(jī)效未得到明顯提高，原因可能是員工未掌握崗位需要的安全知識(shí)和技能，或是工作環(huán)境(不屬于安全培訓(xùn)范疇)方面的影響；若是員工在培訓(xùn)后仍未掌握崗位所需的安全知識(shí)，則可能是安全培訓(xùn)項(xiàng)目的設(shè)計(jì)不符合需求，或是員工本身不適合該崗位的工作。

3 安全培訓(xùn)效果評(píng)估指標(biāo)體系構(gòu)建

3.1 評(píng)估指標(biāo)選取的原則

a)全面性。安全培訓(xùn)效果受多種因素綜合影響，指標(biāo)選取時(shí)必須將內(nèi)在因素(培訓(xùn)項(xiàng)目策劃實(shí)施的全過程)和外部因素(學(xué)員的學(xué)習(xí)成果與應(yīng)用、企業(yè)的安全效益等)相結(jié)合，建立全面的培訓(xùn)評(píng)估指標(biāo)體系。

b)獨(dú)立性。指在保證全面性的前提下，選取的評(píng)估指標(biāo)不重復(fù)，且具有較強(qiáng)的代表性。

c)可行性。指選取的指標(biāo)信息易獲取和量化分析。只有可獲取的指標(biāo)信息才具有實(shí)用價(jià)值，只有量化指標(biāo)才能直接反映評(píng)估效果。

3.2 石化企業(yè)安全培訓(xùn)評(píng)估指標(biāo)篩選

根據(jù)評(píng)估指標(biāo)選取的原則進(jìn)行石化企業(yè)安全培訓(xùn)評(píng)估指標(biāo)的篩選，主要包括兩個(gè)步驟：指標(biāo)初選，滿足全面性原則；利用德爾菲方法進(jìn)行進(jìn)一步篩選[10]，以滿足獨(dú)立性和可行性原則。通過上述步驟，篩選出以目標(biāo)為導(dǎo)向的4個(gè)模塊、11種具有代表性的指標(biāo)。各指標(biāo)的名稱、含義及信息獲取來源如表2所示。

3.3 石化企業(yè)安全培訓(xùn)評(píng)估指標(biāo)的ISM模型

解釋方程模型(ISM)適用于多變量、關(guān)系復(fù)雜的系統(tǒng)分析，且已在安全培訓(xùn)評(píng)估中有所應(yīng)用[11-12]。石化企業(yè)安全培訓(xùn)效果受多因素綜合影響，且因素之間存在復(fù)雜的因果聯(lián)系。運(yùn)用ISM模型對(duì)各影響因素進(jìn)行系統(tǒng)分析，找出直接體現(xiàn)安全培訓(xùn)效果的指標(biāo)以及影響效果的深層原因，有利于企業(yè)或培訓(xùn)機(jī)構(gòu)從本源上制定改進(jìn)措施。

表2 石化企業(yè)安全培訓(xùn)評(píng)估指標(biāo)

ISM模型構(gòu)建的步驟包括：對(duì)各因素進(jìn)行兩兩間的關(guān)系分析，建立鄰接矩陣；根據(jù)鄰接矩陣計(jì)算得到可達(dá)矩陣并分析，建立模型。

a)建立鄰接矩陣。鄰接矩陣為表示各因素間相互關(guān)系的方陣，A=(aij)n×n，定義式為：

(1)

n為元素的個(gè)數(shù)，在本模型中n=11。

根據(jù)相關(guān)專業(yè)知識(shí)，分析各因素之間的關(guān)系，建立鄰接矩陣A。

b)可達(dá)矩陣的建立與分析。根據(jù)式(2)求得鄰接矩陣A對(duì)應(yīng)的可達(dá)矩陣M，I為單位陣。利用MATLAB編程計(jì)算得到，當(dāng)r=3時(shí)滿足。

M=[A+I]r+1=[A+I]r≠[A+I]r-1≠…≠[A+I]

(2)

在可達(dá)矩陣的分解計(jì)算中，首先需要找出各要素的可達(dá)集R(Fi)和先行集N(Fi)?？蛇_(dá)集R(Fi)指可達(dá)矩陣中要素Fi對(duì)應(yīng)的行中，含有1的矩陣元素所對(duì)應(yīng)列要素的集合；先行集N(Fi)指可達(dá)矩陣中要素Fi對(duì)應(yīng)的列中，含有1的矩陣元素所對(duì)應(yīng)行要素的集合。

R(Fi)∩N(Fi)=R(Fi)

(3)

所有滿足式(3)的要素Fi屬于1級(jí)。從初始矩陣M去除含有元素Fi的各行各列后得到新矩陣L1，對(duì)矩陣L1進(jìn)行相同的計(jì)算，得出所有滿足條件的2級(jí)要素和新的矩陣L2，以此類推。根據(jù)上述步驟，列出第1 級(jí)可達(dá)集和先行集，如表3 所示。

表3 第1級(jí)可達(dá)集與先行集表

由以上方法分析得出的結(jié)果為：

P=L1，L2，L3，L4，L5，L6={F1，F(xiàn)3，F(xiàn)4}，{F2}，{F6，F(xiàn)7}，{F5}，{F9，F(xiàn)10，F(xiàn)11}，{F8}。由此建立石化企業(yè)安全培訓(xùn)評(píng)估指標(biāo)的ISM模型，如圖3所示。

圖3 石化企業(yè)安全培訓(xùn)評(píng)估指標(biāo)的ISM模型

c)ISM模型分析。由圖3可見，石化企業(yè)安全培訓(xùn)的評(píng)估指標(biāo)具有多層遞階結(jié)構(gòu)，可化為3個(gè)層次進(jìn)行分析。

表層指標(biāo)包括安全事故率、培訓(xùn)內(nèi)容應(yīng)用范圍、培訓(xùn)內(nèi)容應(yīng)用頻率和違章率。這4個(gè)指標(biāo)是企業(yè)最關(guān)心的安全培訓(xùn)后的結(jié)果，用來直接評(píng)估企業(yè)是否達(dá)到預(yù)期的安全目標(biāo)。

中間指標(biāo)包括課程內(nèi)容安排、理論知識(shí)學(xué)習(xí)和安全技能掌握。這3個(gè)指標(biāo)通過影響表層指標(biāo)來影響安全培訓(xùn)效果，同時(shí)反映企業(yè)未達(dá)到安全目標(biāo)時(shí)，在安全培訓(xùn)方面存在的原因分析。如，企業(yè)安全培訓(xùn)后違章率和安全事故率仍然居高不下，可通過評(píng)價(jià)學(xué)員培訓(xùn)后的理論知識(shí)學(xué)習(xí)情況、安全技能掌握程度以及培訓(xùn)內(nèi)容是否符合要求來確定培訓(xùn)效果不足的原因。若這3個(gè)指標(biāo)的結(jié)果均為良好，則說明不是安全培訓(xùn)方面的原因，而是知識(shí)應(yīng)用環(huán)境的限制，需要企業(yè)在管理方面制定相應(yīng)的改進(jìn)措施；若這3個(gè)指標(biāo)的評(píng)估結(jié)果有不足之處，則根據(jù)模型進(jìn)行深層指標(biāo)的評(píng)估查找更深一層的原因。

深層指標(biāo)包括教師專業(yè)水平、培訓(xùn)手段、班級(jí)管理和教學(xué)環(huán)境，主要反映培訓(xùn)機(jī)構(gòu)的綜合實(shí)力。當(dāng)學(xué)員知識(shí)和能力掌握程度不達(dá)標(biāo)時(shí)，一方面原因可能是培訓(xùn)機(jī)構(gòu)的實(shí)力不足，一方面可能是學(xué)員不適合該崗位的工作。所以，可以通過對(duì)培訓(xùn)機(jī)構(gòu)的評(píng)估來確定真正原因，以便企業(yè)制定改進(jìn)措施：更換培訓(xùn)機(jī)構(gòu)或?qū)T工調(diào)崗。

因此，對(duì)于企業(yè)來說首先評(píng)估表層指標(biāo)，結(jié)果達(dá)到預(yù)期目標(biāo)時(shí)可不必繼續(xù)評(píng)估，結(jié)果不佳時(shí)再評(píng)估中間指標(biāo)，最后是深層指標(biāo)。這種依此評(píng)估的方法有助于為企業(yè)增加評(píng)估的針對(duì)性并節(jié)省評(píng)估時(shí)間。對(duì)于培訓(xùn)機(jī)構(gòu)來說，在培訓(xùn)過程中對(duì)深層指標(biāo)進(jìn)行評(píng)估并實(shí)時(shí)改進(jìn)；然后對(duì)中間指標(biāo)進(jìn)行評(píng)估，及時(shí)作出調(diào)整；該次培訓(xùn)后至下一次培訓(xùn)的過程中進(jìn)行表層指標(biāo)的評(píng)估，反饋培訓(xùn)需求，如圖4所示。

圖4 企業(yè)及安全培訓(xùn)機(jī)構(gòu)實(shí)施評(píng)估流程

3.4 層次分析法(AHP)確定權(quán)重

目前評(píng)估指標(biāo)權(quán)重的確定方法包括層次分析法(AHP)[13]、SEM模型、區(qū)間數(shù)互反判斷矩陣[14]等，其中應(yīng)用最多的是AHP法。權(quán)重確定過程包括建立目標(biāo)層次結(jié)構(gòu)、構(gòu)造判別矩陣、求解權(quán)重和一致性檢驗(yàn)。

以企業(yè)為評(píng)估主體，培訓(xùn)效果的直接指標(biāo)即表層指標(biāo)，其他階段指標(biāo)的權(quán)重確定過程與此相同。建立目標(biāo)層次結(jié)構(gòu)模型(見圖5)后，采用九標(biāo)度法建立判別矩陣，判別矩陣的特征向量即對(duì)應(yīng)各指標(biāo)的權(quán)重(見表4)。

圖5 石化企業(yè)安全培訓(xùn)效果評(píng)估層次結(jié)構(gòu)

指標(biāo)F1F2F3F4權(quán)重F110.50320.27F221530.48F30.330.2010.500.09F40.500.33210.16

根據(jù)式(4)計(jì)算一致性比例CR，若CR<0.1，則滿足一致性檢驗(yàn)。

(4)

式中：C1——一致性指標(biāo)；

n——判斷矩陣階數(shù)；

λmax為判斷矩陣的最大特征值；

R1——平均隨機(jī)一致性指標(biāo)，當(dāng)n分別為3，4，5，6時(shí)，R1為0.51，0.89，1.12，1.26。

判斷矩陣的最大特征值為4.009 4，一致性比例為0.003 5小于0.1，滿足一致性檢驗(yàn)。

由表4可見，違章率指標(biāo)的權(quán)重最大，因?yàn)檫`章率的降低直接反映員工經(jīng)培訓(xùn)后的知識(shí)應(yīng)用效果；其次是安全事故率的降低，這也是企業(yè)較關(guān)注的一方面。因此指導(dǎo)企業(yè)注重員工風(fēng)險(xiǎn)識(shí)別、隱患排查等安全應(yīng)用能力的提升是安全培訓(xùn)的關(guān)鍵。

4 結(jié)語

a)基于石化企業(yè)的特點(diǎn)分析其安全培訓(xùn)目標(biāo)，并以目標(biāo)為導(dǎo)向分析石化企業(yè)安全培訓(xùn)效果評(píng)估的內(nèi)容，構(gòu)成了石化企業(yè)安全培訓(xùn)目標(biāo)和評(píng)估的雙向PDCA循環(huán)。外循環(huán)用于評(píng)估安全培訓(xùn)過程及培訓(xùn)后的各階段取得的效果，內(nèi)循環(huán)用于查找培訓(xùn)不足的原因。

b)利用德爾菲法進(jìn)行指標(biāo)的初步篩選，并說明各指標(biāo)信息獲取來源。

c)利用ISM模型對(duì)各指標(biāo)的關(guān)系進(jìn)一步分析，得到多層次的有向圖。針對(duì)不同的評(píng)估主體(企業(yè)和培訓(xùn)機(jī)構(gòu))，給出了評(píng)估順序。尤其對(duì)于企業(yè)來說，當(dāng)上一階段評(píng)估效果不佳時(shí)再進(jìn)行下一階段的評(píng)估，節(jié)省了評(píng)估時(shí)間。

d)采用AHP方法確定各評(píng)估指標(biāo)的權(quán)重，簡(jiǎn)單實(shí)用，并能指導(dǎo)企業(yè)安全培訓(xùn)的重點(diǎn)。