李鈺軒
(仙桃市煙草專賣局(公司)人事科,湖北 仙桃 433000)
員工培訓(xùn)效果評估是企業(yè)培訓(xùn)工作中的重要環(huán)節(jié),客觀合理的評估結(jié)果是了解培訓(xùn)課程是否滿足學(xué)員要求的前提, 能夠?yàn)榻M織者提供培訓(xùn)計(jì)劃安排、培訓(xùn)課程選擇等信息的反饋,這就要求企業(yè)建立一套科學(xué)的培訓(xùn)評估體系。針對煙草行業(yè)培訓(xùn),相關(guān)學(xué)者進(jìn)行了研究。孫國光[1]通過分析當(dāng)前煙草商業(yè)企業(yè)面臨的新形勢,針對員工培訓(xùn)工作中存在的主要問題進(jìn)行了調(diào)查和分析,以青島市煙草專賣局(公司)員工教育培訓(xùn)體系搭建過程為主線,對煙草商業(yè)企業(yè)如何開展教育培訓(xùn)工作進(jìn)行了研究。王雁舒[2]發(fā)現(xiàn)培訓(xùn)工作在企業(yè)的發(fā)展過程中發(fā)揮著不可替代的作用,是改善、提高企業(yè)員工素質(zhì)的基石。但是,培訓(xùn)并不是一項(xiàng)一勞永逸的工作,對其進(jìn)行效果評估,促使培訓(xùn)效果轉(zhuǎn)化為工作實(shí)效,是培訓(xùn)工作不能缺少的組成部分。孫紅濤[3]從當(dāng)前煙草企業(yè)培訓(xùn)重視程度、培訓(xùn)形式和內(nèi)容、培訓(xùn)隊(duì)伍、培訓(xùn)效果評估和激勵(lì)機(jī)制等問題出發(fā),提出了解決問題的相應(yīng)對策,為中國煙草企業(yè)教育培訓(xùn)提出一些思路。綜上所述,目前煙草行業(yè)針對培訓(xùn)質(zhì)量的評估仍以定性為主,評估手段單一,缺乏科學(xué)有效的定量評估方法,導(dǎo)致評估效果可信度低,無法用于培訓(xùn)效果的改進(jìn)和提升[4~6]。本文正是基于此種現(xiàn)象,以行業(yè)實(shí)際培訓(xùn)評估內(nèi)容為例,運(yùn)用層次分析法,通過定量方法對安全培訓(xùn)效果進(jìn)行了深入研究。
本文以企業(yè)的網(wǎng)絡(luò)學(xué)院課程實(shí)際培訓(xùn)質(zhì)量評估表為例確定培訓(xùn)的評估指標(biāo)體系構(gòu)建方法。評估體系構(gòu)建具體可分為以下幾個(gè)步驟:
2.1 總目標(biāo)確定
根據(jù)研究內(nèi)容將總目標(biāo)設(shè)置為培訓(xùn)質(zhì)量;
2.2 子目標(biāo)確定
將培訓(xùn)質(zhì)量評估內(nèi)容分為教案設(shè)計(jì)、授課能力兩個(gè)子目標(biāo),采用專家討論確定子目標(biāo)之間的優(yōu)先級;
2.3 子目標(biāo)分解:將子目標(biāo)具體細(xì)化,確定下一階段的分析對象;
2.4 具體評價(jià)準(zhǔn)則確定
針對每個(gè)細(xì)化過后的子目標(biāo)確定具體的評價(jià)準(zhǔn)則,是評估過程中的最基本單元。
本文通過參考實(shí)際培訓(xùn)質(zhì)量評估表,并在4名專家的指導(dǎo)下,建立了針對網(wǎng)絡(luò)學(xué)院培訓(xùn)質(zhì)量的評估指標(biāo)體系,其中一級指標(biāo)2個(gè),二級指標(biāo)5個(gè),三級指標(biāo)11個(gè),對評估指標(biāo)進(jìn)行具體介紹。
培訓(xùn)質(zhì)量評估的第一個(gè)要點(diǎn)是教案設(shè)計(jì),教案的設(shè)計(jì)關(guān)系著培訓(xùn)內(nèi)容的選擇和培訓(xùn)形式的呈現(xiàn),主要為培訓(xùn)內(nèi)容的選擇提供參考依據(jù)。對于一份教案通常從主體也就是也就是培訓(xùn)內(nèi)容,以及客體也就是學(xué)員兩個(gè)角度進(jìn)行評價(jià)。故在教案設(shè)計(jì)這一子層面中分為內(nèi)容設(shè)計(jì)和學(xué)員評價(jià)2部分。根據(jù)培訓(xùn)質(zhì)量評估表將內(nèi)容設(shè)計(jì)分為教案、材料的組織和內(nèi)容的設(shè)置是否合理2個(gè)具體評價(jià)準(zhǔn)則。將學(xué)員評價(jià)分為授課方式是否易于接受和培訓(xùn)目標(biāo)的體現(xiàn)2個(gè)具體評價(jià)準(zhǔn)則。
培訓(xùn)質(zhì)量評估的第二個(gè)要點(diǎn)是授課能力。教案設(shè)計(jì)主要是針對培訓(xùn)內(nèi)容質(zhì)量的評估,而授課能力是對任課教師授課質(zhì)量的評估,主要為任課教師的選擇提供依據(jù)。授課能力分為組織能力、溝通交流、教學(xué)細(xì)節(jié)3部分。其中組織能力分為紀(jì)律維持和簽到打分2個(gè)具體評價(jià)準(zhǔn)則,溝通交流分為語音語調(diào)是否合適、是否能夠調(diào)動(dòng)學(xué)員的學(xué)習(xí)積極性、有比較適合的溝通方式3個(gè)具體評價(jià)準(zhǔn)則,教學(xué)細(xì)節(jié)分為及時(shí)回答學(xué)員的問題、舉例貼切程度2個(gè)具體評價(jià)準(zhǔn)則。
本文采用層次分析法(AHP)對評價(jià)指標(biāo)進(jìn)行權(quán)重確定,層次分析法通過構(gòu)建“培訓(xùn)子層面-培訓(xùn)內(nèi)容-具體培訓(xùn)準(zhǔn)則”的體系構(gòu)建分析層次[7~9]。在每一個(gè)層次中通過要素之間的兩兩比較構(gòu)建判斷矩陣,隨后確定目標(biāo)權(quán)重,并進(jìn)行一致性檢驗(yàn)。
3.1 指標(biāo)權(quán)重確定
在培訓(xùn)體系內(nèi)需要明確各個(gè)要素之間的相對權(quán)重,包括“培訓(xùn)子層面-培訓(xùn)內(nèi)容-具體培訓(xùn)準(zhǔn)則”每個(gè)層次內(nèi)的要素。在化工安全培訓(xùn)評估指標(biāo)體系標(biāo)準(zhǔn)框架下,需要對各安全培訓(xùn)子層面的相對重要程度以及安全培訓(xùn)子內(nèi)容下對應(yīng)的各應(yīng)急目標(biāo)的相對重要程度進(jìn)行確定。本文以授課能力為例具體介紹權(quán)重的確定方法。
3.1.1 安全培訓(xùn)子層面內(nèi)各培訓(xùn)內(nèi)容權(quán)重確定
在本文中對培訓(xùn)質(zhì)量劃分2個(gè)子層面,分別為教案設(shè)計(jì)和授課能力。以其中的授課能力為例,授課能力子層面包括3個(gè)培訓(xùn)準(zhǔn)則,分別為:組織能力(Z3)、溝通交流(Z4)、教學(xué)細(xì)節(jié)(Z5)。按照層次分析法中T.L.Saaty1-9 標(biāo)度評分標(biāo)準(zhǔn),構(gòu)造判斷矩陣,如表1所示。
表1 授課能力子內(nèi)容重要度
授課能力判斷矩陣:
通過計(jì)算矩陣一致性比率<0.1,矩陣一致性可以接受。3個(gè)培訓(xùn)子內(nèi)容的權(quán)重分別為:
教案設(shè)計(jì)子層面中的培訓(xùn)內(nèi)容權(quán)重計(jì)算過程與授課能力相似。
3.1.2 具體培訓(xùn)準(zhǔn)則之間的權(quán)重確定
對每個(gè)培訓(xùn)質(zhì)量評估子層面下的具體準(zhǔn)則進(jìn)行指標(biāo)權(quán)重計(jì)算有利于對評價(jià)指標(biāo)的分?jǐn)?shù)進(jìn)行確定[10]。以授課能力下溝通交流的具體培訓(xùn)準(zhǔn)則(語音語調(diào)是否合適、是否能夠調(diào)動(dòng)學(xué)員的積極性、有比較合適的溝通方式)為例,W3代表語音語調(diào)是否合適,W4代表是否能夠調(diào)動(dòng)學(xué)員的積極性,W5代表有比較合適的溝通方式,如表2所示。
表2 溝通交流培訓(xùn)準(zhǔn)則重要度
溝通交流具體準(zhǔn)則比較矩陣:
通過計(jì)算矩陣一致性比率<0.1,矩陣一致性可以接受。4個(gè)培訓(xùn)具體準(zhǔn)則的權(quán)重分別為:
其他具體培訓(xùn)準(zhǔn)則權(quán)重計(jì)算過程與溝通交流下的具體培訓(xùn)準(zhǔn)則相似。
3.2 評估指標(biāo)分值與評估標(biāo)準(zhǔn)設(shè)定
通過對培訓(xùn)質(zhì)量評估子層面內(nèi)部各個(gè)子內(nèi)容的權(quán)重計(jì)算,根據(jù)計(jì)算結(jié)果設(shè)置培訓(xùn)質(zhì)量評估子層面內(nèi)部各個(gè)子內(nèi)容的評估分值和評分標(biāo)準(zhǔn),設(shè)計(jì)針對培訓(xùn)質(zhì)量評估的評分標(biāo)準(zhǔn)及打分方法。
將前文中獲得的培訓(xùn)質(zhì)量評估子層面內(nèi)各個(gè)子內(nèi)容對應(yīng)的權(quán)重保留兩位有效數(shù)字后轉(zhuǎn)化為分值,采用百分制。對應(yīng)的分值如下:組織能力(Z1)32分、溝通交流(Z2)56分、教學(xué)細(xì)節(jié)(Z3)12分。
組織能力(Z1)32分中根據(jù)權(quán)重分配紀(jì)律維持(W1)18分、簽到打分(W2)14分。
溝通交流(Z2)56分中根據(jù)權(quán)重分配語音語調(diào)是否合適(W3)8分、是否能夠調(diào)動(dòng)學(xué)員的積極性(W4)17分、有比較合適的溝通方式(W5)31分。
教學(xué)細(xì)節(jié)(Z3)12分中根據(jù)權(quán)重分配及時(shí)回答學(xué)員的問題(W6)9分、舉例貼切程度(W7)3分。
依據(jù)具體培訓(xùn)準(zhǔn)則、邏輯判斷以及所需接受知識的重要程度,結(jié)合專家分析討論設(shè)計(jì)評估標(biāo)準(zhǔn),根據(jù)權(quán)重計(jì)算對評估標(biāo)準(zhǔn)進(jìn)行分值設(shè)置,最終完成各培訓(xùn)質(zhì)量評估子內(nèi)容的培訓(xùn)評估打分,得到改進(jìn)后的培訓(xùn)質(zhì)量評估表,如表3所示。評估標(biāo)準(zhǔn)得分可以根據(jù)評估人員具體情況在區(qū)間內(nèi)打分。另外一個(gè)子層面,教案設(shè)計(jì)的評估打分表采用同樣的設(shè)計(jì)方法,在此不再贅述。
表3 培訓(xùn)質(zhì)量評估表
本文采用上文中構(gòu)建的培訓(xùn)質(zhì)量評估體系,選取企業(yè)中某一員工作為典型研究對象,通過該體系對網(wǎng)絡(luò)學(xué)院某一課程培訓(xùn)質(zhì)量進(jìn)行評估,評估結(jié)果如表4所示。
表4 某員工針對網(wǎng)絡(luò)學(xué)院課程培訓(xùn)質(zhì)量評估得分情況
從得分的整體情況來看在安全生產(chǎn)思想培訓(xùn)、安全技能培訓(xùn)和安全技術(shù)知識培訓(xùn)三方面企業(yè)目前均存在不足之處,詳細(xì)分析如下:
4.1 教案設(shè)計(jì)
內(nèi)容設(shè)計(jì):從得分不難看出教案、材料的組織是否合理34分中得到32分,內(nèi)容的設(shè)置是否合理31分中得到28分,由此可知本課程在內(nèi)容設(shè)計(jì)上質(zhì)量較高,在內(nèi)容設(shè)計(jì)上能滿足該學(xué)員要求。
學(xué)員評價(jià):授課的方式是否易于接受20分中得到14分,說明該學(xué)員認(rèn)為本課程授課方式不大容易接受,可能與之前接觸網(wǎng)絡(luò)授課培訓(xùn)較少有關(guān)。培訓(xùn)目標(biāo)的體現(xiàn)是否明確15分中得到14分,說明本課程較好地體現(xiàn)了培訓(xùn)目標(biāo)。
4.2 授課能力
4.2.1 組織能力
紀(jì)律維持是否良好與簽到打分是否每節(jié)課執(zhí)行都得到了滿分。說明雖然是網(wǎng)絡(luò)培訓(xùn),但是課程組織有序,課堂紀(jì)律維持較好。
4.2.2 溝通交流
語音語調(diào)是否合適8分中得到了4分,說明本課程授課過程中教師的語音語調(diào)沒有令該學(xué)員滿意,說明本課程在教師授課過程中要注意語音語調(diào)是否合適,同時(shí)學(xué)員要調(diào)試好設(shè)備,確保授課時(shí)語音語調(diào)不會受到設(shè)備干擾。是否能夠調(diào)動(dòng)學(xué)員的積極性17分中得到了15分,說明本課程教師的授課較為生動(dòng),能夠調(diào)動(dòng)學(xué)員積極性。是否有比較合適的溝通方式31分中得到了25分,說明本課程教師的溝通方式有待改善,可能與教師授課速度過快有關(guān)。
4.2.3 教學(xué)細(xì)節(jié)
是否及時(shí)回答學(xué)員的問題9分中只得到了3分,說明教師沒有對學(xué)員提出的問題及時(shí)進(jìn)行解答,可能與授課形式為網(wǎng)絡(luò)培訓(xùn),教師和學(xué)員之間無法即時(shí)溝通有關(guān)。舉例的貼切程度得到了3分滿分,說明該學(xué)員認(rèn)為課程舉例較為貼切。
4.3 企業(yè)培訓(xùn)建議
針對企業(yè)今后在網(wǎng)絡(luò)學(xué)院上開展相關(guān)培訓(xùn)提出以下建議:一是增加網(wǎng)絡(luò)學(xué)院授課頻次,確保網(wǎng)絡(luò)培訓(xùn)形式能被大多數(shù)員工接受。二是在教師授課過程中要注意語音語調(diào)是否合適,同時(shí)學(xué)員要調(diào)試好設(shè)備,確保授課時(shí)語音語調(diào)不會受到設(shè)備干擾。三是教師在授課過程中要注意語速,確保授課質(zhì)量。四是教師可以采用線上留言等方式及時(shí)對學(xué)員提出的問題及時(shí)進(jìn)行解答。
本文對培訓(xùn)質(zhì)量評估進(jìn)行分級、分類分析,提出了一套具有針對性的企業(yè)培訓(xùn)質(zhì)量評估指標(biāo)體系構(gòu)建方法。針對當(dāng)前企業(yè)實(shí)際培訓(xùn)表單,基于評價(jià)指標(biāo)權(quán)重分析原則,采用層次分析法(AHP)確定各項(xiàng)評估指標(biāo)權(quán)重,通過要素之間的兩兩比較構(gòu)建判斷矩陣,解決了確定培訓(xùn)評估指標(biāo)權(quán)重的主觀性問題,最終分析得出評估體系。選取某企業(yè)員工作為典型研究對象,通過該體系對企業(yè)員工培訓(xùn)質(zhì)量進(jìn)行評估,分析得出在教案設(shè)計(jì)和授課能力方面存在的問題,為企業(yè)選擇合適的培訓(xùn)課程和講師提供參考。