劉濤

（廣東郵電職業(yè)技術(shù)學(xué)院計(jì)算機(jī)學(xué)院，廣東廣州 510630）

教育部下發(fā)的《國家職業(yè)教育改革實(shí)施方案》《職業(yè)教育提質(zhì)培優(yōu)行動(dòng)計(jì)劃（2020—2023年）》提出要完善國家職業(yè)教育制度體系，提質(zhì)培優(yōu)行動(dòng)計(jì)劃中也指出要提升教師素質(zhì)，打造教師培訓(xùn)基地，將教師培訓(xùn)上升到戰(zhàn)略高度。但現(xiàn)行的高職教師培訓(xùn)中，各大高職院校都重視培訓(xùn)，然而對(duì)培訓(xùn)效果缺乏監(jiān)督管理，即所謂的“重培輕評(píng)”，這種現(xiàn)象十分普遍。即使有評(píng)價(jià)，但是評(píng)價(jià)往往只是流于形式，未能夠公正客觀地反映整體的培訓(xùn)效果。這不利于高職教師培訓(xùn)的長遠(yuǎn)發(fā)展，也不利于高職教師的職業(yè)發(fā)展，也是對(duì)培訓(xùn)資源的一種浪費(fèi)。數(shù)字化時(shí)代的到來重塑了教育培訓(xùn)的業(yè)務(wù)生態(tài)，使線上培訓(xùn)成為新常態(tài)，如何評(píng)價(jià)線上培訓(xùn)的質(zhì)量和效果成為教師培訓(xùn)研究的關(guān)注熱點(diǎn)。

一、相關(guān)文獻(xiàn)分析

培訓(xùn)評(píng)價(jià)指標(biāo)體系是一種以數(shù)據(jù)為評(píng)判依據(jù)的客觀評(píng)價(jià)培訓(xùn)效果的有效手段。目前相關(guān)研究成果十分豐富，本文對(duì)知網(wǎng)近10年發(fā)表相關(guān)內(nèi)容的學(xué)術(shù)期刊進(jìn)行了內(nèi)容分析，發(fā)現(xiàn)目前關(guān)于教師培訓(xùn)評(píng)價(jià)的研究主要集中在以下兩個(gè)方面：一是以柯式四級(jí)培訓(xùn)評(píng)估為代表的系列培訓(xùn)評(píng)估模型為研究視角，并基于這些模型規(guī)定的培訓(xùn)評(píng)價(jià)的方式和內(nèi)容維度，構(gòu)建特定對(duì)象的培訓(xùn)評(píng)價(jià)指標(biāo)。如樓旭明企業(yè)E-Learning培訓(xùn)效果評(píng)價(jià)模型及指標(biāo)體系，基于CIPP 和柯氏評(píng)估模型的教師工作坊研修評(píng)價(jià)指標(biāo)體系，教師教育技術(shù)能力評(píng)價(jià)指標(biāo)體系等［1-3］；二是隨著新的教育培訓(xùn)行為分析驗(yàn)證理念的出現(xiàn)，如胡藝齡對(duì)在線學(xué)習(xí)行為的數(shù)據(jù)進(jìn)行分析，提出通過數(shù)據(jù)行為分析驗(yàn)證學(xué)習(xí)效果的理念［4］，在此基礎(chǔ)上一些學(xué)者構(gòu)建了基于在線行為分析的教師網(wǎng)絡(luò)學(xué)習(xí)空間評(píng)價(jià)指標(biāo)體系［5］，用來評(píng)價(jià)教師網(wǎng)絡(luò)學(xué)習(xí)的效果。有學(xué)者通過分析學(xué)生的學(xué)習(xí)行為，構(gòu)建了在線學(xué)習(xí)模式下學(xué)生學(xué)習(xí)效果評(píng)價(jià)體系［6］。

上述學(xué)者的研究更多的是關(guān)注線下教師培訓(xùn)的評(píng)價(jià)，且評(píng)價(jià)的主體、標(biāo)準(zhǔn)大多數(shù)是以培訓(xùn)組織者的視角來進(jìn)行，僅是為了評(píng)價(jià)而評(píng)價(jià)，且大多是主觀的評(píng)判；評(píng)價(jià)的維度也十分寬泛，既有對(duì)授課教師的評(píng)價(jià)也有對(duì)培訓(xùn)組織管理的評(píng)價(jià)。但是對(duì)于學(xué)員的參訓(xùn)學(xué)習(xí)效果究竟如何進(jìn)行客觀的評(píng)判，至今未有一套完善的體系。數(shù)字時(shí)代，多元化的技術(shù)媒體與培訓(xùn)全流程的深度融合，產(chǎn)生的海量的學(xué)習(xí)行為數(shù)據(jù)，成為一種寶貴的“資源”，為參訓(xùn)學(xué)員學(xué)習(xí)效果的分析提供了新的重要途徑，且教師線上學(xué)習(xí)行為本身具備的客觀性、真實(shí)性強(qiáng)的特點(diǎn)，能夠有效地反映出教師參訓(xùn)的態(tài)度、結(jié)果，這為高職院校教師培訓(xùn)評(píng)價(jià)體系的建立提供了新的解決思路，也是本文研究的切入視角。

二、高職教師線上培訓(xùn)學(xué)習(xí)的行為特征分析

高職教師線上培訓(xùn)的本質(zhì)也是線上學(xué)習(xí)，只是參加學(xué)習(xí)的對(duì)象為高職教師，學(xué)習(xí)的內(nèi)容相對(duì)普通學(xué)生來講不是系統(tǒng)的知識(shí)體系，而是針對(duì)某一問題或能力定制化的內(nèi)容，其學(xué)習(xí)的目的是提升某一項(xiàng)或多項(xiàng)能力?，F(xiàn)有的學(xué)習(xí)行為研究也能為其提供參照和指導(dǎo)。數(shù)字時(shí)代大量技術(shù)媒體的深度應(yīng)用，對(duì)高職教師線上培訓(xùn)行為的重塑產(chǎn)生了新的影響，變革了教師線上培訓(xùn)學(xué)習(xí)的行為表現(xiàn)。立足媒體的技術(shù)特性對(duì)高職教師線上學(xué)習(xí)行為數(shù)據(jù)的特征進(jìn)行梳理，有助于為后續(xù)高職教師線上培訓(xùn)評(píng)價(jià)體系的建立提供支撐。

學(xué)習(xí)行為從動(dòng)機(jī)角度可以劃分為內(nèi)顯行為和外顯行為兩類，內(nèi)顯行為具有隱蔽性，難以直接測量；外顯行為是學(xué)習(xí)者主動(dòng)表現(xiàn)的行為，這類行為可以通過觀測直接記錄，且這類行為具有極強(qiáng)的真實(shí)性、不可更改性。外顯行為是內(nèi)顯行為的間接體現(xiàn)，內(nèi)顯行為通過外顯行為直接表達(dá)學(xué)習(xí)者當(dāng)時(shí)的心態(tài)。高職教師的線上學(xué)習(xí)行為也具備同樣的特性。分析高職教師的線上學(xué)習(xí)行為能間接反映當(dāng)時(shí)學(xué)習(xí)者的心理和態(tài)度，為培訓(xùn)效果的評(píng)價(jià)，甚至培訓(xùn)組織采取干預(yù)策略提供指導(dǎo)。

自線上學(xué)習(xí)興起后，關(guān)于線上學(xué)習(xí)行為的研究已成為國內(nèi)外學(xué)者關(guān)注的焦點(diǎn)，但是現(xiàn)有的研究只是停留在學(xué)習(xí)行為分析的模型理論和構(gòu)建上，對(duì)如何收集行為數(shù)據(jù)、評(píng)判行為研究相對(duì)匱乏［7］。線上學(xué)習(xí)行為數(shù)據(jù)是指學(xué)習(xí)者通過線上學(xué)習(xí)平臺(tái)進(jìn)行學(xué)習(xí)，并在學(xué)習(xí)過程中產(chǎn)生的行為數(shù)據(jù)，這些行為數(shù)據(jù)除了具備線下學(xué)習(xí)行為特性外，還會(huì)受到技術(shù)條件的限制，如學(xué)習(xí)平臺(tái)的功能等，具有較強(qiáng)的隱蔽性和技術(shù)依賴。本文從技術(shù)的視角對(duì)高職教師線上培訓(xùn)學(xué)習(xí)行為的數(shù)據(jù)特征梳理，如表1 所示。

表1 線上學(xué)習(xí)行為數(shù)據(jù)的特征

線上學(xué)習(xí)行為數(shù)據(jù)的六個(gè)特征為構(gòu)建基于學(xué)習(xí)行為分析的線上培訓(xùn)評(píng)價(jià)體系提供了根本遵循。但是也應(yīng)注意到，數(shù)字化時(shí)代線上培訓(xùn)的行為數(shù)據(jù)是相當(dāng)海量的，數(shù)據(jù)的記錄存儲(chǔ)方式各異，且存在標(biāo)準(zhǔn)上的不一致，能否快速匯總、梳理所有的行為數(shù)據(jù)信息是關(guān)鍵點(diǎn)，對(duì)整個(gè)培訓(xùn)的組織評(píng)判，具有決定性作用。同時(shí)線上學(xué)習(xí)行為數(shù)據(jù)的技術(shù)依賴性，會(huì)隨著技術(shù)的不斷發(fā)展進(jìn)步變得越來越強(qiáng)，技術(shù)的進(jìn)步也會(huì)進(jìn)一步豐富和完善線上學(xué)習(xí)行為數(shù)據(jù)的信息，使其記錄更加精準(zhǔn)，評(píng)價(jià)更加客觀、真實(shí)有效。

三、高職教師線上培訓(xùn)學(xué)習(xí)行為分類

線上學(xué)習(xí)也是一種教學(xué)活動(dòng)，與傳統(tǒng)教學(xué)唯一的區(qū)別是將教室這一物理空間，轉(zhuǎn)為線上學(xué)習(xí)空間，這里的線上學(xué)習(xí)空間可以是單一的也可以是多元的，這與線上教學(xué)活動(dòng)的設(shè)計(jì)相關(guān)。在以學(xué)習(xí)行為為基礎(chǔ)的對(duì)教學(xué)活動(dòng)分析的研究中，美國學(xué)者弗蘭德的課堂行為分析法最為系統(tǒng)，應(yīng)用也最廣泛。其核心要義是以教師課堂教學(xué)為切入點(diǎn)，對(duì)教師課堂的教學(xué)活動(dòng)進(jìn)行記錄、分類和編碼，制定課堂行為編碼分析的規(guī)則，通過課堂行為編碼分析的方式，實(shí)現(xiàn)對(duì)教師課堂教學(xué)效果的量化分析，如教學(xué)模式分析、教學(xué)環(huán)節(jié)分析、存在問題分析。這也是本文學(xué)習(xí)行為視角下高職教師線上學(xué)習(xí)培訓(xùn)效果評(píng)價(jià)體系設(shè)計(jì)的根本遵循。因此梳理高職教師線上培訓(xùn)學(xué)習(xí)的行為關(guān)乎整個(gè)體系的應(yīng)用效力。

為精準(zhǔn)地對(duì)高職教師線上培訓(xùn)學(xué)習(xí)行為進(jìn)行分類，結(jié)合高職教師線上培訓(xùn)學(xué)習(xí)行為的特征，本研究從高職教師線上培訓(xùn)常見的組織模式分析入手，重點(diǎn)關(guān)注培訓(xùn)采取的平臺(tái)功能，對(duì)常見如教師繼續(xù)教育平臺(tái)、網(wǎng)絡(luò)研修平臺(tái)、社交學(xué)習(xí)平臺(tái)如微信等幾類媒體進(jìn)行了功能分析；也對(duì)培訓(xùn)領(lǐng)域具有代表性的CSTD學(xué)習(xí)平臺(tái)的功能進(jìn)行了詳細(xì)了解和梳理，總結(jié)出高職教師線上培訓(xùn)學(xué)習(xí)18 條常見的行為。需要指出的是，隨著技術(shù)的進(jìn)步，這些行為還會(huì)進(jìn)行動(dòng)態(tài)調(diào)整。

本研究認(rèn)為高職教師線上培訓(xùn)學(xué)習(xí)其本質(zhì)也是成人學(xué)習(xí)的一種方式，具備成人學(xué)習(xí)的特性。對(duì)成人線上學(xué)習(xí)行為分類的研究目前還不是十分完善，但是對(duì)于學(xué)習(xí)行為的分類研究已經(jīng)相對(duì)成熟。比較具有代表性的是勒溫的學(xué)習(xí)行為OCCP 層次模型［8］，從操作行為層（OB）、認(rèn)知行為層（ColB）、協(xié)作行為層（CogB）以及問題解決層（PSB），學(xué)習(xí)行為的程度也在不斷加深，層級(jí)越高說明其學(xué)習(xí)效果越好。按照該分類模型，結(jié)合高職教師群體特色和線上培訓(xùn)的現(xiàn)實(shí)情況，對(duì)高職教師線上培訓(xùn)學(xué)習(xí)的18 項(xiàng)行為分類梳理如表2 所示。

表2 高職教師線上培訓(xùn)學(xué)習(xí)行為分類

上述18 類行為中，1—15 類是可以直接通過線上培訓(xùn)平臺(tái)的操作如實(shí)進(jìn)行客觀記錄和反映的，是高職教師線上培訓(xùn)過程中最直接的行為，可以直觀地反映和觀測出參訓(xùn)人員的狀態(tài)，可以為培訓(xùn)組織方、教師培訓(xùn)干擾提供參照。16—18 類是線下的通過工作檢驗(yàn)的隱性行為，會(huì)帶有一定的主觀性，比較難以記錄和觀測，但一旦激發(fā)出類似行為，可以從側(cè)面反映培訓(xùn)的效果和質(zhì)量。同時(shí)行為與行為之間存在一定的層級(jí)性，層級(jí)越高代表學(xué)習(xí)越深入，對(duì)學(xué)習(xí)效果的反映越客觀、真實(shí)，越能體現(xiàn)學(xué)習(xí)的效果。

四、學(xué)習(xí)行為視角下高職教師線上培訓(xùn)評(píng)價(jià)體系設(shè)計(jì)

目前對(duì)于線上學(xué)習(xí)行為分析模型的研究成果眾多，如網(wǎng)絡(luò)教學(xué)學(xué)習(xí)行為分析模型［9］、在線學(xué)習(xí)行為分析模型等［10］。這些模型只是在理論上對(duì)學(xué)習(xí)行為數(shù)據(jù)如何被采集、加工、處理、分析給出了指導(dǎo)，但是究竟如何進(jìn)行實(shí)踐應(yīng)用，目前還缺乏相關(guān)的研究。本文立足弗蘭德分析法的編碼矩陣分析模型，構(gòu)建了高職教師線上培訓(xùn)學(xué)習(xí)評(píng)價(jià)的分析機(jī)制，主要包括高職教師線上培訓(xùn)學(xué)習(xí)行為評(píng)價(jià)編碼表、數(shù)據(jù)分析處理矩陣。

（一）高職教師線上培訓(xùn)學(xué)習(xí)行為評(píng)價(jià)編碼表

學(xué)習(xí)行為視角下的高職教師線上培訓(xùn)效果評(píng)價(jià)的核心前提是收集記錄學(xué)習(xí)過程中教師的行為數(shù)據(jù)，并將其量化。因此需要建立高職教師培訓(xùn)學(xué)習(xí)行為信息記錄收集的工具。立足前文對(duì)高職教師線上培訓(xùn)學(xué)習(xí)行為的分類，結(jié)合開展效果評(píng)價(jià)的需要，基于弗蘭德課堂行為分析方法的要義，設(shè)計(jì)了高職教師線上培訓(xùn)學(xué)習(xí)行為評(píng)價(jià)編碼表，如表3 所示。

表3 高職教師線上培訓(xùn)學(xué)習(xí)行為評(píng)價(jià)編碼表

（二）數(shù)據(jù)分析處理矩陣

高職教師線上培訓(xùn)學(xué)習(xí)行為評(píng)價(jià)中涉及的教師行為記錄者包括多方，主要是系統(tǒng)操作日志、具有線上培訓(xùn)管理權(quán)限的培訓(xùn)管理人員，也會(huì)包括來自參訓(xùn)教師上級(jí)領(lǐng)導(dǎo)的信息，其來源具有多元化、非線性的特征，因此，不能完全按照弗蘭德課堂行為分析法的理念進(jìn)行數(shù)據(jù)的分析處理，在對(duì)高職教師線上培訓(xùn)學(xué)習(xí)行為分析時(shí)，主要是通過統(tǒng)計(jì)每個(gè)行為的次數(shù)或者頻次，通過量化的方式來對(duì)教師的整體培訓(xùn)進(jìn)行評(píng)估。其編碼行為的統(tǒng)計(jì)如表4 所示。

表4 高職教師線上培訓(xùn)學(xué)習(xí)行為評(píng)價(jià)編碼統(tǒng)計(jì)表

通過上述的表格進(jìn)行編碼統(tǒng)計(jì)，可以分析的內(nèi)容、計(jì)算方式如表5 所示。

表5 分析內(nèi)容、公式、含義

上述數(shù)據(jù)分析方式是基于參訓(xùn)者的視角進(jìn)行的，通過這些數(shù)據(jù)分析能夠得出高職教師線上學(xué)習(xí)的參訓(xùn)態(tài)度、投入程度以及參訓(xùn)效果等。但考慮到高職教師線上培訓(xùn)采取的技術(shù)媒體的特性，會(huì)有不同的培訓(xùn)組織模式，除了分析學(xué)習(xí)者外，對(duì)于一些特定的如線上直播、社群學(xué)習(xí)等，還可以通過分析參訓(xùn)者的行為數(shù)據(jù)信息來表征培訓(xùn)講師的教學(xué)方式，對(duì)其培訓(xùn)教學(xué)的組織情況進(jìn)行客觀評(píng)價(jià)，為組織方評(píng)判教師提供參考。此外，數(shù)據(jù)的分析和應(yīng)用具有無窮性，除上述可以分析的內(nèi)容以外，使用者還可以根據(jù)實(shí)際情況，參照上面的操作方式，進(jìn)行更多內(nèi)容的分析和應(yīng)用。

五、研究總結(jié)

本研究主要是從學(xué)習(xí)行為分析的視角探討了高職教師線上培訓(xùn)評(píng)價(jià)體系的設(shè)計(jì)與應(yīng)用。其核心的理念是關(guān)注參訓(xùn)者的個(gè)體，通過對(duì)參訓(xùn)教師的行為進(jìn)行量化編碼和量化分析，以求公正客觀地對(duì)其進(jìn)行培訓(xùn)效果的評(píng)價(jià)。當(dāng)前研究成果還處于理論階段，未進(jìn)行實(shí)踐驗(yàn)證，后續(xù)將進(jìn)行實(shí)踐應(yīng)用以不斷完善研究的成果，為高職教師線上培訓(xùn)效果的評(píng)價(jià)提供新思路。