許婧

［摘 ? ? ? ? ? 要］ ?基于1+X證書制度試點背景，以上海行健職業(yè)學院1+X證書試點各專業(yè)為研究對象，按照試點的目標和績效標準，采用定性和定量評價相結(jié)合的方式，設計績效自評指標，構(gòu)建1+X證書制度運行績效自評體系，對該制度的實施過程、目標完成情況、實施效益等給予評價，指導試點工作的高效推進。

［關 ? ?鍵 ? 詞］ ?1+X證書制度試點；運行績效；自評體系

［中圖分類號］ ?G717 ? ? ? ? ? ? ? ? ? ［文獻標志碼］ ?A ? ? ? ? ? ? ? ? ［文章編號］ ?2096-0603（2023）18-0109-04

2019年2月，教育部發(fā)布《國家職業(yè)教育改革實施方案》，啟動實施中國特色高水平高職院校和專業(yè)建設改革?！秶衣殬I(yè)教育改革實施方案》強調(diào)：“到2022年，職業(yè)院校教學條件基本達標，一大批普通本科高等學校向應用型轉(zhuǎn)變，建設50所高水平高等職業(yè)學校和150個骨干專業(yè)（群）”，并明確提出“在職業(yè)院校、應用型本科高校啟動‘學歷證書+若干職業(yè)技能等級證書制度試點（以下簡稱‘1+X證書制度試點）工作”。通過構(gòu)建“1”學歷證書加“X”若干職業(yè)技能等級證書培養(yǎng)模式，實現(xiàn)人才培養(yǎng)和職業(yè)能力水平雙重認證考評，提升應用型人才培養(yǎng)質(zhì)量，增強人才培養(yǎng)與產(chǎn)業(yè)需求的吻合度，更好地服務于經(jīng)濟建設。然而，1+X證書制度實施效果到底怎樣，教育主管部門、培訓評價組織和試點高校都比較關注。[1]

2019年11月，教育部辦公廳、國家發(fā)展改革委辦公廳、財政部辦公廳發(fā)布的《關于推進1+X證書制度試點工作的指導意見》明確要求，“培訓評價組織、試點院校積極開展績效自評，接受省級有關部門及其委托的第三方開展的評價。”可見，對1+X證書制度運行績效進行自評，已經(jīng)成為教育部對每所試點院校的明確要求?？冃ё栽u體系的建立和完善，可以有效促進1+X證書制度試點工作規(guī)范、有序、高效地開展。此外，目前政府和教育主管部門對于高職院校1+X證書試點的評價已經(jīng)趨于成熟，高職院校也是高度重視政府和教育主管部門的縱向評價。但高職院校的內(nèi)涵發(fā)展是根本，因此高職院校本身要增強對1+X證書制度試點的質(zhì)量監(jiān)控，建立自評制度，讓1+X證書試點得到良好推進，而不應該只是應對行政主管部門的監(jiān)督。[2]高職院校應該依靠本身的自我評價、自我監(jiān)督、自我管理，通過自評來總結(jié)1+X證書試點的經(jīng)驗和教訓以改進這項工作。因此，建立規(guī)范、科學的1+X證書制度運行自評體系勢在必行。

一、1+X證書制度試點運行績效評價指標設計的基本原則

（一）專業(yè)全覆蓋

1+X證書制度試點運行績效評價進行指標設計時是基于所有專業(yè)設置的，指標選取的是所有專業(yè)共性的指標，具體調(diào)研的專業(yè)也是全覆蓋，包括電子商務專業(yè)、環(huán)境藝術設計專業(yè)、工商企業(yè)管理專業(yè)、學前教育專業(yè)等，因此具有專業(yè)個性的指標本文未涉及，后續(xù)各專業(yè)具體使用時可以自行添加。

（二）評價全過程

1+X證書制度試點運行績效評價不是只針對結(jié)果進行評價，而是對整個1+X從目標設定到人財物投入到過程實施以及成果進行全過程評價，運用的是美國著名教育評價專家斯塔弗爾比姆提出 CIPP 評價模式，該評價模式經(jīng)過各個領域的充分論證，兼具科學性和合理性。

（三）量化科學性

根據(jù)文獻資料，目前也有專家學者建立了1+X證書制度實施效果評價指標體系，但定性指標較多，評價主觀性較強。但績效評價應以量化指標為主，避免評價主觀性。因此，本文在進行評價指標權重設置的時候采用熵權法進行科學計算，得出的權重分數(shù)具有科學性。

（四）政策為指引

本文關于1+X指標的設置不是憑空想象，而是完全以《關于推進1+X證書制度試點工作的指導意見》的政策為指引，將文件中對1+X證書制度試點工作的要求逐一挑選出來，接著轉(zhuǎn)化為指標術語，最后按照CIPP 評價模式的四個模塊進行歸納匯總。[3]

二、1+X證書制度運行績效評價指標體系設計思路

（一）目標導向，將目標達成度作為衡量運行質(zhì)量的重要依據(jù)

評價1+X證書制度開展的效果涉及多個方面，因此，在設計1+X證書制度運行績效評價指標時，需要從學生、學校、企業(yè)以及家長四方面出發(fā)，建設更全面的1+X證書制度評價體系，通過對監(jiān)督學校、考核學生、調(diào)查企業(yè)、了解家長等方面，對1+X證書制度的實施情況進行全面調(diào)查，了解學生、學校、企業(yè)以及家長等方面的訴求后，針對問題進行項目分類，以目標為導向，以目標達成度為標準，設計1+X證書制度評價指標的效果評定。在調(diào)查過程中發(fā)現(xiàn)，部分人群認為職業(yè)技能等級證書是否能被行業(yè)認定，是1+X證書制度發(fā)展的必要條件，也是當今社會認為1+X證書存在的必要條件。評價1+X證書制度實施效果更涉及學校、企業(yè)等利益方，為全面、有效、合理地構(gòu)建績效評價指標，可通過組織相關人員對1+X證書制度實施效果進行多次調(diào)研后，綜合各方面意見反復思考和修改，最終形成以目標為導向的1+X證書制度績效評價指標，包括一級指標、二級指標、三級指標。以上海某高職院校為例，根據(jù)不同結(jié)構(gòu)的評價指標體系，采用分層次分析法，確定各層次指標的權重，依照評價指標權重和評價指標數(shù)值，采用綜合指數(shù)法判定評價結(jié)果，結(jié)果表明，上海某高職院校1+X證書制度實施效果良好，可見1+X證書制度實施整體有效性高，與事實情況基本相符合。[4]

（二）問題導向，將問題的發(fā)現(xiàn)與解決作為指標體系設計的重要出發(fā)點

1+X證書，即為學歷證書+職業(yè)技能等級證書，職業(yè)技能證書很大程度上決定了高職學生技能水平的高低，也是高職學生用來表明自身技術技能的有效憑證。1+X證書制度直接反映高職學生職業(yè)發(fā)展生涯中的綜合能力。但在高職院校運行1+X證書制度的過程中，為更好評估1+X證書制度的實施情況，需進一步設計評估效果的指標，即“績效評價指標”，以何指標構(gòu)建整體評價體系，是高職院校需要思考的問題。在目標導向的基礎上，再以問題為導向，將發(fā)現(xiàn)問題、解決問題的能力作為評價指標設計的出發(fā)點。以問題為導向，以“背景評價”為一級指標，并在“背景評價”中發(fā)現(xiàn)“建設目標與學院規(guī)劃匹配程度”“建設目標與專業(yè)規(guī)劃匹配程度”等問題作為二級指標，為評估上述問題的解決情況，進而又設計了三級指標，包括“1+X證書制度試點的目標與學院發(fā)展規(guī)劃匹配程度”“1+X證書制度試點的目標是否與學院三教改革相適應”“1+X證書制度試點的目標是否與專業(yè)定位相匹配”“1+X證書制度試點的目標是否適應人才培養(yǎng)方案中的培養(yǎng)目標與要求”等。以問題為導向，以“輸入評價”為一級指標，并在“輸入評價”中發(fā)現(xiàn)“1+X證書制度實施過程中人力資源的投入”“1+X證書制度實施過程中財力資源的投入”“1+X證書制度實施過程中物力資源的投入”等問題作為二級指標，為評估上述問題的解決情況，進而又設計了三級指標，包括“參加1+X試點教師隊伍培訓數(shù)量”“1+X試點專業(yè)經(jīng)費投入額”“有無完善的 1+X 證書制度書證融通保障的體制機制”等。以問題為導向，以“過程評價”作為一級指標，并在“過程評價”中發(fā)現(xiàn)“課程體系”“考核內(nèi)容和方式”等問題作為二級指標，為評估上述問題的解決情況，進而又設計出了三級指標，包括“是否持續(xù)優(yōu)化職業(yè)技能等級證書標準”“證書考核方式是否為崗位沉浸式的”等。以問題為導向，以“成果評價”作為一級指標，并在“成果評價”中發(fā)現(xiàn)“雇主滿意度”“學生滿意度”等問題作為二級指標，為評估上述問題的解決情況，進而又設計出了三級指標，包括“雇主對于1+X證書持有者工作技能滿意度”“學生對于1+X證書培訓滿意度”等。

三、1+X證書制度運行績效評價指標體系構(gòu)建研究設計

（一）指標體系構(gòu)建

二十世紀六七十年代，美國著名教育評價專家斯塔弗爾比姆提出 CIPP 評價模式，并指出評估最重要的目的不在于證明，而在于不斷改進。不同于目標評價模式，CIPP 作為一種教育評價模式，一定程度上將診斷性評價、形成性評價以及終結(jié)性評價進行整合，并重點突出評價的發(fā)展性。該模式主要分為背景、輸入、過程、成果四個評價階段。

背景評價指標是指1+X證書制度試點的目標與學院發(fā)展規(guī)劃、人才培養(yǎng)方案中的培養(yǎng)目標與要求、專業(yè)定位等的匹配程度?！蛾P于推進1+X證書制度試點工作的指導意見》中指出面向?qū)W生開展的X證書培訓，要與推進教師、教材、教法改革結(jié)合起來。

輸入評價指標是對1+X證書制度試點所需要的人力（試點師資培訓數(shù)）、物力（設施設備購置）、財力等資源進行評價。制度包括多元主體合作細則、培訓質(zhì)量抽查制度、教師參與1+X證書培訓激勵制度、證書考核管理制度、職業(yè)院校關于培訓評價組織選擇與退出制度、試點工作動態(tài)定期報送制度?！蛾P于推進1+X證書制度試點工作的指導意見》指出鼓勵教師積極承擔證書培訓任務，試點院?？蓪⒔處燁~外承擔的職業(yè)技能等級證書培訓工作量，按一定比例折算成全日制學生培養(yǎng)工作量，納入績效工資分配因素范圍；在內(nèi)部績效工資分配時向承擔證書培訓任務的一線教師傾斜。[5]

過程評價指標。1+X證書制度試點過程評價主要是對各專業(yè)1+X證書制度實施過程中涉及的相關環(huán)節(jié)的評價，主要包括實施后教師隊伍建設、人才培養(yǎng)模式的改革、課程體系建設、校企合作等運行情況的評價。

成果評價指標。成果評價是對1+X證書制度實施最終成果的終結(jié)性評價。在此，筆者選取1+X證書建設培訓考核點等幾個方面來進行評價。學生滿意度可以用“學評教”模式和線下座談會抽查形式。

依據(jù)CIPP模型含義，基于1+X證書制度要求建構(gòu)了1+X自評體系，見圖1。

在績效評價四個維度的基礎上，結(jié)合第一部分所明確的績效影響因素，主要依據(jù)《關于推進1+X證書制度試點工作的指導意見》文件要求，通過文獻研究、調(diào)研等方式，確定候選評價指標，再結(jié)合專家咨詢等方式進行關鍵指標篩選，設計1+X證書制度運行績效評價指標體系。

（二）綜合評價方法與數(shù)據(jù)分析

在1+X證書制度運行績效評價相關元數(shù)據(jù)采集和標準化基礎上，評價的關鍵一步是進行指標權重的確定。一般來說，確定權重可分為主觀賦權和客觀賦權兩類方法，基于評價結(jié)果更加科學可靠的原則，本文選用客觀賦權的熵權法，有效避免了人為確定指標權重的主觀性。

本文根據(jù)指標體系擬定1+X證書試點制度運行情況問卷，調(diào)研上海開展1+X證書制度試點的14所職業(yè)院校1+X證書制度運行現(xiàn)狀，運用熵權法根據(jù)問卷結(jié)果計算指標權重。

熵權法根據(jù)數(shù)據(jù)間的信息差異進行權重的確定，若指標的信息熵越小，說明此指標無序程度就越高、變化幅度越大，因此對綜合評價的影響（即權重）也越大。

熵權法計算步驟如下：

四、1+X證書制度試點運行績效自評實施

（一）背景方面：建設目標與學院規(guī)劃相匹配

1+X證書制度試點的建設目標的總引領方向應與學院長期發(fā)展規(guī)劃保持一致。將1+X證書制度試點工作納入學校發(fā)展規(guī)劃，將試點工作開展情況作為部門年度績效考核的重要指標，與日常教學科研工作同部署、同檢查、同考核、同表彰，確保試點工作與學院發(fā)展同向而行。

（二）輸入方面：及時反饋改進

取消整體滿意度較低的證書，引進符合最新行業(yè)能力標準的證書。及時反饋改進的目的是為了實現(xiàn)1+X證書制度試點工作運行的有效性，反饋改進是持續(xù)性的過程，評價1+X證書制度試點工作的有效性，能夠讓試點工作得到更好的發(fā)展，對管理體系和過程進行改革，并同等評估績效評價指標，從而提高1+X證書制度試點工作實施的效率和質(zhì)量。

（三）過程方面：嚴格考核管理

教學管理部門進行培訓文件抽查、證書題庫檢查、隨機聽課、專業(yè)教師聽課、教學督導抽查等，實現(xiàn)嚴格考核管理。在實施1+X證書制度試點工作中，幫助試點工作了解工作內(nèi)容、目標以及價值，通過考核管理所制定的工作目標，能為1+X證書制度試點工作指明具體方向。同時在實施1+X證書制度試點工作過程中，通過嚴格的考核管理，能就現(xiàn)有試點工作中存在的不足進行分析，從而改進現(xiàn)有的工作績效。

（四）成果方面：以評促建

1+X證書制度試點內(nèi)容要融入人才培養(yǎng)方案中，以評促建，從源頭上有效實施1+X證書制度。在以評促建方面，認真研究1+X證書制度試點工作運行績效評價指標體系，能深入領會“以評促建，以評促改，以評促管”，讓“評”和“建”相結(jié)合，全面優(yōu)化成果，真正達到以評促建的目的。

參考文獻：

［1］張青，謝勇旗，喬文博.1+X證書制度下職業(yè)院校專業(yè)課程改革的方向與路線［J］.成人教育，2021，41（8）：49-53.

［2］周志剛.職業(yè)教育質(zhì)量評價體系研究［M］.北京：經(jīng)濟科學出版社，2018.

［3］李壽冰.高職院校開展1+X證書制度試點工作的思考［J］.中國職業(yè)技術教育，2019（10）：25-28.

［4］王亞盛，趙林.1+X證書制度與書證融通實施方法探索［J］.中國職業(yè)技術教育，2020（6）：13-17，64.

［5］林溪.基于1+X證書制度的高職院校增值評價體系構(gòu)建［J］.教育與職業(yè)，2022（2）：29-35.