劉力銘

(廣州城市職業(yè)學院 機電工程系，廣東 廣州 510405)

迄今為止，中國職業(yè)教育人才培養(yǎng)質(zhì)量評估主要是通過學校內(nèi)部的教學質(zhì)量評價和職業(yè)資格考試(鑒定)實現(xiàn)的，采用的評價指標體系達不到大規(guī)模質(zhì)量監(jiān)控的信度和效度要求，無法藉此進行校際間和區(qū)域間的比較[1]。由于相關技術支持不足，評價結(jié)果無法全面反映人才培養(yǎng)的質(zhì)量，更沒有建立起對評價結(jié)果與人才培養(yǎng)模式間對應關系的解釋模型[2]。即使目前社會影響很大的技能大賽，在大規(guī)模推廣時也遇到了經(jīng)濟成本以及評分者間信度和試題效度等技術問題[3]。

在教育質(zhì)量監(jiān)控體系中，基于知識圖譜的職業(yè)能力達成度研究與應用對職業(yè)教育質(zhì)量保障體系建設具有重要的參考價值。開展科學的職業(yè)能力測評(包括職業(yè)能力測評模型、測評實施方案以及測評結(jié)果分析研究)，科學診斷學生職業(yè)能力、職業(yè)承諾和職業(yè)認同感的發(fā)展水平，將不同地區(qū)、不同院校間的課程與教學質(zhì)量進行比較，可以獲得人才培養(yǎng)質(zhì)量的準確信息和重要參數(shù)，為各級政府制定政策提供依據(jù)，從而提高職業(yè)教育體系設計和教育質(zhì)量控制水平，為在職業(yè)教育領域建立“能夠迅速提醒決策者及時糾正任何不利趨勢”(PISA 定義)的質(zhì)量保障機制奠定方法論和技術基礎[4]。

基于知識圖譜的職業(yè)能力達成度可視化評測系統(tǒng)為有效協(xié)助高職院校學生了解自我職業(yè)規(guī)劃發(fā)展方向，強化專業(yè)與就業(yè)職業(yè)能力，結(jié)合職業(yè)規(guī)劃探索及職業(yè)能力診斷，透過自我診斷，針對能力缺口進行學習，提高職場競爭力。針對職業(yè)興趣量表的測驗水平提升計劃共有下列幾項目標：

進行職業(yè)興趣量表的項目分析、信度分析與效度評鑒。對于題目質(zhì)量進行診斷，必要時進行修題，確保量表題目的表面效度。

建構(gòu)職業(yè)興趣量表的雙重計分系統(tǒng)，亦即16個專業(yè)興趣傾向分數(shù)系統(tǒng)與6類職業(yè)性格取向分析系統(tǒng)。

建立5個專業(yè)職業(yè)興趣索引。包括16個專業(yè)與目前高職校院科系對照索引，16個專業(yè)與Holland職業(yè)性格對照索引。

一、研究內(nèi)容

(一)職業(yè)興趣診斷與興趣量表關聯(lián)性分析

依據(jù)國內(nèi)產(chǎn)業(yè)及職業(yè)狀況歸納出16大職業(yè)規(guī)劃種類及20項就業(yè)途徑。興趣診斷內(nèi)容則參考SCCI的興趣診斷(Career Cluster Interest Survery)，包括三種問項“我最喜歡哪些活動”“我認為自己有哪些特質(zhì)”“我喜歡哪些科目”，由受評者自我評量，選擇自己認為最適合的職業(yè)規(guī)劃種類項目(可復選或不選)，藉由比較其強弱點，得出個人最感興趣的職業(yè)類型范圍[5]。

相較于國內(nèi)的高職入學考試中心興趣量表、生涯興趣量表及坊間常用量表，以Holland理論為基礎發(fā)展出的興趣量表與本計劃的興趣診斷略有不同。因此，本計劃將先進行相關量表的整合分析，選定國內(nèi)相關興趣量表，作為本計劃的職業(yè)興趣診斷量表平行測量參照，然后進行學生樣本抽樣，進行施測。執(zhí)行關聯(lián)性研究統(tǒng)計分析，界定16種職業(yè)規(guī)劃類型與RIASEC(效標)關聯(lián)性。最后產(chǎn)出基于知識圖譜的高職職業(yè)能力診斷的16種職業(yè)規(guī)劃類型與Holland RIASEC的關聯(lián)性研究報告。

(二)基于知識圖譜的職業(yè)能力達成度可視化評測系統(tǒng)

配合本計劃職業(yè)能力分析部分，對在職人士的問卷調(diào)查結(jié)果回收后，將針對計劃職業(yè)能力架構(gòu)進行分析。分析方向包含1份基本職業(yè)能力分析、1份興趣診斷分析、20個就業(yè)途徑下的專業(yè)職業(yè)能力分析，并進行數(shù)據(jù)分析及報告的撰寫。針對數(shù)據(jù)分析，除預定的分析計劃外，數(shù)據(jù)分析評估團隊將會另外執(zhí)行剖面分析。概述如下：

1. 職業(yè)能力分析部分

分為基本職業(yè)能力與專業(yè)職業(yè)能力兩部分：

(1)基本職業(yè)能力分析項目：

①因素分析，檢查基本職業(yè)能力向度的適應性；

②Cronbach α分析，刪除低向度Cronbach α值的題目；

③統(tǒng)計檢定(如：單一樣本t檢定檢查該項基本職業(yè)能力的“常用程度”以及“影響工作績效的程度”是否顯著大于量表的中位數(shù))，以確定該項職業(yè)能力確為常用且重要的基本職業(yè)能力；

④建立各職業(yè)規(guī)劃類型的基本職業(yè)能力剖面圖。

(2)專業(yè)職業(yè)能力分析項目：

① 檢查子項的折半信度：將該就業(yè)途徑下專業(yè)職業(yè)能力題目按單雙數(shù)拆解，計算其相關系數(shù)以檢查其內(nèi)部一致性信度。

②單一樣本t檢定：檢查由在職人士評定的每一項專業(yè)職業(yè)能力的“常用程度”以及“影響工作績效的程度”是否顯著大于量表的中位數(shù)，刪除“常用程度”及“影響工作績效的程度”皆不顯著的子項，藉以確認專業(yè)職業(yè)能力子項的內(nèi)容效度。

2.興趣子項分析項目

(1)分析資料中“我最喜歡哪些活動”“我認為自己有哪些特質(zhì)”“我喜歡哪些科目”的評分，以其評分結(jié)果進行統(tǒng)計檢定(如：將樣本以“對目前工作感興趣的程度”排序，去除第一四分位數(shù)以下的樣本，進行單一樣本t檢定，評分是否顯著高于量表的中位數(shù))，以確認本職業(yè)興趣診斷所列的活動、特質(zhì)及學科科目與該職業(yè)規(guī)劃類型的關聯(lián)性。

(2)將全數(shù)樣本納入分析，以自評項目“個人對目前工作滿意程度”“主管對您的工作表現(xiàn)滿意程度”“我認為我能比其他同事表現(xiàn)更好”等為依變項，樣本評定的“我最喜歡哪些活動”“我認為自己有哪些特質(zhì)”“我喜歡哪些科目”為獨變項，以回歸分析檢查各興趣相關的活動與特質(zhì)對工作滿意度及績效表現(xiàn)的解釋量，以檢驗其效標關聯(lián)效度。

二、項目設計

(一)項目量表設計

基于上述的研究動機，本研究的具體工作主要透過數(shù)據(jù)分析方式，了解基于知識圖譜的高職職業(yè)能力診斷的職業(yè)興趣量表與全國職業(yè)能力測評中心進行信、效度的檢驗與分析，同時放入O*NET的工作價值觀探索量表作為效標參照。因此，數(shù)據(jù)搜集方式為紙本問卷法，資料搜集后，將進行信、效度的檢查，并依數(shù)據(jù)分析出基于知識圖譜的高職職業(yè)能力診斷職業(yè)興趣量表中的5類職業(yè)類型與Holland的RIASEC關聯(lián)程度。

(二)項目研究對象設計

基于知識圖譜的高職職業(yè)能力診斷主要的使用者為高職校院的學生，因此在對象選取上以高職校院的在學學生為主，研究設計如表1，抽樣計劃如表2。為減輕填答者在填答上的負擔，本研究抽取至2018年10月31日止已受測過基于知識圖譜的高職職業(yè)能力診斷職業(yè)興趣量表的樣本為研究對象。并配合5類職業(yè)類型中歸納出的20個就業(yè)途徑，先列出20個就業(yè)途徑所代表的系所，再依據(jù)5類職業(yè)類型隨機抽取其中一個科系，預計每類抽取約160位，總施測人數(shù)約800人。此外，為求出基于知識圖譜的高職職業(yè)能力診斷職業(yè)興趣量表的再測信度，另抽取兩科系約80人，進行基于知識圖譜的高職職業(yè)能力診斷職業(yè)興趣量表的再測信度。

表1 研究設計表

本研究將依照高職院校的特性進行分層叢集取樣(stratified cluster sampling)，除依據(jù)公辦高職校院與民辦高職校院比例、學校類型比例之外，還考慮男女比例與地區(qū)比例(北、中、南、東)等進行樣本抽樣(表2)。

表2 抽樣計劃

三、項目應用

(一)職業(yè)興趣量表可視化

在基于知識圖譜的職業(yè)能力達成度可視化評測系統(tǒng)的“職業(yè)興趣量表”部分，由受評者透過“我最喜歡哪些活動”“我認為自己有哪些特質(zhì)”“我喜歡哪些科目”，選擇自己認為最適合的項目(可復選或不選)，以找出自身對不同職業(yè)類型的興趣強弱。此外，在“職能診斷測驗”部分，則透過以各職業(yè)類型為基礎的職能項目，并整合各產(chǎn)業(yè)專家意見，針對各專業(yè)的重要工作，歸納其所需具備的職能 (包含知識技能)，作為整體系統(tǒng)診斷、建議、咨詢及輔導所需之內(nèi)涵依據(jù)。以此診斷學生所具備的共通職能與專業(yè)職能，以協(xié)助學生了解個人競爭力。

為了使職業(yè)興趣的探索能夠與前述16個專業(yè)生涯相互匹配，基于知識圖譜的職業(yè)能力達成度可視化評測系統(tǒng)的職業(yè)興趣量表的計分，也分別對應成16個生涯群組(career clusters)，在“我最喜歡哪些活動”“我認為自己有哪些特質(zhì)”“我喜歡哪些科目”三部分的得分進行加總，得到16個專業(yè)量尺得分，本案稱之為CC量尺(圖1)。

圖1 基于知識圖譜的職業(yè)能力達成度可視化評測系統(tǒng)職業(yè)興趣量表的CC量尺求出之得分狀況與雷達圖

表3 基于知識圖譜的職業(yè)能力達成度可視化評測系統(tǒng)的H量尺間相關系數(shù)(N=672)

(二)Holland分類量尺(H量尺)的分量表可視化

基于知識圖譜的職業(yè)能力達成度可視化評測系統(tǒng)題目的RIASEC碼的相關系數(shù)分析中(N=672)發(fā)現(xiàn)，在六碼的高度關聯(lián)的相關系數(shù)達0.145～0.532，中度關聯(lián)的相關系數(shù)達0.346～0.003，低度關聯(lián)的相關系數(shù)則為-0.037～0.077(表3、圖2)。

圖2 基于知識圖譜的職業(yè)能力達成度可視化評測系統(tǒng)的H量尺所對應的六角形模式關系(N=672)

四、結(jié)論

系統(tǒng)職業(yè)興趣量表與當代主流興趣測驗具有高度的可連結(jié)性，在理論與實際層面均可與Holland理論兼容。

系統(tǒng)職業(yè)興趣量表以16個專業(yè)進行個專業(yè)興趣量尺計分，符合O*NET系統(tǒng)之職業(yè)生涯群集(career cluster)的分類精神，可作為系統(tǒng)的分流指針。

系統(tǒng)職業(yè)興趣量表以Holland的6項職業(yè)興趣進行H量尺計分，可連結(jié)當代生涯發(fā)展之主流思想與輔導實際，作為系統(tǒng)加值應用的新指標。

系統(tǒng)職業(yè)興趣量表，不論是個專業(yè)興趣量尺(CC量尺)或Holland計分量尺(H量尺)，都具有良好的信度，KR20信度皆達0.70水平，跨族群亦具有高度信度穩(wěn)定性。

系統(tǒng)職業(yè)興趣量表的信度具有成熟效果，高年級受測者的作答質(zhì)量較低年級受測者為優(yōu)。

系統(tǒng)職業(yè)興趣量表，經(jīng)過專家咨詢、題本修題、量表對應、理論關聯(lián)等各項處理后，能夠與Holland體系及O*NET系統(tǒng)鏈接，在內(nèi)容效度上得到相當程度之確保。

系統(tǒng)職業(yè)興趣量表，經(jīng)過因素分析與MTMM矩陣分析檢驗，在構(gòu)念效度上，具有良好的聚斂性并符合Holland的職業(yè)興趣六角理論的構(gòu)念區(qū)辨性。

系統(tǒng)職業(yè)興趣量表，在16個專業(yè)的分類上具有實際價值，且經(jīng)過效標關聯(lián)效度與理論效度檢驗，具有良好應用價值。