鐘明燈,王 偉,王淑坤
(1.閩南理工學院,石獅 362700;2.長春理工大學,長春 130022)
評價大學辦學質(zhì)量的首要指標是人才培養(yǎng)水平和質(zhì)量,更突出了“學生為中心,產(chǎn)出導向,持續(xù)改進”的重要性。機械設計制造及其自動化專業(yè)將進行工程教育專業(yè)認證(IEET認證),圖1為IEET認證核心理念與國家教育理念的相關圖。
圖1 工程教育認證標準與國家教育理念的關聯(lián)圖
本專業(yè)建立了培養(yǎng)目標、畢業(yè)要求、課程體系、教學過程質(zhì)量學校內(nèi)部監(jiān)控、評價、反饋、持續(xù)改進機制,也建立了校友、用人單位和第三方機構對本專業(yè)培養(yǎng)目標、畢業(yè)要求、課程體系設置、畢業(yè)生綜合素質(zhì)的外部評價、反饋、持續(xù)改進機制。本專業(yè)持續(xù)改進的總體機制如圖 2所示。
圖2 本專業(yè)持續(xù)改進機制框架圖
本專業(yè)共有200名畢業(yè)生,問卷主要從專業(yè)能力培養(yǎng)、管理溝通協(xié)調(diào)能力、可持續(xù)發(fā)展、就業(yè)及指導、學校建設、畢業(yè)核心能力認同度和自我評價六個維度進行題目設計。問卷采用問卷星方式于5月13日正式發(fā)布問卷,生成二維碼,經(jīng)過學院動員、相關輔導員和教師的共同宣傳,允許畢業(yè)生采用微信、QQ和網(wǎng)頁等方式答題,問卷截至5月30日,并同步停止問卷發(fā)布,所有本專業(yè)的學生均完成問卷調(diào)查。
問卷調(diào)查共收到212份問卷,經(jīng)過學號比對,共找出無效問卷12份,主要是由于個別學生重復答卷和個別學生跨專業(yè)答卷導致,因此對無效問卷進行刪除答案處理,保留有效問卷200份,并把結(jié)果下載到SPSS20.0軟件進行數(shù)據(jù)分析,保證數(shù)據(jù)分析的準確性。同時,在分析之前將200份問卷的數(shù)據(jù)用SPSS20.0先進行標準化處理。
另外,為了保護學生的隱私,學生填寫的基本情況(姓名、學號、聯(lián)系方式、電子郵箱、工作單位)我們不進行數(shù)據(jù)分析,在此進行說明。
對于200份問卷,首先我們需要判定的是問卷中的調(diào)查題目能否反映調(diào)查的目的和調(diào)查的意圖,問卷中的各個問題是否測量了相同的內(nèi)容和信息[1];同時,對于調(diào)查問卷所得到的數(shù)據(jù)是否具有可靠性,就必須在對問卷分析之前做信度分析。信度本身與測量結(jié)果的正確與否無關,它的用途在于檢測問卷本身的穩(wěn)定性[2]。
信度分析中常用Cronbach α系數(shù)的大小來衡量調(diào)查問卷的信度。一般而言,如果問卷的信度系數(shù)達到0.9以上,該問卷調(diào)查的信度就較好;信度系數(shù)在0.8以上,是不錯的;一般認為試卷信度在0.5至0.9以內(nèi)是合理的,如果信度系數(shù)低于0.5,則此問卷的調(diào)查結(jié)果就不可信了[2]。
由于信度只針對量表分析,因此問卷中的多選題和填空題不進行信度分析,案例樣本中有效樣本200份,沒有無效選項。
表1 可靠性統(tǒng)計量
在表1中的可靠性統(tǒng)計量中的信度系數(shù)值為0.928,而刪除前后相關性比較差的選項后信度系數(shù)值為0.943,大于0.9,因而說明研究數(shù)據(jù)信度質(zhì)量很高。針對“項已刪除的α系數(shù)”,分析項被刪除后的信度系數(shù)值并沒有明顯的提升,因而說明題項全部均應該保留,進一步說明研究數(shù)據(jù)信度水平高。針對“CITC值”,分析項對應的CITC值全部均高于-0.3,因而說明分析項之間具有良好的相關關系,同時也說明信度水平良好[3]。綜上所述,研究數(shù)據(jù)信度系數(shù)值高于0.9,刪除題項后信度系數(shù)值并不會明顯提高,綜合說明數(shù)據(jù)信度質(zhì)量高,可用于進一步分析[4]。
對于本次問卷中的多項選擇題進行多重響應分析,多重響應樣本數(shù)據(jù)中,有效樣本200份,沒有無效選項。在表2至表5中,所顯示的結(jié)果即為多重選擇題的分析結(jié)果,表格有兩列百分比,第一列百分比是responses的百分比,表示每個選項的選擇次數(shù)占總選擇次數(shù)的百來比來設計權重。第二列百分比是cases的百分比,即選擇該項的人數(shù)占總?cè)藬?shù)的百分比,因此加起會超過百分百[5]。兩種百分比計算方式不同,但都可以看出,哪個選項重要,或者選擇人數(shù)多。
表2中針對專業(yè)課程體系加強方面,實踐教學環(huán)節(jié)占比最大,達77.0%;專業(yè)基礎類課程占比排第二,達58.5%;專業(yè)類課程占比排第三,達53.0%,這對今后機械類專業(yè)人才培養(yǎng)方案的修訂具有很好的借鑒意義。
表2 多選題1頻率
表3中針對就業(yè)指導方面,就業(yè)體驗環(huán)節(jié)占比最大,達74.5%;素質(zhì)拓展方面占比排第二,達67.5%;經(jīng)驗分享方面占比排第三,達65.0%,這對提高學生的就業(yè)率具有很好的借鑒作用,對雙創(chuàng)學院今后的就業(yè)指導方面的安排有很好的參考意義。
表3 多選題2頻率
表4中針對就業(yè)崗位信息的獲取方面,校園招聘占比最大,達78.0%;人才交流中心占比排第二,達61.5%;網(wǎng)上求職占比排第三,達51.5%,這對學校就業(yè)招聘安排具有很好的參考作用。
表4 多選題3頻率
表5中針對加強學校建設方面,教學、生活硬件設施占比最大,達71.0%;就業(yè)指導和就業(yè)咨詢占比排第二,達60.5%;師資隊伍占比排第三,達49.5%,這對學校今后的軟硬件的改善具有很好的參考意見。
表5 多選題4頻率
具備信度的問題不一定具備效度,因此做完信度分析,再用SPSS20.0對其進行效度分析。
1.因子模型適應性分析
效度分析使用的是因子分析模型,在運用因子模型分析之前,首先要對問卷數(shù)據(jù)進行因子模型適應性分析,分析結(jié)果如表6所示。
表6 KMO和Bartlett的檢驗
由上表的數(shù)據(jù)可知,問卷數(shù)據(jù)的KMO值為0.863,并且通過了顯著性水平為0.05的巴特利球型檢驗,說明問卷調(diào)查的數(shù)據(jù)非常適合做因子分析[6]。
2.因子分析結(jié)果
在進行了適用性檢驗之后,接下來就要進行因子分析,其結(jié)果如表7所示位主因子方差貢獻率。
表7 主因子方差貢獻率
根據(jù)表7主因子方差貢獻率可以知道,看出特征值大于1的成分有19項,這19個主因子解釋的方差占到了69.732%,說明問卷答案有69.732%的解釋度。
同時進行旋轉(zhuǎn)矩陣的分析,主要成分一主要體現(xiàn)在專業(yè)課程建設、專業(yè)畢業(yè)能力認同度及自我評價兩方面;主要成分二主要體現(xiàn)在就業(yè)指導、校園建設兩方面;主要成分三主要體現(xiàn)在專業(yè)課程建設、管理溝通協(xié)調(diào)能力和持續(xù)發(fā)展三個方面;主要成分四主要體現(xiàn)在可持續(xù)發(fā)展、專業(yè)畢業(yè)能力認同度及自我評價兩方面。此外,觀察旋轉(zhuǎn)后的因子載荷矩陣,65個題項僅僅在某一兩個主成分的載荷比較大,由此可知,問卷調(diào)查的每一個題項是具有效度的[6]。
另外,本次問卷設計還存在以下幾個問題不足:(1)問卷題目的設計存在一定的不足,沒有從宏觀多視角的方式使題目更加精細,分類不夠明顯,為接下來的分析帶來一定的困難;(2)采用問卷星的免費版本,故在部分題目錄入并編輯時受限;(3)問卷發(fā)布到問卷截止日期時間跨度有點長,主要原因是學生已經(jīng)基本在工廠頂崗實習,因此在信息的接收和反饋時間比較慢;(4)畢業(yè)生問卷調(diào)查問題相對較多,對接下來的SPSS分析帶來一定的困難。
畢業(yè)生問卷調(diào)查為畢業(yè)要求達成情況及持續(xù)性改進機制的重要一環(huán),采用問卷星的方式可以更好地獲取問卷調(diào)查的數(shù)據(jù)。本文主要成果如下:(1)通過SPSS進行信度和效度分析,說明該問卷調(diào)查可靠性較高,問卷測驗分數(shù)與想要測量的特征的一致性較好;(2)通過多重響應分析,對專業(yè)課程體系建設、就業(yè)指導及就業(yè)崗位獲取、學校建設方面具有一定的指導作用;(3)通過主因子方差貢獻率及旋轉(zhuǎn)矩陣的分析,可以得到對教學效果評價起決定作用的主要因子成分,更好地為人才培養(yǎng)方案的制定提供指導意見。