張美玲，袁 泉

(桂林電子科技大學北海校區(qū)經濟與管理學院，廣西北海，536000)

一、引言

隨著新一代人工智能、“互聯(lián)網+”、區(qū)塊鏈和大數據等高新科學技術的快速發(fā)展，世界各國的工業(yè)界面臨著脫胎換骨的“工業(yè)4.0”產業(yè)升級。在“一帶一路”倡議和“中國—東盟”經濟圈深度合作與發(fā)展的推動下，中國對外招商引資和中國在外投資建設的活躍度增強，跨國公司的國際貿易額迅猛增長。[1]在國際化深度合作的背景下，為了高效地處理對外業(yè)務，各行各業(yè)對既精通專業(yè)學科知識又熟練掌握英語交際能力的高層次復合型人才需求量急劇增長，目前已出現供不應求的斷崖式缺口。[2]為了培養(yǎng)更多符合市場需求的應用型國際化人才，國內大多數高等院校在不同專業(yè)開設了中英文雙語課程教學。經過多年的探索實踐，我國本科高校雙語課程目前已呈現出“遍地開花”之勢。[2]然而，許多本科高校在實施雙語課程教學過程中仍存在很多問題，尤其是如何有效評價學生的學習效果是雙語教學實施的共性難題。大多數高校雙語教學考核評估方法和量化標準陳舊單一，難以科學有效地評估學生的學習效果，大多是結果評價，缺乏過程評價。[3]這一方面挫傷了學生的學習積極性，另一方面導致學生只注重短期目標(期末考試成績)，而不顧對將來發(fā)展有利的長期目標，阻礙了雙語教學的發(fā)展。

因此，本文提出了一種基于STEAM多尺度評價指標和層次分析法的評估新方法，該方法兼顧長期目標和短時期望、結果指標和過程指標，幫助雙語教師更加有針對性地開展教學設計和改進教學方法，從而有效促進雙語課程教與學質量的雙向提升，為國家輸送更多具有國際化交際能力的復合型高層次人才。

二、基于STEAM-AHP的雙語課程學習效果評估模型

為培養(yǎng)“強基礎、重應用、善管理”的復合型國際化人才，打破傳統(tǒng)的“一卷定天下”的單一化考核模式，本研究提出了一種多尺度評價指標和層次分析法相結合的評估方法。首先，基于平衡計分卡理念設計了包含專業(yè)科學知識能力、團隊協(xié)作能力、工程實踐能力、主觀能動性和管理能力的五大核心評價指標的STEAM模型，對雙語課程學習效果進行多尺度綜合評價。其次，引入層次分析法(analytic hierarchy process，AHP)算法對STEAM模型的五個評價指標構建層次模型并確定各評價指標的權重。最后，通過教師對以上五個指標以百分制評分，計算得出加權總成績，以此量化學生對該雙語課程的學習綜合效果。建立的STEAM-AHP多尺度評估模型如圖1所示。

圖1 基于STEAM-AHP的雙語課程學習效果多尺度評價模型

(一)平衡計分卡

平衡計分卡[4](balanced score card，BSC)是由Kaplan等人提出的一種將短期目標和長期目標、過程評價和結果評價結合起來的綜合績效評價體系。BSC與傳統(tǒng)的過分關注短期行為而犧牲長期目標的績效評價體系不同，旨在建立“實現戰(zhàn)略制導”的績效管理系統(tǒng)，即將組織的戰(zhàn)略具體落實到BSC四個維度的具體評價指標和目標值，實現績效考核及其改進、戰(zhàn)略的實施與不斷調整，從而保證企業(yè)戰(zhàn)略得到有效執(zhí)行。BSC雖然最初被提出時主要用于企業(yè)的績效管理，然而其多維度評價指標的有效平衡理念已在其他多個領域得到應用和借鑒。[4]因此，本研究將該理念引入中英文雙語課程教學的學習效果綜合評價體系構建中，從影響雙語課程教學的學習效果評價的眾多指標中遴選出五個關鍵性指標，分別為科學知識、團隊協(xié)作、實踐操作、積極主動性和管理能力五個維度，并將這五個指標作為層次分析法的準則層，每個準則層包含一系列子指標。

(二)層次分析法

層次分析法將決策分析者的定性經驗值與主觀判斷輸入模型進行數量化處理，使決策分析更科學合理化。[5-6]首先，AHP把要決策的問題按支配關系進行分層，構建一個層次結構模型；其次，將各層的指標因素兩兩比較其相對重要性，構造判斷矩陣，求得本層各因素對上層因素的權重值；最后，確定各個因素相對重要性的順序，按順序作出決策。

將影響雙語教學的學習效果的因素按照短期目標和長期目標、結果指標和過程指標進行合理的分類，將準則層分為科學知識、團隊協(xié)作、實踐操作、積極主動性和管理能力五個維度，每個準則層包含一系列的子指標。如表1所示，依據判斷的標度對每層各因素兩兩比較其相對重要性構造判斷矩陣，求出各因素的權重值并排序比較，從而確定雙語課程五個維度的權重值，對學生的學習效果進行定量評價。

表1 判斷的標度

三、基于STEAM-AHP的雙語教學質量評估模型的建立和應用研究

(一)構建雙語學習效果質量評估評價指標體系

本文以供應鏈管理雙語課程為例，說明STEAM-AHP在雙語課程學習效果考核中的具體應用。通過大量的企業(yè)調研，了解用人單位對學生能力指標的關注度，與同行的專家討論和參考文獻后對影響雙語學習效果評價的各種因素進行歸納和分析，剔除影響微小的因素，遴選出對雙語學習效果有顯著影響的因素。為便于模型的構建，本文依據層次分析法的特點，即目標層(P)、準則層(S、T、E、A、M)、指標層，從五個準則層面構建雙語課程學習效果評估指標體系，每個準則層指標又包含一系列子指標，從而形成了雙語教學學習效果評估指標體系，該指標體系如圖2所示。

圖2 雙語教學學習效果的評價影響因素層次結構圖

(二)構造判斷矩陣

判斷矩陣是依據判斷標度，對各層的兩兩元素進行重要性比較所構建的矩陣，如表1所示。本文主要是向校企合作的企業(yè)相關專家及實行雙語教學的兄弟高校專家發(fā)放問卷。向廣西五所開設雙語課程的高校的15名相關教師發(fā)放調查問卷15份，向長三角地區(qū)校企合作的企業(yè)相關的專家(含人力資源部)、MBA課堂發(fā)放問卷55份。共發(fā)放70份問卷，回收有效問卷61份，根據回收的問卷結果整理分析后構造判斷矩陣。

(三)層次單排序和一致性檢驗

層次單排序是依據構建的判斷矩陣計算本層對上層各因素的權值，即滿足BW=λmaxW的特征根和特征向量，其中B為判斷矩陣，λmax為矩陣B的最大特征根，W為特征向量，其分量Wi就是對應的權值。運用一致性指標CI檢驗判斷矩陣中各個元素重要程度的有效性和一致性，定義：CI=(λmax-n)/(n-1)；當CI=0時，說明判斷矩陣中各元素的重要性程度之間是有效的，判斷矩陣具有完全一致性，CI值越大，說明越不符合要求。運用隨機一致性比率CR檢驗判斷矩陣是否符合要求，定義：CR=CI/RI，若CR<0.10，說明此判斷矩陣具有滿意的一致性，否則，就需調整。RI的取值如表2所示。

表2 平均隨機一致性指標

表3得到影響因素的相對權重分別為：W0=(0.505,0.067,0.25,0.133,0.045)，λmax=5.25，CI=0.0493，RI=1.12，CR=0.044<0.10，說明所得的權重是合理的。

表3 影響因素的判斷矩陣及權重

表4得到科學知識S指標下S1、S2的相對權重為：W1=(0.8，0.2)，λmax=2，CI=0，RI=0，CR=0.00<0.1，故通過一致性檢驗。由專家對其進行打分而整理得出的結果，以下4個判斷矩陣同理可得：第一，團隊協(xié)作T指標下T1、T2的相對權重為：W2=(0.8，0.2)，λmax=2；第二，實踐操作E指標下E1、E2的相對權重為：W3=(0.25， 0.75)，λmax=2；第三，積極主動性A指標下A1、A2的相對權重為：W4=(0.875，0.125)，λmax=2；第四，管理能力M指標下M1、M2的相對權重為：W5=(0.8，0.2)，λmax=2；上述的判斷矩陣進行一致性檢驗得：CI=0，RI=0，CR=0<0.1，即都通過一致性。

表4 科學知識S指標下的各指標判斷矩陣及權重

(四)具體應用實例

下面以供應鏈管理雙語課程的期末考核為例說明如何使用STEAM-AHP評價模型。例如，李同學的期末供應鏈管理專業(yè)知識考核92分，專業(yè)英語應用考核88分，小組合作成績90分，團隊分工協(xié)作考核優(yōu)秀90分，項目案例設計80分，供應鏈系統(tǒng)實操考核75分，課堂主動積極回答問題(回答9次，回答10次為滿分)得90分，課后積極提問(提問8次，提問10次為滿分)得80分，自我管理能力很強，從不遲到曠課，考勤100分，項目管理能力考核95分，那么李同學的供應鏈管理雙語課程期末各模塊的考核成績(保留整數)分別為：科學知識92×0.8+88×0.2=91分，團隊協(xié)作90×(0.8+0.2)=90分，實踐操作80×0.25+75×0.75=76分，主動積極性90×0.875+80×0.125=89分，綜合管理能力100×0.8+95×0.2=99分，則該學生的供應鏈管理雙語課程綜合評價成績?yōu)椋?1×0.505+90×0.067+76×0.25+89×0.133+99×0.043=87分。

四、STEAM-AHP在雙語課程學習評價中的應用效果和意義討論

(一)平衡短期目標與長期目標，引導學生向長遠目標努力

考核評價指標是學生努力的方向，只有引領方向正確，學生才能向著正確的方向努力，這也是學習效果考核評價的初衷。在傳統(tǒng)的教學質量評估中，考核指標往往比較單一，只關注短期目標[3]，即學生的考試成績，而對將來發(fā)展更有利的方面卻忽略不計。本文依據平衡計分卡的理念，既考慮了短期目標即課程的知識考核，又考慮了長期目標：團隊協(xié)作、實踐操作、積極主動性、管理能力，平衡了短期目標和長期目標、結果目標和過程目標，這樣避免了以往考核中只關注短期目標的問題，有助于引導學生向著對未來更有益的長遠目標努力。

(二)減少主觀評價與客觀事實的偏差

在實際操作中，雙語課程的學習效果考核有較多的主觀因素，各高校往往給予教師一定的決定權，教師則根據自身的知識水平、經驗等主觀確定考核評價指標的權重，這種主觀性的做法往往導致評價權重設置不合理，評價結果不合理。運用AHP可以實現定性分析和定量計算相結合，使定性模糊的因素通過科學計算分析，提高評價的合理性。

(三)教師更加科學合理評估學習效果

基于STEAM從五個維度進行全方位、全面、全過程考核，既關注短期目標，也注重長期目標的引導和發(fā)展，有助于考核評價更加科學合理。本文對各考核評價指標的權重設置采用主、客觀賦值相結合的原則，實現優(yōu)勢互補。本文首先依據平衡計分卡的理念，在此基礎上提出了基于“STEAM”學習效果評價指標體系，即從科學知識、團隊協(xié)作、實踐操作、積極主動性和管理能力這五個維度全面考核評價；然后運用AHP構造判斷矩陣，定性分析和定量計算，科學合理地確定各個指標的權重；最后，加權算出學生的綜合成績。這就使雙語教學質量評價因素實現眼前和長遠相兼顧，過程和結果雙考慮，定性定量相結合，從而有助于提高評價的系統(tǒng)性和科學性。