禚 軍,戶 耕
當前,我國已經建成了世界上規(guī)模最大的高等教育體系,高等教育正由大眾化階段進入普及化階段,高等教育質量成為社會各界關注的重點。《普通高等學校本科專業(yè)類教學質量國家標準》《關于加快建設高水平本科教育全面提高人才培養(yǎng)能力的意見》等文件相繼出臺;《中華人民共和國國民經濟和社會發(fā)展第十四個五年規(guī)劃和2035年遠景目標綱要》中提出建設高質量教育體系的目標任務[1];教育部新一輪審核評估更加重視對高校內部質量保障能力的評估。鑒于此,各大高校對教學質量保障工作越來越重視,均建立了教學質量內部監(jiān)控與評價體系。本文介紹的是發(fā)揮信息技術優(yōu)勢、突出院系主體作用的“四化一性”教學質量監(jiān)控與評價體系。
“四化一性”教學質量監(jiān)控與評價體系的核心是:質量監(jiān)控常態(tài)化、自我評價體系化、數據分析精準化、反饋改進立體化和強化學院(指二級學院,下同)質量保障主體性。“四化一性”既體現了高校教學質量保障的核心要素,又發(fā)揮了智能時代的優(yōu)勢,凸顯了學院的主體責任和地位。
高校內部教學質量保障體系建設總體思路是“努力形成一個有目標、有標準、有機構、有評價、有反饋、有改進的閉環(huán)質量保障系統(tǒng)”。[2]77在這個閉環(huán)式的保障系統(tǒng)中,教學目標和標準是質量監(jiān)控與評價的依據,監(jiān)控與評價獲得的信息數據,反饋給相關的責任單位和個人,實施改進和提高?!八幕恍浴苯虒W質量監(jiān)控與評價體系主要涵蓋監(jiān)控、評價、反饋、改進等環(huán)節(jié),是質量保障體系的運行過程。其中,“監(jiān)控”主要是通過教學檢查、學生反饋、教學督導等方式獲取教學質量信息?!霸u價”是指高校的自我評價,具有獨立性、過程性、廣泛性和靈活性等特點[3]。因此,教學自我評價體系的構建可以根據學校的辦學定位和教學實際,有選擇地對教學過程,教學主、客體和教學管理等方面進行綜合和專項的評價,使高校的自我評價體系呈現出個性化的特點。
互聯網的發(fā)展促進了信息技術與教育教學深度融合,教學質量監(jiān)控與評價手段變得更加便捷、智能。然而,很多高校的質量監(jiān)控還沒擺脫憑經驗、憑傳統(tǒng)、憑習慣的慣性,不能調動和發(fā)揮教師和學生參與質量監(jiān)控和評價的積極性和主動性。調查表明,信息化建設和大數據的利用成為近年來制約高等教育內部質量保障體系建設研究和實踐的重要問題,主要體現為:質量監(jiān)控與信息反饋、持續(xù)改進未能形成良好的閉環(huán)結構,缺少具有可測量、可區(qū)分、可評價、可描述的指標[4];教學質量信息共享不到位,被調查的教師有半數表示“很少被反饋、共享保障信息”[5]。因此,建立一種基于信息技術的質量監(jiān)控與評價體系成為各高校亟需解決的問題。
石中英提出了大學辦學院還是學院辦大學的問題,其實質是強調學院在大學建設中的主體地位,因為學院是人才培養(yǎng)、科學研究、社會服務、文化傳承等大學功能實現的主體[6]。學院作為教師和學生的直接管理者,對教師和學生的質量需求最為了解,確立其在質量保障工作中的主體地位,將會對提升質量起到事半功倍的效果。因此,高校質量保障工作的重心應該由學校層面轉向學院層面,加強校、院兩級的對接和聯動,使學院不只是被動地落實學校質量保障的政策制度,還要建立相對獨立的質量保障體系,增強相關人員的責任意識以及進行質量保障工作的主動性和創(chuàng)造性,更加有效地落實基層組織在教學質量建設中的主體責任。
信息技術和大數據分析方法是高校質量監(jiān)控與評價的利器,依托信息技術構建的內部質量監(jiān)控與評價體系能夠節(jié)約資源、提高效率,實現質量監(jiān)控常態(tài)化、自我評價體系化、數據分析精準化、反饋改進立體化,同時強化學院質量保障的主體性,有助于形成人人參與的質量文化。
教育教學過程是不可逆的,試錯對學生來說代價太大,因此,教學質量監(jiān)控重點在于過程和預判,將問題消滅在萌芽中。通常,教學質量監(jiān)控從教師教學和學生學習兩個方面著手。課堂教學質量的監(jiān)控,首先,可以借助于教師使用信息化手段實施教學的數據、師生之間的交流與溝通、學生對教師課堂教學的日常反饋。保證教師在施教的同時能及時掌握學生的反饋以不斷調整教學,滿足學生的需要。其次,可以采取第三方介入的手段,比如經常性督導聽課和例行性教學檢查。督導不只督教師的教,也督學生的學,重點在于教學診斷,防患于未然。第三,教師對學生學習狀態(tài)的監(jiān)控和評價。通過提升教師對學生學習的關注度增強教師在教學質量保障方面的責任意識。
人才培養(yǎng)質量是由人才培養(yǎng)的全過程決定的,教學質量評價必須保證影響人才培養(yǎng)質量的每一個模塊都不縮水??梢栽u價的維度有很多,可以根據其與人才培養(yǎng)質量的相關度整合成評價體系。例如,利用專業(yè)評價、課程評價和教師教學質量綜合評價可以把各種專項評價都整合起來,形成互為支撐、具有內在聯系的評價體系。專業(yè)評價可以根據其指標體系,將實踐教學與教育評價、畢業(yè)生和用人單位對學校人才培養(yǎng)質量的評價、課程評價、論文評價等一系列評價綜合起來。課程評價可以將教材評價、試卷評價、課堂教學質量評價等一系列評價綜合起來。教師教學質量評價可以將學生評價、督導評價、同行評價、教學單位評價等評價維度綜合起來。同時,課程評價、教師教學質量綜合評價的結果可以支撐專業(yè)評價。自我評價工作的開展要有目的、有計劃、有結果,采取過程性與終結性評價相結合、例行性和臨時性評價相補充的方法,設計之初就要保證體系的完整性。
質量監(jiān)控、自我評價是教學質量數據采集的手段和渠道。在明確數據來源的同時,要對所采集的數據進行清洗,保證每一項數據的真實性、有效性。根據數據特點和實際需要利用因子分析、聚類分析、層級分析等多種數據挖掘處理方法對評價數據進行處理分析,將單調的數據轉化為人人都可以閱讀的質量信息。通常需要根據數據對教學質量的關聯度構建數據分析模型,以保證數據分析的效率效果。這就要研究確定每一評價指標與評價對象的指向性關系,強關系、弱關系或是無關系。比較難以處理的就是學生和督導的主觀性評語,目前常用的方法是利用詞匯云圖或情感和語義分析等將這些描述性的語言轉化為數字信息,作為為評價對象畫像的一個像素點,從而提高質量評價的精準度。
教學質量管理采用校、院、系三級管理的高校,質量信息反饋也有三個層次,要保證三個層次資源共享,信息互通,學校對院、系質量反饋和改進過程情況進行全面的監(jiān)督,從而保證教學質量改進的有效實施。為提升質量問題處理的效率,各職能部門根據職責和權限共享質量管理資源,在簡化信息反饋流程的同時,也增強了全員參與的質量保障意識,有利于部門之間的工作協同。學院在信息數據處理、自查、自糾和專項評價等方面具有完全的自主性,保障了質量問題在第一時間得到關注和解決。立體化的質量反饋系統(tǒng),增強了質量管理的透明度,各單位相互監(jiān)督,共同關注,保證了質量問題能夠得到有效的解決。不同層級管理部門對教學質量的共同管理,也有利于對質量問題的持續(xù)跟蹤和再評價,提升教學質量改進的有效性。
隨著高等院校教育體系的日漸成熟,教育部對高校教學質量保障體系的關注點也逐漸下沉,由合格評估時的學校,到審核評估時的學院,再到現在的專業(yè)認證。學院集質量管理與教學實施于一身,根據學校教學各環(huán)節(jié)的質量標準和教學管理制度,結合本院的教學實際,制定更加細致的教學質量標準,進一步細化教學管理制度和必要的教學管理工作程序。根據這些標準和制度,開展各種教學質量監(jiān)控活動,收集教學質量信息,對存在的質量問題跟蹤解決,改進教學質量。質量管理重心的下沉,就是要強化學院在質量管理中的責任感和自主性,使其質量保障的作用充分發(fā)揮出來,有利于自省、自律、自查、自糾的質量文化建設。
“四化一性”教學質量監(jiān)控與評價體系的提出,是基于我校近幾年質量保障工作的實踐。事實證明,它是可行的,也是非常高效的做法。
建立學生信息員制度,每個班級設立1名學生信息員,代表學生隨時向學校內部質量管理系統(tǒng)反饋教學中的問題和現象,學校(指教學質量評價處)和學院質量管理人員能夠同步收到學生反饋的問題。學院負責將信息轉達責任主體,制定解決問題方案。學校負責監(jiān)督問題改進情況,梳理傾向性問題,反饋給相關部門和單位,協調解決問題。定期開展學生調查和評價。期中開展課程教學過程性評價,從課程建設和實施的各個要素了解學生對課程教學的適應性。學生反饋的意見和建議可以第一時間匿名傳遞到教師手機中,方便教師改進教學。學校和學院可以通過內部質量管理系統(tǒng)梳理學生反饋的問題,跟蹤教師改進情況。期末評價于期末考試前一周進行,通過學生的主觀感受,了解課程教學效果,收集學生對課程教學的意見和建議。教師通過手機可以動態(tài)了解學生評教情況。
教學督導分校、院兩級。校級督導發(fā)揮專家咨詢和重點督導的作用;院級督導采取全面督導和重點跟進相結合的原則。督導員通過線上、線下兩種渠道向教師反饋聽課感受。聽完課后,督導員當面與教師進行交流與溝通,提出意見和建議。此外督導員還需將聽課評價表錄入內部質量管理系統(tǒng),方便教師查閱督導聽課的意見建議。
研究影響專業(yè)人才培養(yǎng)質量的各核心因素,開展專項評價,將整體性評價任務分散到各項自我評價中。在不過多增加人力投入的情況下,詳細掌握專業(yè)建設的各項數據,有利于專業(yè)評價工作的常態(tài)化開展。已進行的專業(yè)綜合評價包含生源質量、培養(yǎng)模式、師資情況、教科研成果和教學工程項目、培養(yǎng)過程、培養(yǎng)效果六個一級指標41個觀測點。各觀測點充分利用本科教學質量數據庫數據和專項評價結果數據,在兩者不足以覆蓋的觀測點組織人員進行評價。通過這種方式,將平時開展的教師教學質量綜合評價、課程評價、畢業(yè)論文評價、實踐教學和合作教育評價、學生學業(yè)成長調查、畢業(yè)生對學校人才培養(yǎng)質量的評價、社會用人單位對學校人才培養(yǎng)質量的評價等各項評價的數據再次利用起來,各方面情況匯總到一起,清晰地得到了一個專業(yè)建設和發(fā)展的畫像。其中的專項評價還可以細分,比如課程評價還涵蓋了教材評價、試卷評價、實驗教學評價等多個專項評價內容;教師教學質量綜合評價涵蓋了督導評價、學生評價和教學單位評價等多個專項評價內容。也就是說,常態(tài)化數據采集中每項數據都在為專業(yè)綜合評價進行數據支撐,所有的評價是一個整體(圖1)。
圖1 專業(yè)評價體系
教學質量評價指標實施后產生的數據會指向一個或幾個結論,每個結論作為一個像素點,將這些像素點用不同的方法勾勒出來就形成了模型。我們通過對各個評價指標數據的橫向對比、縱向對比和交叉分析形成不同的分析模型。例如,對于教師教學質量綜合評價,首先確定影響教學質量的各個維度,然后將各維度的數據進行歸一計算。Q=Q1·u1+Q2·u2+Q3·u3(u為權重值)。教師教學質量綜合評價結果=單位評價*35%+督導評價*15%+學生評價*50%。這種算法弱化了督導老師和教師之間的矛盾。但也有其弊端,也就是,學生評價分差較小,單位評價分差較大,進而會導致結果失真。為了平衡三個維度分差給結果帶來的影響,有必要對各維度評價的結果進行二次量化,將教師各維度得分各自排序之后,重新賦分參與計算。
設學生網評分數的平均值為Q1,依Q1值大小由高到低排序,前30%為A;后10%為C;A、C之間者為B,B的前50%為B+,后50%為B-,對A、B+、B-、C分別賦分3、2、1、0,根據賦分確定等級P1。督導評價結果為Q2、部門評價結果為Q3。Q2、Q3賦分方法同Q1。則總評等級P=P1·u1+P2·u2+P3·u3(最高值為3,最低值為0)。依據這種歸一算法,能夠較為客觀地確定教師教學質量的優(yōu)、良、中、差。這種評價方法得出的結論有助于教學管理,對排名靠后的教師進行跟蹤幫帶,但對于教師個人的成長和發(fā)展作用不大。需要按指標對教師作細化分析,給教師繪制一個雷達圖,結合督導和教師的主觀評語,讓教師明白自己在哪一方面存在缺陷,需要改進,也讓教師看到與學校、學院其他教師相比存在的差距。
建立教學質量信息改進和跟蹤機制,對教學中存在的問題各個突破。學校教學質量評價處全面監(jiān)控教學質量信息,梳理教學中的傾向性問題,向相關責任單位下發(fā)信息反饋交流單,責任單位對交流單上反饋的問題進行調查核實,制定整改方案,并上報評價處備案,評價處對此問題進行持續(xù)跟蹤并適時組織再評價。每學期末,教學質量評價處逐條審查本學期發(fā)現的質量問題,確定哪些已解決,哪些還需要繼續(xù)改進。每年5月份組織畢業(yè)生對學校人才培養(yǎng)質量進行評價,分別了解應屆畢業(yè)生、畢業(yè)三年、畢業(yè)五年的畢業(yè)生對學校人才培養(yǎng)的看法。建立質量信息資源共享機制,教學質量評價處、教務處、教師發(fā)展中心、學生處和各學院及教師、學生根據職責和權限共享質量管理資源,簡化了信息反饋流程,加強了部門之間的協同管理,學院在信息數據處理、自查自糾和專項評價等方面發(fā)揮了更大的主體作用。通過質量管理信息化手段的運用,逐步建立了教學質量監(jiān)控和評價的數據庫,形成專業(yè)、課程和教師評價檔案,為教師發(fā)展和質量持續(xù)改進奠定了良好的基礎。
學校建立了校、院兩級教學質量保障體系,依托內部質量管理系統(tǒng),優(yōu)化教學管理,落實學院主體責任,提高質量保障體系運行有效度。學院建立了質量保障體系結構,明確負責人員和職責,對于課程建設、課堂教學、實習、實訓、專業(yè)社團、畢業(yè)論文等各教學過程的主要環(huán)節(jié)都建立了相應的質量標準,同時還制定和教師教學相關的規(guī)章制度,如青年教師導師制、教師聽課制度、課程教學平時成績細則等,學院還根據特色建立相應的監(jiān)控和改進機制。在教材選用、師資配備、學生學習、課堂教學、實踐教學、教學內容和手段、考核方式和試卷質量等方面有明確、具體的質量要求。制定各類實驗、實訓、實操課的準備、實施、考核標準以及實踐教學項目的質量標準和規(guī)范。制定實習過程主要環(huán)節(jié)質量標準和規(guī)范,包括計劃部署、實施(包括實習指導、實習成績評定)和總結等。完善專業(yè)教學質量監(jiān)控和評價機制,包括主要教學環(huán)節(jié)質量全程監(jiān)控與常態(tài)化評價、畢業(yè)生質量持續(xù)跟蹤反饋機制。建立校內外相關教學質量評價結果的分析與利用機制,及時分析、反饋,質量問題有跟蹤、有落實、有結果評估。建立質量監(jiān)控和評價數據檔案,作為專業(yè)質量保障體系運行效度的支撐。
教學質量監(jiān)控與評價體系應與時代發(fā)展和學校的實際相結合,以促進教學質量提升為根本目標,由靜態(tài)監(jiān)控向動態(tài)監(jiān)控轉變,由終結性評價向動態(tài)評價與終結性評價相結合轉變,由學校主導向學院自評轉變。通過評價主體的不斷下沉,增強教師、學生參與教學質量評價的主動性,形成人人參與質量管理的質量文化。在教學過程中隨時對教學質量和教學效果進行檢測,及時糾正問題和偏差,為人才培養(yǎng)質量持續(xù)提升保駕護航。