熊善軍

摘 要 教學質(zhì)量監(jiān)控的目的是為教育教學活動提供決策依據(jù)。丹徒區(qū)教師發(fā)展中心為了讓“數(shù)據(jù)”說話，對數(shù)據(jù)進行合理的統(tǒng)計和解釋，依托大數(shù)據(jù)開展區(qū)域質(zhì)量監(jiān)控，推動和深化基于數(shù)據(jù)的教育教學評價，整合研發(fā)了基于互聯(lián)網(wǎng)的“丹徒區(qū)學業(yè)水平監(jiān)測平臺”，實現(xiàn)了信息技術(shù)與教學評價管理的深度融合。

關(guān)鍵詞 大數(shù)據(jù) 監(jiān)測平臺 評價

一、傳統(tǒng)質(zhì)量監(jiān)測存在的問題

當前在大多數(shù)學校和區(qū)域，教學學業(yè)質(zhì)量監(jiān)測工作仍然在使用較初級的評價工具——辦公軟件來收集、分析處理全地區(qū)的考試數(shù)據(jù)。其問題與弊病表現(xiàn)在評價方式上為方式單一，缺乏具體、操作性強的評價手段與工具，評價結(jié)果多數(shù)用于學校、教師排名，評價結(jié)果缺乏真實性等；在評價內(nèi)容上體現(xiàn)為內(nèi)容比較片面，往往缺乏系統(tǒng)性，因而所獲得的信息也比較有限。由于辦公軟件本身功能的局限性，完全依靠辦公軟件做評價手段存在的主要問題包括以下幾個方面。

1.簡

辦公軟件只能夠計算出少數(shù)簡約宏觀的指標，如“平均分”“及格率”“上線率”“分數(shù)段”和“排名”等，不能實現(xiàn)某次“終結(jié)性評價”需要全面呈現(xiàn)的主要指標和圖表，例如“偏度系數(shù)”“峰度系數(shù)”“分數(shù)頻率分布正態(tài)檢驗圖”“中位數(shù)—四分位數(shù)描述圖”等。

2.單

辦公軟件大多只能在計算機的單機使用，無法通過網(wǎng)絡(luò)實現(xiàn)全區(qū)考試數(shù)據(jù)自動收集和分析結(jié)果發(fā)布共享；在不進行VBA編程的情況下一般只能計算單次數(shù)據(jù)，不能像數(shù)據(jù)庫一樣存儲歷史數(shù)據(jù)，不便于追蹤學生和團體發(fā)展變化，如“學生和團體多次考試標準分變化圖或變化表”“學生和團體兩次考試評價表”“學生和團體多次考試N評價”等。

3.粗

辦公軟件呈現(xiàn)的分析結(jié)果只適用于“粗線條”地反映全區(qū)宏觀情況，難以實現(xiàn)“教學過程評價”中面向基層學校、班級甚至每個學生的多種精細化評價方法，難以針對試卷命題質(zhì)量、試題小分和知識點做出詳細的分析。如下文提到的“學生試題分析報告”“雙向細目表分析與診斷”“S-P表分析與診斷”等。

4.淺

辦公軟件不能容納復(fù)雜的教育統(tǒng)計、測量的數(shù)學模型，難以深入挖掘海量學生成績數(shù)據(jù)背后的信息，實現(xiàn)多范圍、深層次的教學質(zhì)量系統(tǒng)、客觀、科學的衡量與診斷。如“測驗信度計算”“模糊綜合評價”“相關(guān)分析”“假設(shè)檢驗”“線性回歸分析”“聚類分析”“主成分分析”等。

二、基于大數(shù)據(jù)的區(qū)域質(zhì)量監(jiān)測平臺

基于以上原因，教育行政部門很難依據(jù)現(xiàn)有的評價進行有效的決策和資源分配，學校領(lǐng)導(dǎo)也很難通過現(xiàn)有的評價促進學校內(nèi)涵的全面發(fā)展，因此，整合各類平臺，在信息技術(shù)和大數(shù)據(jù)的支撐下建立一個覆蓋全區(qū)學校、主體多元化、評價方式多樣化、評價手段具體、操作性強的學業(yè)質(zhì)量監(jiān)測體系是十分必要的。丹徒區(qū)學業(yè)水平監(jiān)測平臺由試卷命制系統(tǒng)、閱卷系統(tǒng)、學測分析系統(tǒng)、數(shù)據(jù)反饋系統(tǒng)四大部分組成（見圖1），對學生學業(yè)質(zhì)量監(jiān)測得到的數(shù)據(jù)和信息進行更加深入地發(fā)掘和分析，獲得教學質(zhì)量及學生發(fā)展狀況真實、全面的評價信息，把評價結(jié)果以豐富的形式向教學第一線進行反饋。區(qū)教師發(fā)展中心緊隨大數(shù)據(jù)時代發(fā)展步伐，以區(qū)域性教學質(zhì)量的提高為目標，形成了命題——閱卷——數(shù)據(jù)分析——質(zhì)量反饋四位一體的區(qū)域質(zhì)量監(jiān)控平臺。區(qū)域分析運用“絕對”評價和“相對”跟蹤動態(tài)評價相結(jié)合的方式，用標準分跟蹤每所學校的質(zhì)量變化，采用雷達圖直觀反映區(qū)域內(nèi)學科分學校發(fā)展和學校分學科發(fā)展。

1.制度保障是質(zhì)量監(jiān)控的基礎(chǔ)

組成一個覆蓋全區(qū)的學業(yè)質(zhì)量監(jiān)測和增值評價的網(wǎng)絡(luò)服務(wù)平臺，要構(gòu)建包括教育局、教研部門、學校、班級、學生評價等多級信息共享的評價模式；以全面、快速、準確地反饋考試信息和評價標準來貫徹和落實教育部門的管理目標，大量學業(yè)測試信息和評價量規(guī)面向?qū)W校、教師和學生進行及時反饋，使學校及教師能及時了解教學中的問題和缺陷；全面采集學生入校以后歷次考試或測驗的數(shù)據(jù)，組成中小學教育體系中相對龐大的海量數(shù)據(jù)庫；采用教育測量、統(tǒng)計和評價學的理論和方法，對學生學業(yè)成績的發(fā)展實施全面的監(jiān)測、管理與評價；通過挖掘海量學生成績數(shù)據(jù)背后的信息，實現(xiàn)多范圍、深層次的教學質(zhì)量系統(tǒng)、客觀、科學的衡量與診斷，充分發(fā)揮考試評價改進教學過程的作用。學測平臺除了向教育行政部門和發(fā)展中心提供十分詳盡的全區(qū)宏觀數(shù)據(jù)分析及學校、班級和個人的考試分析信息之外，還能供轄區(qū)的全體學校使用，為學校提供詳盡到班級和個人的考試分析結(jié)果，可以使發(fā)展中心和學校對教學的“研究、指導(dǎo)、服務(wù)、管理”從學校層面擴展到班級和每個學生。

（1）建立校、片、區(qū)三位一體的監(jiān)控體系

為了充分發(fā)揮監(jiān)測平臺的診斷、導(dǎo)向和激勵作用，提升區(qū)域平臺區(qū)域應(yīng)用的效度、廣度和深度，教師發(fā)展中心于2011年成立了質(zhì)量監(jiān)控組，逐步構(gòu)建校、片、區(qū)三位一體的質(zhì)量監(jiān)控體系。首先，結(jié)合每學年的教學要求，制定《區(qū)域中小學學業(yè)質(zhì)量監(jiān)測規(guī)劃和實施方案》，為每次質(zhì)量監(jiān)測進行頂層設(shè)計，明確工作要求，有效推進網(wǎng)絡(luò)監(jiān)測平臺的建設(shè)。其次，通過QQ、微信等手段建立以學校信息技術(shù)教師為基礎(chǔ)的區(qū)域信息員組群，為網(wǎng)測平臺的使用進行技術(shù)咨詢和應(yīng)用保障。最后，每次監(jiān)測前開好各學段的考務(wù)培訓會，保障質(zhì)量監(jiān)控從制卷、閱卷、分析各階段都能順利進行。

（2）加強學科研訓人員的常態(tài)培訓

學科研訓員由于統(tǒng)計知識的缺乏，對監(jiān)測平臺的使用有一個緩慢接受和認可的過程，但監(jiān)測平臺在區(qū)域范圍的推廣離不開學科研訓員的使用和推進，所以對學科教研員的常態(tài)培訓必不可少。在推進過程中，發(fā)展中心采用學科突破、全面推進的策略，不斷總結(jié)研訓員使用平臺的經(jīng)驗，讓其他學科有樣可學。對信息技術(shù)能力強的個別學科進行個別輔導(dǎo)，鼓勵該學科在應(yīng)用上先行，并在研訓員會議上進行交流，同時加強技術(shù)對話保障平臺培訓到位。在每次監(jiān)測結(jié)束后，精選1～2位學科研訓員進行學測分析報告，其他學科研訓員進行點評分析。從實踐效果來看，學測平臺的推進離不開研訓員的認同和理解，只有提高研訓員學測平臺使用的積極性，才能使學測平臺的使用常態(tài)化、自覺化。

（3）完善基于監(jiān)測平臺的常態(tài)應(yīng)用

教學質(zhì)量的改善是一個長期的過程，隨著學習內(nèi)容、對象、教師等條件的變化，教學質(zhì)量在不同的時期會有不同的表現(xiàn)。通過學測平臺累積的大數(shù)據(jù)，實現(xiàn)了對區(qū)域質(zhì)量監(jiān)測數(shù)據(jù)動態(tài)、持續(xù)地跟蹤分析，這就要求區(qū)、片、校三級部門，在每次質(zhì)量監(jiān)測后的最短時間，利用學測平臺根據(jù)各自需要進行相應(yīng)的分析。這樣，教育行政部門和教師發(fā)展中心可以發(fā)展地了解轄區(qū)內(nèi)學校的變化情況，實施定點教研，改進薄弱學校和薄弱學科；片區(qū)學校通過學測平臺可以了解一段時間內(nèi)片區(qū)內(nèi)學校在學科及班級教學質(zhì)量方面的變化；學校通過監(jiān)測平臺可以實時監(jiān)控教師在某一階段的教學情況，并針對學生的學科平衡情況進行心理干預(yù)和個別輔導(dǎo)。

（4）注重基于監(jiān)測平臺的評價反饋應(yīng)用

“理論的價值在于啟發(fā)、喚醒、提出問題進而幫助我們分析和解決問題。”學測平臺中數(shù)據(jù)分析結(jié)果的使用，有利于幫助教育行政部門和教師發(fā)展中心把握區(qū)域教育質(zhì)量現(xiàn)狀，也有利于學校和研訓人員通過監(jiān)測評價反饋轉(zhuǎn)變教育教學習慣思維、變革教育教學中的師生關(guān)系，從而完善教學管理、創(chuàng)新教育方式，并指導(dǎo)學校教師和發(fā)展中心研訓人員采取有效的教學實踐和指導(dǎo)，充分發(fā)揮教育監(jiān)測理論、統(tǒng)計理論對提升教學質(zhì)量的價值。根據(jù)學業(yè)測試的不同要求，參與區(qū)域?qū)W測平臺反饋的人員有校長、教務(wù)主任、教研組長及各學科研訓人員，在評價反饋時從宏觀和微觀兩個層面對區(qū)域?qū)W校及學科的發(fā)展情況跟蹤比較反饋，肯定成績的同時指出不足，這樣既構(gòu)建了以學校為基礎(chǔ)的綠色評價體系，又能有效提升學校依據(jù)學測平臺實施教育質(zhì)量監(jiān)控的能力。

2.多維度學業(yè)診斷是監(jiān)測平臺的基礎(chǔ)

區(qū)域質(zhì)量監(jiān)測平臺是一個集閱卷、分析與評價、反饋一體化的系統(tǒng)，是一個在信息技術(shù)支持下的教學質(zhì)量監(jiān)測平臺，通過不同階段監(jiān)控所積累的大數(shù)據(jù)，對學生從入校到離校不同時段的變化進行多維度跟蹤評價。區(qū)域、片區(qū)和學校相關(guān)人員通過查閱學校及學生歷次監(jiān)測數(shù)據(jù)及系統(tǒng)通過大數(shù)據(jù)分析生成的各種分析報告，精確了解學校及學生多次測試反映出的發(fā)展動態(tài)，從試卷命制、閱卷安排、試卷分析、監(jiān)測分析等多方面入手，有針對性地改善學校及個人學習狀態(tài)，提高學習質(zhì)量。通過多維度的學業(yè)診斷，促進教學反思。

（1）分析指標細化，科學利用數(shù)據(jù)

學生監(jiān)測數(shù)據(jù)是區(qū)域監(jiān)測平臺最重要的數(shù)據(jù)，經(jīng)過近幾年的積累，已經(jīng)形成區(qū)域?qū)W生質(zhì)量監(jiān)測的大數(shù)據(jù)平臺。依據(jù)統(tǒng)計學理論，在大數(shù)據(jù)的基礎(chǔ)上改變過去注重學生三率一分（及格率、低分率、優(yōu)秀率、平均分）的簡單評價為注重學生發(fā)展的綜合性評價方式。區(qū)域?qū)W測平臺在除了包含常規(guī)的統(tǒng)計分析項目，如平均分、四率、分數(shù)段等傳統(tǒng)數(shù)據(jù)之外，需要全面應(yīng)用教育測量、統(tǒng)計和評價學的理論，包含了標準參照評價與常模參照評價的各種方法和技術(shù)，如建立測驗質(zhì)量監(jiān)控常模、導(dǎo)出分數(shù)、分數(shù)數(shù)據(jù)分布狀態(tài)和趨勢的描述等。采用描述統(tǒng)計分析方法對獲得的數(shù)據(jù)進行整理、概括，顯現(xiàn)其分布特征，用十分豐富的測驗量表、統(tǒng)計表格和Flash動畫圖形等手段來展現(xiàn)各項數(shù)據(jù)，使通過測量所得到的信息更加豐富、全面、系統(tǒng)和準確，提高評價結(jié)果的可靠性。例如，根據(jù)教育測量原理建立的“常模表”（測驗量表）是對某次測驗分數(shù)的詳細解釋，用來作為測驗的比較標準；在表中，我們可為某個被試的原始分數(shù)找到它在常模團體中的相對位置。根據(jù)“正態(tài)化分布常模”中的正態(tài)化標準分，利用團體標準分內(nèi)部差異比較圖可以比較出某學校內(nèi)學科之間的差異，如圖2所示，語文、數(shù)學是該校的優(yōu)勢，水平在全區(qū)平均值（圖中零平面）之上，英語、物理學科是該校的薄弱環(huán)節(jié)。

（2）合理分析試卷，促進試卷命制

區(qū)域?qū)W業(yè)監(jiān)測平臺試卷命制系統(tǒng)為區(qū)、片、校進行學業(yè)監(jiān)測試卷命制提供服務(wù)。區(qū)域研訓員及片區(qū)和學校教師事先定義每道題或每個得分點的屬性，通過考查內(nèi)容和考查目標利用雙向細目表進行分析，充分利用學測平臺中的現(xiàn)有題庫，在“一命二審”的基礎(chǔ)上形成某一階段的檢測試卷。學測平臺根據(jù)學生的答題情況對試卷進行試題指標匯總、試題指標統(tǒng)計、試題選項分析、試題選項統(tǒng)計、試題得分分布與比較、平均分數(shù)、難度指數(shù)分布、難度指數(shù)、難度指數(shù)、分組難度指數(shù)、團體得分率統(tǒng)計和比較定位；對區(qū)分度指數(shù)進行分析，并給出試卷分析報告。例如：系統(tǒng)為全區(qū)每個學生的各學科都生成了一份雙向細目分析與診斷表。它是一種教學過程精細化管理與評價的工具，可以細化到對每個團體和學生個人的“考試內(nèi)容（組塊、小題）”以及“考查目標（識記、理解、應(yīng)用、分析、綜合和評價）”的得分或得分率水平做出全面的分析，并且把學生與學校、班級的水平進行比較。

3.發(fā)展性評價是學業(yè)監(jiān)測平臺的優(yōu)勢

教育評價一定要尊重學生主體發(fā)展的需求，采用多種方式構(gòu)筑學生評價體系。區(qū)域?qū)W業(yè)監(jiān)測平臺采用經(jīng)典教育測量法對學生學業(yè)發(fā)展水平進行測量和描述性統(tǒng)計分析。通過歷次學業(yè)測試積累的大數(shù)據(jù)，利用教育測量原理建立每次考試的“正態(tài)分布常模”，使不同考試或?qū)W科的分布形態(tài)都成為完全相同的“標準正態(tài)分布”；原始分轉(zhuǎn)化為導(dǎo)出分數(shù)（百分等級分數(shù)、正態(tài)化標準分數(shù)Z和T）；以導(dǎo)出分數(shù)作為一把“標尺”，在不同考試分數(shù)或?qū)W科之間建立一系列“等值關(guān)系”，為它們之間的精確比較奠定基礎(chǔ)；利用導(dǎo)出分數(shù)可以較為精確地描述學生在總體常模中的位置，即學業(yè)水平的發(fā)展變化趨勢。

（1）團體評價

通過監(jiān)測平臺可以對某一學校歷次檢測情況進行跟蹤分析，在比較中發(fā)現(xiàn)學校的進步和差距；也可以對學校各學科的發(fā)展平衡情況進行分析，利用數(shù)據(jù)找出學校的優(yōu)勢和薄弱學科。區(qū)域?qū)W測平臺中團體評價指標有團體標準分變化表和圖、團體標準分評價表、常用指標變化表和圖、上線指標變化表和圖、統(tǒng)計指標變化表和圖；例如：某班級8次考試的團體標準分Z變化圖（如圖3）。

（2）學生評價

學生發(fā)展性評價方法是一種用來評定學生或團體多次考試總成績進步程度的方法，它對某個團體N次考試的標準分數(shù)進行“矩陣運算”，通過計算出“N分數(shù)”“進步分數(shù)”和“進步名次”等指標，定量分析出N次考試中學生或團體學業(yè)成績進步的程度，可以有效地評定學生學習的效果。區(qū)域監(jiān)測平臺還可以對學生進行發(fā)展增值描述：常模等值關(guān)系表、學生兩次考試分析、團體兩次考試分析、標準分變化值分布、標準分變化值分布，若干等值分數(shù)線上發(fā)展變化趨勢的描述等，通過這些發(fā)展性評價方式，讓教師和學生了解在教學中的不足和學生個體的學科差異，為教學進行個性化輔導(dǎo)提供依據(jù)。圖4為某校某班多位同學在一年度考試中的N評價結(jié)果。

從圖4可以看出，一年來該班同學歷次測試標準分的變化情況，并依據(jù)N分數(shù)的變化得到學生的進步名次。

（3）增值性評價

學校教學質(zhì)量發(fā)展水平的評價在各級教育評價體系中處于核心地位，它直接影響著對教師評價和學生評價的原則以及學校的發(fā)展方向。增值性評價主要以學生學業(yè)成就的發(fā)展水平為評價依據(jù)，通過相關(guān)的統(tǒng)計分析技術(shù)，將學校對學生發(fā)展的影響從生源、規(guī)模、學習習慣、教師因素等諸多相關(guān)因素結(jié)合起來，進而測量一定時間內(nèi)學生的發(fā)展情況。區(qū)、片、校在每次學業(yè)檢測時，要求心理輔導(dǎo)員依據(jù)學生心理特征設(shè)計相關(guān)問卷調(diào)查，借助區(qū)域?qū)W測平臺的問卷系統(tǒng)，可以對學生學業(yè)外的影響因素進行增值性評價，為教育教學提供更多的實證依據(jù)。

三、基于大數(shù)據(jù)質(zhì)量監(jiān)測平臺的深度應(yīng)用

隨著大數(shù)據(jù)時代的來臨，云平臺、互聯(lián)網(wǎng)+技術(shù)在教育教學上的陸續(xù)應(yīng)用，教育信息化對區(qū)域質(zhì)量監(jiān)測的要求也在不斷發(fā)生變化。網(wǎng)絡(luò)監(jiān)測平臺也將適應(yīng)要求，與時俱進。

1.進一步盤活數(shù)據(jù)，驅(qū)動教學過程改進

凡客觀存在的事物都有數(shù)據(jù)，凡有數(shù)據(jù)的東西都可以分析，凡有分析的行為都可能創(chuàng)造價值。通過監(jiān)測平臺可以對各類數(shù)據(jù)進行科學、深度的分析，讓數(shù)據(jù)變?yōu)榻虒W過程改進的證據(jù)。結(jié)合信息時代的教育特點，優(yōu)化增長性評價，依據(jù)監(jiān)測平臺中的問卷調(diào)查進行歸因分析可以為各類管理人員提供有價值的管理依據(jù)。合理安排每次質(zhì)量監(jiān)測的時間節(jié)點，讓“監(jiān)測——分析——改進”更有針對性，每次監(jiān)測結(jié)束后，在區(qū)域和校區(qū)內(nèi)開展數(shù)據(jù)分析報告展示活動，鼓勵教師利用監(jiān)測平臺進行試卷分析、教學分析、教育管理等各類分析，加大基于大數(shù)據(jù)的區(qū)域監(jiān)測平臺的深度應(yīng)用，讓監(jiān)測平臺成為提升學校教學質(zhì)量和研訓力度的一項重要手段。

2.改進“學生成長記錄表”，為分層教學提供依據(jù)

一方面在平臺的建構(gòu)上要精簡操作流程，適應(yīng)學校及管理需求進一步優(yōu)化評價模型，豐富增值型評價內(nèi)容，增加學生心理健康、教師教學、學校管理等方面的問卷調(diào)查和信息處理。二是立足于監(jiān)測平臺常態(tài)應(yīng)用的同時，進一步優(yōu)化錯題歸類工作，形成基于錯題更正、測試的糾錯平臺，為學校分層教學提供數(shù)據(jù)資源支持。三是加強學生綜合素養(yǎng)評價研究，加大過程性評價內(nèi)容，在評價反饋上利用平臺的跟蹤功能為學校提供學生成長記錄表。

推進區(qū)域質(zhì)量監(jiān)測平臺的深度應(yīng)用，要淡化數(shù)據(jù)，重視數(shù)據(jù)評價，區(qū)、片及學校積極探索質(zhì)量監(jiān)測的形式與方式，優(yōu)化質(zhì)量監(jiān)測的技術(shù)指標，逐步完善質(zhì)量監(jiān)測體系。通過監(jiān)測平臺的深度研究應(yīng)用，將“學生的全面發(fā)展”“教學質(zhì)量的過程研究”“學生健康發(fā)展的因素”等諸方面逐步融入到監(jiān)測過程中，完善以“測試、閱卷、分析、反饋”為基本框架的“區(qū)域質(zhì)量監(jiān)測平臺”。以此促進區(qū)域教師和研訓人員自覺改變教學行為及研訓方式，切實提升區(qū)域教學質(zhì)量，進一步加強區(qū)域教育信息化的應(yīng)用步伐。

參考文獻

[1] 周家榮.基礎(chǔ)教育質(zhì)量監(jiān)測的基本框架[J].上海教育評估研究，2015（2）.

[2] 符泰民.信息技術(shù)支持下的教學質(zhì)量監(jiān)測研究[J].中國電化教育，2014（5）.

[3] 牛月蕾.美英中小學增值評價研究[J].長沙：湖南大學碩士論文，2012.

【責任編輯 鄭雪凌】