◆張李泉
縣域網(wǎng)絡(luò)閱卷系統(tǒng)數(shù)據(jù)自定義分析的實踐與思考
◆張李泉
網(wǎng)絡(luò)閱卷不僅為使用者提供閱卷的便捷性、高效性和公平性,同時對閱卷數(shù)據(jù)進行規(guī)范的整理和分析。但在實踐過程中發(fā)現(xiàn),閱卷系統(tǒng)對數(shù)據(jù)的分析只有一定的普適性,無法兼顧使用者的實際需求。結(jié)合工作實際,從數(shù)據(jù)格式的自主規(guī)范、自定義的數(shù)據(jù)指標處理等方面進行分析。
網(wǎng)絡(luò)閱卷;數(shù)據(jù)分析;自定義
10.3969/j.issn.1671-489X.2016.03.023
對閱卷數(shù)據(jù)的統(tǒng)計、分析是學生學業(yè)質(zhì)量監(jiān)測的重要手段與方式,在縣域范圍內(nèi),對全縣學生學業(yè)質(zhì)量的全面分析是獲取學生學習進程、狀態(tài)和成果的主要途徑。網(wǎng)絡(luò)閱卷系統(tǒng)除了提供閱卷的公平、便捷和高效外,對學生學業(yè)數(shù)據(jù)還能進行一定的統(tǒng)計、分析,但結(jié)合縣域教研部門及學校的實際情況,網(wǎng)絡(luò)閱卷系統(tǒng)提供的平均分、分數(shù)段等普適性分析方法已不能適應(yīng)需求,所以有必要對學生成績數(shù)據(jù)進行自定義式的統(tǒng)計與分析。
本縣采用全通數(shù)碼紙筆王網(wǎng)絡(luò)閱卷系統(tǒng),從考試組織、運行的進程來看,采用的網(wǎng)絡(luò)閱卷系統(tǒng)數(shù)據(jù)分析流程如圖1所示。
1)評卷數(shù)據(jù)構(gòu)成。全通數(shù)碼紙筆王網(wǎng)絡(luò)閱卷系統(tǒng)對試卷掃描后,生成評卷數(shù)據(jù),由兩部分組成:第一部分是文本文件,其中包含學生作答的選擇題等客觀題答案及學生主觀題圖像指向;第二部分為學生圖像文件。
圖1 網(wǎng)絡(luò)閱卷數(shù)據(jù)分析流程
2)評卷數(shù)據(jù)自定義分離。結(jié)合本縣實際,對評卷數(shù)據(jù)進行分離,將文本文件中選擇題部分組成獨立的文本文件,便于進行自定義的客觀題分析;將文本文件中學生主觀題圖像指向部分與學生圖像文件結(jié)合,形成學生主觀題評卷文件。
3)客觀題分析。分析文本格式類型,根據(jù)要求設(shè)計客觀題自定義分析結(jié)構(gòu)與算法,編寫讀取文本數(shù)據(jù)、分析數(shù)據(jù)的程序代碼,進行分析,生成并導(dǎo)出所需的數(shù)據(jù)報表及統(tǒng)計圖表,供教學人員參考。
4)數(shù)據(jù)綜合分析。依據(jù)縣級教研部門及相關(guān)學校的數(shù)據(jù)分析需求,還要對最終閱卷成績數(shù)據(jù)進行綜合分析,比如學生綜合分差、選修比例匹配、上線適配率等自定義數(shù)據(jù)分析指標,形成可供學科教研員和學校教學部門參考的分析報表和統(tǒng)計圖表。
靈活多樣的數(shù)據(jù)獲取方式是自定義數(shù)據(jù)分析的前提在網(wǎng)絡(luò)閱卷過程中,學生作答數(shù)據(jù)及成績數(shù)據(jù)的獲取有多種途徑。譬如:要分析學生選擇題作答情況及所蘊涵的知識掌握程度,就要獲取學生作答的選擇題部分原始數(shù)據(jù),而此類數(shù)據(jù)無法從閱卷系統(tǒng)學生最終成績數(shù)據(jù)中獲得,因此必須研究原始評卷的文本文檔,從中取得相關(guān)數(shù)據(jù)。
以全通數(shù)碼紙筆王網(wǎng)絡(luò)閱卷系統(tǒng)為例,分析學生選擇題作答數(shù)據(jù)的獲取流程,這里選擇“高一英語”學生原始評卷文件,如圖2所示。在圖2中,第一行描述的是試卷掃描后形成的相關(guān)屬性信息,以“批次號”為界,“批次號”后的相關(guān)屬性表達的是參考學生的考試信息:“kh”表示參考學生的“考試證號”,“xz1”代表學生作答數(shù)據(jù)中的“第一道選擇題”……以后類推。
分析學生選擇題作答情況,將這些信息導(dǎo)入數(shù)據(jù)分析系統(tǒng)很重要。有多種方式導(dǎo)入數(shù)據(jù),現(xiàn)以VFP為例,簡述導(dǎo)入過程。
圖2 高一英語評卷文本
1)建立動態(tài)分析數(shù)據(jù)庫表。由于各學科客觀題結(jié)構(gòu)各不相同,因此無法采用固定的數(shù)據(jù)庫表來實現(xiàn),這時需要建立動態(tài)的數(shù)據(jù)庫表,讀入第一行文本,分離每個字段,然后動態(tài)建立數(shù)據(jù)庫表結(jié)構(gòu):
Create Table Tb (smxh c(6),smyh c(8),pch c(9),kh C(12),xz1 c(1),……)
2)動態(tài)導(dǎo)入學生數(shù)據(jù)。觀察第二行文件開始的數(shù)據(jù)格式,可用追加命令導(dǎo)入數(shù)據(jù):
Append from高一評卷文本.txt delimited with“,”
規(guī)范嚴謹?shù)臄?shù)據(jù)過程處理是自定義數(shù)據(jù)分析的核心數(shù)據(jù)處理的質(zhì)量不僅關(guān)系到縣級教研部門對各校教學現(xiàn)狀、能力和水平的判斷與評估,也影響到教研部門的決策和因應(yīng)措施,所以數(shù)據(jù)處理過程必須科學、規(guī)范。仍以學生客觀題數(shù)據(jù)統(tǒng)計為例,來分析數(shù)據(jù)處理過程。
縣級教研部門及參考學校對學生客觀題的分析有這樣一些需求:客觀題得分均分及得分率分析;錯誤選項分析排序;學生答題選項分布;選項率分析排序;原因追蹤;等等。
綜合分析需求、整理規(guī)范,可以得出較為科學的數(shù)據(jù)處理邏輯,如圖3所示。
學生答題選項分布:根據(jù)學生客觀題作答結(jié)果,對所有學生作答選項(含多選項)進行整理、分類,給出選項分布信息,操作時以學生作答所出現(xiàn)的所有選項為字段,建立選項分布數(shù)據(jù)庫表,數(shù)據(jù)庫表動態(tài)生成(用Create Table……)。
選項率分析(含組合選項):對選項數(shù)據(jù)庫表中各選項及多選組合選項進行統(tǒng)計分析,得出各選項率,繪制選項率圖表,提供給教研人員進行綜合分析(可用分類匯總Total等實現(xiàn))。
錯誤率分析排序:依據(jù)選項率分析結(jié)果,將錯誤選項按選項率進行排序,從中找出學生發(fā)生的錯誤概率,同時結(jié)合命題時提供的關(guān)聯(lián)知識點,找出學生薄弱環(huán)節(jié)。
圖3 學生客觀題處理邏輯過程
表1
圖4
小題均分及得分率分析:總體分析全體學生在各客觀題上得分情況及得分率,從整體上把握學生知識體系結(jié)構(gòu),為進一步完善做好準備。
難度與區(qū)分度分析:針對學生選項答題狀況及各題均分與得分率,分析各題的難度及區(qū)分度,便于教研部門及參考學校在實踐中調(diào)整。在分析時可用二分法及極端分組法進行難度和區(qū)分度的計算。
直觀有效的分析結(jié)果展現(xiàn)是自定義數(shù)據(jù)分析的延伸數(shù)據(jù)處理完成后,必須將分析結(jié)果提供給教研人員及學校,為了能讓他們更為有效地、清晰地掌握學生學業(yè)情況,分析結(jié)果的呈現(xiàn)必須做到方便直觀、條理清晰、解析恰當。
如形成學生客觀題分析報告時,以表格圖示、圖表呈現(xiàn)、文字解析等方式提供給教研人員及相關(guān)學校。以小題均分及得分率分析為例,依據(jù)需求,不僅要提供各題均分,還要按區(qū)域范圍差異以區(qū)域范圍進行統(tǒng)計,見表1。
再如選項率分析,對每到選擇題,以縣域、學校、班級為單位進行分析,此時采用圖表顯示,一目了然。如圖4所示,以學校為單位,對其中一條選擇題進行簡單圖表呈現(xiàn)。
除此之外,還采用折線圖、雷達圖等對相應(yīng)需求進行分析和呈現(xiàn)。
[1]曹雷.縣域教研部門網(wǎng)絡(luò)閱卷的應(yīng)用與實踐思考[J].中國教育技術(shù)裝備,2012(12).
[2]李雪梅.網(wǎng)上閱卷有效性評析[J].科技資訊,2010(13).
TP315
B
1671-489X(2016)03-0023-03
作者:張李泉,如東縣教育局招生辦公室,技師,研究方向為網(wǎng)絡(luò)閱卷及數(shù)據(jù)分析(226400)。