◆張李泉
縣域網(wǎng)絡(luò)閱卷系統(tǒng)數(shù)據(jù)自定義分析的實(shí)踐與思考
◆張李泉
網(wǎng)絡(luò)閱卷不僅為使用者提供閱卷的便捷性、高效性和公平性,同時(shí)對閱卷數(shù)據(jù)進(jìn)行規(guī)范的整理和分析。但在實(shí)踐過程中發(fā)現(xiàn),閱卷系統(tǒng)對數(shù)據(jù)的分析只有一定的普適性,無法兼顧使用者的實(shí)際需求。結(jié)合工作實(shí)際,從數(shù)據(jù)格式的自主規(guī)范、自定義的數(shù)據(jù)指標(biāo)處理等方面進(jìn)行分析。
網(wǎng)絡(luò)閱卷;數(shù)據(jù)分析;自定義
10.3969/j.issn.1671-489X.2016.03.023
對閱卷數(shù)據(jù)的統(tǒng)計(jì)、分析是學(xué)生學(xué)業(yè)質(zhì)量監(jiān)測的重要手段與方式,在縣域范圍內(nèi),對全縣學(xué)生學(xué)業(yè)質(zhì)量的全面分析是獲取學(xué)生學(xué)習(xí)進(jìn)程、狀態(tài)和成果的主要途徑。網(wǎng)絡(luò)閱卷系統(tǒng)除了提供閱卷的公平、便捷和高效外,對學(xué)生學(xué)業(yè)數(shù)據(jù)還能進(jìn)行一定的統(tǒng)計(jì)、分析,但結(jié)合縣域教研部門及學(xué)校的實(shí)際情況,網(wǎng)絡(luò)閱卷系統(tǒng)提供的平均分、分?jǐn)?shù)段等普適性分析方法已不能適應(yīng)需求,所以有必要對學(xué)生成績數(shù)據(jù)進(jìn)行自定義式的統(tǒng)計(jì)與分析。
本縣采用全通數(shù)碼紙筆王網(wǎng)絡(luò)閱卷系統(tǒng),從考試組織、運(yùn)行的進(jìn)程來看,采用的網(wǎng)絡(luò)閱卷系統(tǒng)數(shù)據(jù)分析流程如圖1所示。
1)評卷數(shù)據(jù)構(gòu)成。全通數(shù)碼紙筆王網(wǎng)絡(luò)閱卷系統(tǒng)對試卷掃描后,生成評卷數(shù)據(jù),由兩部分組成:第一部分是文本文件,其中包含學(xué)生作答的選擇題等客觀題答案及學(xué)生主觀題圖像指向;第二部分為學(xué)生圖像文件。
圖1 網(wǎng)絡(luò)閱卷數(shù)據(jù)分析流程
2)評卷數(shù)據(jù)自定義分離。結(jié)合本縣實(shí)際,對評卷數(shù)據(jù)進(jìn)行分離,將文本文件中選擇題部分組成獨(dú)立的文本文件,便于進(jìn)行自定義的客觀題分析;將文本文件中學(xué)生主觀題圖像指向部分與學(xué)生圖像文件結(jié)合,形成學(xué)生主觀題評卷文件。
3)客觀題分析。分析文本格式類型,根據(jù)要求設(shè)計(jì)客觀題自定義分析結(jié)構(gòu)與算法,編寫讀取文本數(shù)據(jù)、分析數(shù)據(jù)的程序代碼,進(jìn)行分析,生成并導(dǎo)出所需的數(shù)據(jù)報(bào)表及統(tǒng)計(jì)圖表,供教學(xué)人員參考。
4)數(shù)據(jù)綜合分析。依據(jù)縣級教研部門及相關(guān)學(xué)校的數(shù)據(jù)分析需求,還要對最終閱卷成績數(shù)據(jù)進(jìn)行綜合分析,比如學(xué)生綜合分差、選修比例匹配、上線適配率等自定義數(shù)據(jù)分析指標(biāo),形成可供學(xué)科教研員和學(xué)校教學(xué)部門參考的分析報(bào)表和統(tǒng)計(jì)圖表。
靈活多樣的數(shù)據(jù)獲取方式是自定義數(shù)據(jù)分析的前提在網(wǎng)絡(luò)閱卷過程中,學(xué)生作答數(shù)據(jù)及成績數(shù)據(jù)的獲取有多種途徑。譬如:要分析學(xué)生選擇題作答情況及所蘊(yùn)涵的知識(shí)掌握程度,就要獲取學(xué)生作答的選擇題部分原始數(shù)據(jù),而此類數(shù)據(jù)無法從閱卷系統(tǒng)學(xué)生最終成績數(shù)據(jù)中獲得,因此必須研究原始評卷的文本文檔,從中取得相關(guān)數(shù)據(jù)。
以全通數(shù)碼紙筆王網(wǎng)絡(luò)閱卷系統(tǒng)為例,分析學(xué)生選擇題作答數(shù)據(jù)的獲取流程,這里選擇“高一英語”學(xué)生原始評卷文件,如圖2所示。在圖2中,第一行描述的是試卷掃描后形成的相關(guān)屬性信息,以“批次號(hào)”為界,“批次號(hào)”后的相關(guān)屬性表達(dá)的是參考學(xué)生的考試信息:“kh”表示參考學(xué)生的“考試證號(hào)”,“xz1”代表學(xué)生作答數(shù)據(jù)中的“第一道選擇題”……以后類推。
分析學(xué)生選擇題作答情況,將這些信息導(dǎo)入數(shù)據(jù)分析系統(tǒng)很重要。有多種方式導(dǎo)入數(shù)據(jù),現(xiàn)以VFP為例,簡述導(dǎo)入過程。
圖2 高一英語評卷文本
1)建立動(dòng)態(tài)分析數(shù)據(jù)庫表。由于各學(xué)科客觀題結(jié)構(gòu)各不相同,因此無法采用固定的數(shù)據(jù)庫表來實(shí)現(xiàn),這時(shí)需要建立動(dòng)態(tài)的數(shù)據(jù)庫表,讀入第一行文本,分離每個(gè)字段,然后動(dòng)態(tài)建立數(shù)據(jù)庫表結(jié)構(gòu):
Create Table Tb (smxh c(6),smyh c(8),pch c(9),kh C(12),xz1 c(1),……)
2)動(dòng)態(tài)導(dǎo)入學(xué)生數(shù)據(jù)。觀察第二行文件開始的數(shù)據(jù)格式,可用追加命令導(dǎo)入數(shù)據(jù):
Append from高一評卷文本.txt delimited with“,”
規(guī)范嚴(yán)謹(jǐn)?shù)臄?shù)據(jù)過程處理是自定義數(shù)據(jù)分析的核心數(shù)據(jù)處理的質(zhì)量不僅關(guān)系到縣級教研部門對各校教學(xué)現(xiàn)狀、能力和水平的判斷與評估,也影響到教研部門的決策和因應(yīng)措施,所以數(shù)據(jù)處理過程必須科學(xué)、規(guī)范。仍以學(xué)生客觀題數(shù)據(jù)統(tǒng)計(jì)為例,來分析數(shù)據(jù)處理過程。
縣級教研部門及參考學(xué)校對學(xué)生客觀題的分析有這樣一些需求:客觀題得分均分及得分率分析;錯(cuò)誤選項(xiàng)分析排序;學(xué)生答題選項(xiàng)分布;選項(xiàng)率分析排序;原因追蹤;等等。
綜合分析需求、整理規(guī)范,可以得出較為科學(xué)的數(shù)據(jù)處理邏輯,如圖3所示。
學(xué)生答題選項(xiàng)分布:根據(jù)學(xué)生客觀題作答結(jié)果,對所有學(xué)生作答選項(xiàng)(含多選項(xiàng))進(jìn)行整理、分類,給出選項(xiàng)分布信息,操作時(shí)以學(xué)生作答所出現(xiàn)的所有選項(xiàng)為字段,建立選項(xiàng)分布數(shù)據(jù)庫表,數(shù)據(jù)庫表動(dòng)態(tài)生成(用Create Table……)。
選項(xiàng)率分析(含組合選項(xiàng)):對選項(xiàng)數(shù)據(jù)庫表中各選項(xiàng)及多選組合選項(xiàng)進(jìn)行統(tǒng)計(jì)分析,得出各選項(xiàng)率,繪制選項(xiàng)率圖表,提供給教研人員進(jìn)行綜合分析(可用分類匯總Total等實(shí)現(xiàn))。
錯(cuò)誤率分析排序:依據(jù)選項(xiàng)率分析結(jié)果,將錯(cuò)誤選項(xiàng)按選項(xiàng)率進(jìn)行排序,從中找出學(xué)生發(fā)生的錯(cuò)誤概率,同時(shí)結(jié)合命題時(shí)提供的關(guān)聯(lián)知識(shí)點(diǎn),找出學(xué)生薄弱環(huán)節(jié)。
圖3 學(xué)生客觀題處理邏輯過程
表1
圖4
小題均分及得分率分析:總體分析全體學(xué)生在各客觀題上得分情況及得分率,從整體上把握學(xué)生知識(shí)體系結(jié)構(gòu),為進(jìn)一步完善做好準(zhǔn)備。
難度與區(qū)分度分析:針對學(xué)生選項(xiàng)答題狀況及各題均分與得分率,分析各題的難度及區(qū)分度,便于教研部門及參考學(xué)校在實(shí)踐中調(diào)整。在分析時(shí)可用二分法及極端分組法進(jìn)行難度和區(qū)分度的計(jì)算。
直觀有效的分析結(jié)果展現(xiàn)是自定義數(shù)據(jù)分析的延伸數(shù)據(jù)處理完成后,必須將分析結(jié)果提供給教研人員及學(xué)校,為了能讓他們更為有效地、清晰地掌握學(xué)生學(xué)業(yè)情況,分析結(jié)果的呈現(xiàn)必須做到方便直觀、條理清晰、解析恰當(dāng)。
如形成學(xué)生客觀題分析報(bào)告時(shí),以表格圖示、圖表呈現(xiàn)、文字解析等方式提供給教研人員及相關(guān)學(xué)校。以小題均分及得分率分析為例,依據(jù)需求,不僅要提供各題均分,還要按區(qū)域范圍差異以區(qū)域范圍進(jìn)行統(tǒng)計(jì),見表1。
再如選項(xiàng)率分析,對每到選擇題,以縣域、學(xué)校、班級為單位進(jìn)行分析,此時(shí)采用圖表顯示,一目了然。如圖4所示,以學(xué)校為單位,對其中一條選擇題進(jìn)行簡單圖表呈現(xiàn)。
除此之外,還采用折線圖、雷達(dá)圖等對相應(yīng)需求進(jìn)行分析和呈現(xiàn)。
[1]曹雷.縣域教研部門網(wǎng)絡(luò)閱卷的應(yīng)用與實(shí)踐思考[J].中國教育技術(shù)裝備,2012(12).
[2]李雪梅.網(wǎng)上閱卷有效性評析[J].科技資訊,2010(13).
TP315
B
1671-489X(2016)03-0023-03
作者:張李泉,如東縣教育局招生辦公室,技師,研究方向?yàn)榫W(wǎng)絡(luò)閱卷及數(shù)據(jù)分析(226400)。