王 潔, 周寬久, 侯 剛(大連理工大學(xué) 軟件學(xué)院， 遼寧 大連 116620)

?

本科畢業(yè)論文文獻(xiàn)質(zhì)量評(píng)價(jià)方法和工具研究

王 潔, 周寬久, 侯 剛
(大連理工大學(xué) 軟件學(xué)院， 遼寧 大連 116620)

簡(jiǎn)述本科學(xué)位論文的重要性，闡述了參考文獻(xiàn)對(duì)于本科畢業(yè)論文的重要性，總結(jié)了目前畢業(yè)論文參考文獻(xiàn)撰寫和監(jiān)督管理存在的問題。從參考文獻(xiàn)規(guī)范性評(píng)價(jià)和參考文獻(xiàn)引用質(zhì)量評(píng)價(jià)兩個(gè)方面展開了研究和實(shí)踐，基于模板匹配方法檢測(cè)著錄規(guī)范性，采用灰色關(guān)聯(lián)分析方法檢測(cè)引用質(zhì)量，并編寫了軟件工具實(shí)現(xiàn)自動(dòng)化評(píng)價(jià)。通過實(shí)驗(yàn)詳細(xì)分析了樣本學(xué)位論文文獻(xiàn)規(guī)范性和引用質(zhì)量的量化結(jié)果，為加強(qiáng)本科學(xué)位論文質(zhì)量提供了依據(jù)、方法和工具。

本科畢業(yè)論文； 參考文獻(xiàn)質(zhì)量； 灰色關(guān)聯(lián)分析； 規(guī)范性； 引用質(zhì)量

0 引 言

隨著我國高等教育的迅速發(fā)展，每年的本科畢業(yè)生數(shù)目均在迅速增加。資料顯示，2013年全國畢業(yè)的本科生規(guī)模達(dá)699萬，每位畢業(yè)生在畢業(yè)前需要完成一篇畢業(yè)論文，這是所有高校共同面臨的問題。畢業(yè)設(shè)計(jì)(論文)是大學(xué)實(shí)踐教學(xué)環(huán)節(jié)的重要組成部分，也是大學(xué)階段最后一個(gè)教學(xué)環(huán)節(jié)，擔(dān)當(dāng)畢業(yè)生培養(yǎng)質(zhì)量出口把關(guān)的重任[1]。 本科畢業(yè)論文是培養(yǎng)本科生科研和動(dòng)手實(shí)踐能力的主要方式，也是培養(yǎng)本科生運(yùn)用所學(xué)知識(shí)解決實(shí)際問題和知識(shí)創(chuàng)新的主要途徑。它不僅擔(dān)負(fù)著向?qū)W生傳授知識(shí)，培養(yǎng)學(xué)生綜合運(yùn)用知識(shí)、文獻(xiàn)綜述等能力的任務(wù)，而且還影響學(xué)生的世界觀、工作作風(fēng)以及綜合素質(zhì)。本科畢業(yè)論文質(zhì)量直接反映了高等教育人才培養(yǎng)質(zhì)量。

任何一篇本科畢業(yè)論文的完成，從問題的提出、資料的收集整理和觀點(diǎn)的建立、論證的完成、結(jié)論的得出，需要不斷地查閱和參考大量的相關(guān)文獻(xiàn)，離不開對(duì)前人已有研究成果的借鑒和利用，這是人類文明得以自然延續(xù)的不竭動(dòng)力，也是學(xué)術(shù)研究的必然。對(duì)于一篇合格的畢業(yè)論文，參考文獻(xiàn)是不可或缺的模塊。參考文獻(xiàn)著錄的規(guī)范性和質(zhì)量反應(yīng)出學(xué)生工作態(tài)度以及畢業(yè)論文完成質(zhì)量，也從側(cè)面反映出指導(dǎo)教師對(duì)學(xué)生論文的指導(dǎo)態(tài)度和監(jiān)督管理質(zhì)量。參考文獻(xiàn)的規(guī)范性和引用質(zhì)量是一個(gè)直觀的標(biāo)尺，反映出了學(xué)生學(xué)習(xí)態(tài)度、教師指導(dǎo)責(zé)任心和高校教育管理水平，其質(zhì)量降低勢(shì)必影響學(xué)術(shù)風(fēng)氣，也違背人才培養(yǎng)的宗旨，因此必須要嚴(yán)格把關(guān)。

1 本科畢業(yè)論文參考文獻(xiàn)質(zhì)量現(xiàn)狀分析

畢業(yè)設(shè)計(jì)(論文)的教學(xué)質(zhì)量近年來受到了高校內(nèi)部和社會(huì)的高度關(guān)注，主要從畢業(yè)設(shè)計(jì)的質(zhì)量監(jiān)控體系方面展開了大量研究工作[2-4]，但較少有針對(duì)本科畢業(yè)論文參考文獻(xiàn)質(zhì)量評(píng)價(jià)的研究。近年來國內(nèi)高校本科畢業(yè)論文總體質(zhì)量滑坡已成為不爭(zhēng)的事實(shí)，且有可能呈每況愈下的發(fā)展態(tài)勢(shì)，以致引發(fā)了是否還需要保留畢業(yè)論文的話題[5]。引起這一問題的原因是多方面的，涉及到學(xué)生、教師和環(huán)境這些主客觀、內(nèi)外因錯(cuò)綜復(fù)雜的作用[6]。參考文獻(xiàn)的不規(guī)范和質(zhì)量低下恰恰反映出這種情況。目前，本科畢業(yè)論文參考文獻(xiàn)撰寫和監(jiān)督管理存在的問題主要有：

(1) 未認(rèn)真閱讀文獻(xiàn)，隨意引用。部分學(xué)生沒有認(rèn)真閱讀參考文獻(xiàn)，沒有正確的去借鑒前人的工作，甚至為了拼湊參考文獻(xiàn)的數(shù)量和類型，在論文完成后“補(bǔ)寫”文獻(xiàn)的情況。更有甚者羅列了大量文獻(xiàn)，但正文中沒有標(biāo)注引用(空文獻(xiàn))，或者胡亂標(biāo)注。

(2) “二手文獻(xiàn)”引用不規(guī)范。部分學(xué)生雖然閱讀了一些文獻(xiàn)，但對(duì)源頭文獻(xiàn)沒有認(rèn)真閱讀，直接把幾篇文章的參考文獻(xiàn)直接拿來使用，成為“二手文獻(xiàn)”，格式不規(guī)范，甚至拼寫、卷期號(hào)、頁碼錯(cuò)誤頻出。

(3) 文獻(xiàn)質(zhì)量低下。部分學(xué)生不愿意閱讀新近刊出的有一定難度高水平的期刊和會(huì)議文獻(xiàn)，大量引用陳舊文獻(xiàn)、不規(guī)范的網(wǎng)絡(luò)文獻(xiàn)、低質(zhì)量期刊等。

(4) 指導(dǎo)教師管理監(jiān)督不嚴(yán)。由于本科生擴(kuò)招導(dǎo)致部分學(xué)校生師比較低，指導(dǎo)教師工作繁重，在指導(dǎo)畢業(yè)設(shè)計(jì)時(shí)，更關(guān)注畢業(yè)設(shè)計(jì)實(shí)踐工作完成、論文整體寫作質(zhì)量，參考文獻(xiàn)問題沒有引起足夠重視。

(5) 缺少規(guī)范的評(píng)價(jià)方法和工具。很多高校每年有幾千篇甚至上萬篇的本科畢業(yè)論文，通常對(duì)畢業(yè)設(shè)計(jì)答辯后的論文提交采用抽查和優(yōu)秀論文重點(diǎn)檢查的方式，也造成對(duì)整體論文參考文獻(xiàn)質(zhì)量監(jiān)督把控不嚴(yán)格，目前也缺少成熟的工具對(duì)所有論文進(jìn)行篩查。

提高本科生畢業(yè)論文質(zhì)量需要建立一個(gè)規(guī)范的質(zhì)量監(jiān)督和評(píng)價(jià)體系并且在實(shí)踐過程中得到有效地貫徹實(shí)施。對(duì)于參考文獻(xiàn)引用的規(guī)范性和質(zhì)量，除了有明確的規(guī)范標(biāo)準(zhǔn)，要在實(shí)踐教學(xué)中提出有效地評(píng)價(jià)方法和自動(dòng)化檢測(cè)工具。

質(zhì)量評(píng)價(jià)方法

國內(nèi)外針對(duì)科技論文參考文獻(xiàn)元數(shù)據(jù)自動(dòng)提取展開了研究[7-9]，但本科畢業(yè)論文的參考文獻(xiàn)錄入規(guī)范性不高，很難從中正確提取出元數(shù)據(jù)。文獻(xiàn)[10]對(duì)全國優(yōu)秀博士學(xué)位論文參考文獻(xiàn)使用情況進(jìn)行統(tǒng)計(jì)與分析，有助于了解論文參考文獻(xiàn)使用的整體情況，但是無法對(duì)參考文獻(xiàn)引用質(zhì)量和規(guī)范性等指標(biāo)給出定量評(píng)價(jià)。本文從參考文獻(xiàn)規(guī)范性評(píng)價(jià)和參考文獻(xiàn)引用質(zhì)量評(píng)價(jià)兩個(gè)方面展開研究和實(shí)踐，并編寫了軟件工具實(shí)現(xiàn)自動(dòng)化評(píng)價(jià)。

2.1 參考文獻(xiàn)規(guī)范性評(píng)價(jià)

對(duì)本科畢業(yè)論文參考文獻(xiàn)定量評(píng)價(jià)引用規(guī)范性，首先需要從論文中提取出參考文獻(xiàn)字符串，然后再確定不同類型參考文獻(xiàn)包含的元數(shù)據(jù)。

本科畢業(yè)論文參考文獻(xiàn)是按照國家標(biāo)準(zhǔn) GB/T 7714-2005[11]進(jìn)行著錄。對(duì)于不同類型的參考文獻(xiàn)，都有各自對(duì)應(yīng)的元數(shù)據(jù)。參考文獻(xiàn)的元數(shù)據(jù)主要包括4個(gè)部分：作者、標(biāo)題、類型和出版信息。而在類型和出版信息中，還包含更多的子元數(shù)據(jù)，不同類型的參考文獻(xiàn)，其子元數(shù)據(jù)的類型也不同。在文獻(xiàn)元數(shù)據(jù)提取和規(guī)范性評(píng)價(jià)之前，需要為每種類型的參考文獻(xiàn)的所有元數(shù)據(jù)設(shè)定一個(gè)權(quán)值。

采用包含錯(cuò)誤修復(fù)的模式匹配算法，在提取參考文獻(xiàn)元數(shù)據(jù)之前，先對(duì)參考文獻(xiàn)中存在的錯(cuò)誤進(jìn)行修復(fù)。對(duì)于標(biāo)點(diǎn)符合格式不正確、文獻(xiàn)結(jié)尾點(diǎn)號(hào)丟失、多余空格等錯(cuò)誤，為每條參考文獻(xiàn)條目分配一個(gè)基礎(chǔ)規(guī)范性得分α。在模板庫中，僅有一個(gè)完全規(guī)范模板樣式。對(duì)于參考文獻(xiàn)字符串，首先讀取文獻(xiàn)類型，然后根據(jù)文獻(xiàn)類型使用給定的模板樣式庫進(jìn)行解析，獲得該條參考文獻(xiàn)的規(guī)范性得分Fref，計(jì)算公式如下：

(1)

每篇本科畢業(yè)論文文獻(xiàn)引用的規(guī)范性可以用所有參考文獻(xiàn)規(guī)范性得分的平均值表示。根據(jù)參考文獻(xiàn)類型選擇獲得最大相似度值的模板樣式進(jìn)行解析，從而得到參考文獻(xiàn)規(guī)范性的量化評(píng)價(jià)結(jié)果。同時(shí)將文獻(xiàn)元數(shù)據(jù)提取出來，為參考文獻(xiàn)引用質(zhì)量評(píng)價(jià)做好準(zhǔn)備。

2.2 參考文獻(xiàn)引用質(zhì)量評(píng)價(jià)

為了對(duì)文獻(xiàn)引用質(zhì)量進(jìn)行合理評(píng)價(jià)，需要對(duì)文獻(xiàn)使用情況進(jìn)行統(tǒng)計(jì)，并從中選擇部分重要的統(tǒng)計(jì)結(jié)果作為評(píng)價(jià)指標(biāo)。采用基于灰色關(guān)聯(lián)分析[12-14]的文獻(xiàn)質(zhì)量評(píng)價(jià)方法，對(duì)本科畢業(yè)論文參考文獻(xiàn)的引用質(zhì)量進(jìn)行基于層次分析發(fā)[15]的綜合評(píng)價(jià)。

設(shè)在系統(tǒng)中有n篇畢業(yè)論文，每篇畢業(yè)論文有m個(gè)評(píng)價(jià)指標(biāo)，其中每個(gè)評(píng)價(jià)對(duì)象的每個(gè)評(píng)價(jià)指標(biāo)屬性值構(gòu)成如下屬性矩陣：

(2)

這里采用文獻(xiàn)引用質(zhì)量評(píng)價(jià)的5個(gè)指標(biāo)：文獻(xiàn)量L、期刊量J、英文期刊量E、文獻(xiàn)平均年份Y和空文獻(xiàn)量O。最終可得每篇論文文獻(xiàn)的綜合評(píng)價(jià)值為：

(3)

3 實(shí)驗(yàn)分析結(jié)果

基于上述方法編寫了工具軟件，隨機(jī)選取本單位以往3屆120篇本科畢業(yè)設(shè)計(jì)論文作為實(shí)驗(yàn)樣本數(shù)據(jù)，對(duì)其參考文獻(xiàn)統(tǒng)計(jì)與分析。

3.1 規(guī)范性評(píng)價(jià)實(shí)驗(yàn)分析

參考文獻(xiàn)規(guī)范性得分分布如圖1所示。本科畢業(yè)論文文獻(xiàn)的規(guī)范性兩極分化嚴(yán)重。80～89分區(qū)間的人數(shù)最多，占總?cè)藬?shù)的31%，90～100分區(qū)間的人數(shù)占總?cè)藬?shù)的18%。80分以上的人數(shù)占到總?cè)藬?shù)的一半，說明一半左右畢業(yè)生的畢業(yè)論文參考文獻(xiàn)引用還是比較規(guī)范的。但是80～89分內(nèi)的人數(shù)較多，體現(xiàn)了能著錄出高規(guī)范性的參考文獻(xiàn)的學(xué)生還是偏少。對(duì)于60～79分區(qū)間的畢業(yè)論文，占總?cè)藬?shù)41%，這部分學(xué)生規(guī)范性得分較低的主要原因是對(duì)文獻(xiàn)著錄格式不了解，從而造成文獻(xiàn)元數(shù)據(jù)缺失和文獻(xiàn)著錄格式錯(cuò)誤。

圖1 參考文獻(xiàn)規(guī)范性得分分布

3.2 引文質(zhì)量評(píng)價(jià)實(shí)驗(yàn)分析

對(duì)樣本論文的參考文獻(xiàn)引用質(zhì)量進(jìn)行評(píng)價(jià)，統(tǒng)計(jì)信息結(jié)果如圖2所示，可以看出：

(1) 平均每篇引用的參考文獻(xiàn)數(shù)目為15.95篇，說明學(xué)生在完成畢業(yè)設(shè)計(jì)前能夠查閱一定數(shù)量的文獻(xiàn)資料。

圖2 參考文獻(xiàn)部分統(tǒng)計(jì)結(jié)果

(2) 主要的參考文獻(xiàn)類型是期刊論文和書籍資料，平均每篇論文引用的期刊文獻(xiàn)數(shù)目為6.69，學(xué)位論文和會(huì)議論文也有一定的比例。

(3) 中文文獻(xiàn)占了文獻(xiàn)總數(shù)的58%，英文文獻(xiàn)為42%。統(tǒng)計(jì)結(jié)果顯示，每篇論文中英文文獻(xiàn)的平均數(shù)目為6.4，反映出本單位本科畢業(yè)生有較好的英文文獻(xiàn)閱讀能力。

(4) 引用文獻(xiàn)的時(shí)間主要在2000年以后，同時(shí)48%的學(xué)生能夠引用近5年內(nèi)的論文，這體現(xiàn)出本單位本科畢業(yè)設(shè)計(jì)引用文獻(xiàn)還是比較新。

在上述工作基礎(chǔ)上，將各項(xiàng)數(shù)據(jù)轉(zhuǎn)化成質(zhì)量評(píng)價(jià)指標(biāo)，基于灰色關(guān)聯(lián)分析的文獻(xiàn)質(zhì)量評(píng)價(jià)算法，對(duì)樣本論文參考文獻(xiàn)質(zhì)量進(jìn)行評(píng)價(jià)，得出樣本數(shù)據(jù)中畢業(yè)論文文獻(xiàn)質(zhì)量的合格率如圖3(a)所示；將空文獻(xiàn)量指標(biāo)剔除，重新對(duì)樣本論文文獻(xiàn)的質(zhì)量進(jìn)行打分，得到新的合格率如圖3(b)所示。從中可以看出，空文獻(xiàn)是影響本科畢業(yè)論文文獻(xiàn)質(zhì)量重要因素。

圖3 文獻(xiàn)質(zhì)量合格率

3.3 指導(dǎo)教師監(jiān)督管理評(píng)價(jià)實(shí)驗(yàn)分析

樣本數(shù)據(jù)來自5個(gè)專業(yè)方向，20多名指導(dǎo)教師。綜合規(guī)范性和引用質(zhì)量的量化分析結(jié)果可以對(duì)專業(yè)方向畢業(yè)論文質(zhì)量、指導(dǎo)教師監(jiān)督質(zhì)量進(jìn)行量化分析，如表1所示。分?jǐn)?shù)的高低可以從側(cè)面反映出各個(gè)專業(yè)方向和指導(dǎo)教師對(duì)于畢業(yè)論文質(zhì)量管理的工作效果。若本文的研究成果得以推廣，可為高校加強(qiáng)本科生畢業(yè)論文質(zhì)量提供量化分析的依據(jù)和自動(dòng)化檢測(cè)工具。

表1 專業(yè)方向和指導(dǎo)教師監(jiān)督管理評(píng)價(jià)打分表

4 結(jié) 語

本科畢業(yè)論文參考文獻(xiàn)著錄的規(guī)范性和質(zhì)量反應(yīng)出學(xué)生工作態(tài)度以及畢業(yè)論文完成質(zhì)量，也從側(cè)面反映出指導(dǎo)教師對(duì)學(xué)生論文的指導(dǎo)態(tài)度和監(jiān)督管理質(zhì)量。通過參考文獻(xiàn)規(guī)范性評(píng)價(jià)和參考文獻(xiàn)引用質(zhì)量評(píng)價(jià)兩個(gè)方面的研究和實(shí)踐，實(shí)現(xiàn)自動(dòng)化的量化分析與評(píng)價(jià)，為加強(qiáng)本科學(xué)位論文質(zhì)量提供了依據(jù)、方法和工具。本文在畢業(yè)論文管理參考文獻(xiàn)的評(píng)價(jià)進(jìn)行了初步探索和嘗試，對(duì)于畢業(yè)論文參考文獻(xiàn)評(píng)價(jià)可作為評(píng)價(jià)本科畢業(yè)論文質(zhì)量的重要參考依據(jù)，為以后的畢業(yè)論文工作提出合理建議，同時(shí)對(duì)于論文整體質(zhì)量評(píng)價(jià)的方法和工具研究還存在很大的空間。

參考文獻(xiàn)(References)：

[1] 李國華. 對(duì)本科畢業(yè)設(shè)計(jì)(論文)工作的再思考[J]. 實(shí)驗(yàn)技術(shù)與管理, 2013,30(5): 120-122.

[2] 張麗麗. 提高畢業(yè)設(shè)計(jì)(論文)質(zhì)量的探索與研究[J]. 中國電子教育, 2013(1):20-24.

[3] 程航東, 靳永銘, 于 泓, 等. 嚴(yán)格管理努力探索不斷提高畢業(yè)設(shè)計(jì)(論文)質(zhì)量[J]. 中國大學(xué)教學(xué),2007(9): 72-74

[4] 齊再前, 白守禮, 郭廣生. 不斷創(chuàng)新教學(xué)管理 切實(shí)提高畢業(yè)設(shè)計(jì)(論文)質(zhì)量[J]. 中國大學(xué)教學(xué), 2005(8): 33-34.

[5] 楊卓娟, 楊曉東. 本科畢業(yè)設(shè)計(jì)(論文)存廢之辨析[J]．黑龍江高教研究, 2011(9):160-162.

[6] 張芳萍, 任志峰, 趙春江. 關(guān)于提高本科生畢業(yè)設(shè)計(jì)(論文)質(zhì)量的研究[J]. 大學(xué)教育, 2013(1): 118-119.

[7] 郭志鑫, 金 海, 陳漢華. SemreX中基于語義的文檔參考文獻(xiàn)元數(shù)據(jù)信息提取[J].計(jì)算機(jī)研究與發(fā)展, 2006, 43(8):1368-1374.

[8] Day M Y,Tsai R T H,Sung C L,etal.Reference metadata extraction using a hierarchical knowledge representation framework[J].Decision Support Systems, 2007, 43(1): 152-167.

[9] 張 玲, 黃鐵軍, 高 文. 基于隱馬爾可夫模型的引文信息提取[J].計(jì)算機(jī)工程, 2003, 29(20):33-34.

[10] 俞以勤, 余 農(nóng), 龔 裕. 對(duì)1999～ 2004年全國優(yōu)秀博士學(xué)位論文文后參考文獻(xiàn)的統(tǒng)計(jì)與分析[J]. 現(xiàn)代情報(bào), 2007, 27(6):212-216.

[11] GB/T 7714-2005, 文后參考文獻(xiàn)著錄規(guī)則[S]. 2005.

[12] 穆 瑞, 張家泰. 基于灰色關(guān)聯(lián)分析的層次綜合評(píng)價(jià)[J].系統(tǒng)工程理論與實(shí)踐,2008,10(10):125-130.

[13] 張 莎. 灰色關(guān)聯(lián)分析新算法研究及其意義[D].長春:東北師范大學(xué), 2012.

[14] 王雙英, 王群偉, 曹 澤. 多指標(biāo)面板數(shù)據(jù)聚類方法及應(yīng)用[J]. 數(shù)理統(tǒng)計(jì)與管理, 2014,33(1): 42-49.

[15] 鄧 雪, 李家銘, 曾浩健, 等. 層次分析法權(quán)重計(jì)算方法分析及其應(yīng)用研究[J]. 數(shù)學(xué)的實(shí)踐與認(rèn)識(shí), 2012, 42(7): 93-100.

Research on Method and Tool in Quality Evaluation of Undergraduate Thesis References

WANGJie,ZHOUKuan-jiu,HOUGang
(School of Software Technology, Dalian University of Technology, Dalian 116620, China)

The significance of undergraduate thesis is pointed out. The importance of references of the undergraduate thesis is expounded, and the problems of writing and management of references are summarized. Evaluation on both normalization and cited quality of references are studied and practiced. A software tool is designed for automated evaluation which can detect record normalization based on template matching, and check the cited quality of references by gray correlation analysis. Normalization and cited quality of references are quantitatively analyzed through experiments. The tool can provide basis, methods and tools for enhancing quality of undergraduate theses.

undergraduate theses; references quality; grey relational analysis; normalization; cited quality

2014-03-10

國家自然科學(xué)基金項(xiàng)目(61272174); 大連理工大學(xué)教育教學(xué)改革基金重點(diǎn)項(xiàng)目(ZD201304)

王 潔(1979-)，男，遼寧大連人，博士，講師，主要研究方向?yàn)椋河?jì)算機(jī)系統(tǒng)結(jié)構(gòu)、并行計(jì)算、FPGA應(yīng)用設(shè)計(jì)等研究。

Tel.：0411-87571609; E-mail:wangjie1003@163.com

G 642.477

A

1006-7167(2015)02-0160-03