馬瑞

摘要：科研項目評估即以科研項目的目標要求為核心，就項目的經費、方法、進度、成果等要求評定其優(yōu)劣的工作，是通過各類指標組合而成的體系評估研究的過程。本文通過分析1992-2020年國內科研項目評估相關研究論文，得知當前我國科研項目評估研究呈以下態(tài)勢：一是國內科研項目評估領域發(fā)文量盡管存在一定波動，但整體發(fā)文量保持平穩(wěn)增長趨勢;二是該領域研究熱點包括國家基金項目、科研項目績效評估、杰出青年科學基金、面上項目、項目評審、同行評議六個方面;三是國內學者間合作交流存在一定欠缺。針對以上情況，我國科研項目評估科研工作應在整體上加強合作，在科研評價過程中加速指標體系多元化進程，利用交叉融合方法作為科研項目評估工作的補充，最后構建評估內容回饋制度，完善整體評估流程。

關鍵詞：科研項目 項目評估 研究態(tài)勢分析 文獻計量學

一、引言

科研項目評估是指按照一定要求，通過合理有效的方式對項目的不同層面進行績效評價的過程。如今科研項目立項申報難，項目實施過程中缺乏有效且規(guī)范的評價方法與手段，存在很多評估方法濫用的現(xiàn)象，項目結項后缺乏跟蹤評估方法，難以獲取完整的項目評估內容。對科研項目的評估研究有助于在項目立項前中后期對項目實施情況進行科學監(jiān)督，幫助科研管理者及時了解項目進展，并在必要時進行干預以保證科研項目順利完成，同時保障各類評價手段在科研項目評估中的科學有效應用?？茖W有效的開展評估活動是科研委員會決策科學化、管理評估規(guī)范化的重要保障?？蒲许椖吭u估按前、中、后期可分為立項、階段、績效評估[1]，因此對這3個階段所包含內容的評價均包含于科研項目評估之中。

從國際的角度，美國是科研評估活動規(guī)范化最早的國家之一。1914年，美國成立國會研究部CRS，于1975年頒布《項目評價標準》。美國的項目評估機構主要包括國會、非官方機構和大學本身。美國高?？蒲性u價主要采用專家評審、計量學等方法。主要方法是以定量指標為基礎的，研究各種科研成果的對應數(shù)據(jù)，分析定量數(shù)據(jù)對科研的影響[2]。隨著科研活動呈現(xiàn)學科多維滲透、知識體系內涵與外延的架構日趨集成化，高校評價體系的建立和完善首當其沖[3]。

我國科研項目評估工作起步晚，隨著科學技術的持續(xù)發(fā)展，科技創(chuàng)新逐漸成為經濟社會發(fā)展的主要動力[4]。科研項目在社會各界的高度重視下，投入的資金不斷增長[5]?？蒲畜w制機制改革特別是90年代至今，科研項目評價已經被逐步關注。第四次工業(yè)革命到來之際，中國提出了“中國制造2025”的理念，這對中國的科研工作提出了更高的要求?？蒲性u估在科學研究活動與人才教育培養(yǎng)中起著關鍵作用。我國采用的評價方法同國外相似，定性分析基于同行評審，定量分析基于計量學方法，在指標體系、規(guī)范性、科學性等方面與國外還具有一定差距，這與我國科研評估工作發(fā)展尚處于完善階段有關[6]。

文獻計量學是指通過數(shù)學、統(tǒng)計學等方法，從定量的角度分析研究對象的方法。以學術期刊論文作為研究對象可對論文所屬領域研究現(xiàn)狀分析及發(fā)展態(tài)勢研究提供真實有效的參考。由此，本文基于文獻計量學視角，對國內科研項目評估研究現(xiàn)狀加以分析，明確當前研究進展及存在的問題，為我國科研項目評估、審核提出建設性意見。

二、研究對象及方法

（一）研究對象

本文通過中國知網數(shù)據(jù)庫檢索相關信息，檢索策略為：期刊、專業(yè)檢索、來源類別勾選SCI來源期刊、EI來源期刊、核心期刊、CSSCI、CSCD;檢索表達式：SU=（‘科研項目+‘國家社會科學基金+‘國家自然科學基金）*（‘評估+‘評審+‘審核+‘評價）;發(fā)表時間不作限制。對相關文獻加以篩選，排除與檢索內容不相關或題目多次出現(xiàn)的文獻，由此共檢索到文獻1426篇，檢索時間為2020年2月10日。

（二）研究方法

本文主要采用定量分析方法，首先利用中國知網內置計量可視化分析系統(tǒng)對國內科研項目評估相關期刊論文發(fā)文趨勢加以分析說明，在此基礎上，通過切分知網Refworks格式文本文檔，獲取所選文獻發(fā)表期刊、機構，分析相關論文發(fā)表期刊情況及機構相關文獻產出能力。最后將文本文檔導入Endnote文獻管理軟件整理后，利用Vosviewer軟件繪制關鍵詞共現(xiàn)圖譜、作者共現(xiàn)圖譜，利用Ucinet繪制單位共現(xiàn)圖譜，分析當前我國科研項目評估研究熱點及合作情況，從面到點了解國內科研項目評估研究進展，結合當前研究現(xiàn)狀以提出相關建議。

三、 結果分析

（一）整體發(fā)展趨勢分析

1.國內發(fā)文趨勢。由檢索結果可知，我國科研項目評估于1992-2020年間共發(fā)表了1426篇論文，其年度發(fā)文趨勢如圖1所示。早在20世紀90年代，中國科學院南京土壤研究所的譚清美教授便將科研項目評估分為先、后兩部分，并給出相關評估指標及評價模型作為成果鑒定、驗收依據(jù)，開創(chuàng)科研項目評估研究先例[7]。但由于科研水平、經費限制，我國科研項目發(fā)展在1992-2001年期間速度緩慢，隨著2001年中國加入世界貿易組織，經濟迅速發(fā)展，與世界逐步接軌，科研條件也隨之得到迅速發(fā)展，2002-2015年期間，國內科研項目評估發(fā)文量盡管存在一定波動，但整體上呈現(xiàn)逐年上升趨勢，并于2015年達到發(fā)文頂峰127篇，相比于2002年發(fā)文量13篇，增長近10倍。一方面表現(xiàn)出國內學者對科研項目評估關注度顯著提升，另一方面說明我國科研項目發(fā)展態(tài)勢良好，但在發(fā)展過程中項目評估方法尚需完善，由此引發(fā)學者對科研項目評估的討論。2016年發(fā)文量盡管存在一定波動，伴隨著十三五規(guī)劃的實施，中國創(chuàng)新驅動戰(zhàn)略重點繼續(xù)推動我國科研項目及科研項目評估領域的發(fā)展。在2017-2019年發(fā)文量呈現(xiàn)遞減趨勢，但總體保持平均水平，發(fā)文量趨于穩(wěn)定，2020年伊始，受到當前國內新型冠狀病毒攻堅戰(zhàn)影響，截止論文數(shù)據(jù)檢索日期國內發(fā)文量相對往年較少。

2.國內期刊發(fā)文現(xiàn)狀。經知網數(shù)據(jù)切分，利用Excel統(tǒng)計得出，國內科研項目評估相關的1426篇文獻發(fā)表于國內426種期刊，由此可見科研項目評估學科分布較為廣泛，是各個學科領域分析研究的熱點。發(fā)文量大于等于10篇的期刊共14種，其中中國科學基金發(fā)文256篇，占比17.95%，隸屬于第一發(fā)文階梯。中國科學基金是由中華人民共和國國家自然科學基金委員會主管、主辦的學術期刊，自然科學基金是我國科研項目的重要組成部分，期刊內發(fā)文多與科研基金項目相關?？茖W管理研究、地球科學進展、中國高?？萍肌⒖蒲泄芾怼⒖萍歼M步與對策、中國科技論壇隸屬于第二發(fā)文階梯，發(fā)文量均高于2%。第二發(fā)文階梯期刊與科研、科技發(fā)展相關性較高，為科研項目發(fā)展提供重要支持作用。剩余7種期刊隸屬于第三發(fā)文階梯，其中涉及會計、財經、高等教育等研究領域期刊，由此可見科研項目評估在不同領域均有所關注。其他期刊屬于第四發(fā)文階梯，由于檢索條件限制期刊均為核心及以上期刊，因此對于相關學科領域科研項目評估的文獻多發(fā)表于各自所屬學科高等級期刊中也在意料之中。

3.國內機構發(fā)文現(xiàn)狀。經知網數(shù)據(jù)統(tǒng)計，1426篇文獻共計作者1635名，將作者對應的1635個單位（某基金委員會學部、某大學某學院）作為國內科研項目評估機構發(fā)文現(xiàn)狀的分析依據(jù)。其中發(fā)文量大于5篇的單位共27個，其中國家自然科學基金委員會分部共13個、大學單位8個、研究所6所。國家自然科學基金委員會是我國科研項目評估相關文獻發(fā)表的主力軍，國家自然科學基金委員會成立于1986年，以創(chuàng)新環(huán)境建設為重點，以機制和體制創(chuàng)新為保障，不斷提高國家自主創(chuàng)新能力，為我國科研項目評估的完善作出巨大貢獻。經統(tǒng)計，發(fā)文量大于5篇的大學包括西安交通大學（32篇）、合肥工業(yè)大學（12篇）、中國科學院大學（13篇）、北京理工大學（8篇）、華南理工大學（5篇）、南京大學（5篇），剩余7個機構均為研究所或政策制定機構，由此可見在科研項目評估工作中，高等院校與研究所均對該領域有所研究，其中西安交通大學研究相對深入，學科涉及公共政策、管理等，代表人物為馬亮教授，于2009-2012年期間以第一作者、通訊作者等身份發(fā)表10篇相關論文，主要針對科研活動績效評估提出方法及建議[8]。近年來，隨著國家對于科研項目資助力度的顯著提升，國家自科、社科基金項目、杰青、優(yōu)青資助項目申請成為國內學者的主要科研目標，科研項目評估工作也伴隨著這股浪潮不斷發(fā)展與完善，引發(fā)國內眾多科研機構熱議。

（二）研究熱點分析

經EndNote軟件整理，將知網數(shù)據(jù)以RIS文本文檔格式導出，通過VOSviewer繪制關鍵詞共現(xiàn)圖譜用于分析當前我國科研項目評估工作研究熱點。采用全計數(shù)方式選取文獻中高頻關鍵詞（出現(xiàn)頻次大于10次），共獲取關鍵詞91個，繪制結果如圖2所示。

由圖2可得，我國科研項目評估當前研究方向主要包括以下六個部分：一是國家科學基金方面的研究，包括國家自然科學基金、國家社會科學基金等;二是科研項目績效評估方面的研究，涵蓋科研評估及科研經費、管理模式等;三是國家杰出青年科學基金方面的研究，科技強國背景之下，國家之間國力的競爭實際上也是人才的競爭，因此杰青作為我國科研發(fā)展的主力軍也成為我國科研項目評估研究熱點之一;四是面上項目方面的研究，面上項目也叫一般項目，是國家自然科學基金研究項目系列中的主要部分，作為自科基金的分支，面上項目同樣廣受學者關注，主要涉及資助強度、資助經費等方面;五是項目評審方面，主要包括基金評審、資助成果等內容;六是同行評議方面的研究，同行評議是當前最主流的科研項目評估手段，在定性研究與定量研究相結合的過程中同行評議方法不可或缺，因此國內學者對于同行評議中的會議評審、專家?guī)斓确矫嬗懻撦^多。

（三）作者合作網絡分析

通過VOSviewer繪制作者共現(xiàn)圖譜，采用全計數(shù)方式選取發(fā)文量大于3篇的作者，共獲取作者158名，作者合作網絡繪制結果如圖3所示，作者發(fā)文年限圖如圖4。

由圖3可知，在我國科研項目評估方面的研究中，學者在本領域內相互之間缺乏緊密合作，科研活動多局限于某一圈子內。如以黎明教授、王國彪教授為代表的學者，同其他學者之間的聯(lián)系存在一定欠缺，相同的情況也出現(xiàn)在朱衛(wèi)東教授、白坤朝教授所處的學術團體之中。由圖4可知，我國科研項目評估領域，學者學術傳承效果明顯，并且在學術傳承過程中，呈現(xiàn)一定聚合趨勢，學者之間聯(lián)系逐漸緊密。在發(fā)文量方面年輕學者發(fā)文量尚且少于資深學者，科研項目評估領域當前正處于過渡階段。

四、結論及建議

本文通過中國知網獲取相關文獻資料，通過文獻計量學視角對我國科研項目評估從不同角度加以分析，總結得出以下發(fā)展態(tài)勢：國內科研項目評估領域發(fā)文量盡管存在一定波動，但整體發(fā)文量保持平穩(wěn)增長趨勢。國內科研項目評估領域期刊發(fā)文中，中國科學基金（17.95%）、科研管理研究（6.80%）相對發(fā)文量較大，科研機構中，國家自然科學基金委員會各分部是科研項目評估研究的主力軍;國內科研項目評估領域研究熱點包括國家基金項目、科研項目績效評估、杰出青年科學基金、面上項目、項目評審、同行評議六個方面;國內學者間合作交流存在一定欠缺。

結合作者自身理解及國內科研項目評估研究熱點分析，提出以下建議：

（一）加強合作交流，促進科研項目評估發(fā)展

馬健表示，當前科研評估過于強調論著數(shù)量，科研期限缺乏彈性[9]?？蒲许椖繎且粋€整體，從項目申請、立項到發(fā)表階段性成果、完成項目目標、結項，每個環(huán)節(jié)都具有一定相關性，每一個階段性成果的發(fā)表，專利的獲取都會對項目產生重要影響，成為項目績效評估的主要依據(jù)?？蒲许椖吭u估與之對應，不能僅僅注重于立項評估或結項評估，對項目評估應實施全過程評估，對科研項目過程也應提高重視，以保障科研項目監(jiān)督機制有效實施?？蒲腥藛T在研究過程中，應主動尋求合作，同其他科研院校、研究院所研究人員取得聯(lián)系，在科研合作過程中完善科研項目評估體系建設。

（二）加速科研評價指標體系多元化進程

科研項目履約率高，“高成功率”的背后科研項目績效評估的有效性不禁受到質疑，資金是否有效利用，項目成果是否達標都成為當前項目評估的重點。目前科研項目存在強調成果數(shù)量、績效掛鉤誤導科研方向等方面問題，科研項目指標體系應向多元化方向發(fā)展以減少或杜絕相關問題的產生。指標體系的構建主要分為指標的篩選與指標權重的賦值兩方面，在指標的篩選中，投入、產出、效益是影響科研項目績效評估的主要因素，對于不同的項目評估階段應側重于不同的指標類型，并始終保持指標完備性、含義單一性及實用性。在事前（立項評估）過程中，應更加注重申請人是否能夠勝任該研究項目、項目經費預算及項目組成員能力、項目可行性及預計成果產出情況;在事中（階段評估）過程中，應保證指標目的性、簡潔性，側重于對項目實施情況即階段性研究成果、經費使用情況、科研項目對當前環(huán)境條件的適應性;在事后（績效評估）過程中，則應側重于計劃實際執(zhí)行情況、項目產出情況包括發(fā)表論文，專利，人才培養(yǎng)，學術會議及課題負責人員后續(xù)課題研究等、課題產出預期等方面。對不同的研究時段采取不同的評價指標體系，一方面可以保障科研項目不同研究時間段評估的合理性，另一方面通過多次評估，指標多元化，使評價體系更加全面具體，對學術不端行為的產生也有一定遏制作用。

（三）評估方法交叉融合使用

以往學者多提倡采用定性與定量方法相結合，以減少定性方法所帶來的主觀局限性，同時可避免全部采用定量方法帶來的缺乏對項目研究實際狀況的考慮。評價方法交叉融合，旨在引入多種評價方法，以減少項目評價誤差及缺陷。當前科研項目定量評估方法主要為文獻計量法，定性評估方法主要為同行評議法，在對科研項目各指標定量評估的基礎上，采取定性評估的方式實現(xiàn)科研項目各階段評估?？梢栽诙ㄐ匝芯窟^程中引入新的研究方法，一方面可以作為同行評議方法的補充，另一方面可以對同行評議所產生的結果進行驗證分析，當前定性研究方法主要有模糊綜合評價法、綜合評價模型、灰色關聯(lián)分析方法、案例分析法等，可以適量引入新方法以實現(xiàn)對科研項目評估體系的補充完善。

（四）構建評估內容回饋制度

對科研項目的評估是否科學合理，科研項目相關人員對評估建議是否落實是科研項目評估有效性研究的重要一環(huán)。項目評估是雙向的過程，項目評估人員對科研項目完成評估后，應對科研項目保持關注，注重科研項目組成員對評估結果的反饋意見，可總結分析相關建議作為日后評估體系完善的參考。建立評估結果反饋機制，使各科研項目在完成項目評估后定期對項目修正情況進行反饋，同時將自身對評估結果的建議、信服程度予以傳達，達到評價者與被評價者相互促進，共同完善修正的效果，有效提高科研項目質量及科研項目評估科學性、有效性。

五、結語

本文在研究過程中僅通過文獻計量學角度對國內科研項目評估現(xiàn)狀做出簡要分析，尚且存在一些漏洞，如在知網檢索過程中，科研項目實際涵蓋內容廣泛，檢索詞內容不夠完善?？蒲许椖抠Y助是激發(fā)我國科研工作者科研熱情、提升科研效率的重要舉措，科學有效的開展評估活動則是科研委員會決策科學化、管理評估規(guī)范化的重要保障，合理有效的科研項目評估將為國內廣大科研工作者提供更多公平的競爭機會。

參考文獻：

[1]項目中評價初探[J].管理工程學報，白思俊，王保強，2000（2）：65-66.

[2]美國高?？蒲性u價及其借鑒[J].管理觀察，陸翊翊，郭勝偉，2016（21）.

[3]Gross PF.A critical review of some basic considerations in post-secondary education evaluation[J].Policy Sciences.1973.4（02）：171-195.

[4]科技原創(chuàng)力發(fā)展規(guī)律探析[J].中國科學基金，馮越強，齊瑋，2007（1）：14-16.

[5]科研項目經費管理：中英比較研究[J].科研管理，顧全，2012，33（1）：120-126.

[6]周鵬，張敏，郭勝偉.中國科研評價的歷史沿革、現(xiàn)狀及對策分析[J].管理觀察，2016（32）：173-176.

[7]譚清美，劉文政，李開運.科研項目評價方法探討[J].科研管理，1992（03）：31-39.

[8]吳建南，馬亮，白波，鄭永和.科學基金管理績效評估：基于項目資助與組織管理的視角[J].科學學與科學技術管理，2010，31（07）：10-16.

[9]科研項目評價制度的缺陷及其完善[J].自然辯證法研究，馬健，2010（10）.

基金項目：山西省軟科學研究計劃項目“山西省科技人才評價工作中量化指標的濫用及應對策略研究（項目編號：2018041045-1）”; 中國博士后科學基金資助項目“研究評估中科學計量學的不確定性現(xiàn)象及應對策略研究”（項目編號：2018M631551）。

作者單位：山西財經大學