西桂權(quán) 王冠宇

摘 ?要：非共識(shí)項(xiàng)目在促進(jìn)科技創(chuàng)新方面的作用越來(lái)越突出，其評(píng)審、評(píng)價(jià)問(wèn)題也變得更加重要。文章分析了非共識(shí)產(chǎn)生原因，介紹了非共識(shí)項(xiàng)目識(shí)別和度量方法;之后提出通過(guò)評(píng)議項(xiàng)目累計(jì)數(shù)、評(píng)議結(jié)果命中率和成功率來(lái)對(duì)同行評(píng)議專(zhuān)家進(jìn)行評(píng)價(jià)，遴選出非共識(shí)項(xiàng)目評(píng)審專(zhuān)家;最后結(jié)合非共識(shí)項(xiàng)目自身特點(diǎn)，利用定性和定量方法建立了非共識(shí)項(xiàng)目評(píng)價(jià)指標(biāo)體系，探討了APF組合分析方法運(yùn)用于非共識(shí)項(xiàng)目評(píng)價(jià)的可能性和具體步驟，以促進(jìn)非共識(shí)項(xiàng)目發(fā)展。

關(guān)鍵詞：非共識(shí)項(xiàng)目;非共識(shí)度;同行評(píng)議;APF評(píng)價(jià)方法

中圖分類(lèi)號(hào)：G311 ? ? 文獻(xiàn)標(biāo)識(shí)碼：A

Abstract：Non-consensus projects play an increasingly important role in promoting scientific and technological innovation.This paper analyzes the causes of non consensus，introduces the methods of identifying and measuring non-consensus project. Then it is proposed that peer review expert evaluation should be carried out by reviewing item cumulative count，dispersion rate，hit probability and success rate.The evaluation index system is established based on the characteristics of non-consensus projects.At last，this paper discusses the possibility and concrete steps of applying APF combinatorial analysis method to non-consensus project evaluation by combining complex qualitative and quantitative indicators.

Key words：Non-consensus project;Non-consensus degree;Peer review;APF evaluation method

非共識(shí)項(xiàng)目在促進(jìn)科技創(chuàng)新方面發(fā)揮著越來(lái)越重要的作用。關(guān)于非共識(shí)項(xiàng)目的評(píng)審和評(píng)價(jià)已有學(xué)者進(jìn)行了研究，主要包括以下幾種方法：一是同行評(píng)議法，二是加權(quán)優(yōu)序法，三是模糊綜合評(píng)價(jià)法等。郝鳳霞[1]等提出在同行評(píng)議中可根據(jù)項(xiàng)目特點(diǎn)選擇一定數(shù)量的非共識(shí)項(xiàng)目進(jìn)行復(fù)審，并在評(píng)審者與參評(píng)者間建立動(dòng)態(tài)的反饋渠道，提高評(píng)審結(jié)果準(zhǔn)確率。馬晨華[2]分析了現(xiàn)有方法在跨學(xué)科項(xiàng)目評(píng)價(jià)中的缺陷，并提出了完善跨學(xué)科項(xiàng)目評(píng)審的方法。還有學(xué)者從定量角度進(jìn)行了研究，形成以定性評(píng)價(jià)為主、定量數(shù)據(jù)為輔的非共識(shí)項(xiàng)目評(píng)審方法，如楊列勛等[3]提出用項(xiàng)目整體非共識(shí)和指標(biāo)非共識(shí)度作為定量依據(jù)，用數(shù)理方法處理非共識(shí)項(xiàng)目專(zhuān)家打分結(jié)果 。

應(yīng)用以上方法都可以對(duì)非共識(shí)項(xiàng)目做出評(píng)價(jià)，但是由于非共識(shí)項(xiàng)目與一般項(xiàng)目相比有其特殊性，每一種方法都存在著一定的缺陷，從而影響非共識(shí)項(xiàng)目立項(xiàng)評(píng)價(jià)結(jié)果的準(zhǔn)確性、科學(xué)性及公平性。對(duì)于非共識(shí)項(xiàng)目的評(píng)價(jià)，單純采用定性或定量的評(píng)價(jià)方法效果都不佳。基于非共識(shí)項(xiàng)目特點(diǎn)，目前比較適合的方法是采用專(zhuān)家評(píng)審與指標(biāo)體系相結(jié)合的評(píng)價(jià)方法。為此，筆者提出利用APF組合評(píng)價(jià)法對(duì)非共識(shí)項(xiàng)目進(jìn)行評(píng)價(jià)，形成以定性判斷為主、定量數(shù)據(jù)為輔的針對(duì)非共識(shí)項(xiàng)目的評(píng)價(jià)方法，以促進(jìn)非共識(shí)項(xiàng)目發(fā)展。

一、非共識(shí)項(xiàng)目的概念

從科學(xué)發(fā)展史看，重大創(chuàng)新在開(kāi)始階段往往由少數(shù)人首先提出，而多數(shù)人并不理解，從而形成非共識(shí)。非共識(shí)形成的根本原因是創(chuàng)新是一種探索性很強(qiáng)的活動(dòng)，且具有一定風(fēng)險(xiǎn)性，但非共識(shí)創(chuàng)新一旦成功，將具有重要意義。在對(duì)非共識(shí)項(xiàng)目研究中，學(xué)者一般從同行評(píng)議和非共識(shí)項(xiàng)目的特點(diǎn)兩方面來(lái)定義非共識(shí)項(xiàng)目。從同行評(píng)議角度定義非共識(shí)項(xiàng)目的專(zhuān)家如郝鳳霞[1]、劉文波等[4]，他們認(rèn)為非共識(shí)項(xiàng)目是指在采用同行評(píng)議時(shí)，由于評(píng)審專(zhuān)家對(duì)該項(xiàng)目選題方向、研究方法、可行性等存在較大爭(zhēng)議，無(wú)法達(dá)成共識(shí)從而形成的項(xiàng)目。束義明[5]、張冠南等[6]專(zhuān)家從非共識(shí)項(xiàng)目特點(diǎn)出發(fā)，認(rèn)為非共識(shí)項(xiàng)目是指由于其創(chuàng)新性強(qiáng)，研究?jī)?nèi)容超出了一般人認(rèn)識(shí)水平，實(shí)現(xiàn)難度大且具有一定的風(fēng)險(xiǎn)性，對(duì)于是否支持立項(xiàng)存在一定爭(zhēng)議的項(xiàng)目。然而實(shí)踐表明，很多創(chuàng)新性強(qiáng)的非共識(shí)項(xiàng)目在取得成功后，對(duì)社會(huì)進(jìn)步起到了很大促進(jìn)作用，因此要有選擇性地支持非共識(shí)項(xiàng)目發(fā)展。

二、非共識(shí)項(xiàng)目評(píng)議中的專(zhuān)家遴選

項(xiàng)目評(píng)審的主體是專(zhuān)家，對(duì)于科研項(xiàng)目進(jìn)行評(píng)價(jià)最有發(fā)言權(quán)的是同行專(zhuān)家。在非共識(shí)項(xiàng)目立項(xiàng)評(píng)價(jià)中，尤其是對(duì)于交叉學(xué)科較強(qiáng)的非共識(shí)研究項(xiàng)目，能否選擇出真正的同行評(píng)議專(zhuān)家至關(guān)重要。非共識(shí)項(xiàng)目形成與評(píng)審專(zhuān)家有著密切關(guān)系，非共識(shí)項(xiàng)目的評(píng)價(jià)也需要專(zhuān)家參與，因此選出合適的專(zhuān)家至關(guān)重要。對(duì)于非共識(shí)項(xiàng)目而言，其研究范圍往往涉及多個(gè)學(xué)科領(lǐng)域，所以選出合適的評(píng)審專(zhuān)家非常重要?？梢苑忠韵聨撞剑旱谝徊揭_定非共識(shí)項(xiàng)目涉及的學(xué)科范圍;第二步要明確候選專(zhuān)家的研究領(lǐng)域，保證二者的相關(guān)匹配性;第三步初步篩選出可以參加評(píng)審的、水平較高的專(zhuān)家。非共識(shí)項(xiàng)目評(píng)價(jià)專(zhuān)家遴選的具體步驟如下[7-8]。

（一）判斷候選專(zhuān)家研究學(xué)科范圍及比重

對(duì)非共識(shí)項(xiàng)目進(jìn)行評(píng)價(jià)時(shí)，尤其是涉及前沿交叉學(xué)科的非共識(shí)項(xiàng)目，首先要明確該項(xiàng)目研究領(lǐng)域涉及的學(xué)科范圍及比重。假設(shè)某一非共識(shí)項(xiàng)目研究領(lǐng)域可能涉及的學(xué)科種類(lèi)為a，b，c，…，n類(lèi)。

1.申請(qǐng)人對(duì)項(xiàng)目所涉及的學(xué)科門(mén)類(lèi)和研究?jī)?nèi)容較為熟悉，所以先由申請(qǐng)人對(duì)項(xiàng)目所涉及的學(xué)科知識(shí)和種類(lèi)進(jìn)行初步估計(jì)，設(shè)各科知識(shí)所占比重為：

（二）用主成分分析法確定指標(biāo)個(gè)數(shù)

如圖2所示，如果非共識(shí)項(xiàng)目評(píng)價(jià)指標(biāo)有多個(gè)，但各指標(biāo)價(jià)值大小不同，那么影響非共識(shí)項(xiàng)目的重要性也不同。統(tǒng)計(jì)學(xué)中的主成分分析法（PCA）是一種對(duì)于多元問(wèn)題的數(shù)據(jù)處理方法，一般初始建立的評(píng)價(jià)指標(biāo)之間往往具有一定的相關(guān)性，通過(guò)運(yùn)用主成分分析法可以把相關(guān)性較強(qiáng)的指標(biāo)轉(zhuǎn)化為相互獨(dú)立的指標(biāo)，指標(biāo)數(shù)量雖然減少了，但指標(biāo)包含的信息并沒(méi)有減少太多，評(píng)價(jià)結(jié)果更具有確定性。

（三）用層次分析法確定指標(biāo)權(quán)重

非共識(shí)項(xiàng)目評(píng)價(jià)的各個(gè)指標(biāo)權(quán)重不同，可以采用層次分析法（AHP）來(lái)確定不同指標(biāo)權(quán)重的大小，該方法可以兼顧各位專(zhuān)家對(duì)評(píng)估指標(biāo)的不同偏好，使評(píng)價(jià)結(jié)果更具有客觀性。運(yùn)用層次分析法包括建立遞階層次結(jié)構(gòu)、構(gòu)造判斷矩陣等步驟。

（四）進(jìn)行模糊綜合評(píng)價(jià)

非共識(shí)項(xiàng)目評(píng)價(jià)涉及的影響因素較多，如項(xiàng)目本身因素、評(píng)審專(zhuān)家因素等，而各因素重要程度又不同，使評(píng)價(jià)過(guò)程變得復(fù)雜。模糊綜合評(píng)價(jià)法作為一種簡(jiǎn)便而有效的評(píng)價(jià)與決策方法，利用模糊數(shù)學(xué)中的相關(guān)知識(shí)，確定評(píng)價(jià)對(duì)象所屬等級(jí)，為正確決策提供相應(yīng)依據(jù)。模糊綜合評(píng)價(jià)方法的包括確定評(píng)價(jià)指標(biāo)集合論域、確定評(píng)語(yǔ)集合論域、確定權(quán)重分配模糊向量、進(jìn)行實(shí)際評(píng)判等步驟。

APF組合評(píng)價(jià)法涉及的部分?jǐn)?shù)學(xué)運(yùn)算可采用計(jì)算機(jī)設(shè)備解決，如主成分分析法可借助社會(huì)經(jīng)濟(jì)統(tǒng)計(jì)軟件（如SPSS）中的因子分析法得到相應(yīng)結(jié)果，大大提高了非共識(shí)項(xiàng)目評(píng)價(jià)的效率。通過(guò)以上各步驟，可以對(duì)所評(píng)審出的非共識(shí)項(xiàng)目進(jìn)行評(píng)價(jià)，選出創(chuàng)新性較強(qiáng)、實(shí)際價(jià)值較高的項(xiàng)目予以資助支持。

五、小結(jié)

基于非共識(shí)項(xiàng)目特點(diǎn)，其遴選、評(píng)審和評(píng)價(jià)目前仍沒(méi)有十分完美的方法。筆者只是對(duì)非共識(shí)項(xiàng)目的遴選機(jī)制設(shè)計(jì)、評(píng)價(jià)方法等做了初步理論探討，供相關(guān)人員參考。今后將結(jié)合非共識(shí)項(xiàng)目評(píng)選、評(píng)價(jià)實(shí)際操作過(guò)程，深入研究如何識(shí)別創(chuàng)新、保護(hù)創(chuàng)新以及促進(jìn)非共識(shí)創(chuàng)新項(xiàng)目發(fā)展。

參考文獻(xiàn)：

[1]郝鳳霞，劉靜巖，陳忠.技術(shù)研發(fā)項(xiàng)目中同行專(zhuān)家評(píng)議產(chǎn)生非共識(shí)的原因分析[J].中國(guó)軟科學(xué)，2004（12）：92-96.

[2]馬晨華.論跨學(xué)科研究評(píng)估機(jī)制的建立[J].科技與經(jīng)濟(jì)，2015（01）：17-21.

[3]楊列勛，汪壽陽(yáng)，席酉民.科學(xué)基金遴選中非共識(shí)研究項(xiàng)目的評(píng)估研究[J].科學(xué)學(xué)研究，2002（02）：185-188.

[4]劉文波，鈕曉鳴.非共識(shí)項(xiàng)目的立項(xiàng)決策研究[J].上海管理科學(xué)，2017（04）：61-65.

[5]束義明，陳敬良.我國(guó)基礎(chǔ)研究原始性創(chuàng)新能力的現(xiàn)狀及提高對(duì)策[J].科技導(dǎo)報(bào)，2002（12）：3-6.

[6]張冠南.地方科研資助機(jī)構(gòu)非共識(shí)現(xiàn)象研究[D].上海：華東師范大學(xué)，2015.

[7]周光中.基于D-S證據(jù)理論的科學(xué)基金立項(xiàng)評(píng)估問(wèn)題研究[D].合肥：合肥工業(yè)大學(xué)，2009.

[8]王國(guó)彪，彭芳瑜.國(guó)家自然科學(xué)基金同行評(píng)議結(jié)果評(píng)價(jià)方法與專(zhuān)家遴選因素分析[J].中國(guó)科學(xué)基金，2008（06）：372-376.

[9]楊鳳.基礎(chǔ)研究項(xiàng)目立項(xiàng)評(píng)估模型研究[D].長(zhǎng)春：吉林大學(xué)，2014.

[10]鄭興東，陸偉，賀憲民，等.基金項(xiàng)目同行評(píng)議中專(zhuān)家非共識(shí)性的度量研究[J].中華醫(yī)學(xué)科研管理雜志，2005（03）：141-144.

[11]夏蓓麗.APF組合分析法在哲學(xué)社會(huì)科學(xué)評(píng)價(jià)中的運(yùn)用[J].情報(bào)科學(xué)，2007（09）：1337-1342.

[12]王敬敏，施婷.改進(jìn)APF組合分析法在電網(wǎng)信息化水平評(píng)價(jià)的運(yùn)用[J].電力信息化，2011（09）：28-33.