摘要:首先,運(yùn)用德爾菲法確定包含8個(gè)一級指標(biāo)、17個(gè)二級指標(biāo)的新疆高新技術(shù)科技項(xiàng)目后評價(jià)體系;其次,運(yùn)用層次分析法計(jì)算得出各評價(jià)指標(biāo)的具體權(quán)重;最后,以重點(diǎn)研發(fā)項(xiàng)目進(jìn)行實(shí)證分析。該研究成果可為高新技術(shù)科技項(xiàng)目管理提供參考。
關(guān)鍵詞:高新技術(shù);科技項(xiàng)目;項(xiàng)目后評價(jià);德爾菲法;層次分析法;指標(biāo)體系
0"引言
當(dāng)前,新疆高新科技項(xiàng)目在立項(xiàng)審查、中期管理及結(jié)題驗(yàn)收等方面形成了一套完整的工作體系。但是,新疆高新科技項(xiàng)目后評價(jià)體系尚不完善,每年產(chǎn)出的大量科技成果未能得到有效轉(zhuǎn)化,項(xiàng)目所產(chǎn)生的科技價(jià)值、經(jīng)濟(jì)社會(huì)等持續(xù)性影響未能完全體現(xiàn)。因此,有必要對新疆高新技術(shù)科技項(xiàng)目效益進(jìn)行后評價(jià),提高政府科技主管部門的項(xiàng)目管理能力和評價(jià)能力,進(jìn)而新疆提高高新科技項(xiàng)目的整體效益。
目前,關(guān)于科技項(xiàng)目績效評價(jià)指標(biāo)體系的研究較多,主要包括主成分分析法、德爾菲法、模糊算法、層次分析法等。在新疆高新技術(shù)科技項(xiàng)目后評價(jià)體系構(gòu)建過程中,指標(biāo)篩選和指標(biāo)權(quán)重確定是最重要的兩個(gè)環(huán)節(jié),指標(biāo)篩選尤為重要。而德爾菲法對較為散亂的評價(jià)體系具有準(zhǔn)確的篩選性、較強(qiáng)的實(shí)用性與客觀性。基于此,本文根據(jù)新疆高新技術(shù)科技項(xiàng)目實(shí)際情況,選取自治區(qū)重大科技專項(xiàng)和重點(diǎn)研發(fā)專項(xiàng)項(xiàng)目為研究對象,首先,采用德爾菲法選取評價(jià)指標(biāo);其次,運(yùn)用層次分析法確定指標(biāo)權(quán)重;最后,構(gòu)建新疆高新技術(shù)科技項(xiàng)目后評價(jià)指標(biāo)體系,并根據(jù)研究結(jié)果提出切實(shí)有效的建議,旨在提升高新科技項(xiàng)目后評價(jià)管理水平,提高項(xiàng)目綜合效益,加快區(qū)域創(chuàng)新發(fā)展和資源優(yōu)化配置。
1"新疆高新技術(shù)科技項(xiàng)目后評價(jià)指標(biāo)體系構(gòu)建
1.1"一級指標(biāo)篩選
根據(jù)項(xiàng)目立項(xiàng)時(shí)設(shè)定的考核指標(biāo)和問卷調(diào)查結(jié)果,設(shè)定8個(gè)一級指標(biāo),分別是項(xiàng)目管理、科學(xué)創(chuàng)新、成果數(shù)量、經(jīng)濟(jì)效益、社會(huì)效益、生態(tài)效益、人才培養(yǎng)和滿意度。
1.2"二級指標(biāo)確定
對各一級指標(biāo)進(jìn)行細(xì)分,得到19個(gè)二級指標(biāo),建立初步的新疆高新技術(shù)科技項(xiàng)目后評價(jià)指標(biāo)體系,見表1。
1.3"問卷調(diào)查評估
邀請11名專家對評價(jià)指標(biāo)進(jìn)行問卷調(diào)查,涉及新材料、新能源、煤炭煤化工、裝備制造、化工、節(jié)能環(huán)保、信息技術(shù)等領(lǐng)域。調(diào)研專家信息見表2。
1.4"評價(jià)體系指標(biāo)確定
基于問卷調(diào)研結(jié)果,將“科學(xué)創(chuàng)新”和“成果數(shù)量”合并為“科學(xué)水平”,將“技術(shù)創(chuàng)新”和“理論創(chuàng)新”合并為“科技創(chuàng)新”,將“科技獎(jiǎng)勵(lì)數(shù)量”合并至“學(xué)術(shù)成果”,將“降耗”和“減排”合并為“節(jié)能減排”,增加“可持續(xù)影響”評價(jià)指標(biāo)。最終確定項(xiàng)目管理、科學(xué)水平、經(jīng)濟(jì)效益、社會(huì)效益、生態(tài)效益、人才培養(yǎng)、可持續(xù)影響、滿意度8個(gè)一級指標(biāo)和17個(gè)二級指標(biāo),見表3。
2"新疆高新技術(shù)科技項(xiàng)目后評價(jià)指標(biāo)體系模型建立
2.1"建立層次分析模型
2.1.1"構(gòu)建判斷矩陣
判斷矩陣公式如下
2.1.2"重要性評價(jià)
指標(biāo)重要性評價(jià)標(biāo)準(zhǔn)見表4。
2.1.3"計(jì)算權(quán)重向量
隨機(jī)一致性指標(biāo)RI值可通過查表獲取,結(jié)果見表5。
若CR<0.1,則通過一致性檢測。
2.2"判斷矩陣構(gòu)建及權(quán)重計(jì)算
基于上述計(jì)算結(jié)果,邀請相關(guān)領(lǐng)域?qū)<覍χ笜?biāo)重要程度進(jìn)行打分,并對打分結(jié)果進(jìn)行歸納分類,建立判斷矩陣(表6)。
通過計(jì)算可知,λmax=8.156 0,CI=0.022 3,平均隨機(jī)一致性指標(biāo)RI=1.41,隨機(jī)一致性比率CR=0.015 8<0.1,說明判斷矩陣合理。在此基礎(chǔ)上計(jì)算指標(biāo)權(quán)重,結(jié)果見表7。
2.3"二級指標(biāo)權(quán)重計(jì)算
2.3.1"項(xiàng)目管理二級指標(biāo)權(quán)重計(jì)算
計(jì)算項(xiàng)目管理二級指標(biāo)權(quán)重,建立項(xiàng)目管理二級指標(biāo)判斷矩陣,見表8。
計(jì)項(xiàng)目管理算判斷矩陣最大特征值λmax=2,指標(biāo)權(quán)重見表9。
2.3.2"科學(xué)水平二級指標(biāo)權(quán)重計(jì)算
計(jì)算科學(xué)水平二級指標(biāo)權(quán)重,建立科學(xué)水平二級指標(biāo)判斷矩陣,見表10。
首先,計(jì)算科學(xué)水平判斷矩陣的最大特征值λmax=4.0211;其次,進(jìn)行一致性檢驗(yàn),得到一致性指標(biāo)CI=0.007 0,平均隨機(jī)一致性指標(biāo)RI=0.9,隨機(jī)一致性比率CR=0.007 8。CR<0.1,說明判斷矩陣合理。在此基礎(chǔ)上對指標(biāo)權(quán)重進(jìn)行計(jì)算,結(jié)果見表11。
2.3.3"經(jīng)濟(jì)效益二級指標(biāo)權(quán)重計(jì)算
計(jì)算經(jīng)濟(jì)效益二級指標(biāo)權(quán)重,建立經(jīng)濟(jì)效益二級指標(biāo)判斷矩陣,見表12。
計(jì)算經(jīng)濟(jì)效益判斷矩陣最大特征值λmax=2,指標(biāo)權(quán)重見表13。
2.3.4"社會(huì)效益二級指標(biāo)權(quán)重計(jì)算
計(jì)算社會(huì)效益二級指標(biāo)權(quán)重,建立社會(huì)效益二級指標(biāo)判斷矩陣,見表14。
首先,計(jì)算社會(huì)效益判斷矩陣最大特征值,得到λmax=3.009 2;其次,進(jìn)行一致性檢驗(yàn),得到一致性指標(biāo)CI=0.004 6,平均隨機(jī)一致性指標(biāo)RI=0.58,隨機(jī)一致性比率CR=0.007 9。CR<0.1,說明判斷矩陣合理。在此基礎(chǔ)上對指標(biāo)權(quán)重進(jìn)行計(jì)算,結(jié)果見表15。
2.3.5"人才培養(yǎng)二級指標(biāo)權(quán)重計(jì)算
計(jì)算人才培養(yǎng)二級指標(biāo)權(quán)重,建立人才培養(yǎng)二級指標(biāo)判斷矩陣,見表16。
計(jì)算人才培養(yǎng)判斷矩陣最大特征值λmax=2,指標(biāo)權(quán)重見表17。
2.3.6"滿意度二級指標(biāo)權(quán)重計(jì)算
計(jì)算滿意度二級指標(biāo)權(quán)重,建立滿意度二級指標(biāo)判斷矩陣,見表18。
計(jì)算滿意度判斷矩陣最大特征值λmax=2,指標(biāo)權(quán)重見表19。
2.4"評價(jià)體系指標(biāo)權(quán)重計(jì)算
通過上述計(jì)算和分析,得到新疆高新技術(shù)科技項(xiàng)目后評價(jià)指標(biāo)權(quán)重,見表20。
3"實(shí)例應(yīng)用
本文選取新疆自治區(qū)5個(gè)重點(diǎn)研發(fā)項(xiàng)目進(jìn)行高新技術(shù)科技項(xiàng)目后評價(jià),以查閱項(xiàng)目驗(yàn)收材料和企業(yè)問卷調(diào)查相結(jié)合的方式進(jìn)行評價(jià)系統(tǒng)驗(yàn)證。
設(shè)定績效評價(jià)結(jié)果滿分為100分,將5個(gè)科技項(xiàng)目后評價(jià)結(jié)果分為4個(gè)等級,具體劃分等級及分值見表21。
基于本文建立的新疆高新技術(shù)科技項(xiàng)目后評價(jià)指標(biāo)體系,對5個(gè)科技項(xiàng)目指標(biāo)完成情況進(jìn)行打分,綜合評價(jià)得分分別為79.81分、82.54分、80.66分、92.45分、83.16分。按照等級劃分標(biāo)準(zhǔn),1個(gè)項(xiàng)目被評為“優(yōu)秀”,3個(gè)項(xiàng)目被評為“良好”,1個(gè)項(xiàng)目被評為“合格”。通過實(shí)例驗(yàn)證可知,該評價(jià)結(jié)果符合項(xiàng)目實(shí)際。
4"結(jié)語
本文構(gòu)建了新疆高新技術(shù)科技項(xiàng)目后評價(jià)體系,包括項(xiàng)目管理、科學(xué)水平、經(jīng)濟(jì)效益、社會(huì)效益、生態(tài)效益、人才培養(yǎng)、可持續(xù)影響、滿意度8個(gè)一級指標(biāo)和17個(gè)二級指標(biāo)。運(yùn)用層次分析法計(jì)算得出各評價(jià)指標(biāo)權(quán)重。在此基礎(chǔ)上,以新疆自治區(qū)5個(gè)重點(diǎn)研發(fā)項(xiàng)目為例進(jìn)行驗(yàn)證。結(jié)果顯示,該評價(jià)體系較為科學(xué)合理,能夠真實(shí)反映新疆高新技術(shù)科技項(xiàng)目實(shí)施效果和效益,可為科技管理部門提供決策依據(jù)。
參考文獻(xiàn)
[1]張莉,孟月志.麗水市企業(yè)科技項(xiàng)目后評價(jià)指標(biāo)體系構(gòu)建及應(yīng)用研究[J].科技創(chuàng)新與應(yīng)用,2021(2):191-193.
[2]張軍果,任浩,謝福泉.項(xiàng)目后評價(jià)視角下的財(cái)政科技項(xiàng)目績效評估體系研究[J].科學(xué)學(xué)與科學(xué)技術(shù)管理,2007(2):14-20.
[3]張小菁.地方科技計(jì)劃項(xiàng)目績效評價(jià)研究[J].科技管理研究,2010(21):201-204.
[4]The World Bank.Assessing development effectiveness[M].Washington:Financial Economics,2010.
[5]劉冰,陳治亞.基于產(chǎn)業(yè)鏈理論的國家技術(shù)創(chuàng)新項(xiàng)目經(jīng)濟(jì)影響后評價(jià)研究[J].科學(xué)學(xué)與科學(xué)技術(shù)管理,2007(6):67-71.
收稿日期:2022-11-25
作者簡介:
孔娜(1987—),女,工程師,研究方向:科技咨詢。
田競(1980—),女,高級經(jīng)濟(jì)師,研究方向:項(xiàng)目咨詢。
姚佳婧(1985—),女,助理研究員,研究方向:機(jī)械制造。
馬珊(1984—),女,助理研究員,研究方向:科技項(xiàng)目管理服務(wù)。
李林(1982—),男,實(shí)驗(yàn)師,研究方向:項(xiàng)目管理。