李苗，苗紅萍，蘇武崢，戴俊生，趙春，戴健

(1.新疆農業(yè)科學院農業(yè)經濟與科技信息研究所，烏魯木齊 830091　2.北京銳宇博圖科技有限公司，北京　1000003. 新疆農業(yè)科學院，烏魯木齊　830091)

?

農業(yè)科技創(chuàng)新評價模型的構建與應用研究

李苗1，苗紅萍1，蘇武崢1，戴俊生1，趙春2，戴健3

(1.新疆農業(yè)科學院農業(yè)經濟與科技信息研究所，烏魯木齊 8300912.北京銳宇博圖科技有限公司，北京1000003. 新疆農業(yè)科學院，烏魯木齊830091)

摘要：【目的】研究不同類型評價主體的統(tǒng)一考核，提出一套評價方法和數據庫管理系統(tǒng)，實現評價流程、評價指標和數據的網絡化管理，并應用于公益性農業(yè)科研院所。【方法】明確評價主體職能定位的基礎上，應用動態(tài)聚類分析方法，對評價單元進行分類；應用遞階層次結構理論和方法構建評價指標體系；應用AHP分析法對層次結構要素進行分析，確定各級指標權重；應用模糊綜合評判法對指標進行綜合測算；采用數據庫技術，構建評價管理網絡系統(tǒng)。從創(chuàng)新能力、服務轉化能力、科研條件與平臺、人才團隊、管理能力和發(fā)展速度六方面，對主體的科技創(chuàng)新能力進行綜合評價；從科研服務水平、科技創(chuàng)新水平、成果轉化水平、人才團隊、支撐條件水平和發(fā)展速度六方面，對試驗推廣主體的綜合能力進行評價；從崗位履職、公共履職、綜合履職和發(fā)展速度四方面，對管理主體的管理能力進行評價?！窘Y果】構建了三級多層結構的評價指標體系和數據庫管理系統(tǒng)，實現了創(chuàng)新主體及其試驗推廣機構和管理機關的百分制統(tǒng)一評價。通過實際應用，完成了34個機構的量化綜合評價，明確了各評價單位在各領域的量化水平和綜合實力，為評優(yōu)和制定發(fā)展對策提供了科學依據?！窘Y論】為不同類型評價單元的無目標約束的統(tǒng)一評價，提供了一套成功的評價方法和管理系統(tǒng)。系統(tǒng)的功能拓展性、操作性和應用性強，實際評價結果合理，具有推廣價值。

關鍵詞：農業(yè)科技創(chuàng)新；績效評價；指標體系；數據庫

0引 言

【研究意義】隨著我國科技創(chuàng)新引領社會經濟發(fā)展的不斷深化，如何評價不同類型科技創(chuàng)新主體的創(chuàng)新績效和管理水平，已成為科研創(chuàng)新工作中亟待解決的重大管理問題。開發(fā)一套科學、公正、實用的績效考核系統(tǒng)，搭建起信息化、數據化的管理平臺，有助于農業(yè)科研創(chuàng)新主體的功能定位、問題的導向性挖掘和發(fā)展決策。【前人研究進展】國內關于農業(yè)科技創(chuàng)新績效評價的研究大多集中在科研和行政管理兩方面，對于農業(yè)科技創(chuàng)新主體及其試驗推廣機構和管理機關的多類型綜合評價的研究很少，將數據庫技術應用到新疆農業(yè)科技創(chuàng)新評價，建立網絡化管理系統(tǒng)的研究未見報道?！颈狙芯壳腥朦c】研究針對不同類型的農業(yè)科技創(chuàng)新主體，在確定職責定位的基礎上，圍繞科技創(chuàng)新、技術推廣、平臺建設、人才團隊建設和管理水平等方面，選取具有針對性和代表性的指標，搭建信息化、數據化的評價管理平臺，實現合理評價和科學決策?！緮M解決的關鍵問題】研究不同類型農業(yè)科技創(chuàng)新主體統(tǒng)一評價；建立定性指標的量化評價指標體系。

1材料與方法

1.1材 料

1.1.1數據采集

研究以新疆農科院為例，針對科技創(chuàng)新主體即各類研究所和試驗推廣主體即各類試驗場站、管理主體即各機關處室，分別設計了117項、77項和151項評價指標，由各評價主體統(tǒng)計和歸類各項指標的實際數據，通過評價管理系統(tǒng)的網絡傳輸通道，將數據填報到評價管理系統(tǒng)。定性指標采用會議形勢，用無記名投票的方式確定，并統(tǒng)計錄入，系統(tǒng)自動轉化為定量指標。共獲得各類評價指標數據3 933個。

1.1.2數據審核

建立數據審核機制。組織管理部門成立審核小組，對上報數據進行逐項審核，并實行誠信監(jiān)督機制，對數據的真實性問題實行懲罰機制。

1.2方 法

采用動態(tài)聚類分析的方法[1]，根據新疆農科院研究所、試驗場站和機關處室職能定位的不同，對研究所、場站和機關處室進行分類評價；

采用遞階層次結構理論模型構建評價指標[2]，在已經建立的層次結構模型及評價指標體系基礎上應用AHP分析法對層次結構要素進行分析，得出各級指標的權重。

采用模糊綜合評判模型對指標體系進行測算[3]。主體評價的最終得分由基本得分和附加分構成，具體測算方法如下：

1.2.1基本得分計算

1.2.1.1單項指標的測算Y

根據評價指標的不同屬性和評價主體的指標設置，研究的指標均為遞增滿意函數。構建模糊綜合評判模型，則各指標隸屬度Y的函數形式：

p1p2

式中X表示評級指標的實際值，P1為下界值，P2為上界值。研究設置P1=0，P2為標準值。將各單位上報各指標三年數據的平均值上浮50%作為標準值。

1.2.1.2基本綜合得分F(t)

Yijklh表示指標(E)的得分，分別用Ai、Bij、Cijk、Dijkl和Eijklh表示各級指標的權重，則評價主體的綜合測度模型為：

式中A、B、C、D、E分別為不同層次評價指標的權重；t表示時期，i表示子目標層的各項指標，j表示i指標所屬的各項指標，k表示j指標所屬的各項指標，l表示k指標所屬的各項指標，h表示l指標所屬的各項指標。m、n、r、p表示各級指標的數量。

1.2.2附加分計算Z(t)

式中，V表示主持完成的成果獲得獎勵的數量；W表示參加完成的成果獲得獎勵的數量；a表示主持成果獲得的不同獎勵分值；b表示參加成果獲得的不同獎勵分值；t表示不同的時期；u表示主持獲獎的級別；s表示參加獲獎的級別；o、p表示獲得獎勵的級別數量。

1.2.3最終得分計算

將考核最終得分定義為G(t)，

G(t) =F(t)+Z(t).

其中G(t) ≤130，Z(t) ≤30，F(t)、Z(t)均為無量綱值。

2結果與分析

2.1新疆農科院績效評價指標體系

新疆農科院按照職能分工的不同，針對院屬16個研究所、9個試驗場站和9個機關處室三個考核對象，分別設置了三套考核評價指標，根據其不同特點，設定不同的指標結構、指標層和考核指標。

新疆農科院績效考核體系整體框架。圖1

圖1　新疆農業(yè)科學院績效考核體系

評價指標體系的測度為基礎分，總分值100分。附加分總分值30分。通過數據庫管理系統(tǒng)的網絡數據收集、匯總、歸類、測算，得出各個評價主體的各評價內容的分值。

2.2 計算結果

根據評價主體的分類，測算結果分為研究所、院機關和試驗場站三個評價單元，具體評價結果如下：

2.2.1研究所

16個研究所共計獲得數據1 872個，各研究所的測算結果整體反映出：(1)各研究所的服務轉化能力普遍強于科技創(chuàng)新能力，16個研究所中服務轉化能力強于創(chuàng)新能力的有12個研究所，其中樣本2、9、12、14的服務轉化能力的得分分別是33.76分、17.26分、31.32分、24.26分高于創(chuàng)新能力15.29分、12.57分、23分、17.23分，超過了10分以上；樣本7、13、15、16的服務轉化能力得分分別是7.37分、22.17分、9.01分、8.45分低于創(chuàng)新能力1.54分、1.37分、5.46分7.28分；組織管理能力強于科研條件與平臺建設，16個研究所中有15個研究所的組織管理能力強于科研條件與平臺建設，兩者分數差距最小的為樣本1，相差0.04分，差距最大的為樣本13，相差16.97分。僅有樣本2的組織管理能力分數低于科研條件與平臺建設，相差0.69分；人才團隊建設相對滯后，人才團隊指標的得分普遍低于其余六個一級指標的得分，最高分數為樣本1，為9.26分，最低分數為樣本5，僅為1.18分。(2)各評價樣本間總分值的差異性明顯。最高分數為樣本1，得分102.82分，最低分數為樣本13，得分45.41分，兩者相差2.26倍。其余14項的評價樣本之間分數差距也較大。(3)各評價主體的成果獲獎水平(附加分)的差異性顯著。最高分為樣本1，得分18.8分，其中樣本4、5、7、12、13評價主體的成果獲獎水平得分為0分，相差18.8分。表1

表中的發(fā)展速度反映各評價單元年度發(fā)展的變化情況，研究為第一次測算，則各評價單元均為10分。

2.2.2試驗場站

9個場站共計獲得數據693個，各場站的測算結果整體反映出：(1)各評價樣本間的總分值的差異性不明顯。除了樣本1得分較高外，得分為79.9分，其余8個場站的得分差距不明顯，最高得分樣本3，為64.74分，最低得分樣本6，為44.23分，相差20分。(2)科技服務水平與成果轉化水平相當，9個場站中有4個場站相差僅在1分左右，只有樣本9的分數相差在30分，這是由于樣本9的職能定位偏重科研服務所致；服務支撐條件差距也不大，最高得分為樣本8，13.24分，最低得分為樣本2，10.34分，相差2.9分；由于場站的職能定位的關系，各評價主體的科技創(chuàng)新水平的得分都不高，最高為樣本1，得分9.2分，最低為樣本4，得分1.82分；人才團隊建設滯后明顯，最高分為樣本5，僅為5.08分。(3)各評價主體的成果獲獎水平的差異性顯著。最高分為樣本1，得分7.2分，其中樣本4、5、6、9評價主體的成果獲獎水平得分為0分，相差7.2分，樣本3、7、8評價主體的成果獲獎水平得分也僅為1分，相差6.2分。表2

表1　2014年度研究所得分(分)

表2　 2014年場站得分(分)

2.2.3機關處室

9個機關處室共計獲得數據230個，各處室的測算結果整體反映出：(1)各評價樣本間總分值的差異性不明顯。其中，最高得分為樣本1，87.67分，最低得分為樣本9，81.02分，相差6.65分。(2)定量評價分值的差異性明顯。由于各處室的職能定位不同，故定量指標的評定標準不一，總分也不統(tǒng)一，但在定量指標與定性指標兩者之間做了統(tǒng)一，故定量指標分數相差較大。表3

表3　2014年機關處室得分

3討 論

研究構建的指標體系和數據庫管理系統(tǒng)，在實際應用中表現出操作的方便性和評價的科學性。解決了不同規(guī)模、不同職責和不同任務評價單元之間的比較和評價；解決了研究所、場站和機關處室難以量化指標的量化處理和評價。特別是研究方法針對無目標約束的百分制評價的突破，可以實現不同類型評價主體的統(tǒng)一考核比較。數據庫管理系統(tǒng)減少了量化評價的工作量。應用結果符合實際。研究所評價中爭取課題數量、發(fā)表論文數量、獲得成果和專利數量、出版專著的數量對于總體評價分值的影響明顯且敏感性強。機關處室評價中服務能力和應急能力對于總體評價分值的影響明顯且敏感性強。試驗場站評價中成果轉化、推廣應用和示范展示等指標對于總體評價分值的影響明顯且敏感性強。另外，通過評價指標的導向性設置和賦予一定的重要性，可以引導科技創(chuàng)新的發(fā)展方向。通過評價指標和重要性權值的調整，系統(tǒng)可以推廣應用于各類農業(yè)科技創(chuàng)新主體的績效評價。加大對技術推廣和成果轉化指標的調整和權重賦值，可應用于非公益性農業(yè)科技創(chuàng)新機構的績效評價。對于農業(yè)科技型企業(yè)同樣可以通過調整指標和權重賦值進行科技創(chuàng)新能力的綜合評價。

4結 論

4.1研究對公益性研究機構進行科技創(chuàng)新能力評價，能夠解決不同類型和不同職責機構之間的公平性評價問題。具有可用性和可靠性。

4.2從不同層次分析評價機構在科技創(chuàng)新的不同方面的差異性，找到各評價主體之間的差距所在，有利于發(fā)展決策和制定針對性的發(fā)展計劃。

4.3研究提出的一整套評價指標體系適用于其它公益性的農業(yè)類科研院所，具有一定的推廣和應用價值。對于非公益性的科研院所和科技企業(yè)，也可以在評價系統(tǒng)的基礎上，增加產業(yè)收益等相關指標或調整評價指標的權重得以應用。

4.4構建的績效評價數據庫管理系統(tǒng)，可以實現績效評價工作流程管理、評價指標管理和上報數據管理的網絡化，實現績效評審、計算評分、數據統(tǒng)計和結果發(fā)布等全程自動化，并具有系統(tǒng)拓展功能，有利于系統(tǒng)的推廣應用。

參考文獻(References)

[1] [1] 魏邦龍.應用層次分析法(AHP)確定農業(yè)科研項目評估指標的權重[J]. 甘肅科學學報,1997,9(3):4-8.

WEI Bang-long.(1997). Determination of weight indexes in evaluating scientific research projects of agriculture by using analytic hierarchy process [J].JournalofGansuSciences, 9(3):4-8. (in Chinese)

[2] 張愛寧.地方科研院所創(chuàng)新發(fā)展績效評價方法研究-甘肅省屬科研院所為例[J]. 科研管理,2013,(34)：43-51.

ZHANG Ai-ning. (2013). An evaluation study on innovation and development performance of local scientific research institutions - An example of Gansu Provincial Scientific Research Institute [J].ScienceResearchManagement, (34):43-51.(in Chinese)

[3] 張鳳.國家科研機構創(chuàng)新績效的評價模型[J]. 科研管理,2007,28(2):35-42.

ZHANG Feng.(2007). An evaluation model of innovative efficiency on national research institutes [J].ScienceResearchManagement, 28(2):35-42.(in Chinese).

[4] 申紅芳. 農業(yè)科研機構科技產出績效評價及其影響因素分析[J]. 科研管理,2010,31(6):126-150.

SHENH Hong-fang.(2010). Study on the relationship between corporate governance and earnings management [J].ScienceResearchManagement, 31(6):126-150.(in Chinese).

[5] 張偉倩,繆園. 組合評價模型在我國國立科研機構績效評價中的應用[J]. 科學學與科學技術管理,2008,29(4),36-40.

ZHANG Wei-qian，MU Yuan.(2008). The Application of Combined Evaluation Model on the Performance Evaluation of China's National Research Institutes [J].ScienceofScienceandManagementofS.&T., 29(4):36-40. (in Chinese)

[6] 李強. 公益類科研機構績效評價測度體系研究[J]. 科技政策與管理,2005,26(11):18-21.

LI Qiang.(2005).Study of Metric System of Public Scientific Research Institutes' Performance Evaluation [J].ScienceofScienceandManagementofS.&T., 26(11):18-21. (in Chinese)

[7] 楊淇倉,李鍵.基于模糊綜合評價法的貴州省科研機構創(chuàng)新績效評價指標體系[J].科技情報開發(fā)與經濟,2011,(13):129-133.

YANG Qi-cang, LI Jian.(2011). The Innovation Performance Evaluation Index System for Scientific Research Institutions in Guizhou Province Based on the Fuzzy Comprehensive Evaluation Method [J].Sci-TechInformationDevelopment&Economy, (13):129-133. (in Chinese)

[8] 趙紅專,翟立新.公共科研機構績效評價的指標與方法[J].科學學研究,2006,24(1):85-90.

ZHANG Hong-zhuan, ZHAI Li-xin.(2006).Indicators and a Method for the Perform Ance Evaluation of Public Scientific Research Institutes[J].StudiesinScienceofScience, 24 (1):85-90. (in Chinese)

[9] 陳燕羽,馬子龍.非營利性科研機構績效考評體系探討[J].農業(yè)科技管理,2014,33(2):90-93.

CHENG Yan-yu，MA Zi-long.(2014). Studies on Performance Evaluation System for Non-Profit Scientific Research Institutions [J].ManagementofAgriculturalScienceandTechnology, 33(2):90-93. (in Chinese)

[10] 王景,陳標金.農業(yè)科技投入不足的制度根源[J].科技管理研究,2015,(5):12-17.

WANG Jing, CHAN Biao-jin. (2015). Institutional Causes of the Low Investment in Agricultural Science and Technology [J].ScienceandTechnologyManagementResearch, (5):12-17. (in Chinese)

Fund project:Supported by the Basic Science and Technology Research Support Funds of Non-profit Research Institutions of Xinjiang Uygur Autonomous Region "Performance Evaluation System Research of Xinjiang Academy of Agricultural Sciences "(KY2013055)

doi:10.6048/j.issn.1001-4330.2016.06.025

收稿日期(Received)：2016-01-29

基金項目:自治區(qū)級公益性科研院所基本科研業(yè)務費專項“新疆農科院績效考核體系建設研究”(KY2013064)

作者簡介:李苗(1984-)，女，新疆烏魯木齊人，助理研究員，碩士，研究方向為農業(yè)信息分析，(E-mail)miao1125miao@126.com 通訊作者(Cotresponding author):戴健(1962-)，男，新疆烏魯木齊人，研究員，研究方向為農業(yè)技術經濟，(E-mail)daij@xaas.ac.cn

中圖分類號：S-9

文獻標識碼：A

文章編號：1001-4330(2016)06-1159-07

Construction and Application of Agricultural Technology Innovation Assessment Model

LI Miao1, MIAO Hong-ping1, SU Wu-zheng1, DAi Jun-sheng1, ZHAO Chun2, DAI Jian3

(1.InstituteofAgriculturalEconomicsandScientificTechnicalInformation,XinjiangAcademyofAgriculturalScience,Urumqi830091,China;2.BeijingReebotooTechnologyCo.,Ltd,Beijing100000,China;3.XinjiangAcademyofAgriculturalSciences,Urumqi830091,China)

Abstract：【Objective】 To get out of the difficulty in quantitative assessment without goal constraints in the performance assessment of agricultural technology innovation and coordinate the examination of different types of assessment subjects and achieve networked management of assessment processes, indexes and data, a series of assessment approaches and a database management system were proposed and applied to agricultural scientific and research institutes for public welfare.【Method】Dynamic clustering analysis was applied to classify assessed units on the basis of defined role of assessment subjects; Hierarchical structure theory and approaches were applied to build an assessment index system; structural elements were analyzed using AHP analysis to determine index weighting at each level; fuzzy comprehensive evaluation method was applied to comprehensively test and compute indexes; and database technologies were applied to build an assessment management network system. Technological innovation subjects were given quantitative assessment, service transformation capacity, technological conditions and platforms, talent team, management capability and development speed. Administrative authorities were given quantitative assessment, public performance, comprehensive performance and development speed.【Result】The assessment index system and database management system of three-level multi-layer structure were built up. The coordinated hundred-mark assessment was given to innovation subjects and their test and promotion agencies and administrative authorities. After the application in Xinjiang Academy of Agricultural Sciences, the quantitative assessment in 33 institutions was accomplished and the assessment level and comprehensive capability of the assessment performers in each field was clearly determined, thus providing a scientific basis for excellence selection and development strategy making.【Conclusion】A series of proven assessment approaches and a management system have been provided for the coordinated assessment without goal constraints for different types of subjects. The system has powerful function extendibility, operability and applicability and its assessment results are reasonable, which is worthy of being popularized.

Key words:agricultural technology innovation；performance assessment；index system；network management