江西省自然科學基金績效評價分析與對策建議
——以“十三五”期間江西省自然科學基金項目為例

肖 佳,郭滿紅,謝丹丹,呂添貴

(1.江西省科技事務中心,330016,南昌;2.江西財經大學,330000,南昌)

0 引言

國家自然科學基金是我國支持基礎研究的主要方式,為我國科技創新能力做出了重要貢獻[1]。作為國家自然科學基金的重要組成部分,江西省重視省內基礎研究發展,成立了江西省自然科學基金,圍繞全面建設“六個江西”目標,堅持科技興省戰略,促進基礎學科建設[2]。為此,如何統計并分析江西省自然科學基金資助項目研究成果動態,科學評估資助項目績效,對未來改革完善資助體系具有重要意義。

目前,圍繞自然科學基金績效評價研究已進行了諸多探討。在評價指標方面,通過構建績效評估體系,探討自然科學基金的資金管理與成果轉化效益,選取維度指標也各有差異。不僅從常規的科學成果、技術獎勵、人才培養、誘發后續資助等[3-4],也有選取論文專著、專利數量、獲獎指標、人才培養等指標構建多因子評價指標體系[5];在理論上,也有研究采用“投入產出”分析理論,基于投入、過程、產出、效果等評價分析自然科學基金重大項目績效[6];在評價內容方面,主要聚焦國際經驗啟示、績效評價模型、績效案例評估[7-9]等。在研究方法方面,從定性角度采用問卷調查法[10]、同行評議[11]等分析獲得資助項目績效整體評價;但由于定性方法受主觀因素影響,缺乏客觀準確性,普遍采用定量方法,運用熵權法[12-13]、投入產出DEA模型[14]及DEA和模糊評價結合法[15-16]。綜上,已有研究為績效評價研究提供了豐富的理論與案例,是新時期項目省級資金績效管理的重要方向。鑒于此,本研究通過梳理江西省自然科學基金2016至2020年資助項目變化情況,分析江西省自然科學基金青年項目、面上項目、重點項目和杰青項目的戰略定位,并基于“影響力-人才力-創造力”模型綜合評估已資助項目的績效演化過程,并提出促進績效提升的對策建議。

1 江西省自然科學基金項目基本情況

1.1 總體概況

江西省自然科學基金于1989年正式設立,是省級科技計劃體系的重要組成部分,主要開展創新性基礎研究和應用基礎研究,培養科學技術人才,促進各學科均衡、協調和可持續發展。江西省自然科學基金十分關注社會經濟發展中產生的具有前瞻性、基礎性問題而開展的應用基礎研究,尤其關注具有重大原創性、顛覆性、交叉學科創新性的項目。在2016—2020年期間,江西省自然科學基金共受理來自全省18 949份項目申請,批準資助各類項目3 505項,其中面上項目1 672項、青年基金項目1 230項、重點項目285項、青年基金重點項目(杰出青年基金項目)318項,五年總平均資助率為18.50%,項目批準總經費為25 772萬元。

1.2 項目組成和定位

江西省自然科學基金共設立了面上項目和青年基金項目、重點項目和杰出青年基金資助項目類型,共同構成定位明確的新時代基金資助體系。然而,各項目類型資助定位及總體目標不同,具體如下:1)面上項目。面上項目支持具有一定科研基礎和發展潛力的科技人員,瞄準學科發展前沿自主選題,開展具有前瞻性、創新性和較為深入的科學研究,促進各學科均衡協調發展;2)青年基金項目。青年基金項目支持青年科技人員自主選題,開展創新性與應用型基礎研究,培養青年科技人員獨立主持科研項目、進行創新研究的能力,促進青年科技人才快速成長;3)重點項目。重點項目支持有較強科研基礎和研究實力的優秀科技人員,針對已有較好研究基礎的研究方向開展創新性研究,促進學科發展和推動若干重要領域或科學前沿取得突破;4)杰出青年基金項目。杰出青年基金項目支持在相關研究領域已取得突出成果,有望獲得國家優秀青年基金或國家杰出青年基金項目資助的優秀青年科技人員,組成科研團隊開展高水平的基礎研究與應用基礎研究,培養學術骨干或學科帶頭人。

1.3 項目基本情況

江西省自然科學基金項目在“十三五”期間成果顯著。在2016—2020年,江西省自然科學基金項目申報數量、資助數量均穩中有進增長,經費數量以及資助率波動較大(圖1)。

圖1 2016—2020年江西省自然科學基金項目情況

從項目類型看,2016—2020年,江西省自然科學基金共受理面上項目申請9 526項,批準資助面上項目1 670項,占同期基金總資助項目的47.65%,面上項目批準經費共計8 789萬元,占同期基金批準總經費的34.10%,平均資助率為17.55%。面上項目申請數、批準資助數基本保持平穩,除2018年略有降低外,其余各年呈上升趨勢。青年基金項目申請數共1 493項,申請數、批準資助數基本保持平穩,除2020年略有降低外,其余各年均呈現上升趨勢。重點項目申請數、批準資助數除2018年略有降低外,其余各年均呈現上升趨勢。杰出青年基金項目共申請1 493項,批準318項,2017年資助率最高,達到31.78%?？傮w上,面上項目和青年項目是主要資助對象,重點項目和杰出青年基金項目資助規模相對較小。

2 江西省自然科學基金項目績效評價指標體系構建

2.1 江西省自然科學基金項目績效評價指標體系構建原則

在構建江西省自然科學基金項目績效評價指標體系過程中,除遵循一般指標體系設計通用原則外,重點突出科學性、實效性、目標性、關鍵性、層次性和實用性原則[6,17-19]。一是科學性原則。遵循科研活動規律,考慮江西省自然科學基金項目績效評價需求以及特點,設置合理的評價內容和評價指標體系;二是實效性原則。突出各項目類型的資助定位及總體目標,重點評價其在解決國家重大發展需求、引領科學前沿發展、突破關鍵核心技術、培養科技人才、提升自主創新能力、培育壯大新動能等方面的實際成效;三是目標性原則。指標體系的設計必須有利于全面準確地反映江西省自然科學基金項目績效水平;四是關鍵性原則。指標體系要選取能突出反映江西省自然科學基金項目績效的關鍵和重要指標來構建。建立以創新質量和貢獻為導向的績效評價體系;五是層次性原則?？萍汲晒哂卸嘣獌r值的特點,并存在評價指標單一化、標準定量化、結果功利化和“唯論文”評價傾向的問題;六是實用性原則。切實發揮績效評價在江西省自然科學基金項目調整、后續支持、優化管理等方面的作用,促進資助與管理績效水平的不斷提高。

2.2 江西省自然科學基金項目績效評價指標體系構建

基于新公共管理理論,充分考慮《中央財政科技計劃(專項、基金等)績效評估規范(試行)》和《關于破除科技評價中“唯論文”不良導向的若干措施(試行)》等相關要求,擬將基金資助項目績效評價指標體系分為三個層級,運用熵權法和層次分析法,細化指標及其分值,構建江西省自然科學基金項目績效評價指標體系框架(表1)。

表1 江西省自然科學基金指標體系表征

2.3 江西省自然科學基金項目績效評價指標內涵及說明

根據自然基金項目定位要求,從江西省自然科學基金項目目標定位、特點及管理需求出發,并堅持科技創新質量、可持續發展、服務對象滿意度為核心的評價導向,以考察項目完成后的人才影響及對社會效益創造力為重點,構建了包含影響力、人才力和創造力的三層績效評價指標體系,共設立7個一級指標和8個二級指標。具體如下。

1)影響力。為了克服績效評價中單純重數量指標、輕質量貢獻等不良傾向,破除“唯論文”和“SCI至上”的錯誤傾向,能夠從成果的數量和質量兩個層級量化評價江西省自然科學基金資助項目研究產出。因此,參考已有研究成果,選取國際三大檢索收錄數和著作數表征學術成果數量,獎勵情況表征?？紤]到基礎研究成果表現形式種類繁多,只統計項目研究過程中國際三大檢索SCI、EI、ISTP收錄數和著作數作為數量指標,能有效評價基礎研究績效和研究成果可持續性發展狀況,其一般代表著研究者在科學研究方面的貢獻和其科技創新能力?？茖W基金論文的生產力及影響力常常作為科學基金績效評價的主要參數[20],而獎勵情況則體現了科研項目產出的質量和影響力水平,是重視自然基金項目的成果質量的表現,所以依據此來選取指標。

2)人才力。包含人才培養和人才引進兩個指標,分別采用研究生培養量和高層次人才引進量表征。培育科研后備人才是江西省自然科學基金委的重要任務?；诮魇」I強省、科教興省、綠色提升等戰略需求,培養并資助一批有能力開展創新性研究且有意愿進行基礎研究的青年科技人才和領軍人才,對于江西省科研工作可持續發展具有重要意義[21]。研究生是江西省未來科研工作的重要供給源,而高層次人才能能夠提升人才質量,為江西省科研發展注入新動力。

3)創造力。自然基金項目成果所帶來的社會收益是最為重要的創造力產出方式[22],江西省自然科學基金項目績效評價注重評估在成果轉化、支撐產業發展等方面的績效。為評價其社會、科技和經濟價值,分別選取新增就業人口量、新增產值和專利數三個指標進行表征。創造力能夠有力評價資助項目的實踐價值,以及服務對象滿意度。就業人口的增加有利于促進江西省社會長期穩定發展,保障基礎民生;科研項目轉化產生的經濟效益能帶動產值增加,有利于推動江西省經濟高質量、創新發展;而專利數表現一個社會的創新能力和社會活力,推動了科技應用推廣。

2.4 績效評價方法

2.4.1 指標數據標準化 本研究中采用極差標準化法[23]對項目績效評價指標進行量化統一。

(1)

2.4.2 權重確定 層次分析法屬于較為科學的主觀評價方法,可用于多方案選擇或結合其他評價方法獲取各元素權重進而實施綜合評價,具體運算公式詳見文獻[24]研究。在利用層次分析對其主觀賦權的基礎上,得出權重αi,運用熵權法對各項指標進行客觀賦權,得出權重βi,參考吳銳等人[25]研究,借助偏好系數μ=0.5確定各項指標最終權重ωi,具體如下。

Wi=0.5(αi+βi)

(2)

2.4.3 績效綜合評價 在結合主觀層次分析和客觀賦權計算權重的基礎上,對江西省自然科學基金項目績效評價指標進行綜合評價(表2)。計算公式為

表2 績效評價指標體系與權重

(3)

式中,Aj為j項目的綜合評價值,Wi為指標權重。

2.5 數據來源

根據江西省自然科學基金委提供的數據,整理了“十三五”期間資助項目的相關指標。其中,影響力指標包含負責人在項目開展期間論文發表數量以及專著發表數量、獲獎數量等;人才力指標包含項目資助期間培養的博、碩人才及引進的高層次人才數等;創造力指標包含項目組受資助期間所帶來新增就業數、經濟效益帶來的新增產值以及專利數量。

3 江西省自然科學基金項目績效評價分析

采用前述績效指標體系和方法,得出2016—2020年江西省杰出青年基金項目、面上項目、青年基金項目和重點項目成果績效評分,然后將4個項目計算結果匯總平均得到江西省自然基金項目成果整體平均績效評分情況。

3.1 江西省績效評價水平的整體分析

將江西省自然科學基金項目績效評分,得到江西省自然科學基金項目2016—2020年績效變化趨勢(圖2)。

圖2 江西省自然科學基金項目績效評價結果

1)從整體來看,江西省自然科學基金項目績效呈上升趨勢,從2016年0.133增長到2020年的0.404,年均增長率約33%,總體上呈現逐年穩健上升趨勢,這與江西省注重科技創新成果是密不可分,與江西聚焦創新資源集聚,加快科技平臺和高端人才一體化布局緊密相關。

2)從各項目來看,面上項目(0.358)和重點項目(0.347)績效均高于江西省自然科學基金項目績效的平均水平(0.270),其中,2016—2020年面上項目總體績效評分均高于平均水平,呈現良性發展趨勢。在2020年增長最為迅速,從2019年0.337增長至2020年的0.671,增長接近一倍。重點項目雖在2016年低于平均水平,但之后發展迅猛。從2016年低于平均水平的0.074 7,2014年增長至0.290,2018年績效水平遠高于其他3個類別項目和平均水平,表現這一年重點項目論文產出和成果獎勵均較多,科技成果轉化為經濟效益,成果推動專業化,及時轉化為現實生產力,助力經濟高質量發展。杰出青年基金項目(0.183)和青年基金項目(0.189)均低于平均績效水平,究其原因,其資助規模、申請數量等與重點和面上項目相比總體相對有限,依靠受資助項目培養的博碩人才及論文發表數量與水平均不及面上項目和重點項目,導致杰出青年與青年基金項目績效低于平均水平。

3.2 江西省績效評價的重點分析

如表3所示,2016—2020年間面上基金項目平均績效為0.358,而重點項目平均績效為0.347,青年基金項目0.190,杰出青年基金項目0.183,比績效最低的杰出青年基金項目高出96.1個百分點。以2016年為例,面上項目的平均績效為0.247,高出杰出青年基金項目平均績效(0.050)3倍多。面上項目作為科學基金資助數量最多,總經費規模最大的項目類型,承擔著促進基礎研究各學科全面發展、穩定基礎研究隊伍和取得創新性研究成果。

表3 2016—2020年度江西省自然科學基金項目績效評價結果

事實上,面上基金項目績效突出得益于其成果轉化的應用,顯現社會價值。如相關項目成果為鄱陽湖流域城鎮化與水資源的協調發展、水資源的可持續利用和管理提供理論依據,促進鄱陽湖地區生態文明建設。此外,新成果研發應用于環境友好的燃料電池和金屬空氣電池研究,有助于現代建筑達到節能50%,減少溫室氣體排放。從而實現“削峰填谷”,改善源荷匹配性,優化和節約微電網資源節能?？梢钥闯?面上項目創新成果研發顯著,科技成果轉移轉化成效突出,有力推動了江西省自然科學基金項目績效的提升。

3.3 江西省自然科學基金績效分類分析

江西省自然科學基金項目績效水平在影響力、人才力和創造力三個層面上穩步提升,推動實現科技水平自立自強目標(表4、圖3)。

表4 江西省自然科學基金項目績效評價

圖3 江西省自然基金項目分目標績效

1)影響力分析。影響力“十三五”期間總績效為0.321,各項目年平均增速約83%。具體情況是,“十三五”期間項目論文年發表數量由2018年的2 045篇增長至2020年的3 749篇,項目論文產出數量逐年提升。其中,杰出青年基金項目(0.089)和面上項目(0.110)績效較為突出,分別得益于其資助率和申請數較多,間接導致論文發表和獲獎成果顯著。

2)人才力分析。不同項目在人才力(0.268)方面沒有學術影響力(0.321)大,具體情況是,人才培養的過程也是一個具有時間性和滯后性的過程,江西省自然科學基金資助的項目多在3—5年結題,博士研究生的培養基本上在4年以上,人才培養上難以在短時間內看出顯著成效。各項目人才力績效逐年增長,年平均增速約52%,重點項目最高為119%,為后續人才培養做出貢獻,如省重點項目在其相關研究基礎上申請并獲批國家自然科學基金,為學科建設及帶動青年教師的科學研究積極性起到了良好的促進作用。其中,面上項目人才力績效最為突出,“十三五”期間達0.128,人才引進270人次,博碩高層次培養量1 640人,均領先于其他項目。

3)創造力分析。江西省創造力績效增長明顯,年平均增速69%。創造力績效(0.408)明顯高于影響力(0.321)和人才力(0.268),相關科技成果轉化為經濟效益的發展凸顯,以創新推動經濟發展,對解決產業發展中存在的“卡脖子”問題起重要促進作用。具體情況是,專利數逐年增長,從2016年的982項增長到2020年的1 379項,上升較快,而新增產值指標績效上升較慢。

其中,從4類項目對比來看,重點項目創造力績效尤為突出,由0.038上升到最高點0.393,累計提升0.355,績效提升幅度最大;面上項目由0.069上升到0.231,累計提升0.162;杰出青年基金項目由0.007上升到0.155,累計提升0.148;青年項目由0.071上升到0.103,累計提升0.032,績效改善幅度最小。江西省圍繞促進科技成果轉化進行了積極探索,科技界與經濟界間轉化科技成果的積極性顯著提升。諸如江西省加大對清潔能源的扶持力度,“十三五”期間,資助項目研制了微流控芯片便攜式燃料電池,促進配電網資源和分布式新能源優化利用,同時對江西省智能電網以及光伏扶貧工程的建設具有重要現實意義。

4 研究結論與對策建議

4.1 研究結論

本研究構建了江西省自然科學基金項目績效評價指標體系,以2016—2020年間的青年項目、面上項目、重點項目和杰出青年項目為研究對象,結合主客觀權重,依據熵權法對項目進行評分,并以此作為依據分析各類型項目在影響力、人才力、創造力三方面的績效情況。所得結論如下。

1)江西省自然科學基金項目呈逐年穩健上升趨勢,從2016年0.133增長到2020年的0.404,年均增長率約33%,在人才培養以及科研成果轉化方面表現良好;從項目類型來看,面上項目(0.358)和重點項目(0.347)績效均高于江西省基金項目績效的平均水平(0.270)。

2)“十三五”期間,面上項目績效突出,面上項目的平均績效為0.358,平均水平明顯領先其他項目。

3)在績效評價目標層面,各類型項目表現差異明顯?！笆濉逼陂g,影響力總績效為0.321,各項目年平均增速約83%;人才力層面,各類項目的人才力績效(0.268)均低于影響力(0.321),但呈現逐年增長趨勢,年平均增速約52%;創造力層面,績效增長明顯,年平均增速69%。創造力績效(0.408)明顯高于影響力(0.321)和人才力(0.268),相關科技成果轉化效益凸顯。

4.2 對策建議

根據績效評估結果,立足于江西省自然科學基金項目資助體系,從影響力、人才力和創造力提出績效提升路徑,推動江西省科技創新水平提升。

1)改革完善科技成果獎勵體系,穩步提升影響力。一是落實《江西省科學技術獎勵辦法實施細則》,調整江西省科技獎評獎周期,制定科學評審程序,堅持公正性、榮譽性。鼓勵申報人在國際頂級或重要科技期刊發表論文,提高論文質量;二是積極參加國內外頂級學術會議,不斷擴大學術影響力;三是強化科技獎勵與江西省重大戰略需求的緊密結合,加大對基礎研究和應用基礎研究成果的獎勵力度;四是是培育高水平的社會力量科技獎勵品牌,以慈善公益組織為支點,撬動匯聚社會力量,提高科技獎勵整體水平。諸如支持江西省醫學會醫學科學技術獎、贛鄱水利科學技術獎、江西省計算機用戶協會科學技術獎等社會科技獎勵品牌發展,培育地方科技發展新動力。

2)積聚人才力,賦能科技高質量發展。一方面,引進人才要加強對其教育和科研經歷的調查驗證,不把教育、工作背景簡單等同于科研水平。重點圍繞江西省“2+6+N”產業高質量跨越式發展行動計劃和深入推進數字經濟做優做強“一號發展工程”;另一方面,聚焦鄉村振興、鄱陽湖國家自主創新示范區、江西內陸開放型經濟試驗區等重大戰略,服務重大科技創新平臺、關鍵核心技術、重點產業和領域人才需求,引進一批能夠帶動優勢學科發展、突破關鍵核心技術、推動產業高質量發展的高層次和急需緊缺人才來江西創新創業。

3)產學研用深度融合,創新驅動科技發展。一是完善以科技成果為紐帶的產學研深度融合機制,建立科研機構和企業等各方參與的創新聯盟,落實相關政策,支持高校、科研院所科研人員到國有企業或民營企業兼職開展研發和成果轉化,加大高校、科研院所和國有企業科研人員科技成果轉化股權激勵力度,科研人員獲得職務科技成果轉化現金獎勵計入當年本單位績效工資總量,但不受總量限制,不納入總量基數。例如江西財經大學打造世界VR高地的戰略部署,其虛擬現實(VR)現代產業學院與多家深圳企業共同推動產教融合生態鏈建設。同時,培育科技創新氛圍,優化科技資源整體布局,進一步推進九江、贛州、景德鎮等城市合作機制,擴大自然科學基金項目的實施范圍。

4)對標國家資助體系,完善地方創新體系。目前,江西省自然科學基金項目資助體系僅有四類項目。省基金未來應該健全創新研究群體科學基金、專項類項目、聯合基金項目等資助體系,探索和嘗試海內外聯合的重大項目實施和組織機制。南昌大學同海內外高校簽署了多項科技合作協議,推動科研聯合攻關、人才聯合培養和創新成果共享,實現了資助體系創新實質性落地。