基于PCSI等評價指標服務高?？蒲袥Q策的探討

彭 婕

(內蒙古財經大學 圖書館,內蒙古 呼和浩特 010070)

近年,論文質量導向越來越被評價體系關注和重視,科研成果的評價體系中,論文生產力和影響力等質量分析都反映著學者所在機構科研建設、學科建設、師資隊伍建設等方面的發展成效。CNKI于2020年發布的單篇論文被引頻次標準化指數(PCSI),不僅是個人科研水平、高質量代表作的量化指標,而且為教師規劃個人科研工作提供參考,也為所在機構科研貢獻了主要的影響力,顯示出所在機構在學術影響力、人才評價、科研和整體發展建設中的發展水平。[1]

本文從PCSI切入,結合高校整體發文量、下載量、被引情況等傳統文獻計量指標,從發表年度、期刊來源等角度比較機構論文集合整體評價,分析高PCSI論文的價值和現實意義等,從多層面、多角度作了可視化分析。

關于論文影響力的文章大多集中于探討計量分析、評價體系、對評價指標的不斷優化、頂級大學的國際競爭力、多維綜合評價等領域,[2]而單篇文獻評價大多研究影響力的構成要素和相關指標,利用PCSI分析的文獻目前較少,把單篇論文影響力和機構層面論文集合整體評價相結合,分析地方普通高校發展的相關分析較少。本文試圖借鑒已有研究成果,分析同類高校學術影響力發展情況,從學科建設、人才評價、學校發展、科研管理等層面,為地方財經類高校學科建設,探索整體科研競爭力的提升等提供參考。[3]

一、研究方法

文獻研究法。論文的寫作初期主要利用圖書館數據庫、政策文件等文字材料搜集資料,根據研究目的梳理整理,著重了解學術論文卓越影響力評價及地方高?？蒲懈偁幜Φ确矫娴难芯楷F狀,歸納形成研究基礎,幫助完成論文初稿。

調查方法從案例研究入手,對特定對象采取數據庫采數結合參與性長期觀察,開展較全面的了解,對樣本數據整理加工并邏輯分類和綜合歸納。

文獻定量分析部分主要使用了比較分析法和描述性統計,通過橫向同類比較,縱向比較,同地區比較等,在一定范圍內反映出地方財經類高校的科研競爭力所處位置,發現數據之間差異。

二、數據來源

分析樣本選擇范圍為中國財經教育資源共享平臺的財經特色資源庫建設單位包括內蒙古財經大學等17所高校,另收集了內蒙古地區其他7所高校相關數據,按同類比較共選取了24所大學。

PCSI(Paper Citation Standardized Index)是2020年CNKI發布的論文引證標準化指數。作為一種新的單篇論文被引頻次標準化方法,PCSI按年度為單篇論文的影響力提供了比較的基礎,是一種相對影響力評價指標,實現了單篇論文可跨年度、跨學科的比較,從而給科研機構或是學術期刊以此數據進行整體評價提供了參考,并對科學評價論文質量提供了更合理的參考。[4]

數據源采集自CNKI數據庫,以2012年至2023年作為統計時段,導出各高校作為第一機構入選CNKI“學術精要數據庫”的單篇論文評價各指標數據①。單篇文獻評價包括高PCSI論文和“三高”論文,即2012年至今按第一機構名稱檢索到的全部學科高PCSI論文和“三高”論文(高被引、高下載、高PCSI),資源類型包括期刊和會議論文,文獻類型包括研究型論文和綜述性論文,期刊來源范圍不限。

三、數據比對與應用

(一)同院校類別高校數據比對

17所財經類高校按照“軟科”排名做了排序,其中前四位為“雙一流”建設高校。數據如表1顯示,單篇論文影響力數據排序與權威機構排名基本保持一致,可見二者匹配度較高,反映出高PCSI論文篇數對評價所屬機構整體科研競爭力具有一定影響力。

觀察其余13所高校數據,其中,南京財經大學、山東財經大學、重慶工商大學、哈爾濱商業大學和新疆財經大學的數據呈現明顯上升勢頭,數據反超綜合排名靠前的學校,顯現出科研競爭力。重點對入選高PCSI篇數不足200篇的5所地方財經類高校分析合著占比和總PCSI兩個指標,如表1所示,哈爾濱商業大學在5所樣本高校中,發表高PCSI論文篇數最多,且整體PCSI指數較高,天津商業大學作為第一機構發文篇數較高,各校合著發文占比都在0.8以上,可見合著是各高校高影響力論文的主要發文模式。[5]

對CNKI提供的“三高”論文數據重新分類進行比對,過去的單篇論文影響力評價主要以下載量、被引頻次等為主要評價指標,只能反映出單篇論文被同行關注和引用的程度,而“三高”論文包括了高PCSI數據,可跨學科整體反映出各校的高影響力代表作及各校的頂級科研水平之間的位置與差距。

因此,“三高”不僅體現出單篇論文的卓越性,對科研人才個人來講便于追蹤學科前沿、同行競爭力、論文影響力等,同時,各校作為第一機構的篇數占比從一個層面反映出機構整體的頂級論文影響力水平,與學科建設、學校發展相融合,整體更反映出所在機構科研聚合效應。

如表2所示為各樣本單位2012年至今入選CNKI的“三高”論文,江西財經大學到重慶工商大學7所高校的數據都在100至300之間,數據反映出“三高”論文篇數達到100篇是高?？蒲写龠M學校整體提檔的一個具體量化指標。

表2 財經類高?！叭摺闭撐那闆r

綜合以上兩個表,數據大致有幾個明顯趨勢:第一個拐點是“雙一流”高校之后,高質量論文總篇數從1200篇明顯呈下降趨勢,從江西財經大學到重慶工商大學呈現出的數據波動表現出財經類強校激烈地科研競爭,重慶工商大學之后的趨勢顯現出河北經貿大學到新疆財經大學5所高校高質量科研成果明顯不足。

各機構具體數據也顯示出,單篇論文影響力較高度的集中于少數幾位學科領軍人才,機構一年的論文影響力表現出可能是由一兩位作者完成,而對地方院?？蒲薪ㄔO來說,發表高質量論文,越來越依賴于團隊合作這個特點。

(二)同地區高校數據比對

進一步按區域進行同類比較,以期望從不同角度觀察各?？蒲杏绊懥λ幬恢?。如表3所示,第4列數據為樣本單位作為第一機構發表高PCSI論文的篇數,第7列數據為樣本單位作為第一機構發表“三高”論文的篇數。數據顯示,內蒙古農業大學的高PCSI論文篇數排第一位,且各項數據都是排名第一,內蒙古科技大學和內蒙古醫科大學的數據都呈現潛力上升趨勢。

表3 內蒙古地區大學高PCSI、“三高”論文情況

(三)高PCSI論文數據情況

PCSI作為代表作的評價指標,同年度數據相加整體反映科研競爭力。因此,選取各樣本作為第一機構發表的高PCSI論文排名第一的單篇論文作為代表,也反映出各校論文卓越影響力情況。

從來源看,財經類高校的高PCSI論文以經管類期刊為主,與預設想的早期論文更易積攢影響力數據的假定不同,24所大學中,發表在3年內的論文有7篇,5年內發表的論文有11篇。前5所大學按學科大類排序最有影響力的是法學、會計、管理和經濟,內蒙古財經大學目前排在第一位的高PCSI論文也是發表在經濟學領域,并且PCSI數據在同地區8所大學中排在第三位。

(四)案例與可視化分析

這幾年隨著論文質量導向政策指導,論文質量管理正在規范化。下面以內蒙古財經大學為案例,繼續分析高PCSI論文,并擴展到各學科代表性論文、發表在核心期刊的論文以及機構整體發文量、被引情況。

1.高PCSI論文發布時間分布情況

2012年以來,內蒙古財經大學作為第一機構共有29篇論文被選入高PCSI論文,其中“三高”論文13篇,從篇名看,跨學科研究約占45%。從高PCSI論文的發表時間看,2021年的高PCSI論文有6篇,是入選篇數最多的一年,2020年和2022年的數值都有小回落。從來源看,發表在《經濟研究》的數據排在第一位,出現兩次及以上的刊物為《管理世界》《審計研究》《統計學報》《財經理論研究》。

2.高PCSI集合整體評價

以所屬機構為單位,整體分析作者群體的論文影響力貢獻價值。如圖1、2、3所示,PCSI數據按年度相加,2019年是該校自2012年高PCSI論文巔峰年,PCSI排名居近十年第一位,高PCSI論文的年度總被引頻次和總下載頻次都是最高的,與前面比較財經類高?！叭摺闭撐牡挠懻撓嗪魬?一篇或幾篇高影響力論文可能代表著一個機構、一個子領域的科研績效指標,反映出高質量論文影響力對所在機構的卓越影響力,從時間線看,論文影響力可能部分受益于高層次人才引進,并與“申博”工作相互促進,同時也得益于人才培養效益。近年的論文整體影響力顯現出高質量科研成果相較不足,結合地方財經類高校應用型為主的辦學定位,需要在頂層設計上對產教研融合突出應用特征,科研服務區域發展提升成果轉化率等方面下功夫。

圖1 內蒙古財經大學高PCSI集合整體評價可視化分析

圖2 內蒙古財經大學高PCSI集合整體評價可視化分析

圖3 內蒙古財經大學高PCSI集合整體評價可視化分析

3.各學科代表性論文發表情況

內蒙古財經大學2012年至2023年入選學術精要數據庫即CNKI遴選出的各學科代表性論文共計1029篇,其中非獨立作者發文390篇,約占38%,從機構名稱大致分為兩類合作形式,本校團隊合作發文52篇,跨校、跨區域合作發文338篇。

內蒙古財經大學作為第一機構入選論文812篇,占比約為79%。圖4為內蒙古財經大學作為第一機構入選學術精要數據庫的論文每年發文篇數的趨勢。

從學者個人角度看,獨著更能證明個人學術水平,含金量更高,而合著論文更體現出科研團隊的發展潛力以及所在機構的科研建設水平。近幾年,合作發文在高質量論文當中占比呈現上升趨勢,如CNKI提供數據顯示,發表高PCSI論文的合著占比平均都在80%以上。由此可見,合著形式已成為沖擊高質量論文的主要路徑,跨學科、跨校、跨區域等合作也與目前“學科建設群”的發展思路相符合。[6]

4.近年論文產出、被引情況

最后,再從機構角度分析論文整體發文量即科研生產力情況,以內蒙古財經大學作為作者單位,選取2012—2023年被CNKI收錄的學術期刊文獻搜索顯示共計7239篇,如圖5所示,展現學校近十年科研整體發展趨勢。其中,核心期刊1551篇,占比約21%。2015年后,科研產出整體趨勢呈現逐年下降。從發表在核心期刊論文數量看,2016年達到一個峰值,2018年后呈現趨緩態勢,2021年出現一個低谷波動。結合圖4,2015年的發文量排在近十年第二位,而入選學術精要數據庫的論文篇數也是近十年最高的,圖4和圖5的整體趨勢相似,因此也可以說,機構需要激勵機制去提升發文數量,這有助于增加論文質量提升的概率。進一步分析學科分布情況:從條件檢索范圍內發表在核心期刊主要學科導出可視化餅圖看,學科分布以經濟、金融、投資、證券、數學和財稅等為主。從主要主題分布的共現矩陣分析看,核心期刊的選題主要集中在實證分析、影響因素研究和分析方面。從條件檢索范圍內主要發表的核心期刊分布看,集中在《中國農業資源與區劃》《統計研究》等。

圖5 內蒙古財經大學各年份發文情況

另外,在CNKI學術評價支撐平臺進行被引文獻檢索,選取被引單位為“內蒙古財經大學”,來源文獻范圍為“期刊庫”,被引文獻類型選擇“期刊類型”,出版年從2012年到2023年,被引年從2012年到2023年,檢索到文獻總數4164篇,總被引15599篇,篇均被引3.75,其中被重要期刊引用的文獻1419篇?？偙灰獢嫡w反映出所在機構科研整體影響力和效用,為機構學術影響力提供數據參考。

四、討論與展望

以上評價數據從論文產出、影響力、合作情況、期刊等角度分析了樣本單位近十年科研發展態勢,學科競爭力發展水平。對高水平的學科帶頭人相對不足,學科隊伍建設水平有待提高,具有標志性的高水平學術成果較少的問題,以科研服務社會、師資隊伍建設等重大項目為抓手,借力信息化、數智化建設平臺,把科研創新與評價激勵更科學合理化,探索出更適合辦學定位的策略路徑,科研評價指引更科學合理化。[7]從高PCSI論文數據看,跨地區、跨學科合作模式不斷增長,在科研生產方面通過合著提升科研競爭力,探索跨學科研究并完善科研合作機制,提升已取得高級職稱教師的科研積極性。

地方高校申請博士學位授權單位之路與學科建設、科研成果提升相輔相成,尤其對中西部普通高校、應用型大學來說,博士點是留住人才以穩定高學歷高層次人才隊伍,重要依托。因此,作為應用型大學,在提升辦學層次過程中,以產教研融合發展為思路,以“博士學位授予單位建設工程”為契機,在“申博”工作中逐步凝練學科建設方向,與重點學科建設相互促進,共同提升學?？蒲兴?。在帶動提升整體學科影響力方面借鑒“雙一流”財經類高校以“學科群建設”為中心引領學科發展的模式,加強科研團隊建設。[8]

在為評估體系提供更多策略方面,提升科研成果質量任重道遠,與參考其他高校經驗做法相比,更需探尋出具有內驅力、更穩定的指標,參考人才發展規律、科研峰值、文獻價值老化速度等指標,對文獻評價、人才培養等從建設性角度看待,從差距中探尋提升空間,在人才評價、科研成果評價、學科建設發展等方面有更合理的評價標準。

[注 釋]

① 目前CNKI的“學術精要數據庫”為雙月更新,本文采取的數據截止時間為2023年7月,按照CNKI數據更新規則,數據版本為2023年5月15日,檢索時間為2023年5至6月,收錄文獻發表時間為2012年1月1日至2023年3月31日,評價指標統計截止日期為2023年3月31日。