国产日韩欧美一区二区三区三州_亚洲少妇熟女av_久久久久亚洲av国产精品_波多野结衣网站一区二区_亚洲欧美色片在线91_国产亚洲精品精品国产优播av_日本一区二区三区波多野结衣 _久久国产av不卡

?

全面畫像,而非簡單指標(biāo)
——利用可視化手段全面揭示單點指標(biāo)的蘊含信息

2020-09-03 11:48:18
世界科技研究與發(fā)展 2020年1期
關(guān)鍵詞:全貌科研人員影響力

何 薇 王 琳

(科睿唯安學(xué)術(shù)研究事業(yè)部,北京100086)

1964年,科學(xué)引文索引(Science Citation Index,SCI)的推出為全球科研人員提供了一種新的論文檢索方法——引文檢索[1]。其提出者加菲爾德博士在后續(xù)研究中發(fā)現(xiàn),引文數(shù)據(jù)除了可用于論文檢索外,還可以揭示科學(xué)活動本身,包括科學(xué)的結(jié)構(gòu)、科學(xué)隨時間的變遷以及文獻作者之間的聯(lián)系[2-4]。在此基礎(chǔ)上,無論是科學(xué)計量學(xué)界的學(xué)者還是政府或研究機構(gòu)的科研管理人員對該領(lǐng)域作了進一步探索性研究,而且不同程度上將定量分析結(jié)果與定性評估相結(jié)合[5-7]??蒲挟a(chǎn)出的影響力是多方面的,如學(xué)術(shù)影響力、技術(shù)影響力、經(jīng)濟影響力及社會影響力等?;谝牡奈墨I計量學(xué)指標(biāo)在合理應(yīng)用前提下可以揭示其學(xué)術(shù)影響力[8]。使用引文數(shù)據(jù)進行定量分析的優(yōu)勢在于:通過提供全面、客觀的數(shù)據(jù),能有效避免主觀判斷的片面性,有助于使用者做出更符合科學(xué)實際的決策。因此,全球很多國家和地區(qū)都在應(yīng)用文獻計量學(xué)對科研活動進行定量分析,其中包括美國國家科學(xué)基金會(National Science Foundation)[9]、歐盟委員會(European Commission)[10]以及日本文部科學(xué)?。∕inistry of Education,Culture,Sports,Science and Technology)[11]等。

盡管定量分析為科研評估提供了重要的參考,其作為同行評議的一種補充[12],無法凌駕或替代后者。另一方面,隨著科學(xué)研究的規(guī)模、專業(yè)細分度和學(xué)科交叉程度與日俱增,簡單使用已有定量數(shù)據(jù)指標(biāo)對科學(xué)活動和科研機構(gòu)進行評價往往有失偏頗。事實上,當(dāng)代科學(xué)研究并非一維性事物,其過程日趨復(fù)雜。另外,需要考慮到研究機構(gòu)通常需兼顧教學(xué)、科研雙重任務(wù),且科研任務(wù)跨越多個學(xué)科。因此,使用定量數(shù)據(jù)對科研人員、科研機構(gòu)進行分析和評價時,簡單地將數(shù)據(jù)壓縮成若干單一指標(biāo)或排名將導(dǎo)致信息嚴(yán)重丟失。近幾年,國際學(xué)術(shù)界提出“萊頓宣言”[13]和“舊金山宣言”[14],以此來糾偏“量化至上”和現(xiàn)有定量分析方法的不當(dāng)之處。D.Pendlebury在《如何運用文獻計量學(xué)分析工具進行科研績效評價》[15]白皮書中也提出十大實用準(zhǔn)則來探究如何更恰當(dāng)?shù)厥褂枚糠治?。因此,如何正確合理地使用定量數(shù)據(jù)進行科研績效分析成為了一個廣受關(guān)注的重要問題。

針對該問題,2019年科睿唯安旗下科學(xué)信息研究所發(fā)表了一系列全球研究報告。該系列的第一篇報告——《全面畫像,而非簡單指標(biāo)》[16]指出:盡管受到資深分析專家的反對,通過簡單分析來評估論文、科研人員和機構(gòu)表現(xiàn)的研究仍然存在,單點指標(biāo)和線性排名等簡單分析手段仍被廣泛采用。實際上,單點指標(biāo)雖然在某些類型的科研績效比較中具有價值,但如果用單點指標(biāo)替代全面的科研管理,例如在缺乏補充信息的情況下進行學(xué)術(shù)評估,甚至將單點指標(biāo)視為招聘標(biāo)準(zhǔn),那么,這類信息就具有局限性。此外,單個(或孤立)指標(biāo)可能會被誤用,進一步導(dǎo)致分析錯誤。報告還指出,每一個被過度簡化或誤用的指標(biāo),可以尋求更優(yōu)的信息表達方式。其中一種方式是基于詳盡準(zhǔn)確的數(shù)據(jù),以多個維度互補的圖表形式進行數(shù)據(jù)可視化,同時通過展開數(shù)據(jù),將指標(biāo)置于具體案例背景下,通過挖掘新的特征來展示更全面的科研績效信息。

本文基于《全面畫像,而非簡單指標(biāo)》提出的理念,從科研管理最常見的三種分析對象——機構(gòu)、學(xué)科和個人展開分析并結(jié)合案例進行詳細說明。第一節(jié)將介紹如何利用影響力全貌分析研究機構(gòu)的整體科研績效,第二節(jié)通過優(yōu)劣勢的分析方法來綜合分析某個機構(gòu)的學(xué)科發(fā)展態(tài)勢,第三節(jié)將介紹如何利用射束圖來分析科研人員產(chǎn)出的影響力。

1 研究機構(gòu):篇均引文影響力與影響力全貌

利用單點指標(biāo)對研究團隊或機構(gòu)進行分析時,其局限性尤為突出。ISI的報告中列舉了兩所從事生物醫(yī)學(xué)研究的機構(gòu)過去5年的學(xué)術(shù)產(chǎn)出,其中A機構(gòu)發(fā)表論文845篇,B機構(gòu)發(fā)表論文403篇。將論文的被引次數(shù)針對學(xué)科、出版年份、文獻類型的世界平均值進行“規(guī)范化”,可得出每篇論文的“學(xué)科規(guī)范化引文影響力”(Category Normalized Citation Index,CNCI)值。若 CNCI值大于1,說明這篇論文的被引頻次超過了全球同類論文的平均引用水平,若CNCI小于1,說明這篇論文的被引頻次不及全球同類論文的平均引用水平。A機構(gòu)所有論文的平均CNCI為1.86,B機構(gòu)則為2.55。雖然這兩個平均后的CNCI值不具有統(tǒng)計功效,但在管理實踐中通??梢浴凹僭O(shè)”體量小的B機構(gòu)具有更高的“影響力”。

機構(gòu)的CNCI平均值是由數(shù)篇文章各自的CNCI通過簡單算數(shù)平均計算得到。然而,該平均影響力指標(biāo)可能具有一定的欺騙性。其原因在于被引次數(shù)一般都具有偏斜分布的特性,即樣本集擁有眾多低值和若干高值[17],而非正態(tài)分布的數(shù)據(jù)不適合用平均數(shù)來描述數(shù)據(jù)集。為避免該問題,報告以CNCI的全球平均值為基準(zhǔn),對被引次數(shù)進行分類,以顯示高被引和低被引論文的真實分布[18]。據(jù)此,可以發(fā)現(xiàn)上述兩個機構(gòu)的影響力全貌并沒有實質(zhì)性差異。而導(dǎo)致B機構(gòu)CNCI值高的原因,通過回顧原始數(shù)據(jù)可知B機構(gòu)曾發(fā)表一篇綜述性論文,被權(quán)威期刊高頻引用,最終拉升了該機構(gòu)整體的平均影響力。

上述方法所生成的研究機構(gòu)科研畫像提供了遠比單點指標(biāo)CNCI總平均值更加豐富的信息,本文稱之為影響力全貌(Impact Profile)。它可以“定位”每個機構(gòu)的整體平均值,并檢查其科研產(chǎn)出高出或低于該平均值的比例。影響力全貌除用于機構(gòu)對標(biāo)分析,亦可應(yīng)用于機構(gòu)國際合作論文、影響力隨時間進展、小規(guī)模機構(gòu)影響力全貌揭示等分析角度。本節(jié)將就這三個方面展開闡述。

1.1 基于Impact Profile的機構(gòu)國際合作論文影響力分析

一般而言,國際合作論文比國內(nèi)合作論文更容易獲得較高的引用次數(shù)[19,20]。利用影響力全貌能夠全面揭示國際合作對機構(gòu)科研產(chǎn)出的學(xué)術(shù)影響力帶來的促進作用。圖1通過平滑曲線的方式,列舉了A、B兩所高校過去10年化學(xué)學(xué)科通過國內(nèi)合作(或單獨發(fā)表)及國際合作論文的產(chǎn)出影響力全貌。其中,A高校來自中國,該學(xué)科國際合作論文百分比為14.7%。B高校來自美國,該學(xué)科國際合作論文百分比為41.1%??梢钥吹?,A高校國際合作論文零被引論文百分比遠低于國內(nèi)合作(或單獨發(fā)表)的論文,即更多的國際合作論文獲得了其他學(xué)者的引用。同時國際合作論文在CNCI位于0.5到1的區(qū)間范圍內(nèi)其百分比高于國內(nèi)合作(或單獨發(fā)表)的論文,且在CNCI大于1的其它區(qū)間內(nèi),論文占比也均高于國內(nèi)合作(或單獨發(fā)表)的論文。這表明:國際合作論文在高影響力區(qū)間中占比更高,國際合作整體提升了A高校論文的引文影響力水平。反觀B高校,其國際合作論文與國內(nèi)合作論文的影響力全貌分布則十分接近。A和B兩所高校的影響力全貌對比分析表明,美國高校B在該學(xué)科國際合作論文占比較高(41.1%),國際合作論文和國內(nèi)發(fā)表論文影響力表現(xiàn)較為均衡一致,但我國高校A在該學(xué)科的國際合作論文占比相對偏低,但高影響力的合作成果更多來自國際合作。

1.2 基于Impact Profile的機構(gòu)影響力時間進展分析

追蹤機構(gòu)科研產(chǎn)出與影響力隨時間的進展是科研管理人員十分關(guān)注的分析內(nèi)容之一。通過分時間段影響力全貌的比較能夠反映機構(gòu)影響力表現(xiàn)的發(fā)展與變化。圖2展示了某高校在過去10年間,每五年影響力全貌的對比。如圖所示,該校在2014—2018年期間,在CNCI大于1的若干區(qū)間的論文占比均高于2009—2013年時間段,表明該機構(gòu)在最近五年內(nèi)論文影響力有一定程度的提升。此外,在2014—2018年時間段內(nèi),該校零被引論文的占比更高,其原因在于近期發(fā)表的論文與2009—2013年發(fā)表的論文相比,其累計獲得引用的時間更短,因此零被引論文的占比相對較高。

圖1 兩所高校2009—2018年ESI化學(xué)學(xué)科科研產(chǎn)出影響力全貌圖Fig.1 The Impact Profile of Two Universities in the ESIChemistry Field in 2009-2018

1.3 小規(guī)模機構(gòu)影響力全貌分析

數(shù)據(jù)分析表明:我國若干小規(guī)模高校在部分學(xué)科中具有較高的平均影響力。例如,某高校過去十年(2009—2018)僅發(fā)表319篇工程學(xué)學(xué)科研究論文,但其平均CNCI高達3.38,而相同數(shù)據(jù)檢索條件下,美國麻省理工學(xué)院在十年期間共發(fā)表6142篇工程學(xué)論文,平均CNCI為1.70。由于該中國高校在工程學(xué)學(xué)科論文產(chǎn)出數(shù)量較少,其高影響力表現(xiàn)可能原因有:1)若干篇高CNCI值論文導(dǎo)致平均CNCI值較高;2)論文總體影響力較高。具體原因,則可以通過圖3的影響力全貌來深入分析。如圖3所示,在零被引論文占比上,麻省理工學(xué)院表現(xiàn)略優(yōu)于該中國高校,后者有11.6%的論文在發(fā)表后未獲得引用。兩所高校論文占比最高的區(qū)間均出現(xiàn)在CNCI大于1小于2的范圍內(nèi),且麻省理工學(xué)院在該區(qū)間的論文占比略高于該中國高校。但在CNCI大于8的區(qū)間內(nèi),該中國高校的論文占比(14.7%)遠高于麻省理工學(xué)院(2.3%)。通過影響力全貌分析,可以看到該中國高校在極高影響力區(qū)間范圍內(nèi)發(fā)表了相當(dāng)占比的論文。進一步分析則顯示該中國高校在工程學(xué)學(xué)科的高CNCI值很大程度上由三位高被引科學(xué)家發(fā)表的大量高影響力文章所導(dǎo)致。本案例說明,在分析機構(gòu)影響力表現(xiàn)的實踐中,不能只考慮機構(gòu)的CNCI均值,而是要結(jié)合產(chǎn)出和深入的影響力全貌分析才能揭示出數(shù)字背后的真實涵義。

圖2 某機構(gòu)2009—2013年時間段及2014—2018年時間段科研產(chǎn)出影響力全貌對比圖Fig.2 The Comparison of Impact Profile of an Exemplar University during 2009-2013 and 2014-2018

圖3 某中國高校與美國麻省理工學(xué)院2009—2018年ESI工程學(xué)學(xué)科科研產(chǎn)出影響力全貌對比圖Fig.3 The Comparison of Impact Profile between a Chinese University and MIT in ESI Engineering Field in 2009-2018

影響力全貌這一分析方法,試圖回答科研管理人員諸如本機構(gòu)在哪一影響力區(qū)間的論文最多、機構(gòu)科研影響力的分布如何、影響力水平高于全球均值的產(chǎn)出占比如何、較高影響力的科研產(chǎn)出占比如何等問題。通過以上舉例,可以看到運用這一分析方法,能夠更加全面、清晰地展現(xiàn)高?;蛘呖蒲袡C構(gòu)論文影響力分布情況。在科研管理工作中,通過對標(biāo)分析、國際合作分析、時間趨勢等多種維度,結(jié)合這一分析方法可以為全面把握本機構(gòu)的科研成果表現(xiàn)提供更為詳細的數(shù)據(jù)支撐。

2 研究足跡而非大學(xué)排名

大學(xué)排名以單一位次來反映高校多種多樣的校園活動,其壓縮損失的信息量遠遠超過大多數(shù)分析指標(biāo)。相比較而言,研究足跡(Research Footprint)按學(xué)科或多個不同指標(biāo)顯示績效表現(xiàn),可用于比較兩個機構(gòu)或國家的教學(xué)科研水平,也可將一系列的目標(biāo)機構(gòu)與相應(yīng)的基準(zhǔn)進行對標(biāo),因此比大學(xué)排名蘊含更詳盡的信息。值得注意的是,研究足跡證明,僅僅通過一個數(shù)值對兩個復(fù)雜研究體系進行比較是不科學(xué)的。

以兩所英國大學(xué),即帝國理工大學(xué)和倫敦政治經(jīng)濟學(xué)院為例,其在2018年泰晤士世界大學(xué)排名中位次分別為第9名和第26名。然而,17個位次的排名差距是否反映出這兩所高校的實際水平?ISI的報告通過與其同類高校進行研究足跡分析(主要從不同學(xué)科領(lǐng)域所獲得的研究資助金額進行比較),意外地發(fā)現(xiàn)倫敦政治經(jīng)濟學(xué)院與同類高校(即英國非理工類學(xué)院及研究所)相比,其在自然科學(xué)尤其是醫(yī)藥生命健康相關(guān)的領(lǐng)域中獲得的資助表現(xiàn)相對較好。其主要原因在于該校參與了眾多以自然科學(xué)為基礎(chǔ)的項目,特別是政策和社會背景領(lǐng)域的研究。通過這個例子,可以看到對科研機構(gòu)進行績效比較時,單個指標(biāo)很難全面反映真實情況。而研究足跡則是相對全面的一種方法,其通過若干圖表從不同的視角展示某個機構(gòu)和同類機構(gòu)相比的真實情況。如果希望進一步對機構(gòu)的學(xué)科優(yōu)劣勢分析,則還需要考慮不同學(xué)科之間的差異,例如醫(yī)學(xué)類論文的引用次數(shù)相對來說普遍比工程類的要高,因此需要利用基準(zhǔn)值來分析機構(gòu)的“研究足跡”。我們可以采用優(yōu)劣勢分析法(Strengths Weaknesses Opportunities Threats,SWOT)來對某一個機構(gòu)的學(xué)科發(fā)展情況進行綜合分析,并與基準(zhǔn)值進行比較。

本節(jié)將結(jié)合實際例子,從基于SWOT的機構(gòu)學(xué)科分析和機構(gòu)學(xué)科隨時間變化動態(tài)趨勢分析這兩個方面來詳細展示SWOT的應(yīng)用場景。

2.1 基于SWOT的機構(gòu)學(xué)科優(yōu)劣勢分析

高校進行學(xué)科規(guī)劃和學(xué)科分析時首先需要了解本校學(xué)科的現(xiàn)有布局,識別優(yōu)勢學(xué)科和潛力學(xué)科等。圖4展示了某學(xué)校的22個ESI學(xué)科的SWOT分析:即每個學(xué)科相對于全球的優(yōu)勢、劣勢、機會和威脅分析。如圖所示,圖中橫坐標(biāo)為特定學(xué)科占本機構(gòu)所有論文的占比除以全球該學(xué)科占全球所有學(xué)科論文的比例,該比例大于1,說明對于相應(yīng)學(xué)科,本機構(gòu)在產(chǎn)出規(guī)模上超過全球平均水平;縱坐標(biāo)為CNCI值,該值大于1,說明對于相應(yīng)學(xué)科,本機構(gòu)的引文影響力超過全球平均水平。在四個象限中,第一象限為優(yōu)勢學(xué)科,即學(xué)科的論文產(chǎn)出占比和引文影響力表現(xiàn)均優(yōu)于全球平均水平。因此,農(nóng)業(yè)科學(xué)、藥理學(xué)與毒理學(xué)、植物學(xué)與動物學(xué)這三個學(xué)科是該學(xué)校的優(yōu)勢學(xué)科。第二象限代表機會學(xué)科,其中引文影響力最高的學(xué)科是精神病學(xué)與心理學(xué),其引文影響力超過全球平均水平的8倍,但是由于該學(xué)科產(chǎn)出絕對數(shù)量少,僅有2篇,且為高被引論文,導(dǎo)致該學(xué)科CNCI值較高,因此其分布結(jié)果僅供參考。第三象限代表劣勢學(xué)科,該區(qū)域的學(xué)科論文的產(chǎn)出和引文影響力相對較低。通常對于這個區(qū)域的學(xué)科,學(xué)校需要進一步分析出現(xiàn)這種情況背后的原因,再結(jié)合專家意見規(guī)劃未來的發(fā)展方向。例如工程學(xué)雖然位于該區(qū)域,但CNCI值為0.96,非常接近1,相對來說成為機會學(xué)科的可能性較大。第四象限代表威脅學(xué)科,該區(qū)域的學(xué)科文獻產(chǎn)量占比較高,但引文影響力較低。地球科學(xué)、微生物學(xué)、化學(xué)、生物學(xué)與生物化學(xué)、分子生物學(xué)與遺傳學(xué)和環(huán)境與生態(tài)學(xué)這6個學(xué)科位于威脅區(qū)域,說明這些學(xué)科在產(chǎn)出占比超過了全球平均水平,但引文影響力還不及全球平均水平,需要引起學(xué)校的關(guān)注和重視。

需要特別注意的是,圖4對學(xué)科的判定僅基于文獻產(chǎn)量占比和CNCI值這兩個指標(biāo)。高校在依據(jù)SWOT分析結(jié)果具體規(guī)劃時還應(yīng)著眼于本校實際情況和發(fā)展目標(biāo)來制定科學(xué)的發(fā)展策略。

2.2 基于SWOT的學(xué)科動態(tài)趨勢變化分析

高校學(xué)科的發(fā)展是動態(tài)變化的,因此需要定期地對學(xué)科的表現(xiàn)進行跟蹤和監(jiān)測,來了解學(xué)科的發(fā)展變化,并基于客觀數(shù)據(jù)來進行學(xué)科規(guī)劃。圖5展示了某中國高校的ESI學(xué)科在2016—2018年期間的表現(xiàn)變化分析。圖中的橫縱坐標(biāo)的含義與2.1節(jié)的圖4一致,橫坐標(biāo)為特定學(xué)科占本機構(gòu)所有論文的占比除以全球該學(xué)科占全球所有學(xué)科論文的比例,縱坐標(biāo)為CNCI值。

通過圖5觀察得知,在學(xué)科發(fā)展表現(xiàn)上,該校經(jīng)濟與商學(xué)、計算機科學(xué)、工程學(xué)和社會科學(xué)4個學(xué)科連續(xù)3年保持在優(yōu)勢學(xué)科區(qū)域,其產(chǎn)出和引文影響力的表現(xiàn)超過全球的平均水平;材料科學(xué)在2016年位于機會學(xué)科,2017年體量有所提升但影響力相對低,進入威脅學(xué)科區(qū)域,2018年無論體量還是引文影響力均超過全球平均水平,提升至優(yōu)勢學(xué)科區(qū)域,圖5完整展現(xiàn)材料科學(xué)每一年的發(fā)展與變化。從學(xué)科的引文影響力變化來看,該校的物理學(xué)從2016年的劣勢學(xué)科到2017年接近機會學(xué)科區(qū)域到2018年提升至機會學(xué)科,環(huán)境與生態(tài)學(xué)從2016年的機會學(xué)科到2017年提升至優(yōu)勢學(xué)科并且2018年穩(wěn)定在優(yōu)勢學(xué)科,顯示該校在這兩個學(xué)科上科研產(chǎn)出的引文影響力有所提升。

圖4 某高校ESI學(xué)科相對于全球的優(yōu)勢、劣勢、機會和威脅分析圖Fig.4 Analysis of Strengths,Weaknesses,Opportunities and Threats by ESICategories,Relative toWorld Average Output and Performance of One Exemplar University

綜上所述,基于SWOT的分析方法可以更加科學(xué)合理地分析學(xué)科的優(yōu)劣勢。在科研管理工作中,結(jié)合時間趨勢和對標(biāo)分析等多種維度進行SWOT分析,可為回答本機構(gòu)的學(xué)科表現(xiàn)和如何發(fā)展提供更為詳細的數(shù)據(jù)支撐。

3 科研人員績效分析:h指數(shù)v.s.射束圖

h指數(shù)是一種廣泛應(yīng)用于刻畫科研人員論文和引文影響力的指標(biāo),其由物理學(xué)家Jorge Hirsch于2005年提出[21]。它通過如下方式將科研人員的論文及其被引次數(shù)縮減為單個數(shù)值:一個具有指數(shù)h的研究人員至少已發(fā)表了h篇論文,并且每篇論文至少已被引用了h次。h指數(shù)與科研人員的科研生涯和所屬學(xué)科非常相關(guān)。因為不同的科研生涯,不同的研究領(lǐng)域,其被引次數(shù)的積累速度差異較大。因此,h指數(shù)不適用于對科研人員進行精確的比較。此外,h指數(shù)通常不涵蓋非期刊出版物,且從數(shù)學(xué)的角度看也不具有一致性[22]。為解決 h指數(shù)的缺陷,德國馬普學(xué)會的Lutz Bornmann和Robin Haunschild提出了另一種衡量方法[23]。具體來說,該方法將每篇論文的被引次數(shù)按與其具有相同學(xué)科和出版年份的期刊的平均值進行“規(guī)范化”,并將該值轉(zhuǎn)換為百分位數(shù),利用射束圖這一可視化方式來展現(xiàn)。例如,百分位數(shù)為90意味著該論文位于引用率較高的前10%之列,另外90%則是引文影響力低于它的論文。相比于平均值,這種方法因為引用分布偏斜度很大,從而能更準(zhǔn)確地衡量集中趨勢。射束圖可用于開展公平的、有意義的評估,比h指數(shù)表征的信息更加全面。

圖5 某高校2016—2018年ESI學(xué)科SWOT動態(tài)趨勢分析圖Fig.5 Dynamic SWOT Analysis during the Period of 2016-2018

射束圖是顯示研究人員發(fā)文量和影響力的“畫像”,可顯示研究人員的發(fā)文量和引文影響力隨時間的動態(tài)變化。其同時考慮論文所屬學(xué)科以及論文發(fā)表時間,并使用百分位數(shù),因此其反映的引文影響力是高度偏斜分布的[24]。將射束圖與h指數(shù)同時使用,能較為全面而正確地進行科研分析。本節(jié)將通過兩個具體的案例,展示射束圖在分析單個和多個科研人員的績效中的應(yīng)用。

3.1 基于射束圖的科研人員引進前后產(chǎn)出對比分析

在高?!半p一流”建設(shè)中,人才引進起著十分重要的作用。一般而言,高校管理人員希望可以定期地跟蹤引進人才的科研產(chǎn)出和學(xué)術(shù)影響力表現(xiàn),來客觀呈現(xiàn)人才的引進對學(xué)科建設(shè)所起到的實際作用。射束圖可以對人才引進前后的學(xué)術(shù)影響力對比提供可靠的數(shù)據(jù)支撐。

圖6展示了某科研人員在2009—2019年近十年期間論文產(chǎn)出的射束圖。如圖所示,射束圖將每篇文章與對應(yīng)年份和學(xué)科的基準(zhǔn)值進行了比較,并用百分位來呈現(xiàn)。圖中的紫色點代表每篇論文的百分位,綠色點代表該年度論文的中位數(shù),中間的縱向虛線則代表該研究人員所有論文的百分位平均值(請注意此處的百分位計算方式是將同出版年、同學(xué)科和同文獻類型的所有論文的被引頻次降序排列后得到的,如果一篇文章的百分位值為1,說明全球與這篇文章同學(xué)科、同出版年、同文獻類型的論文中99%的論文的引文數(shù)都低于該論文,與《全面畫像,而非簡單指標(biāo)》白皮書中的定義相反)。通過射束圖,可以更深入地了解該科研人員的科研表現(xiàn)以及引入前后的產(chǎn)出變化。具體地,該科研人員于2014年被引進到國內(nèi)某高校。觀察可知,2014年后尤其是2015、2016和2017年,該科研人員發(fā)表的論文被引表現(xiàn)非常出色,引用排名在前10%的論文數(shù)量,超過了引進前(2014年)的表現(xiàn)。這表明其在被引進后仍然保持著高影響力的科研產(chǎn)出。從產(chǎn)出的論文數(shù)量來看,其在2014年之后也保持著穩(wěn)步增長的態(tài)勢,說明在引進之后該科研人員仍保持著活躍的科研產(chǎn)出。

圖6 某科研人員在2009—2019年期間發(fā)表論文的射束圖Fig.6 A Beam-plot of a Research's Publications in the Period of 2009-2019

3.2 多個科研人員的射束圖比較分析

科研人員分析場景通常由多個科研人員或者多個團隊的比較分析構(gòu)成。本節(jié)將選擇某高校不同院系3位科研人員作為范例來分析其科研影響力表現(xiàn)。圖7展示了3位科研人員論文成果的射束圖。從首次發(fā)表時間來看,科研人員3的職業(yè)生涯開始最早,于2005年發(fā)表第一篇論文??蒲腥藛T2職業(yè)生涯開始最晚,其第一篇論文發(fā)表于2009年。從科研產(chǎn)出量的年度趨勢來看,科研人員2每年的發(fā)文量高于其他兩位學(xué)者??蒲腥藛T3的發(fā)文量高峰集中在2014和2015年,之后的發(fā)文量相對較少??蒲腥藛T1雖然發(fā)文數(shù)量不及科研人員2,但整體呈現(xiàn)出上升趨勢。從2018年這一年發(fā)表的論文表現(xiàn)來看,相比科研人員3,科研人員1和2發(fā)表的論文量相對較多。從百分位的分布來看,科研人員1有2篇論文百分位值低,說明這2篇論文的引文影響力排名靠前受到了同行的廣泛關(guān)注,而科研人員3發(fā)表的論文百分位值相對來說比較高,說明其引文影響力相對1和2來說比較低。

圖7 某院系3位科研人員的科研成果射束圖表現(xiàn)Fig.7 Beam Plots of Three Researchers'Publications

通過射束圖科研管理人員可以更加清晰地了解科研人員的成果表現(xiàn),全面地把握該學(xué)者的學(xué)術(shù)產(chǎn)出發(fā)展態(tài)勢,為后續(xù)的人員績效分析提供更為充實的信息和強有力的支撐。

綜上所述,射束圖的分析方法可以提供與科研人員的科研成果相關(guān)的豐富信息,包括科研生涯中的首次發(fā)表時間、科研成果發(fā)表的連續(xù)性和發(fā)展趨勢、引文影響力在同學(xué)科的相對位置等,為科研管理活動引進人才和績效分析的工作提供詳實的數(shù)據(jù)支撐,可為同行專家的評估作為參考。

4 思考

同行評議仍然是在分配科學(xué)資源時進行研究項目評估和決策的標(biāo)準(zhǔn)方式。然而,隨著科學(xué)問題越來越復(fù)雜,如何合理調(diào)配有限的資源就成為一個非常棘手的問題。因此,政策制定者、研究資金的提供者和高校的科研管理人員等開始對科學(xué)研究進行定量分析,結(jié)合同行評議以期能夠做出更優(yōu)的決策。

利用文獻計量學(xué)對科研績效進行分析的目標(biāo)是為了更好、更清晰地揭示科學(xué)研究的進展。在同行專家意見的基礎(chǔ)上,輔助文獻計量學(xué)的深入分析,才可以更好地對科研績效評估提供更客觀、更全面的信息[25,26]。但是需要清楚地認識是,如果不能準(zhǔn)確地了解定量分析能提供什么以及不能提供什么,或者僅僅依靠統(tǒng)計數(shù)字的話,就違背了定量分析的真正目的。例如,期刊影響因子的初衷是為了幫助圖書館評估和遴選訂購何種期刊[17],但是現(xiàn)在影響因子卻被誤用為評價個人和研究機構(gòu)的水平和貢獻。正如科學(xué)信息研究所報告[16]及本文中所討論的,單點指標(biāo)(如h指數(shù)、期刊影響因子、篇均引文影響力等)和大學(xué)排名都能提供一定信息,但都存在被普遍誤解和誤用的現(xiàn)象。因此,需要對教學(xué)科研活動進行“全面畫像”,也即可視化這種直觀的分析手段來替代簡單指標(biāo)。

本文針對科研管理活動中普遍關(guān)注的三類問題,機構(gòu)的科研成果表現(xiàn),學(xué)科發(fā)展的優(yōu)劣勢和科研人員的績效表現(xiàn),基于“全面畫像”的可視化分析方法,通過多個案例來詳細展開說明。具體來說,第一節(jié)在對機構(gòu)整體進行科研成果的表現(xiàn)分析時,通過影響力全貌的分析方法,可以全面展現(xiàn)在不同的論文引用基線的分布情況,幫助科研管理人員更加明晰機構(gòu)在哪個區(qū)間的論文表現(xiàn)更為出色,哪些地方還存在不足,在出現(xiàn)奇異值的地方,需要進一步通過分析數(shù)據(jù)背后論文的實際情況來做更為深入的研究,從而為科研決策的制定提供更為豐富的數(shù)據(jù)支撐。第二節(jié)通過SWOT的優(yōu)劣勢分析方法可以從論文產(chǎn)出相對占比和引文影響力兩方面呈現(xiàn)某個機構(gòu)的學(xué)科發(fā)展態(tài)勢,輔助學(xué)科分析人員把握哪些學(xué)科處于優(yōu)勢的區(qū)間,哪些是機會學(xué)科。再結(jié)合時間趨勢的分析,可以發(fā)現(xiàn)哪些學(xué)科的國際引文影響力有所提升,哪些學(xué)科的產(chǎn)出規(guī)模有所變化。當(dāng)然需要特別注意,SWOT的優(yōu)劣勢僅是根據(jù)指標(biāo)來定義的,學(xué)校在制定學(xué)科發(fā)展計劃時,需要結(jié)合本校未來的發(fā)展目標(biāo)和專家的意見。第三節(jié)利用射束圖來分析科研人員產(chǎn)出論文的引文影響力,來多角度展現(xiàn)科研活動的狀態(tài)。射束圖可以告訴大家一個科研人員科研生涯中的首次發(fā)表時間、科研成果發(fā)表的連續(xù)性和發(fā)展趨勢、引文影響力在同學(xué)科的相對位置等,為機構(gòu)在人才引進和人才評估的工作提供更加詳實的信息,作為同行專家評估的參考資料。相比機構(gòu)和學(xué)科,人員的顆粒度更小,所以在進行數(shù)據(jù)分析時需要特別小心,如何完整和準(zhǔn)確的檢索每位科研人員的論文成果是非常重要的,因為有的時候遺漏或者誤判一篇文章會影響到數(shù)據(jù)的分析結(jié)果,進而影響科研人員的表現(xiàn)??傮w來說,相比于單一指標(biāo),全面畫像制作相對簡單,可展示更多有價值的信息,能有力支撐科學(xué)的科研管理,但在具體操作時,需要注意數(shù)據(jù)的準(zhǔn)確性和方法的合理性??茖W(xué)合理的數(shù)據(jù)結(jié)果才能為專家提供有價值和有意義的參考。

致謝本文成文過程中,科睿唯安岳衛(wèi)平老師提供了寶貴的意見,尤其在背景介紹、案例解讀和文末的思考章節(jié)給予了指導(dǎo),在此表示衷心的感謝!

猜你喜歡
全貌科研人員影響力
科技部等五部門聯(lián)合發(fā)文開展減輕青年科研人員負擔(dān)專項行動
科研人員破譯黑豬肉特征風(fēng)味物質(zhì)
治療艾滋病,中國科研人員有了新發(fā)現(xiàn)
廣東公安科研人員風(fēng)采
天才影響力
NBA特刊(2018年14期)2018-08-13 08:51:40
黃艷:最深遠的影響力
恢復(fù)圖形
3.15消協(xié)三十年十大影響力事件
傳媒不可估量的影響力
人間(2015年21期)2015-03-11 15:24:39
2013年中國棉紡織產(chǎn)業(yè)鏈“全貌”
中國紡織(2014年4期)2014-07-07 17:08:23
洪湖市| 黑河市| 南城县| 文登市| 锦州市| 米泉市| 来凤县| 阜城县| 谷城县| 陇南市| 沧源| 康保县| 韶山市| 天峨县| 昂仁县| 台东市| 青海省| 梁河县| 宁津县| 梁山县| 临清市| 南汇区| 库尔勒市| 司法| 玉溪市| 龙泉市| 武乡县| 蓝田县| 建瓯市| 娱乐| 蒙山县| 正蓝旗| 高青县| 忻州市| 仪陇县| 平顺县| 永城市| 安岳县| 鄂州市| 黔西县| 南部县|