言 十
ESI(essential science indicators,基本科學(xué)指標(biāo))[1]是建立在科睿唯安(Clarivate Analytics,原湯森路透知識(shí)產(chǎn)權(quán)與科技事業(yè)部)旗下數(shù)據(jù)庫Web of Science?(SCI/SSCI,涵蓋全球12 000多種期刊)的論文計(jì)量分析工具,于2001年推出。
ESI?針對(duì)22 個(gè)專業(yè)研究領(lǐng)域,利用最近10年的數(shù)據(jù),每2個(gè)月更新一次,分別對(duì)國家、研究機(jī)構(gòu)、期刊、論文、科學(xué)家進(jìn)行統(tǒng)計(jì)分析和排序,主要指標(biāo)包括論文數(shù)、引文數(shù)、篇均被引頻次。對(duì)研究機(jī)構(gòu)而言,可以產(chǎn)生學(xué)科領(lǐng)域的排名;對(duì)學(xué)者個(gè)人,則可以得到高被引科學(xué)家(highly cited researchers)、高被引論文(highly cited papers)、熱點(diǎn)論文(hot pagers)。ESI試圖從引文分析的角度,“分析機(jī)構(gòu)、國家和期刊的論文產(chǎn)出和影響力,發(fā)現(xiàn)自然科學(xué)和社會(huì)科學(xué)領(lǐng)域中的重大發(fā)展趨勢,按研究領(lǐng)域?qū)?、期刊、論文和機(jī)構(gòu)進(jìn)行排名,評(píng)估潛在的合作機(jī)構(gòu)和具有潛力的人才”。
2009年,上海交通大學(xué)李明祿教授在全國高校計(jì)算機(jī)系主任/院長論壇上做了“基于ESI淺析兩岸三地大學(xué)計(jì)算機(jī)學(xué)科”[2]的報(bào)告,ESI開始進(jìn)入國內(nèi)學(xué)術(shù)界大眾視野。隨后,ESI指標(biāo)得到教育主管部門的高度重視,并逐步成為國內(nèi)高校評(píng)價(jià)學(xué)科水平的重要標(biāo)準(zhǔn),甚至,有多少學(xué)科進(jìn)入ESI前1%(或者1‰)成為主管部門和地方政府衡量大學(xué)辦學(xué)水平的重要條件。
應(yīng)該看到,作為論文客觀計(jì)量指標(biāo),ESI指標(biāo)不只考慮發(fā)表論文數(shù),還考慮了學(xué)術(shù)界比較重視的論文引用情況,比以前國內(nèi)論文評(píng)價(jià)只考慮SCI論文數(shù)和期刊影響因子,確實(shí)顯得更加合理,因此,在評(píng)價(jià)研究機(jī)構(gòu)、學(xué)者、論文的學(xué)術(shù)影響方面,的確可以起到一定的參考意義。ESI指標(biāo)被國內(nèi)學(xué)術(shù)界引入后,對(duì)高??茖W(xué)研究,特別是學(xué)術(shù)論文,起到了一定的促進(jìn)作用。
然而,凡事皆有度。當(dāng)ESI指標(biāo)被行政部門采用作為重要標(biāo)準(zhǔn)之后,行政指揮棒的巨大威力使其對(duì)于大學(xué)和學(xué)科的重要性被無限提高,與此同時(shí),其片面性也得到了放大。大學(xué)逐步明白,通過各種形式的資源投入、激勵(lì)措施甚至造假,ESI指標(biāo)可以在短期內(nèi)快速提升。ESI指標(biāo)的官方背書,為大學(xué)不顧一切提高ESI指標(biāo)提供巨大的誘惑。目前,高校追求ESI指標(biāo),已經(jīng)演變成一場亂象。
某個(gè)研究機(jī)構(gòu)某學(xué)科領(lǐng)域(目前劃分為22個(gè))排名參照指標(biāo)為總被引次數(shù)(citations)、論文數(shù)(papers)和篇均被引次數(shù)(citations per paper)。
高被引論文是指同學(xué)科領(lǐng)域同年度中被引次數(shù)排在前1%的論文。數(shù)據(jù)是基于最近10年的引文數(shù)據(jù)。高被引論文反映某篇論文在某年度中在本學(xué)科領(lǐng)域的相對(duì)引用數(shù)。需要注意到,在同一學(xué)科領(lǐng)域,不同的研究方向有時(shí)很難進(jìn)行比較。此外,綜述性的文章容易形成高被引。
熱點(diǎn)論文是指同學(xué)科領(lǐng)域最近兩個(gè)月內(nèi)被引次數(shù)排在前0.1%的論文,其依據(jù)的是某一學(xué)科領(lǐng)域最近兩年發(fā)表的論文數(shù)據(jù)。
高被引科學(xué)家是基于ESI數(shù)據(jù)庫中的高被引論文數(shù)據(jù),于過去10年間在相應(yīng)學(xué)科領(lǐng)域發(fā)表高被引論文數(shù)量最多的科研人員。
ESI數(shù)據(jù)庫在一定程度上為研究機(jī)構(gòu)和研究人員發(fā)表論文和論文被引用情況提供了方便的查詢和統(tǒng)計(jì),在衡量研究機(jī)構(gòu)和學(xué)者發(fā)表論文以及論文的影響力方面,有其合理性的一面,因此,被使用是可以理解的。然而,目前國內(nèi)從主管部門、地方政府到相當(dāng)一部分大學(xué)領(lǐng)導(dǎo),未能科學(xué)、全面地看待ESI指標(biāo),過于放大ESI指標(biāo)的作用,形成了一定的認(rèn)識(shí)誤區(qū)。
誤區(qū)一:ESI是國際公認(rèn)的學(xué)科評(píng)價(jià)標(biāo)準(zhǔn)。實(shí)際上,所謂公認(rèn)的國際標(biāo)準(zhǔn),是一個(gè)以訛傳訛的錯(cuò)誤說法。發(fā)達(dá)國家的大學(xué)從來不存在這樣一個(gè)標(biāo)準(zhǔn)。為了證實(shí)這個(gè)問題,筆者專門咨詢了來自多個(gè)歐美發(fā)達(dá)國家近20所不同大學(xué)的教授,他們反饋的信息幾乎一致,國外大學(xué)根本沒有這樣一個(gè)標(biāo)準(zhǔn),有的教授甚至還不清楚ESI是什么。所謂的國際公認(rèn)標(biāo)準(zhǔn)實(shí)際上是一個(gè)誤區(qū)。
誤區(qū)二:進(jìn)入ESI前1%的學(xué)科屬于國際領(lǐng)先學(xué)科,或者國際公認(rèn)的世界高水平學(xué)科。這是一個(gè)更大的誤區(qū)。一個(gè)學(xué)科的水平,如果有公認(rèn)標(biāo)準(zhǔn),一定是由師資隊(duì)伍水平、學(xué)科作出的科學(xué)貢獻(xiàn)、培養(yǎng)的人才質(zhì)量等方面所構(gòu)成。ESI指標(biāo)只是體現(xiàn)了學(xué)術(shù)論文中的一部分(如果沒有造假的話)。誠然,國際上領(lǐng)先的學(xué)科在ESI上的表現(xiàn)可能也會(huì)不錯(cuò),但反之亦然并不成立。
本質(zhì)上,ESI指標(biāo)僅僅是一個(gè)論文計(jì)量工具,而論文僅是科研成果的一方面??蒲性u(píng)估需要多元化的體系,ESI指標(biāo)只能是科研評(píng)估體系的一部分內(nèi)容,無法體現(xiàn)科研成果的全部,更無法承擔(dān)評(píng)價(jià)學(xué)科水平的任務(wù)。
還需要注意到,ESI劃分的22個(gè)學(xué)科領(lǐng)域和我們國家對(duì)一級(jí)學(xué)科的劃分并不對(duì)應(yīng)。例如,其工程學(xué)包括了我們?nèi)舾梢患?jí)學(xué)科;所有的社會(huì)科學(xué)各學(xué)科則被ESI的一個(gè)社會(huì)科學(xué)總論所包括。計(jì)算機(jī)科學(xué)所收錄的主要期刊則和計(jì)算機(jī)科學(xué)領(lǐng)域公認(rèn)的期刊/會(huì)議有很大偏差[3]。例如,計(jì)算機(jī)領(lǐng)域由于其自身發(fā)展迅速的特點(diǎn),產(chǎn)生了一批聲譽(yù)很高的高水平學(xué)術(shù)會(huì)議,但這些會(huì)議論文都不在ESI指標(biāo)框架里。因此,把ESI指標(biāo)套用到國內(nèi)的一級(jí)學(xué)科并不合理。
在近年教育主管部門和地方政府相關(guān)政策中,ESI指標(biāo)直接或間接得到充分的重視和體現(xiàn),甚至被片面拔高地位。這些政策包括:①ESI指標(biāo)成為“雙一流”學(xué)科的重要遴選依據(jù),如進(jìn)入ESI 1‰可以作為入選一流學(xué)科的充分條件;②ESI大學(xué)綜合排名(一所高校入選ESI前1%的學(xué)科數(shù)、入選ESI前1‰的學(xué)科數(shù)、ESI學(xué)科排名位次)決定“一流大學(xué)”建設(shè)的層次;③ESI指標(biāo)進(jìn)入教育部學(xué)科評(píng)估體系;④ESI被部分省份作為對(duì)高校重大學(xué)科建設(shè)項(xiàng)目的立項(xiàng)和驗(yàn)收條件或建設(shè)目標(biāo)[4-5]。
政府政策對(duì)大學(xué)是個(gè)指揮棒。在政府相關(guān)政策的引導(dǎo)下,追求在ESI指標(biāo)上的突破成為許多大學(xué)的學(xué)科建設(shè)規(guī)劃中的具體目標(biāo)(典型的是在學(xué)校學(xué)科建設(shè)規(guī)劃中明確提出多少學(xué)科進(jìn)入1%)。不少大學(xué)把提升ESI指標(biāo)作為一項(xiàng)工程來落實(shí),采取的措施包括出臺(tái)ESI獎(jiǎng)勵(lì)政策[6]、召開ESI動(dòng)員會(huì)(啟動(dòng)會(huì))、舉辦ESI專題講座(熟悉游戲規(guī)則)、制訂某些學(xué)科進(jìn)入1%的時(shí)間表、定期出ESI通報(bào)(公布各學(xué)科離1%的距離)。學(xué)科建設(shè)從一項(xiàng)長期而復(fù)雜的任務(wù),演變成了一套角逐性的游戲。某大學(xué)的ESI啟動(dòng)會(huì)甚至有這樣的發(fā)言:“……都已經(jīng)醒悟,開始熟悉游戲規(guī)則……”。對(duì)于國家高等教育來說,這是多么令人擔(dān)憂的現(xiàn)象!
為了快速提升ESI指標(biāo),一些大學(xué)制訂出臺(tái)具有強(qiáng)烈刺激作用、不符合科研規(guī)律甚至學(xué)術(shù)規(guī)范的ESI獎(jiǎng)勵(lì)政策。典型做法如下:①學(xué)校明文規(guī)定研究生畢業(yè)發(fā)表的論文必須引用本單位ESI期刊論文一定次數(shù),如某大學(xué)規(guī)定博士答辯需要“所發(fā)表SCI期刊論文引用本院計(jì)算機(jī)學(xué)科ESI論文累計(jì)10次”;②學(xué)校以金錢方式鼓勵(lì)校外同行引用本單位ESI期刊論文,按引用次數(shù)計(jì)算報(bào)酬,如某學(xué)校規(guī)定“引用本單位SCI論文的,給予獎(jiǎng)勵(lì)”,甚至有學(xué)校規(guī)定引用本單位學(xué)科的論文,按次數(shù)付酬金;③學(xué)校以聘任短期訪問教師的名義,對(duì)論文和引用進(jìn)行變相購買。不少學(xué)校為了提升本學(xué)科的ESI指標(biāo),無所不用其極。這些所謂的“措施”,大多數(shù)實(shí)際上是拿不上臺(tái)面的低級(jí)伎倆,對(duì)大學(xué)學(xué)術(shù)生態(tài)的破壞作用是顯而易見的。
大學(xué)的政策對(duì)基層教學(xué)科研單位和科技工作者個(gè)人又造成了誘導(dǎo)。在追求ESI指標(biāo)巨大的利益驅(qū)使下,除了利用上述單位政策外,一些學(xué)者采用了不符合學(xué)術(shù)規(guī)范甚至造假的辦法提高引用數(shù),制造高被引論文、熱點(diǎn)論文。例如,同行、朋友間采取利益交換的互相引用,建立互相引用利益共同體(微信群等),用隱蔽甚至公開的形式要求同行引用自己的論文,利用審稿人的權(quán)利要求作者引用等。一時(shí),學(xué)術(shù)論文引用怪狀迭出。一些論文的參考文獻(xiàn)數(shù)量令人驚奇,一些引用毫無邏輯聯(lián)系,甚至出現(xiàn)風(fēng)馬牛不相及的跨領(lǐng)域引用……
在上述不符合學(xué)術(shù)規(guī)范的政策、拿不上臺(tái)面的造假手段共同作用下,一些學(xué)校某一學(xué)科發(fā)表論文數(shù)、被引數(shù)、ESI高被引論文數(shù)、熱點(diǎn)論文數(shù)突飛猛進(jìn)。以計(jì)算機(jī)學(xué)科為例,一些原本名不見經(jīng)傳的學(xué)校ESI指標(biāo)進(jìn)步之神速令人目瞪口呆。筆者以5年作為統(tǒng)計(jì)區(qū)間檢索發(fā)現(xiàn),有的學(xué)校計(jì)算機(jī)學(xué)科這些指標(biāo)和10年前相比,增長超過100倍。作為參照,國內(nèi)計(jì)算機(jī)學(xué)科力量比較強(qiáng)的清華大學(xué)、北京大學(xué)、浙江大學(xué)等(在教育部學(xué)位與研究生教育發(fā)展中心組織的全國第四輪學(xué)科評(píng)估中均評(píng)為最高等級(jí)A+),則只增長幾倍。那些突飛猛進(jìn)的進(jìn)步背后所隱藏的含義,對(duì)學(xué)術(shù)界而言都是心知肚明的。
誠然,ESI作為一種論文指標(biāo)工具,對(duì)于以發(fā)表論文為主要目的的研究的促進(jìn)作用是明顯的,但是ESI指標(biāo)僅著眼于論文發(fā)表在哪里、被多少人引用,并不能全面反映研究機(jī)構(gòu)、學(xué)者、論文的科學(xué)貢獻(xiàn);另一方面,ESI指標(biāo)客觀上方便作假。從科學(xué)的角度,這樣的指標(biāo)是不宜賦予很高的權(quán)值的。
ESI指標(biāo)官方化給大學(xué)帶來了顯而易見的負(fù)面影響。從目前的情況來看,對(duì)已經(jīng)出現(xiàn)的負(fù)面影響可以作如下概括。
從國家層面,不僅造成了國家資源錯(cuò)配和人力、物力、財(cái)力的巨大浪費(fèi),更主要的是敗壞了學(xué)術(shù)風(fēng)氣??茖W(xué)研究有其自身的規(guī)律??茖W(xué)研究成果也有多種展示形式,論文僅僅是其中一種,ESI更只是論文的某個(gè)方面。過分強(qiáng)調(diào)論文甚至某個(gè)論文指標(biāo),必然會(huì)貶低科學(xué)研究成果的其他展示形式,對(duì)科研工作形成錯(cuò)誤導(dǎo)向。長期下去,國家的科技就要出問題。
從大學(xué)層面,將大學(xué)從服務(wù)國家需求、服務(wù)社會(huì)發(fā)展引導(dǎo)到片面追求某個(gè)論文指標(biāo)的道路上。由于采用各種手段追求ESI指標(biāo)可以在短時(shí)間內(nèi)起到立竿見影的效果(特別是對(duì)于許多原本實(shí)力不夠強(qiáng)的大學(xué),ESI指標(biāo)更是提供了一種“彎道超車”的可能),許多大學(xué)不再遵循科研規(guī)律,而是采取運(yùn)動(dòng)式抓ESI指標(biāo),營造ESI大干快上的氣氛,各種ESI新聞、ESI政策、ESI動(dòng)態(tài)充斥校園,使得科研工作越來越功利化,和大學(xué)應(yīng)有的學(xué)術(shù)氛圍背道而馳,長此下去對(duì)于大學(xué)科學(xué)研究乃至于整個(gè)大學(xué)功能的破壞作用是巨大的。
從學(xué)科層面,將學(xué)科建設(shè)引入歧路。學(xué)科綜合實(shí)力的提高,是一個(gè)漫長而艱難的過程。學(xué)科建設(shè)也有極其豐富的內(nèi)涵。用ESI指標(biāo)衡量學(xué)科水平,使人們以為學(xué)科建設(shè)就是提升ESI指標(biāo),這對(duì)學(xué)科建設(shè)起到一個(gè)錯(cuò)誤的導(dǎo)向作用。采用造假的方式提高ESI指標(biāo),則從根本上破壞了學(xué)科聲譽(yù)。
從學(xué)者個(gè)人層面,誘導(dǎo)了學(xué)術(shù)不端行為,影響了學(xué)者個(gè)人聲譽(yù)。作為學(xué)者個(gè)體,期望多發(fā)表論文、論文被引數(shù)多、高被引論文和熱點(diǎn)論文多無可非議,也能提高學(xué)者個(gè)人在學(xué)術(shù)同行中的影響力,但采取不符合學(xué)術(shù)規(guī)范甚至是學(xué)術(shù)腐敗的手段提高這些指標(biāo),違背了科研工作者應(yīng)有的學(xué)術(shù)道德;況且,不符合學(xué)術(shù)規(guī)范的引用總是會(huì)留下蛛絲馬跡,在信息化社會(huì)是難以隱形的。做得越多,敗露的可能性也越大,因此這實(shí)際上是一件風(fēng)險(xiǎn)很大的事情。
國內(nèi)追求ESI指標(biāo)所產(chǎn)生的亂象以及給學(xué)術(shù)環(huán)境帶來的弊端,需要引起有關(guān)部門的重視和深思。為了扭轉(zhuǎn)當(dāng)前的亂象,筆者建議與呼吁:
(1)從教育主管部門、地方政府、高校到教師,客觀看待ESI等論文評(píng)價(jià)指標(biāo),消除當(dāng)前部分存在的將ESI和學(xué)科水平畫等號(hào)的錯(cuò)誤認(rèn)識(shí)。去偽存真,回歸科學(xué),扎扎實(shí)實(shí)做好學(xué)科建設(shè)。
(2)落實(shí)教育部清理“五唯”文件,建立科學(xué)的高校教學(xué)科研與人才評(píng)價(jià)體系。高??茖W(xué)研究的政策應(yīng)該著眼于鼓勵(lì)真正的創(chuàng)新,為創(chuàng)新研究提供良好的環(huán)境和氛圍。一切的科研評(píng)價(jià)方法均應(yīng)圍繞這一目標(biāo)??蒲性u(píng)價(jià)是一個(gè)高度復(fù)雜的過程,不能指望用少數(shù)幾個(gè)數(shù)量化指標(biāo)客觀反映。國際上高水平大學(xué)所采用的“同行評(píng)價(jià)”,給我們提供了有益參考。
(3)呼吁教育主管部門、地方政府與高校糾偏由于ESI等指標(biāo)帶來的謬誤現(xiàn)象,停止當(dāng)前高校這場轟轟烈烈的追求ESI指標(biāo)運(yùn)動(dòng),努力給科技人員營造一個(gè)寬松而安靜的科研環(huán)境。建議主管部門和地方政府將各類官方建設(shè)規(guī)劃、評(píng)估、學(xué)科遴選等相關(guān)文件和辦法中單列的ESI指標(biāo)剔除;建議高校取消各種不符合學(xué)術(shù)規(guī)范的ESI指標(biāo)激勵(lì)政策和措施。
(4)呼吁學(xué)術(shù)界與教育界共同努力,努力營造風(fēng)清氣正的學(xué)術(shù)氛圍;呼吁廣大教師和科技工作者追求科學(xué),樹立良好學(xué)風(fēng),進(jìn)行真正的創(chuàng)新研究,把論文寫在中國大地上。
最后,讓我們重溫一下古德哈特定律(Goodhart's law[7]):當(dāng)一項(xiàng)指標(biāo)變成目標(biāo),它將不再是一個(gè)好的指標(biāo)(When a measure becomes a target,it ceases to be a good measure)。