劉宇 衛(wèi)軍朝 楊柳
摘要 期刊評價是圖書館學(xué)和其他學(xué)科共同關(guān)心的研究議題,相關(guān)研究的文獻(xiàn)量巨大。為厘清有關(guān)英文期刊研究文獻(xiàn)的主要脈絡(luò),通過收集Web of Science數(shù)據(jù)庫中1940—2015年間2826篇期刊評價研究的相關(guān)文獻(xiàn),利用Citespace軟件作為數(shù)據(jù)分析工具,揭示了國外期刊評價研究的研究主體和知識基礎(chǔ),發(fā)現(xiàn)國外期刊評價的重要文獻(xiàn)可以細(xì)分為7大類別。
關(guān)鍵詞 期刊評價 知識圖譜 學(xué)術(shù)評價 期刊質(zhì)量
分類號 G255
DOI 10.16603/j.issn1002—1027.2016.01.004
1引言
根據(jù)學(xué)者或研究機構(gòu)在不同級別期刊上發(fā)表文章的數(shù)量來衡量其科研績效,已成為國內(nèi)外學(xué)術(shù)界普遍采用的一種評價方式。因此,期刊評價遂成為學(xué)術(shù)界利益相關(guān)者普遍關(guān)注的研究議題。
目前,國內(nèi)外有大量文獻(xiàn)討論期刊評價、核心期刊、引文分析等相關(guān)問題,但是對期刊評價這一主題的研究主體、知識脈絡(luò)、主流范式進行系統(tǒng)梳理的文獻(xiàn)尚不多見。李云霞于2008年利用CNKI數(shù)據(jù)庫對1979—2008年之間的261篇期刊評價研究文獻(xiàn)進行計量分析。同年,劉新燕和武夷山利用CNKI數(shù)據(jù)庫對1983—2007年之間的671篇期刊評價研究文獻(xiàn)進行計量分析。姜春林于2011年利用CSSCI數(shù)據(jù)庫對1998—2009年間303篇國內(nèi)期刊評價研究進行了梳理,侯素芳和湯建民于2014年也是基于CSSCI數(shù)據(jù)對1998—2011年間458篇國內(nèi)期刊評價研究進行綜述。除了上述計量研究成果外,曾建勛和宋培元于2007年對我國科技期刊評價工作進行了定性的歷史回顧,別立謙和何峻于2012年對我國近30年核心期刊研究實踐進行了定性的歷史綜述。這些文獻(xiàn)都是針對國內(nèi)期刊評價展開的梳理。2010年,陳燕和李銳使用1998—2009年間的SSCI和CSSCI分別獲取421篇外文文獻(xiàn)和385篇中文文獻(xiàn),使用計量方法對國內(nèi)外科技期刊評價研究的文獻(xiàn)進行了比較研究。
目前這些計量研究的檢索策略主要是以“期刊評價”作為檢索詞,在“主題”或者“關(guān)鍵詞”字段進行檢索。這種檢索策略會發(fā)生大量的漏檢,最為嚴(yán)重的后果就是遺漏大部分研究“核心期刊”的相關(guān)文獻(xiàn)。在陳燕和李銳的研究中,作者使用學(xué)科類別“Information Science & Library Science”對檢索結(jié)果進行了精煉,無疑遺漏了大量其他學(xué)科研究期刊評價的相關(guān)文獻(xiàn)。筆者主要針對國外期刊評價研究的英文文獻(xiàn)進行梳理,在時間上突破了陳燕等人的范圍限制,以Web of Science數(shù)據(jù)庫1940—2015年之間的數(shù)據(jù)為來源,時間跨度達(dá)76年,以期對國外期刊評價研究有一個較為整體、全面的認(rèn)識和把握。
2數(shù)據(jù)與研究方法
由于國外期刊評價的相關(guān)文獻(xiàn)過多,為避免重要的文獻(xiàn)湮沒于海量文獻(xiàn)之中,本研究使用“Web ofScience TM核心合集”作為數(shù)據(jù)源。在南京大學(xué)圖書館購買的Web of Science數(shù)據(jù)庫(以下簡稱“WOS”)數(shù)據(jù)庫中,用檢索式“標(biāo)題=((journal orjournals)and(rank* or assess* or evaluat* orstratif*or select* or citation or citing or cited 0rquality))”進行檢索,時間范圍為1900—2015年,返回檢索結(jié)果3303條記錄,檢索時間為2015年7月16日。通過對檢索結(jié)果的精煉、清洗,選擇文獻(xiàn)類型為“article,editorial material,letter,proceedingpaper,review”五種類型,最終得到2826條文獻(xiàn)記錄。檢索結(jié)果中發(fā)表時間最早的來源文獻(xiàn)是AustinM.Patterson發(fā)表于1940年的一篇文獻(xiàn)。
1940年以來國外期刊評價研究的文獻(xiàn)增長趨勢符合普賴斯提出的科學(xué)文獻(xiàn)量指數(shù)增長的普遍規(guī)律,擬合優(yōu)度R2為0.9213(圖1)。從20世紀(jì)70年代中期到90年代中期,實際發(fā)文量都超過了理論值;1998年之后,實際發(fā)文量和理論值之間的差距越來越大,期刊評價研究進入成熟期;但是每年發(fā)文的絕對值仍然在持續(xù)增長,自2007年開始發(fā)文量突破百篇,2011年達(dá)到歷史最高的193篇文獻(xiàn)。
本研究使用的研究方法是知識圖譜。知識圖譜是以文獻(xiàn)計量學(xué)、圖論、社會網(wǎng)絡(luò)分析、計算機技術(shù)為基礎(chǔ)形成的一種將分析單位進行可視化的量化研究方法,被廣泛應(yīng)用到從海量的文獻(xiàn)中分析學(xué)科結(jié)構(gòu)、描述科研合作、發(fā)現(xiàn)學(xué)科研究熱點和前沿、挖掘?qū)W科知識基礎(chǔ)、研究知識的擴展與傳播等問題。在具體分析方法上,本文主要使用共現(xiàn)分析來明確國外期刊評價的研究主體,使用共被引分析研究期刊評價的知識基礎(chǔ)。共被引也譯為同被引(Co-Cita-tion),是1973年由Henry Small和Irena Mar-shakova-Shaikevich同時提出的。共被引方法提出之后,已被廣泛地應(yīng)用到學(xué)科結(jié)構(gòu)和知識基礎(chǔ)的發(fā)現(xiàn)研究中。
使用的數(shù)據(jù)分析工具是Citespace3.9.R9。Citespace是德雷塞爾大學(xué)(Drexel University)陳超美教授采用Java語言開發(fā)的一款信息可視化工具,該工具的設(shè)計集成了文獻(xiàn)計量學(xué)、社會網(wǎng)絡(luò)分析、科學(xué)社會學(xué)等多學(xué)科思想,用于挖掘某一知識領(lǐng)域的知識基礎(chǔ)和研究前沿的演進軌跡。在Citespace生成的知識圖譜中,每一個節(jié)點用一個年輪表示,年輪以時間切片劃分為依據(jù),年輪的厚度與相應(yīng)時間切片中節(jié)點出現(xiàn)頻次成正比;節(jié)點之間的連線表示節(jié)點之間共現(xiàn),連線的粗細(xì)與共現(xiàn)的頻次成正比,連線的顏色與首次共現(xiàn)的切片顏色一致;中介中心度高的節(jié)點的年輪外圈用紫色標(biāo)示。在社會網(wǎng)絡(luò)分析中,中介中心度衡量的是社會行動者“控制”他人行動的能力。在引文網(wǎng)絡(luò)中,它可以衡量某一節(jié)點對其他節(jié)點的影響力。
3期刊評價研究的研究主體
3.1學(xué)科分布分析
圖2顯示了WOS中期刊評價研究文獻(xiàn)的學(xué)科分布。在Citespace中節(jié)點選擇Category,每個時間切片選擇Top50的點,節(jié)點標(biāo)簽的參數(shù)設(shè)置為(40、3、12)。如圖所示,圖書情報學(xué)是所有學(xué)科中關(guān)注期刊評價問題最多、持續(xù)時間最長的學(xué)科。計算機科學(xué)、商學(xué)和經(jīng)濟學(xué)、普通和內(nèi)科醫(yī)學(xué)、醫(yī)學(xué)、工程、心理學(xué)、管理學(xué)、教育、護理等學(xué)科也非常關(guān)注期刊評價研究。
從這些學(xué)科分布來看,我們發(fā)現(xiàn)一個較為顯著的特征:基礎(chǔ)性學(xué)科并沒有在期刊評價上投入很多精力,如數(shù)學(xué)、化學(xué)、物理學(xué)、哲學(xué)、文學(xué)、歷史學(xué)等,而具有較強應(yīng)用性質(zhì)的學(xué)科均比較關(guān)注期刊評價問題。產(chǎn)生這種現(xiàn)象的原因主要有二個方面:一是與各個學(xué)科主要依賴的交流平臺有關(guān)?;A(chǔ)性學(xué)科更加偏向于著書立說,強調(diào)知識的累積性和確定性;而應(yīng)用性學(xué)科偏向于社會實踐,社會實踐的不斷改變使得應(yīng)用性學(xué)科的研究成果具有很強的時效性。羅素說:“科學(xué)正像哲學(xué)一樣,也要在變化的現(xiàn)象之中尋找某種永恒性的基礎(chǔ)?!比祟悓τ篮愫痛_定性的追求是知識產(chǎn)生的社會心理基礎(chǔ),從這一點上說,基礎(chǔ)科學(xué)更為接近人類追求知識的原始動機,不大關(guān)注與實踐緊密聯(lián)系的暫時性的研究問題。二是和學(xué)科內(nèi)部的研究范式有關(guān)?;A(chǔ)性學(xué)科內(nèi)部的一致性程度較高,研究范式相對單一,學(xué)科內(nèi)部對什么是好的研究成果、好的傳播平臺具有高度一致的認(rèn)同感;應(yīng)用性學(xué)科研究范式多元化,學(xué)科的知識生產(chǎn)會根據(jù)研究問題的不同產(chǎn)生較大的差異,相對來說對什么是好的研究成果、好的傳播平臺無法形成有效的一致共識,因此才會根據(jù)各自研究范式的核心價值對期刊從不同角度進行評價,產(chǎn)生大量研究文獻(xiàn)。圖書情報機構(gòu)是科技文獻(xiàn)的主要消費機構(gòu),因此圖書情報學(xué)也是給予期刊評價最多關(guān)注的學(xué)科。這主要是因為圖書情報學(xué)不僅要關(guān)注本學(xué)科的期刊,同樣也要關(guān)注其他各個學(xué)科的期刊,期刊評價的成果會對圖書情報機構(gòu)的期刊采購和文獻(xiàn)收藏工作帶來巨大影響。
在圖2中,計算機科學(xué)、商業(yè)與經(jīng)濟學(xué)等節(jié)點擁有紫色年輪,表明這些節(jié)點的中介中心度較高,在整個網(wǎng)絡(luò)中處于重要的中心位置。若以1961年美國美國科學(xué)信息研究所(Institute for Scientific Infor-mation)創(chuàng)辦出版的科學(xué)引文數(shù)據(jù)庫(Science Cita-tion Index)作為分界點,圖書情報學(xué)、計算機科學(xué)、心理學(xué)、社會科學(xué)、社會科學(xué)—其他主題是最早關(guān)注期刊評價這一研究主題的5個學(xué)科。圖書情報學(xué)總計發(fā)表文獻(xiàn)764篇,和其他四個學(xué)科的發(fā)文總量(791篇)相當(dāng)。但是,圖書情報學(xué)在網(wǎng)絡(luò)中的中介中心度僅有0.1,遠(yuǎn)落后于其他四個學(xué)科。這表明圖書情報學(xué)在期刊評價研究中雖然體量巨大,但是學(xué)術(shù)影響力相對較弱,其研究成果需要借助其他學(xué)科傳播才能被普遍接受。環(huán)境研究(ENVIRON-MENTAL STUDIES)等學(xué)科體量雖小,但是影響力較大,中介中心度高達(dá)0.22。
3.2研究機構(gòu)分析
在Citespace中節(jié)點選擇Institution,每個時間切片選擇Top50的點,節(jié)點標(biāo)簽的參數(shù)設(shè)置為(8、7、90),得到期刊評價研究的機構(gòu)圖譜(圖3)。由于整個圖譜的網(wǎng)絡(luò)密度只有0.0011,尚未形成規(guī)模性的網(wǎng)絡(luò)結(jié)構(gòu)。圖中的節(jié)點INST SCI INFORMAT和INST SCI INFORMAT ION均為美國科學(xué)信息研究所,通過圖譜我們可以了解,西班牙格拉納達(dá)大學(xué)(Univ Granada)、荷蘭阿姆斯特丹大學(xué)(UnivAmsterdam)、美國科學(xué)信息研究所(INST SCI IN-FORMAT)、美國伊利諾伊大學(xué)(Univ Illinois)等機構(gòu)在期刊評價領(lǐng)域非?;钴S。發(fā)文量在8篇以上的高產(chǎn)機構(gòu)共有35所,其中美國有14所,加拿大和西班牙各有4所,英國和中國(包括臺灣)各3所,荷蘭2所,澳大利亞、克羅地亞、馬來西亞和伊朗各1所。這些高產(chǎn)機構(gòu)基本上都在2000年左右開始涉足期刊評價;很早就開始進行期刊評價研究的機構(gòu),如美國科學(xué)信息研究所、紐約西奈山醫(yī)學(xué)院(CUNY MTSINAI SCH MED)、尼古拉斯州立大學(xué)(NI-CHOLLS STATE UNIV)這三所機構(gòu)在2000之后基本就淡出期刊評價研究領(lǐng)域。在圖譜中這3個節(jié)點的年輪基本上都是綠色,意味著進入2000之后這三所機構(gòu)在期刊評價領(lǐng)域產(chǎn)出極少。
中國大陸有兩家機構(gòu)進入了高產(chǎn)機構(gòu):中國科學(xué)技術(shù)信息研究所(Inst Sci & Tech Informat Chi-na),哈爾濱工業(yè)大學(xué)(Harbin Inst Technol)。中國大陸進行期刊評價研究的主體是圖書情報學(xué)界,中國科學(xué)技術(shù)信息研究所在國內(nèi)期刊評價領(lǐng)域的貢獻(xiàn)廣為人知,而哈爾濱工業(yè)大學(xué)在國內(nèi)期刊評價領(lǐng)域并未取得相同的學(xué)術(shù)聲望。
3.3作者分析
在Citespace中節(jié)點選擇Author,每個時間切片選擇Top40的點,節(jié)點標(biāo)簽的參數(shù)設(shè)置為(4、14、200),得到期刊評價研究的機構(gòu)圖譜(圖4)。整個圖譜的網(wǎng)絡(luò)密度只有0.0024,尚未形成規(guī)模性的網(wǎng)絡(luò)結(jié)構(gòu)。
如圖所示,節(jié)點年輪的冷暖色調(diào)變化反映了期刊評價研究的核心作者活躍時段的不同,依據(jù)顏色的變化可以將期刊評價研究領(lǐng)域的主要作者分為三代學(xué)人,以1970和2000年作為色調(diào)冷暖的分界線。第一代研究者的節(jié)點以藍(lán)色為主,主要有L.丁.Martin和J.B.Adams、J.C.Merrill和D.M.Gillnlor、R.P.Kinght和A.Delahaye為代表。第二代研究者的節(jié)點以綠色為主,最具代表性的就是SCI的創(chuàng)始人E。Garfield,此外還有J.Vlachy、A。N。Bran-don和D.R.Hill、T.Braun團隊。第三代研究者的節(jié)點以黃色或紅色為主,突出的代表有L.Leydesdorff、C.J.Miguel、P.Jacso、A.Serenko等人,此外形成了5個重要的研究團隊:M.Wright團隊、R。M。Rauber團隊、A.N.Zainab團隊、N.Pandis團隊、G.E.Hunt團隊。此外還有一些非常活躍的兩兩合作者和突出的個人研究者,比如臺灣淡江大學(xué)的蔡明月(M.Y.Tsay)。
4期刊評價研究的知識基礎(chǔ)
在Citespace中,篩選閾值(C、CC、CCV)前、中、后三段都選擇(2、1、15;4、2、20;6、2、20),時間切片以10年為一段,節(jié)點標(biāo)簽參數(shù)設(shè)置為(50、3、30),選擇圖譜的顯示方式是Timeline,得到期刊評價研究的高被引期刊圖譜(圖5)。圖譜包括85個節(jié)點,78條連線,聚類穩(wěn)定性的模塊化參數(shù)Modularity Q為0.8185,表明文獻(xiàn)共被引網(wǎng)絡(luò)具有較好的類內(nèi)一致性、類間差異性,聚類結(jié)構(gòu)較高。
由圖可知,文獻(xiàn)共被引網(wǎng)絡(luò)聚成7類。下面以每一類中中介中心度較高的文獻(xiàn)為主對各類的研究內(nèi)容和核心觀點進行解讀。
表2列出聚類0#Scholars的主要文獻(xiàn)節(jié)點,這些文獻(xiàn)主要是對經(jīng)濟學(xué)與管理學(xué)領(lǐng)域內(nèi)的期刊進行評價。1984年,S.J.Liebowitz等將引文分為來自經(jīng)濟學(xué)期刊的引用和非經(jīng)濟學(xué)期刊的引用,并使用來自經(jīng)濟學(xué)期刊的引用次數(shù)來評價經(jīng)濟學(xué)期刊的影響力,從而排除了其他學(xué)科的引用造成的噪聲干擾;同時發(fā)現(xiàn)期刊歷史、期刊發(fā)文量、期刊印張多少對期刊總被引次數(shù)有顯著影響。1988年,M.J.Stahl等發(fā)現(xiàn)管理學(xué)期刊可以分為學(xué)術(shù)導(dǎo)向和實踐導(dǎo)向兩大類,由此生成2個管理學(xué)核心期刊清單,依據(jù)在這兩個期刊上的發(fā)文量,對美國商學(xué)院的管理學(xué)系的科研實力進行評價。1999年,A.Tahai等統(tǒng)計了17種管理學(xué)重要期刊在1993—1994年間參考文獻(xiàn)中的期刊論文,發(fā)現(xiàn)參考文獻(xiàn)中出版年限較久的期刊論文主要來自相關(guān)的社會科學(xué)(如心理學(xué)、社會學(xué)等),而較新的期刊論文來自管理期刊自身;作者以參考文獻(xiàn)出版年限分布的眾數(shù)(4年)為節(jié)點,以4年內(nèi)的被引次數(shù)作為評價管理學(xué)期刊的依據(jù),研究發(fā)現(xiàn)Strategic Management Journal是被引次數(shù)最多的期刊,心理學(xué)期刊的被引次數(shù)有明顯的下降;這證實了管理學(xué)的知識結(jié)構(gòu)主要有2個重要部門組成:一是支撐管理學(xué)研究的社會科學(xué)基礎(chǔ)理論,一是管理學(xué)自身最近正在不斷發(fā)展的知識模塊。1999年,Michael Jay Polonsky用有多少家澳大利亞大學(xué)圖書館收藏作為依據(jù),評價市場營銷期刊,研究發(fā)現(xiàn)Sloan Management Review和Journal ofMarketing Research兩份期刊的收藏率最高,依據(jù)收藏率的期刊排序和依據(jù)專家感知質(zhì)量的期刊排序(Perceptual Ranking)有很大差異L19J。
表3列出聚類1#Information Science類的主要文獻(xiàn)節(jié)點,這些文獻(xiàn)主要出自情報學(xué)學(xué)者之手,主要內(nèi)容是針對影響因子的評價功能展開討論。1963年,E.Garfield等首次提出利用影響因子遴選引文索引的來源期刊,從而避免來源期刊大量集中于歷史悠久或發(fā)文量大的期刊。之后,情報學(xué)界對影響因子的評價功能和內(nèi)在缺陷展開了大量的研究。2002年,R.Rousseau指出影響因子無法測量期刊質(zhì)量,因為“質(zhì)量”是一個多維度的概念;相對來說,觀察期刊影響因子在一個時間段內(nèi)的變化趨勢在評價期刊質(zhì)量時更有價值。2002年,W.Glanzel指出盡管影響因子存在一定的缺陷,但是沒有其他的期刊評價指標(biāo)可以代替影響因子,主要原因是其他指標(biāo)都無法像影響因子一樣持續(xù)穩(wěn)定地更新,這是其他計量指標(biāo)無法得到學(xué)界接受的最大障礙。2008年,L.Leydesdorff指出不同學(xué)科之間的期刊影響因子不具有可比性,數(shù)學(xué)期刊的影響因子均值是0.559,遺傳學(xué)期刊的影響因子均值是3.633;不同類型期刊的影響因子也差異巨大,如評論類期刊(刊名中有Review)的影響因子均值是4.0081,而通訊類期刊(刊名中有Letter)影響因子均值為1.7981;由于作者和研究機構(gòu)都會同時從事不同主體的研究,使得科研主體的研究領(lǐng)域具有多元性,因此不能使用影響因子來評價一個學(xué)者或機構(gòu)的科研水平。2009年,D.A.Pendlebury系統(tǒng)回顧了文獻(xiàn)計量學(xué)的發(fā)展歷程和影響因子的優(yōu)缺點后指出,“期刊質(zhì)量”是科研政策的制定者和基金會關(guān)心的核心概念,盡管被引用可以表示某一文獻(xiàn)的內(nèi)容被使用、被接受、內(nèi)容重要或有影響力,但是被引用不能直接反映文獻(xiàn)的質(zhì)量;影響因子雖然可以用來評價期刊,但是引文數(shù)據(jù)只是同行評議的補充手段。2012年,H.Moed等詳細(xì)比較的兩個新的期刊評價指標(biāo)SJR、SNIP和影響因子之間的差異,最終指出以引文數(shù)據(jù)為基礎(chǔ)的計量指標(biāo)是期刊評價的適當(dāng)而有效的工具。
表4列出聚類2#Validity類的主要文獻(xiàn)節(jié)點,這些文獻(xiàn)主要出自ISI的創(chuàng)始人E.Garfield,主要圍繞如何有效選擇來源期刊建立引文索引展開。1927年,P.L.K.Gross等對Journal of the A-merican Chemical Society 1926年卷的所有參考文獻(xiàn)進行統(tǒng)計,發(fā)現(xiàn)3633篇參考文獻(xiàn)源自247種期刊,被引5次以上的期刊僅有49種;并以1916-1925年10年間被引次數(shù)對期刊進行排序,得出為了保障化學(xué)專業(yè)教育和科研,高校圖書館最值得收藏的22種期刊。這是現(xiàn)存可考的最早使用引文分析方法對期刊進行評價的文獻(xiàn),雖然該文的中心度為0,但卻是期刊評價和引文分析的奠基性著述,被引高達(dá)41次。正是在這些早期的引文分析研究成果和謝潑德索引(Shepard's Citation)共同啟發(fā)下,Garfield于1955年提出了創(chuàng)建科學(xué)引文索引的構(gòu)想。建立引文索引的第一步,就是如何選擇來源期刊。1963年,Garfield發(fā)現(xiàn)如果按照Gross的方法僅僅以被引次數(shù)選擇來源期刊,發(fā)文量大的期刊會具有很大的優(yōu)勢,因為發(fā)文量大的期刊容易獲得更多的被引;為了避免這一情況,Garfield等正式提出用期刊影響因子(Journal Impact Factor)這一個概念,用被引次數(shù)除以發(fā)文量以消除載文量大的期刊的先天優(yōu)勢。1971,Garfield著文指出被引次數(shù)比發(fā)文量更適宜于科研評價,進一步強調(diào)引文索引來源期刊的選擇更強調(diào)刊物的被引次數(shù),而不是發(fā)文量。正是基于強調(diào)期刊被引次數(shù)的理念,ISI在選擇SCI來源期刊時不斷調(diào)整選刊的標(biāo)準(zhǔn)和方法,至1972年SCI來源期刊已經(jīng)擴展到2400種。1972年,Garfield對被引論文被引次數(shù)的時間分布進行研究后發(fā)現(xiàn),一篇論文發(fā)表2年后有最多的被引,于是在算法上對影響因子進行了修正,將總被引次數(shù)除以總發(fā)文量的時間窗口修正為2年?,F(xiàn)在學(xué)術(shù)界廣為人知的影響因子正式確立。這一改進使得來源期刊的選擇不僅不再偏向于那些發(fā)文量大的期刊,同時也不再偏向于那些歷史悠久的期刊。因為,歷史悠久的期刊容易累積更多的被引次數(shù),而影響因子強調(diào)的是期刊最近2年的載文的平均被引用次數(shù)。1976年,Garfield對英國和美國的SSCI用戶進行調(diào)查,檢驗SSCI在社會科學(xué)文獻(xiàn)檢索的效用。調(diào)查中有用戶指出SSCI的來源期刊偏向英文期刊,Garfield辯解認(rèn)為考慮到英語的通用性和國際性,一個國際化的學(xué)者會努力在國際期刊上發(fā)表論文,而這些國際期刊通常都是英文期刊,因此這種偏向是合理的。
表5列出聚類3井Research Assessment類的主要文獻(xiàn)節(jié)點。傳統(tǒng)引文分析將每一次引用都等同視之,這一直被很多學(xué)者認(rèn)為是引文評價的缺陷之一。這一類簇文獻(xiàn)研究的主要內(nèi)容就是彌補這一重要缺陷,賦予不同引用以不同的權(quán)重,在此基礎(chǔ)上對引文分析法進行修正。該領(lǐng)域的奠基性成果是G.Pinski和F。Narin于1976年提出,該算法首先建立期刊互引矩陣,以每個期刊被引頻次除以期刊的施引頻次確定不同期刊在引文網(wǎng)絡(luò)中的重要度,以期刊的重要度為施引權(quán)重;同時,利用加權(quán)后的被引次數(shù)、期刊文章的篇均被引率、期刊的總被引率,將這三個指標(biāo)綜合測量被引期刊的影響力。J.Bollen等將PageRank算法應(yīng)用到期刊評價領(lǐng)域,其中以期刊之間的引用代替網(wǎng)頁之間的鏈接,并進行標(biāo)準(zhǔn)化處理,即兩個期刊之間的被引頻次除以該期刊和所有期刊之間的被引頻次得到期刊的引用權(quán)重,并將其與ISI的影響因子排名進行對比,綜合兩種算法提出了Y指數(shù)(IF乘以PangeRank指數(shù)),實驗表明Y指數(shù)能更好地進行期刊排名。C.Bergstrom提出用特征因子來進行期刊評價,利用每一期刊引用另一期刊的引用矩陣,在引文網(wǎng)絡(luò)中迭代計算每個期刊的重要性,若期刊被高影響的期刊引用越多,則其影響力也越大。這類期刊評價研究,都是從計算施引期刊的重要度對引用賦權(quán)出發(fā),以此為基礎(chǔ)進行期刊評價。然而,也有學(xué)者質(zhì)疑這一邏輯的合理性。John Hudson等認(rèn)為,引用行為就像消費者為一件商品付款一樣,一件商品的價格不應(yīng)該因為購買它的人不同而產(chǎn)生差異;同理,任何一次引用也應(yīng)該被等同視之。
表6列出聚類3#Invariant Method類的主要文獻(xiàn)節(jié)點,該類文獻(xiàn)的主要內(nèi)容是圍繞引文索引和引文分析是否具有學(xué)術(shù)評價的合法性展開。盡管Garfield強調(diào)設(shè)計引文索引的主要目的是為了彌補主題索引的不足并完善文獻(xiàn)檢索;他同時也明確指出在評價一份科研工作的重要性及其對其他文獻(xiàn)或科學(xué)思想在一定時段內(nèi)的影響時,引文索引明顯是一種有用的工具;因此,用被引次數(shù)評價一位科學(xué)家的歷史作用比僅僅考量該科學(xué)家發(fā)表了多少篇文獻(xiàn)更有價值。在1972年那篇廣為人知的論文中,Garfield明確指出引文分析最重要的應(yīng)用領(lǐng)域可能會是科技政策和科研評價。實際上,引用行為本身就意涵施引者的評價和判斷,因此評價功能對于引文索引和引文分析來說具有內(nèi)生性。Garfield之所以在SCI的創(chuàng)始階段對其評價功能采取一種欲蓋彌彰的表達(dá),是出于一種營銷策略。Garfiled擔(dān)心引文評價挑戰(zhàn)了公認(rèn)的同行評議制度,而SCI的生產(chǎn)者不可能具備眾多學(xué)科的同行評議資格。因此,在SCI創(chuàng)立之初只能強調(diào)其檢索功能,否則會影響學(xué)術(shù)界對SCI的接受和使用程度。在學(xué)術(shù)界日益接受SCI之后,1970年代美國政府開始采用引文評價進行科學(xué)基金的分配,此時引文索引的評價功能逐漸凸顯,成為科研管理的利器。這時Garfield也開始明確表示被引率或影響因子的變化很可能反映的是期刊質(zhì)量的變化,引文索引為客觀評價期刊的績效(Performance)開了一個好頭。然而,伴隨著引文索引評價功能的凸顯,不同領(lǐng)域的學(xué)者對引文索引的態(tài)度逐漸出現(xiàn)分化:一派認(rèn)為引文索引只能用來檢索文獻(xiàn),不具有任何評價功能;一派認(rèn)為引文索引具有科研評價的功能。反對派中旗幟性的人物就是P.O.Seglen。早在1989年,Seglen就旗幟鮮明地反對引文評價。1997年,Seglen除了逐條列出引文評價的種種弊端,還發(fā)現(xiàn)如果將某一時段的期刊論文按照被引次數(shù)排序,把所有論文平均分為高被引和低被引兩組,高被引組的總被引次數(shù)是低被引組的10倍之多。因此,期刊的影響因子無法代表某篇論文的質(zhì)量或水平,因此以一位學(xué)者在高影響因子期刊上的發(fā)文數(shù)量評價其科研水平和實力是不合理的。與其針鋒相對,S.Saha通過對113名內(nèi)科醫(yī)生和151名臨床醫(yī)學(xué)研究人員的調(diào)查發(fā)現(xiàn),專家對9種普通醫(yī)學(xué)期刊的感知質(zhì)量和影響因子評價的結(jié)果高度相關(guān)。面對這種巨大的分歧,情報學(xué)界的計量專家應(yīng)對措施正如聚類#工所顯示,一面在呼吁謹(jǐn)慎使用計量指標(biāo)進行學(xué)術(shù)評價,強調(diào)期刊質(zhì)量的復(fù)雜性;一面不斷地對計量指標(biāo)進行修正,完善計量指標(biāo)的評價功能。
表7列出聚類5#H-Type Indices類的主要文獻(xiàn)節(jié)點。從科研管理者的角度出發(fā),有限的研究資源最好分配給那些既有較高的研究水平同時也能保持高產(chǎn)出量的研究者,也就是說以資源配置為根本目的的科研評價具有兩個基本的維度:產(chǎn)能評價(Productivity)和效能評價(Quality)。如果科研管理者認(rèn)同引文索引的評價功能,那么長期以來以被引次數(shù)或影響因子為代表的計量指標(biāo),僅僅能對效能進行評價,而無法有效涵蓋產(chǎn)能。2005年,J.E.Hirsch提出h指數(shù),當(dāng)且僅當(dāng)一個科學(xué)家有h篇被引次數(shù)至少為h的論文,同時剩余論文的被引次數(shù)都小于h時,該科學(xué)家的成就分值為h。2006年,T.Braun將這一思想應(yīng)用于對期刊的評價之中。h指數(shù)的一個重要缺陷就是區(qū)分度問題,即一個科學(xué)家可能有若干篇被引次數(shù)相同的論文恰恰處于分界點時,h指數(shù)就不宜取值。2006年L.Egghe提出將論文按照被引次數(shù)高低進行排序,并且將排序的序號進行平方,當(dāng)序號的平方等于序號之前所有論文的累積被引次數(shù)時,這個序號就定義為g指數(shù)。g指數(shù)在一定程度上增強了h指數(shù)的區(qū)分度。由于h指數(shù)的計算思路同時覆蓋了效能和產(chǎn)能兩個維度,而且計算簡單,使其成為繼影響因子之后接受程度最高、最為成功的計量指標(biāo)。在學(xué)界掀起了一股研究h指數(shù)的熱潮,大量對h指數(shù)進行改進的研究成果不斷涌現(xiàn)。在h指數(shù)大熱之時,Garfield也對期刊影響因子發(fā)展歷史進行回顧,同時回應(yīng)了2項對影響因子評價功能的指責(zé):一是從業(yè)人員多的學(xué)科,期刊的影響因子高;Garfield認(rèn)為在從業(yè)人員多的學(xué)科,容易產(chǎn)生超高被引論文,但是對期刊的影響因子沒有顯著影響,因為可供被引的論文數(shù)目也同樣很多。二是影響因子不能直接評價學(xué)者個人的研究水平;Garfield認(rèn)為新近發(fā)表的論文暫時還無法累積被引次數(shù),只能用影響因子來預(yù)估論文的被引次數(shù),而且期刊影響因子能夠反映刊物質(zhì)量,因此期刊影響因子可以用來對學(xué)者研究論文的水平進行評價。
表8列出聚類6#類的主要文獻(xiàn)節(jié)點,這一類文獻(xiàn)的主要內(nèi)容是從宏觀視角考察引文索引和期刊評價在科學(xué)交流系統(tǒng)的功用。1965年,普賴斯利用1961年的SCI數(shù)據(jù)分析了參考文獻(xiàn)的頻次分布和時間分布特征,發(fā)現(xiàn)高被引的論文一般都是新近發(fā)表的論文,通過引用關(guān)系這些新近發(fā)表的論文之間形成緊密聯(lián)系,構(gòu)成了研究前沿(ResearchFront)。該文開啟了科研人員以引文索引為工具從宏觀上探索科學(xué)文獻(xiàn)之間引用規(guī)律的先河,為文獻(xiàn)老化規(guī)律研究、研究前沿發(fā)現(xiàn)等問題奠定了基礎(chǔ)。1976年,Garfield對1974年SCI的數(shù)據(jù)進行統(tǒng)計分析,進一步驗證之前發(fā)現(xiàn)的三個引文分布特征:一是歷史悠久的期刊總被引次數(shù)一般較高,但是其影響因子不一定就高;二是評論類期刊的影響因子普遍高于普通期刊;三是不同學(xué)科的期刊影響因子不具有可比性。1979年,Garfield出版CitationIndexing:Itsrheory and Application in Science,Technology,and Humanities一書,對引文索引的設(shè)計思想和發(fā)展歷史進行了詳細(xì)陳述,并明確指出引文索引在文獻(xiàn)檢索、科學(xué)管理、科學(xué)史研究、期刊評價、科學(xué)家個人的評價方面的應(yīng)用價值。
5結(jié)語
期刊評價是一個延續(xù)了近百年的研究議題,相關(guān)文獻(xiàn)卷帙浩繁。正是通過對期刊評價研究的關(guān)注和知識貢獻(xiàn),圖書情報學(xué)的知識體系從為信息機構(gòu)服務(wù),延伸到為整個社會和學(xué)界的知識傳播和科研管理服務(wù),基于文獻(xiàn)計量學(xué)的期刊評價成為圖書情報學(xué)從學(xué)術(shù)界的邊緣走向中心的突破口。雖然學(xué)界對當(dāng)下量化學(xué)術(shù)評價體制詬病不斷,但是根本原因是科研體制導(dǎo)致的科研管理部門對工具的使用不當(dāng)。作為工具生產(chǎn)者的圖書情報學(xué),研究的主要焦點是完善工具。作為一個應(yīng)用性的研究主題,以圖書情報學(xué)界為主體的期刊評價研究重視評價方法和評價指標(biāo),忽視理論構(gòu)建。因此,對很多社會性的、認(rèn)識論上的問題缺乏深入的理論探討,難以形成共識。期刊評價研究屬于學(xué)術(shù)評價研究的中觀層面。從目前的發(fā)展方向來看,期刊評價研究在評價對象、評價方法、評價理論構(gòu)建上都具有一定的拓展空間。在評價對象上,一是從中觀的期刊評價轉(zhuǎn)向微觀的論文評價,比如最近幾年興起的對“睡美人”論文的研究;二是從中觀評價拓展到宏觀評價,即通過期刊評價研究的成果為機構(gòu)評價奠定基礎(chǔ),最為典型的是大學(xué)評價研究的興盛。在評價方法上,替代計量學(xué)的出現(xiàn)使得評價數(shù)據(jù)源更為豐富。在評價理論的構(gòu)建上,研究學(xué)術(shù)評價活動的社會機制、評價行為的心理機制將會是未來的重要熱點,比如在宏觀上研究評價制度的構(gòu)建運作,在微觀上研究引用心理和引用動機等。