引文分析存在的問題及其原因探究

1、    引文分析存在的問題及其原因探究    4 引文分析應用的局限引文分析主要有以下應用領域：對科學家、出版物和科學機構進行定性和定量評估；模擬科學技術的歷史發(fā)展；信息資料的查找與檢索；預測學科結構與發(fā)展趨勢35。4.1 科學評價方面引文分析模式被認為能反映、評估論文或作者表現(xiàn)的影響力，但實際上存在許多問題。早在20世紀60年代，加菲爾德就告誡人們，僅用引文分析作為評價指標必須慎之又慎，并指出引文分析在評價中可能出現(xiàn)的混雜與疏漏36，“盲目地作出被引頻次最多的著者就該得諾貝爾獎金的結論是荒謬的誰用引文統(tǒng)計在不同層次，尤其是在個人的層次上評價研究工作的績

2、效，誰就必須了解引文統(tǒng)計的微妙性和局限性”。2009年9月12日，84歲的加菲爾德博士訪華期間表示：“到今天sci的主要作用仍然是一個文獻檢索工具，而評估科技研究成果只是sci的衍生功能之一?！薄耙闷诳绊懸蜃觼碓u估個人科研能力是不合理的。”國內學者葉繼元也表示：“應清醒地看到，引文是科學對話的一種方法，是作者認為對自己的研究有用的資料，并不是專門對研究質量的評價?！?7另外，基于引文的科學評價有系列指標，長期使用但爭議最多的是期刊影響因子。例如，2009年度期刊引用報告（journal citation reports，簡稱jcr）中，結晶學報a輯的影響因子猛然從2008年的2.051升至

3、49.926，在jcr全部期刊中排第2位。引起結晶學報a輯急劇變化的直接原因，是該刊2008年所發(fā)表的shelx簡史一文獲得了很高的被引次數(shù)。結晶學報a輯影響因子即年指標突變，完全是一篇論文之功，這個典型事例也充分說明：受少數(shù)高被引論文左右，期刊影響因子高低不能準確反映期刊影響力大小38。影響因子的主要問題有：易被人為操縱、統(tǒng)計錯誤、不能跨學科比較、選源標準問題以及對非英文期刊不公平等；另外，影響因子建立在“所有引文重要性等價”為假設的基礎上，實際上這是存在問題的，如在總被引頻次相等的情況下，被nature等引用的論文影響力顯然會大于只被一些低水平期刊引用的論文39。1995年h指數(shù)被提出，后

4、來出現(xiàn)對其完善的系列指數(shù)；最近又流行“特征因子”（eigenfactor）。與傳統(tǒng)影響因子相比，基于pagerank算法的特征因子具有明顯的優(yōu)點。但目前沒有一種評價指標是完美的，特征因子也不例外：發(fā)文量依賴，限于發(fā)文數(shù)量，規(guī)模小的期刊不會得到較高的特征因子分值；對于排名靠后的期刊特征因子的分值很低，使得期刊評價時的區(qū)分度不夠；另外特征因子有和影響因子相同的一些缺陷，沒有脫離原有量化學術評價方法的老路；它也繼承了pagerank的不足40。引文分析在科學評價方面的應用存在問題的主要原因有：文獻被引用，不一定反映其重要性。一篇錯誤觀點的論文，可能因為批評指正的需要，被引頻次（數(shù)量）會很高；相反有些

5、用而不引，作者在論文中不自覺地吸取了別人論文的某些觀念，卻沒有將它當作引用文獻。有些學科領域，有不引用論文的傳統(tǒng)，引文很少。施引作者認為對研究“有用”的資料，并不是專門對論文質量的評價，如何區(qū)分正面引用、負面引用和引文深度是十分棘手的問題41。省力法則。著者選用引文受可獲得性的影響，選用參考文獻以方便為準則，以占有為優(yōu)先，引文并不一定是最好的。如soper在1976年發(fā)現(xiàn)，在著者最新發(fā)表的論文中，所引用的文獻絕大部分是個人藏書，小部分是所屬部門或單位圖書館藏書，來自其他來源的文獻很少42。目前有許多研究表明，開放獲取期刊比傳統(tǒng)期刊、同一期刊上開放獲取論文比未開放獲取論文的引用次數(shù)多，也在一定程

6、度上說明這個問題。時間性問題。許多不朽之作在其發(fā)表后許多年，人們才注意并頻繁引用。如哥白尼的天體運行論、愛因斯坦的論運動物體的電動力學和布拉德福的專門學科的情報源等，這就是所謂的“睡美人現(xiàn)象”。許多重大的科技進展被融匯為普遍承認的常識，本應很高的被引次數(shù)卻沒有持續(xù)下去，如愛因斯坦的相對論、有關dna雙螺旋結構的論文就是典型。這給引文評價功能的正確發(fā)揮造成了一定難度。引用偏見。各種原因和目的的偽引、漏引，尤其是為拔高著者身份的自引、互引和為掩遮某種聯(lián)系的漏引，都會給引文分析帶來誤差。馬太效應的存在。人們往往以“名著”、“權威”作為選擇引文的標準，有的確是出于需要，也有的則是為了抬高自己論文的身價

7、。一種期刊因為發(fā)表名人的文章而為眾人所引用，以至引起連鎖反應，結果其引文率很高。這種馬太效應的作用，掩蓋和影響著文獻引用的真實性，不能客觀地評價論文的價值。如加拿大魁北克大學的lariviere和gingras在wos中尋找重復發(fā)表的論文。他們把“重復發(fā)表”定義為：（a）兩篇文章標題完全一樣；（b）第一作者姓名完全一樣；（c）兩篇文章后面開列的參考文獻數(shù)量完全一樣。他們共找出4,918組重復發(fā)表的論文，其中4,532組論文發(fā)表在影響因子有異的刊物上。這些論文組中的兩篇文章，多數(shù)發(fā)表在同一年。對這4,532組論文被引狀況的對比分析表明，發(fā)表在較高影響因子刊物上的論文，要比發(fā)表在較低影響因子刊物上

8、的同樣論文的被引次數(shù)，平均高1倍。這說明，文章被引用反映的并非完全是論文的內在價值，還部分反映了發(fā)表論文的期刊的影響力和顯示度43。其他方面的問題。引用率依學科領域、語言、時間等的不同而有所不同。有些語言不被廣泛使用、或是出現(xiàn)時間較晚，導致引用文獻的數(shù)量比其他文獻少很多；自引在每個作者的引用行為中占有的比例，因引用者的習慣、風格等的不同而表現(xiàn)出明顯的差異；有些專門學科的研究領域規(guī)模較小，導致論文被引用的地位不平等；綜述評論文章，往往被引次數(shù)較高，實際上綜述文章的創(chuàng)新性和重要性與其高引用率不符44。4.2 科學交流方面科學交流是知識創(chuàng)新的前提和基礎，科學文獻則是科學交流的重要載體和傳遞工具。文獻

9、之間引用關系較客觀真實地表征了科學的累積性、連續(xù)性和繼承性，可以描述、解釋、預測和評價科學交流行為活動。引文實際上是作者群體在學術共同體認同的學術理念和規(guī)則影響下產生的、可以考察分析的一種學術交流現(xiàn)象。眾多學者從引文分析視角研究科學交流活動。borgman認為文獻計量學為研究科學交流的結構和過程，提供了一整套有力的手段和方法，其中尤以引文分析最突出45。harter通過引文分析研究了電子期刊在科學交流過程中的影響力46。但是，其中引文分析存在的問題也不能不引起我們的重視，以引文分析為視角的科學交流研究有時把實際情況給扭曲了。macroberts在最近的研究中，用20個生物地理科學的案例說明：在

10、作者研究過程中使用了大量的先前成果，但大部分并沒有被引用，這有作者的主觀原因也有受版面限制等其他因素；數(shù)據(jù)類的論文比理論分析類論文具有明顯更少的被引用現(xiàn)象；但是沒有被引用，并不意味著作者沒有使用過；而且引用的論著并不比沒引用的論著對作者的影響更大，即引用的頻率并不能表征其在科學交流中的重要度47。事實上，在科技領域，一旦一個觀點被充分廣泛地傳播，并為眾人所知曉和公認后，再引用原始敘述已不再需要了，這時包含有這個廣為人知觀點的文獻即成為一條含蓄的引文，這種現(xiàn)象在科技文獻中比較普遍，它也無法從引文角度分析。在科學交流中，特別是在網絡環(huán)境下，存在著多種交流方式，引文視角僅僅是其中的一個方面。20世紀

11、中期，普賴斯就認為學者80%的信息是通過非正式渠道交流獲取的，科學研究重要的信息往往是通過會議或者面談等其他交流方式獲取的。1991年，hicks通過地理學知識形象地描述了引文在科學交流中的地位，“引文僅僅是巨大巖石層中的一個細小的區(qū)域，它影響非常有限（不到10%），也十分不具代表性。只是通過isi的盲目推崇，引文分析變成合適的市場化商品，從而成為了極吸引人的可用巖石層”48。在hicks的研究基礎上，macroberts繪出了四個層次組成的引文分布地形圖，在此基礎上經過少量修改，我們得到圖1，較形象地顯示了從引文角度分析科學交流的局限。圖1 引文分布地形圖5 結語科學文獻的引證與被引證，是科

12、學發(fā)展規(guī)律的表現(xiàn)，體現(xiàn)了科學知識的累積性、連續(xù)性和繼承性。引文分析是圖書情報學十分關鍵的研究內容，由于在科學評價、信息檢索和知識發(fā)現(xiàn)等方面的重要應用，成為圖書情報學影響其他學科領域的重要方面。從理論、方法與應用等方面對引文分析存在的問題進行了較為全面系統(tǒng)的總結，這使我們認識到，引文分析仍處于十分不完善的階段，再加上引用對象、過程和引文庫的不斷變化，使得這一問題更加復雜。特別是在國內，引文分析被過度熱心而盲目使用、濫用現(xiàn)象較為普遍，導致大量低水平重復性的成果，這是我們進行引文分析必須正視的問題，而引起這些問題的原因和相應對策也值得我們深入思考。目前我們應該以謹慎的態(tài)度看待引文分析，對其方法和結果

13、應有客觀評價，在充分了解其優(yōu)缺點基礎上進行完善與發(fā)展。對引文分析存在的問題從以下幾方面進行改進：第一，引文數(shù)據(jù)庫功能進一步加強，為大規(guī)模的引文分析奠定基礎，也為監(jiān)督、驗證引文分析的正確性提供依據(jù)，甚至可以提供引文分析的自動統(tǒng)計處理功能，大多數(shù)計量分析方面的功能不需要人工承擔。例如，將目前主要用于檢索和分析的引文索引庫改造為專門用于評價的數(shù)據(jù)庫，這需要對引文進行深度加工，研制出信息和知識含量更大的數(shù)據(jù)庫49。第二，計算機網絡技術的深入發(fā)展，為新研究方法的提出、可視化軟件的研制提供了條件。可以說是計算機的出現(xiàn)，才使得引文分析興起，隨著相關技術的發(fā)展，引文分析將進一步完善。隨著互聯(lián)網在學術傳播系統(tǒng)的

14、應用及學術信息電子化的發(fā)展，新興的引文分析工具與方法不斷涌現(xiàn)。異構異源引文數(shù)據(jù)互鏈分析越來越多，引文計量粒度越來越小，可實現(xiàn)引文分析結果可視化的自動智能生成。第三，隨著社會文明的進步，科學倫理、科學道德的健全與法制化，著錄規(guī)范化和標準化的加強，學術共同體不斷研討和交流，取得共識，使得引文數(shù)據(jù)的信度和效度提高。第四，由于引文分析影響的廣泛性，全新的學術傳播模式也在不斷出現(xiàn)，越來越多的學科都在研究這個問題，從哲學、社會學、心理學、文獻學等角度進行深入探討，引文分析的發(fā)展會越來越科學。參考文獻：1kaplan n. the norms of citation behavior: prolegomen

15、a to the footnotej. american documentation, 1965, 16 (3): 179-184.2mulkay m j. methodology in the sociology of science: some reflections on the study of radio astronomyj. social science information, 1974, 13 (2): 107-119.3nicolaisen j. citation analysisj. annual review of information science and tec

16、hnology, 2007 (13): 609-641.4smith l c. citation analysisj. library trends, 1981 (30): 83-106.5white h d. reward, persuasion, and the sokal hoax: a study in citation identitiesj. scientometrics, 2004, 60 (1): 93-120.6mac roberts m h, mac roberts b r. testing the ortega hypothesis: facts and artifact

17、sj. scientometries, 1987 (12): 293-295.7moed h f, garfield e. basic scientists cite proportionally fewer “authoritative” references as their bibliographies become shorterc/proceedings of the 9th international conference on scientometrics and informetrics, 2003, 190-196.8harter s p. psychological rel

18、evance and information sciencej. journal of the american society for information science, 1992, 43 (9): 602-615.9wouters. the citation cultureol/m. 2010-06-09. /wouters/wouters.pdf.10nicolaisen j. social behavior and scientific practice: missing pieces of the citation p

19、uzzleol/j. 2010-06-09. 11邱均平信息計量學m武漢：武漢大學出版社，2007：20-5612brooks t a. evidence of complies citer motivationsj. journal of the american society for information science, 1986, 37 (1): 34-36.13liu m. a study of citing motivation of chinese scientistsj. journal of information science, 1993 (19): 13.23.14

20、baird l m, oppenheim c. do citations matter? j. journal of information science, 1994, 20 (1): 12-13.15kousha k, thelwall m. how is science cited on the web? a classification of google unique web citationsj. journal of the american society for information science and technology, 2007, 58 (11): 1631-1

21、644.16vaughan l, shaw d. web citation data for impact assessment: a comparison of four science disciplinesj. journal of the american society for information science and technology, 2005, 56 (10): 1075-1087.17brooks t a. private acts and public objects: an investigation of citer motivationsj. journal

22、 of the american society for information science, 1985, 36 (4): 223-229.18bornmann l, daniel h d. what do citation counts measure? a review of studies on citing behaviorj. journal of documentation, 2008, 64 (1): 45-80.19梁立明，鐘鎮(zhèn)錯引現(xiàn)象折射出的科學家群體引文失范行為以nature上一篇19萬次高頻引用論文的錯引記錄為例j自然辯證法研究，2007（6）：62-6520simk

23、in m, roychowdhury v p. read before you citej. complex systems, 2003 (14): 269-274.21prabha c g. some aspects of citation behavior: a pilot study in business administrationj. journal of the american society for information science, 1983, 34 (3): 202-206.22macroberts m h, macroberts b r. problems of

24、citation analysis: a critical reviewj. journal of the american society for information science, 1989, 40 (5): 342-349.23中國科學技術信息研究所2003年度中國科技期刊論文統(tǒng)計與分析m北京：科學技術文獻出版社，2005：12124金標12種優(yōu)秀圖書館學期刊的引文規(guī)范性調查j圖書情報工作，2000（9）：88-8925戴泳，張四新學術論文故意漏引現(xiàn)象分析j現(xiàn)代情報，2005（4）：48-5026周麗萍學術期刊參考文獻著錄規(guī)范研究盲點分析j浙江海洋學院學報（人文科學版），2009（

25、2）：115-11827丁學東文獻計量學基礎m北京：北京大學出版社，1993：19828edge d. why i am not a co-citationistj. society for social studies of science newsletter, 1977 (2): 13-19.29李玉進引文分析存在問題的再認識j天津外國語學院學報，2001（3）：60-6230larivière v. the place of serials in referencing practices: comparing natural sciences and engineering

26、 with social sciences and humanitiesj. journal of the american society for information science and technology, 2006, 57 (8): 1997-1004.31鄭德俊，葉繼元基于合作模式的引文數(shù)據(jù)庫發(fā)展策略j大學圖書館學報，2005（1）：79-8332李志鵬中文社會科學引文索引的不足與改進j情報資料工作，2005（5）：108-11133趙黨志信息計量學與網絡計量學m/ol. 2010-07-24. 34邱均平，李曄君，李江共鏈分析的缺陷及其解決方案研究j情報理論與實踐，2008

27、（2）：140-14335zunde p. structural models of complex information sourcesj. information storage and retrieval, 1971 (7): 1-18.36侯漢清科學引文索引與科技評價工作引文索引法的理論及應用譯后記j江西圖書館學刊，2005（2）：3437葉繼元首屆人文社會科學評價學術研討會綜述j學術界，2009（4）：301-30438趙基明影響因子突變的提醒n科學時報，2010-06-30（a1）39任勝利特征因子（eigenfactor）：基于引證網絡分析期刊和論文的重要性j中國科技期刊研究，2009，20（3）：415-41840竇曦騫，祁延莉特征因子與論文影響力指標初探j大學圖書館學報，2009（6）：57-6241葉繼元如何看待引文數(shù)據(jù)中的負面引用n光明日報，2007-06-12（11）42soper. characteristics and use of personal collectionsj. library quarterly, 1976, 46 (4): 397-415.43larivière v, gingras y. the impact factors matthew effect: a natural experiment in bibli