引文分析存在的問(wèn)題及其原因探究

1、    引文分析存在的問(wèn)題及其原因探究    4 引文分析應(yīng)用的局限引文分析主要有以下應(yīng)用領(lǐng)域：對(duì)科學(xué)家、出版物和科學(xué)機(jī)構(gòu)進(jìn)行定性和定量評(píng)估；模擬科學(xué)技術(shù)的歷史發(fā)展；信息資料的查找與檢索；預(yù)測(cè)學(xué)科結(jié)構(gòu)與發(fā)展趨勢(shì)35。4.1 科學(xué)評(píng)價(jià)方面引文分析模式被認(rèn)為能反映、評(píng)估論文或作者表現(xiàn)的影響力，但實(shí)際上存在許多問(wèn)題。早在20世紀(jì)60年代，加菲爾德就告誡人們，僅用引文分析作為評(píng)價(jià)指標(biāo)必須慎之又慎，并指出引文分析在評(píng)價(jià)中可能出現(xiàn)的混雜與疏漏36，“盲目地作出被引頻次最多的著者就該得諾貝爾獎(jiǎng)金的結(jié)論是荒謬的誰(shuí)用引文統(tǒng)計(jì)在不同層次，尤其是在個(gè)人的層次上評(píng)價(jià)研究工作的績(jī)

2、效，誰(shuí)就必須了解引文統(tǒng)計(jì)的微妙性和局限性”。2009年9月12日，84歲的加菲爾德博士訪華期間表示：“到今天sci的主要作用仍然是一個(gè)文獻(xiàn)檢索工具，而評(píng)估科技研究成果只是sci的衍生功能之一?！薄耙闷诳绊懸蜃觼?lái)評(píng)估個(gè)人科研能力是不合理的?！眹?guó)內(nèi)學(xué)者葉繼元也表示：“應(yīng)清醒地看到，引文是科學(xué)對(duì)話的一種方法，是作者認(rèn)為對(duì)自己的研究有用的資料，并不是專門對(duì)研究質(zhì)量的評(píng)價(jià)?！?7另外，基于引文的科學(xué)評(píng)價(jià)有系列指標(biāo)，長(zhǎng)期使用但爭(zhēng)議最多的是期刊影響因子。例如，2009年度期刊引用報(bào)告（journal citation reports，簡(jiǎn)稱jcr）中，結(jié)晶學(xué)報(bào)a輯的影響因子猛然從2008年的2.051升至

3、49.926，在jcr全部期刊中排第2位。引起結(jié)晶學(xué)報(bào)a輯急劇變化的直接原因，是該刊2008年所發(fā)表的shelx簡(jiǎn)史一文獲得了很高的被引次數(shù)。結(jié)晶學(xué)報(bào)a輯影響因子即年指標(biāo)突變，完全是一篇論文之功，這個(gè)典型事例也充分說(shuō)明：受少數(shù)高被引論文左右，期刊影響因子高低不能準(zhǔn)確反映期刊影響力大小38。影響因子的主要問(wèn)題有：易被人為操縱、統(tǒng)計(jì)錯(cuò)誤、不能跨學(xué)科比較、選源標(biāo)準(zhǔn)問(wèn)題以及對(duì)非英文期刊不公平等；另外，影響因子建立在“所有引文重要性等價(jià)”為假設(shè)的基礎(chǔ)上，實(shí)際上這是存在問(wèn)題的，如在總被引頻次相等的情況下，被nature等引用的論文影響力顯然會(huì)大于只被一些低水平期刊引用的論文39。1995年h指數(shù)被提出，后

4、來(lái)出現(xiàn)對(duì)其完善的系列指數(shù)；最近又流行“特征因子”（eigenfactor）。與傳統(tǒng)影響因子相比，基于pagerank算法的特征因子具有明顯的優(yōu)點(diǎn)。但目前沒(méi)有一種評(píng)價(jià)指標(biāo)是完美的，特征因子也不例外：發(fā)文量依賴，限于發(fā)文數(shù)量，規(guī)模小的期刊不會(huì)得到較高的特征因子分值；對(duì)于排名靠后的期刊特征因子的分值很低，使得期刊評(píng)價(jià)時(shí)的區(qū)分度不夠；另外特征因子有和影響因子相同的一些缺陷，沒(méi)有脫離原有量化學(xué)術(shù)評(píng)價(jià)方法的老路；它也繼承了pagerank的不足40。引文分析在科學(xué)評(píng)價(jià)方面的應(yīng)用存在問(wèn)題的主要原因有：文獻(xiàn)被引用，不一定反映其重要性。一篇錯(cuò)誤觀點(diǎn)的論文，可能因?yàn)榕u(píng)指正的需要，被引頻次（數(shù)量）會(huì)很高；相反有些

5、用而不引，作者在論文中不自覺(jué)地吸取了別人論文的某些觀念，卻沒(méi)有將它當(dāng)作引用文獻(xiàn)。有些學(xué)科領(lǐng)域，有不引用論文的傳統(tǒng)，引文很少。施引作者認(rèn)為對(duì)研究“有用”的資料，并不是專門對(duì)論文質(zhì)量的評(píng)價(jià)，如何區(qū)分正面引用、負(fù)面引用和引文深度是十分棘手的問(wèn)題41。省力法則。著者選用引文受可獲得性的影響，選用參考文獻(xiàn)以方便為準(zhǔn)則，以占有為優(yōu)先，引文并不一定是最好的。如soper在1976年發(fā)現(xiàn)，在著者最新發(fā)表的論文中，所引用的文獻(xiàn)絕大部分是個(gè)人藏書(shū)，小部分是所屬部門或單位圖書(shū)館藏書(shū)，來(lái)自其他來(lái)源的文獻(xiàn)很少42。目前有許多研究表明，開(kāi)放獲取期刊比傳統(tǒng)期刊、同一期刊上開(kāi)放獲取論文比未開(kāi)放獲取論文的引用次數(shù)多，也在一定程

6、度上說(shuō)明這個(gè)問(wèn)題。時(shí)間性問(wèn)題。許多不朽之作在其發(fā)表后許多年，人們才注意并頻繁引用。如哥白尼的天體運(yùn)行論、愛(ài)因斯坦的論運(yùn)動(dòng)物體的電動(dòng)力學(xué)和布拉德福的專門學(xué)科的情報(bào)源等，這就是所謂的“睡美人現(xiàn)象”。許多重大的科技進(jìn)展被融匯為普遍承認(rèn)的常識(shí)，本應(yīng)很高的被引次數(shù)卻沒(méi)有持續(xù)下去，如愛(ài)因斯坦的相對(duì)論、有關(guān)dna雙螺旋結(jié)構(gòu)的論文就是典型。這給引文評(píng)價(jià)功能的正確發(fā)揮造成了一定難度。引用偏見(jiàn)。各種原因和目的的偽引、漏引，尤其是為拔高著者身份的自引、互引和為掩遮某種聯(lián)系的漏引，都會(huì)給引文分析帶來(lái)誤差。馬太效應(yīng)的存在。人們往往以“名著”、“權(quán)威”作為選擇引文的標(biāo)準(zhǔn)，有的確是出于需要，也有的則是為了抬高自己論文的身價(jià)

7、。一種期刊因?yàn)榘l(fā)表名人的文章而為眾人所引用，以至引起連鎖反應(yīng)，結(jié)果其引文率很高。這種馬太效應(yīng)的作用，掩蓋和影響著文獻(xiàn)引用的真實(shí)性，不能客觀地評(píng)價(jià)論文的價(jià)值。如加拿大魁北克大學(xué)的lariviere和gingras在wos中尋找重復(fù)發(fā)表的論文。他們把“重復(fù)發(fā)表”定義為：（a）兩篇文章標(biāo)題完全一樣；（b）第一作者姓名完全一樣；（c）兩篇文章后面開(kāi)列的參考文獻(xiàn)數(shù)量完全一樣。他們共找出4,918組重復(fù)發(fā)表的論文，其中4,532組論文發(fā)表在影響因子有異的刊物上。這些論文組中的兩篇文章，多數(shù)發(fā)表在同一年。對(duì)這4,532組論文被引狀況的對(duì)比分析表明，發(fā)表在較高影響因子刊物上的論文，要比發(fā)表在較低影響因子刊物上

8、的同樣論文的被引次數(shù)，平均高1倍。這說(shuō)明，文章被引用反映的并非完全是論文的內(nèi)在價(jià)值，還部分反映了發(fā)表論文的期刊的影響力和顯示度43。其他方面的問(wèn)題。引用率依學(xué)科領(lǐng)域、語(yǔ)言、時(shí)間等的不同而有所不同。有些語(yǔ)言不被廣泛使用、或是出現(xiàn)時(shí)間較晚，導(dǎo)致引用文獻(xiàn)的數(shù)量比其他文獻(xiàn)少很多；自引在每個(gè)作者的引用行為中占有的比例，因引用者的習(xí)慣、風(fēng)格等的不同而表現(xiàn)出明顯的差異；有些專門學(xué)科的研究領(lǐng)域規(guī)模較小，導(dǎo)致論文被引用的地位不平等；綜述評(píng)論文章，往往被引次數(shù)較高，實(shí)際上綜述文章的創(chuàng)新性和重要性與其高引用率不符44。4.2 科學(xué)交流方面科學(xué)交流是知識(shí)創(chuàng)新的前提和基礎(chǔ)，科學(xué)文獻(xiàn)則是科學(xué)交流的重要載體和傳遞工具。文獻(xiàn)

9、之間引用關(guān)系較客觀真實(shí)地表征了科學(xué)的累積性、連續(xù)性和繼承性，可以描述、解釋、預(yù)測(cè)和評(píng)價(jià)科學(xué)交流行為活動(dòng)。引文實(shí)際上是作者群體在學(xué)術(shù)共同體認(rèn)同的學(xué)術(shù)理念和規(guī)則影響下產(chǎn)生的、可以考察分析的一種學(xué)術(shù)交流現(xiàn)象。眾多學(xué)者從引文分析視角研究科學(xué)交流活動(dòng)。borgman認(rèn)為文獻(xiàn)計(jì)量學(xué)為研究科學(xué)交流的結(jié)構(gòu)和過(guò)程，提供了一整套有力的手段和方法，其中尤以引文分析最突出45。harter通過(guò)引文分析研究了電子期刊在科學(xué)交流過(guò)程中的影響力46。但是，其中引文分析存在的問(wèn)題也不能不引起我們的重視，以引文分析為視角的科學(xué)交流研究有時(shí)把實(shí)際情況給扭曲了。macroberts在最近的研究中，用20個(gè)生物地理科學(xué)的案例說(shuō)明：在

10、作者研究過(guò)程中使用了大量的先前成果，但大部分并沒(méi)有被引用，這有作者的主觀原因也有受版面限制等其他因素；數(shù)據(jù)類的論文比理論分析類論文具有明顯更少的被引用現(xiàn)象；但是沒(méi)有被引用，并不意味著作者沒(méi)有使用過(guò)；而且引用的論著并不比沒(méi)引用的論著對(duì)作者的影響更大，即引用的頻率并不能表征其在科學(xué)交流中的重要度47。事實(shí)上，在科技領(lǐng)域，一旦一個(gè)觀點(diǎn)被充分廣泛地傳播，并為眾人所知曉和公認(rèn)后，再引用原始敘述已不再需要了，這時(shí)包含有這個(gè)廣為人知觀點(diǎn)的文獻(xiàn)即成為一條含蓄的引文，這種現(xiàn)象在科技文獻(xiàn)中比較普遍，它也無(wú)法從引文角度分析。在科學(xué)交流中，特別是在網(wǎng)絡(luò)環(huán)境下，存在著多種交流方式，引文視角僅僅是其中的一個(gè)方面。20世紀(jì)

11、中期，普賴斯就認(rèn)為學(xué)者80%的信息是通過(guò)非正式渠道交流獲取的，科學(xué)研究重要的信息往往是通過(guò)會(huì)議或者面談等其他交流方式獲取的。1991年，hicks通過(guò)地理學(xué)知識(shí)形象地描述了引文在科學(xué)交流中的地位，“引文僅僅是巨大巖石層中的一個(gè)細(xì)小的區(qū)域，它影響非常有限（不到10%），也十分不具代表性。只是通過(guò)isi的盲目推崇，引文分析變成合適的市場(chǎng)化商品，從而成為了極吸引人的可用巖石層”48。在hicks的研究基礎(chǔ)上，macroberts繪出了四個(gè)層次組成的引文分布地形圖，在此基礎(chǔ)上經(jīng)過(guò)少量修改，我們得到圖1，較形象地顯示了從引文角度分析科學(xué)交流的局限。圖1 引文分布地形圖5 結(jié)語(yǔ)科學(xué)文獻(xiàn)的引證與被引證，是科

12、學(xué)發(fā)展規(guī)律的表現(xiàn)，體現(xiàn)了科學(xué)知識(shí)的累積性、連續(xù)性和繼承性。引文分析是圖書(shū)情報(bào)學(xué)十分關(guān)鍵的研究?jī)?nèi)容，由于在科學(xué)評(píng)價(jià)、信息檢索和知識(shí)發(fā)現(xiàn)等方面的重要應(yīng)用，成為圖書(shū)情報(bào)學(xué)影響其他學(xué)科領(lǐng)域的重要方面。從理論、方法與應(yīng)用等方面對(duì)引文分析存在的問(wèn)題進(jìn)行了較為全面系統(tǒng)的總結(jié)，這使我們認(rèn)識(shí)到，引文分析仍處于十分不完善的階段，再加上引用對(duì)象、過(guò)程和引文庫(kù)的不斷變化，使得這一問(wèn)題更加復(fù)雜。特別是在國(guó)內(nèi)，引文分析被過(guò)度熱心而盲目使用、濫用現(xiàn)象較為普遍，導(dǎo)致大量低水平重復(fù)性的成果，這是我們進(jìn)行引文分析必須正視的問(wèn)題，而引起這些問(wèn)題的原因和相應(yīng)對(duì)策也值得我們深入思考。目前我們應(yīng)該以謹(jǐn)慎的態(tài)度看待引文分析，對(duì)其方法和結(jié)果

13、應(yīng)有客觀評(píng)價(jià)，在充分了解其優(yōu)缺點(diǎn)基礎(chǔ)上進(jìn)行完善與發(fā)展。對(duì)引文分析存在的問(wèn)題從以下幾方面進(jìn)行改進(jìn)：第一，引文數(shù)據(jù)庫(kù)功能進(jìn)一步加強(qiáng)，為大規(guī)模的引文分析奠定基礎(chǔ)，也為監(jiān)督、驗(yàn)證引文分析的正確性提供依據(jù)，甚至可以提供引文分析的自動(dòng)統(tǒng)計(jì)處理功能，大多數(shù)計(jì)量分析方面的功能不需要人工承擔(dān)。例如，將目前主要用于檢索和分析的引文索引庫(kù)改造為專門用于評(píng)價(jià)的數(shù)據(jù)庫(kù)，這需要對(duì)引文進(jìn)行深度加工，研制出信息和知識(shí)含量更大的數(shù)據(jù)庫(kù)49。第二，計(jì)算機(jī)網(wǎng)絡(luò)技術(shù)的深入發(fā)展，為新研究方法的提出、可視化軟件的研制提供了條件?？梢哉f(shuō)是計(jì)算機(jī)的出現(xiàn)，才使得引文分析興起，隨著相關(guān)技術(shù)的發(fā)展，引文分析將進(jìn)一步完善。隨著互聯(lián)網(wǎng)在學(xué)術(shù)傳播系統(tǒng)的

14、應(yīng)用及學(xué)術(shù)信息電子化的發(fā)展，新興的引文分析工具與方法不斷涌現(xiàn)。異構(gòu)異源引文數(shù)據(jù)互鏈分析越來(lái)越多，引文計(jì)量粒度越來(lái)越小，可實(shí)現(xiàn)引文分析結(jié)果可視化的自動(dòng)智能生成。第三，隨著社會(huì)文明的進(jìn)步，科學(xué)倫理、科學(xué)道德的健全與法制化，著錄規(guī)范化和標(biāo)準(zhǔn)化的加強(qiáng)，學(xué)術(shù)共同體不斷研討和交流，取得共識(shí)，使得引文數(shù)據(jù)的信度和效度提高。第四，由于引文分析影響的廣泛性，全新的學(xué)術(shù)傳播模式也在不斷出現(xiàn)，越來(lái)越多的學(xué)科都在研究這個(gè)問(wèn)題，從哲學(xué)、社會(huì)學(xué)、心理學(xué)、文獻(xiàn)學(xué)等角度進(jìn)行深入探討，引文分析的發(fā)展會(huì)越來(lái)越科學(xué)。參考文獻(xiàn)：1kaplan n. the norms of citation behavior: prolegomen

15、a to the footnotej. american documentation, 1965, 16 (3): 179-184.2mulkay m j. methodology in the sociology of science: some reflections on the study of radio astronomyj. social science information, 1974, 13 (2): 107-119.3nicolaisen j. citation analysisj. annual review of information science and tec

16、hnology, 2007 (13): 609-641.4smith l c. citation analysisj. library trends, 1981 (30): 83-106.5white h d. reward, persuasion, and the sokal hoax: a study in citation identitiesj. scientometrics, 2004, 60 (1): 93-120.6mac roberts m h, mac roberts b r. testing the ortega hypothesis: facts and artifact

17、sj. scientometries, 1987 (12): 293-295.7moed h f, garfield e. basic scientists cite proportionally fewer “authoritative” references as their bibliographies become shorterc/proceedings of the 9th international conference on scientometrics and informetrics, 2003, 190-196.8harter s p. psychological rel

18、evance and information sciencej. journal of the american society for information science, 1992, 43 (9): 602-615.9wouters. the citation cultureol/m. 2010-06-09. /wouters/wouters.pdf.10nicolaisen j. social behavior and scientific practice: missing pieces of the citation p

19、uzzleol/j. 2010-06-09. 11邱均平信息計(jì)量學(xué)m武漢：武漢大學(xué)出版社，2007：20-5612brooks t a. evidence of complies citer motivationsj. journal of the american society for information science, 1986, 37 (1): 34-36.13liu m. a study of citing motivation of chinese scientistsj. journal of information science, 1993 (19): 13.23.14

20、baird l m, oppenheim c. do citations matter? j. journal of information science, 1994, 20 (1): 12-13.15kousha k, thelwall m. how is science cited on the web? a classification of google unique web citationsj. journal of the american society for information science and technology, 2007, 58 (11): 1631-1

21、644.16vaughan l, shaw d. web citation data for impact assessment: a comparison of four science disciplinesj. journal of the american society for information science and technology, 2005, 56 (10): 1075-1087.17brooks t a. private acts and public objects: an investigation of citer motivationsj. journal

22、 of the american society for information science, 1985, 36 (4): 223-229.18bornmann l, daniel h d. what do citation counts measure? a review of studies on citing behaviorj. journal of documentation, 2008, 64 (1): 45-80.19梁立明，鐘鎮(zhèn)錯(cuò)引現(xiàn)象折射出的科學(xué)家群體引文失范行為以nature上一篇19萬(wàn)次高頻引用論文的錯(cuò)引記錄為例j自然辯證法研究，2007（6）：62-6520simk

23、in m, roychowdhury v p. read before you citej. complex systems, 2003 (14): 269-274.21prabha c g. some aspects of citation behavior: a pilot study in business administrationj. journal of the american society for information science, 1983, 34 (3): 202-206.22macroberts m h, macroberts b r. problems of

24、citation analysis: a critical reviewj. journal of the american society for information science, 1989, 40 (5): 342-349.23中國(guó)科學(xué)技術(shù)信息研究所2003年度中國(guó)科技期刊論文統(tǒng)計(jì)與分析m北京：科學(xué)技術(shù)文獻(xiàn)出版社，2005：12124金標(biāo)12種優(yōu)秀圖書(shū)館學(xué)期刊的引文規(guī)范性調(diào)查j圖書(shū)情報(bào)工作，2000（9）：88-8925戴泳，張四新學(xué)術(shù)論文故意漏引現(xiàn)象分析j現(xiàn)代情報(bào)，2005（4）：48-5026周麗萍學(xué)術(shù)期刊參考文獻(xiàn)著錄規(guī)范研究盲點(diǎn)分析j浙江海洋學(xué)院學(xué)報(bào)（人文科學(xué)版），2009（

25、2）：115-11827丁學(xué)東文獻(xiàn)計(jì)量學(xué)基礎(chǔ)m北京：北京大學(xué)出版社，1993：19828edge d. why i am not a co-citationistj. society for social studies of science newsletter, 1977 (2): 13-19.29李玉進(jìn)引文分析存在問(wèn)題的再認(rèn)識(shí)j天津外國(guó)語(yǔ)學(xué)院學(xué)報(bào)，2001（3）：60-6230larivière v. the place of serials in referencing practices: comparing natural sciences and engineering

26、 with social sciences and humanitiesj. journal of the american society for information science and technology, 2006, 57 (8): 1997-1004.31鄭德俊，葉繼元基于合作模式的引文數(shù)據(jù)庫(kù)發(fā)展策略j大學(xué)圖書(shū)館學(xué)報(bào)，2005（1）：79-8332李志鵬中文社會(huì)科學(xué)引文索引的不足與改進(jìn)j情報(bào)資料工作，2005（5）：108-11133趙黨志信息計(jì)量學(xué)與網(wǎng)絡(luò)計(jì)量學(xué)m/ol. 2010-07-24. 34邱均平，李曄君，李江共鏈分析的缺陷及其解決方案研究j情報(bào)理論與實(shí)踐，2008

27、（2）：140-14335zunde p. structural models of complex information sourcesj. information storage and retrieval, 1971 (7): 1-18.36侯漢清科學(xué)引文索引與科技評(píng)價(jià)工作引文索引法的理論及應(yīng)用譯后記j江西圖書(shū)館學(xué)刊，2005（2）：3437葉繼元首屆人文社會(huì)科學(xué)評(píng)價(jià)學(xué)術(shù)研討會(huì)綜述j學(xué)術(shù)界，2009（4）：301-30438趙基明影響因子突變的提醒n科學(xué)時(shí)報(bào)，2010-06-30（a1）39任勝利特征因子（eigenfactor）：基于引證網(wǎng)絡(luò)分析期刊和論文的重要性j中國(guó)科技期刊研究，2009，20（3）：415-41840竇曦騫，祁延莉特征因子與論文影響力指標(biāo)初探j(luò)大學(xué)圖書(shū)館學(xué)報(bào)，2009（6）：57-6241葉繼元如何看待引文數(shù)據(jù)中的負(fù)面引用n光明日?qǐng)?bào)，2007-06-12（11）42soper. characteristics and use of personal collectionsj. library quarterly, 1976, 46 (4): 397-415.43larivière v, gingras y. the impact factors matthew effect: a natural experiment in bibli