基于全文本分析的引文指標(biāo)效能研究

1、基于全文本分析基于全文本分析的引文指標(biāo)效能研究的引文指標(biāo)效能研究摘要：摘要：[目的目的意義意義]由于引用行為的復(fù)雜性，基于參考文獻(xiàn)列表計(jì)算的被引次數(shù)在評(píng)價(jià)論文的學(xué)術(shù)影響力時(shí)存在不足，因此深入全文內(nèi)容改進(jìn)引文指標(biāo)成為趨勢(shì)。探討基于全文本分析的引文指標(biāo)計(jì)算方法的效能問(wèn)題，有利于為引文指標(biāo)的選擇和改進(jìn)提供參考。[方法方法過(guò)程過(guò)程]本研究通過(guò)選擇F1000平臺(tái)上的57篇論文作為實(shí)驗(yàn)樣本，獲取實(shí)驗(yàn)樣本論文的2216篇施引文獻(xiàn)的全文數(shù)據(jù)。人工標(biāo)注施

2、引文獻(xiàn)的引用位置和引用情感，分別基于引用位置和引用情感計(jì)算論文的引用強(qiáng)度。并以F1000評(píng)分為論文學(xué)術(shù)影響力的基準(zhǔn)指標(biāo)，利用相關(guān)分析法比較和分析基于引用位置和引用情感的引文指標(biāo)與F1000評(píng)分之間的數(shù)量關(guān)系。[結(jié)果結(jié)果結(jié)論結(jié)論]研究結(jié)果表明，與基礎(chǔ)的被引次數(shù)相比，基于引用位置的引文指標(biāo)更能有效地反映論文的學(xué)術(shù)影響力，基于引用情感的引文指標(biāo)由于引用數(shù)量分布不均而效果欠佳。關(guān)鍵詞：關(guān)鍵詞：全文本分析；引文指標(biāo)；引用位置；引用情感；效能研究分

3、類號(hào)：分類號(hào)：G353.1引文分析法（CitationAnalysis）被廣泛應(yīng)用于國(guó)家科學(xué)政策和學(xué)科發(fā)展、科研機(jī)構(gòu)、科技期刊、科研人員以及學(xué)術(shù)論文等的學(xué)術(shù)影響力的評(píng)價(jià)工作中。利用引文分析法對(duì)論文學(xué)術(shù)影響力進(jìn)行評(píng)價(jià)的最基礎(chǔ)方式是根據(jù)題錄數(shù)據(jù)的參考文獻(xiàn)列表計(jì)算學(xué)術(shù)成果被其他文獻(xiàn)引用的次數(shù)。也就是說(shuō)，當(dāng)某篇論文在其它文獻(xiàn)的參考文獻(xiàn)列表中出現(xiàn)一次，那么該篇論文的學(xué)術(shù)影響力可用一次被引來(lái)定量評(píng)價(jià)。但是由于引用行為是復(fù)雜多樣的，參考文獻(xiàn)列表中的一

4、篇引文可能被同一篇文獻(xiàn)多次引用，在不同位置產(chǎn)生的引用對(duì)文獻(xiàn)的作用不同，引用的目的有可能是積極肯定也可能是消極否定，所以簡(jiǎn)單的基于參考文獻(xiàn)列表的被引次數(shù)統(tǒng)計(jì)不足以衡量論文學(xué)術(shù)影響力的高低。另一方面，特別是對(duì)于中低被引的論文而言，相同被引次數(shù)的論文數(shù)量較多，被引次數(shù)對(duì)論文學(xué)術(shù)影響力的區(qū)分能力較弱。因此，如何改進(jìn)引文指標(biāo)從而更加有效地評(píng)價(jià)學(xué)術(shù)影響力成為了亟待解決的問(wèn)題。目前，研究引文指標(biāo)的學(xué)者們主要給出了兩個(gè)方向的改進(jìn)措施。一個(gè)方向是從論文的

5、引文網(wǎng)絡(luò)出發(fā)，通過(guò)一層或多層的施引文獻(xiàn)的被引次數(shù)累積獲得引文指標(biāo)，間接改進(jìn)被引次數(shù)的計(jì)算方式，如論文h指數(shù)[1]、學(xué)術(shù)跡[2]、論文權(quán)力指數(shù)本文系國(guó)家哲學(xué)社會(huì)科學(xué)基金項(xiàng)目“融合ALTMETRICS的科研影響力綜合評(píng)價(jià)方法及實(shí)證研究”(項(xiàng)目編號(hào)：15BTQ060)研究成果之一。作者簡(jiǎn)介：彭秋茹，南京農(nóng)業(yè)大學(xué)信息資源管理專業(yè)博士研究生，Email：pengqiuru228@。指導(dǎo)教師：黃水清楊波聯(lián)系方式：彭秋茹，南京農(nóng)業(yè)大學(xué)信息科學(xué)技術(shù)學(xué)院

6、，15150563979，pengqiuru228@。據(jù)引用位置對(duì)不同的引文賦予不同的權(quán)重，提出了一種基于引用位置的引文評(píng)價(jià)方法。N.Sombatsompop[19]等人在對(duì)論文質(zhì)量評(píng)價(jià)研究時(shí)，提出引用位置影響因子指標(biāo)，指的是引文在施引文獻(xiàn)中不同位置上出現(xiàn)的次數(shù)與施引文獻(xiàn)總數(shù)的比值，他們將這一指標(biāo)應(yīng)用于泰國(guó)論文質(zhì)量評(píng)價(jià)。語(yǔ)義層面的研究主要討論引用具有不同的情感或動(dòng)機(jī)的問(wèn)題。廖君華[20]等人認(rèn)為由于引用行為和引用情感的復(fù)雜性，以被引次數(shù)

7、為基礎(chǔ)的引文指標(biāo)存在一定的不足。章成志在2018年“全文本文獻(xiàn)計(jì)量分析”學(xué)術(shù)沙龍中表示引用情感分析可以更準(zhǔn)確地計(jì)算出有效引用[21]。趙蓉英和王建品[22]認(rèn)為計(jì)算引文在施引文獻(xiàn)全文中實(shí)際出現(xiàn)的次數(shù)在評(píng)價(jià)影響力時(shí)更合理，在此基礎(chǔ)上再考慮引用情感極性會(huì)使得評(píng)價(jià)結(jié)果更加真實(shí)全面。所以，根據(jù)不同的引用情感或動(dòng)機(jī)可以改進(jìn)引文指標(biāo)的計(jì)算。劉雪立[23]認(rèn)為計(jì)算期刊影響因子時(shí)應(yīng)該剔除期刊被批判性引用的次數(shù)，也即負(fù)面引用的次數(shù)。董建軍[24]提出計(jì)算

8、被引次數(shù)的新方法，可以僅統(tǒng)計(jì)被正相關(guān)性引用（正面引用）的總次數(shù)，他認(rèn)為平行相關(guān)性引用（中性引用）一般不能反映被引文獻(xiàn)的價(jià)值和學(xué)術(shù)水平，可以依據(jù)評(píng)價(jià)目的的不同分別情況予以處理。雖然學(xué)者們普遍認(rèn)同深入施引文獻(xiàn)的全文內(nèi)容能有效改進(jìn)引文指標(biāo)的評(píng)價(jià)效果，并根據(jù)引用位置和引用情感等信息提出了引文指標(biāo)新的計(jì)算方式，但鮮有研究從實(shí)證的角度探討基于全文本分析的引文指標(biāo)對(duì)論文影響力評(píng)價(jià)的有效性問(wèn)題。本文將補(bǔ)充這一方面的研究，選擇經(jīng)過(guò)同行評(píng)議的論文作為樣本，

9、獲取論文施引文獻(xiàn)的全文數(shù)據(jù)，根據(jù)不同的引用位置和引用情感分類計(jì)算引用次數(shù)，并將這些引文指標(biāo)與同行評(píng)議得分作相關(guān)分析，比較和討論不同的引文指標(biāo)對(duì)論文學(xué)術(shù)影響力的評(píng)價(jià)效果。2研究方法本研究選擇F1000推薦系統(tǒng)上的期刊論文作為實(shí)驗(yàn)樣本，利用相關(guān)分析法比較和分析基于全文本分析的引文指標(biāo)、基礎(chǔ)被引次數(shù)與論文學(xué)術(shù)影響力水平之間的數(shù)量關(guān)系，探討與基礎(chǔ)被引次數(shù)相比基于全文本分析的引文指標(biāo)是否更有效地反映了論文真實(shí)的學(xué)術(shù)影響力，為構(gòu)建學(xué)術(shù)論文學(xué)術(shù)影響力