自動文摘技術(shù)的研究與應(yīng)用.pdf

1、隨著社會的進(jìn)步和互聯(lián)網(wǎng)技術(shù)的發(fā)展，網(wǎng)絡(luò)信息量的頻繁劇增，當(dāng)今社會面臨著信息大爆炸。當(dāng)大量的信息像潮水般涌向人們時，傳統(tǒng)人工處理信息的手段已經(jīng)遠(yuǎn)遠(yuǎn)不足。為了解決這一問題，科學(xué)界提出文摘自動生成的技術(shù)。 自動文摘通常被視為自然語言處理的一項任務(wù)。文摘是準(zhǔn)確全面地反映某一文章中心內(nèi)容的簡潔連貫的短文，與索引相比更能滿足信息獲取的要求。我國對自動文摘技術(shù)的研究目前還在初級階段，但此技術(shù)所具有的重要作用是不可低估的，必將在未來的信息處理領(lǐng)

2、域得到廣泛的應(yīng)用。 本論文基于現(xiàn)階段的研究現(xiàn)狀下，運(yùn)用統(tǒng)計自然語言處理方法，首先對文章進(jìn)行自動分詞，利用停用詞表對分詞結(jié)果進(jìn)行過濾，并利用知網(wǎng)(H0wNet)獲得概念，建立概念向量空間模型。通過計算詞語重要度和句子重要度，系統(tǒng)得到一個粗略的文摘。最后再進(jìn)行冗余計算，得到本文章的文摘。 本文在上述研究的基礎(chǔ)上，設(shè)計了基于概念向量空問模型的自動文摘系統(tǒng)，實現(xiàn)了機(jī)器自動生成文摘的各個模塊的功能，證實了本文利用概念統(tǒng)計的方法比基