自動文摘技術的研究與應用.pdf

1、隨著社會的進步和互聯(lián)網(wǎng)技術的發(fā)展，網(wǎng)絡信息量的頻繁劇增，當今社會面臨著信息大爆炸。當大量的信息像潮水般涌向人們時，傳統(tǒng)人工處理信息的手段已經(jīng)遠遠不足。為了解決這一問題，科學界提出文摘自動生成的技術。 自動文摘通常被視為自然語言處理的一項任務。文摘是準確全面地反映某一文章中心內(nèi)容的簡潔連貫的短文，與索引相比更能滿足信息獲取的要求。我國對自動文摘技術的研究目前還在初級階段，但此技術所具有的重要作用是不可低估的，必將在未來的信息處理領

2、域得到廣泛的應用。 本論文基于現(xiàn)階段的研究現(xiàn)狀下，運用統(tǒng)計自然語言處理方法，首先對文章進行自動分詞，利用停用詞表對分詞結(jié)果進行過濾，并利用知網(wǎng)(H0wNet)獲得概念，建立概念向量空間模型。通過計算詞語重要度和句子重要度，系統(tǒng)得到一個粗略的文摘。最后再進行冗余計算，得到本文章的文摘。 本文在上述研究的基礎上，設計了基于概念向量空問模型的自動文摘系統(tǒng)，實現(xiàn)了機器自動生成文摘的各個模塊的功能，證實了本文利用概念統(tǒng)計的方法比基