基于論壇的輿情分析系統(tǒng)設計與實現(xiàn).pdf

1、隨著科學技術的進步,互聯(lián)網(wǎng)已經成為人們獲取信息的主要手段。一方面,對于某一話題事件,相關的信息出現(xiàn)在互聯(lián)網(wǎng)的各個分散的角落,通過人工的手段無法獲知話題事件完整信息;另一方面,網(wǎng)民通過互聯(lián)網(wǎng)參與國家事務管理、發(fā)表評論意見的熱情空前高漲,一個很小的事件就可能引發(fā)一個輿情事件,因此迫切要求監(jiān)管者及時掌握輿情話題的發(fā)展態(tài)勢,有效梳理民意,及時做出正確的處理。本系統(tǒng)利用自然語言處理技術,自動發(fā)現(xiàn)并跟蹤相關的話題事件,了解網(wǎng)民的關注熱度及傾向,最后

2、生成一個關于話題的輿情統(tǒng)計報告。具體的研究內容包括以下幾個方面:
　　第一:實現(xiàn)了基于論壇的信息抽取工作。本系統(tǒng)是一個小型的試驗系統(tǒng),沒有追求龐大的信息覆蓋,而是選擇有代表性的“新華網(wǎng)論壇”作為輿情信息源,經過信息抽取后的論壇信息以xml格式存儲。
　　第二:介紹了基于兩層聚類和周期分類相結合的 TDT實現(xiàn)方法。傳統(tǒng)的增量式聚類由于話題模型覆蓋不夠全面、表示不夠準確,從而導致在增量處理過程中誤差被累計放大,本文引入了周期分類

3、,定期對增量聚類所產生話題的邊緣文本重新分類,提高話題的純度,最終達到降低誤差、提升性能的目的。
　　第三:介紹了基于HowNet和依存句法分析的情感傾向處理技術。本文通過人工方式建立一個情感詞典,并通過基于Hownet語義相似度的方法計算未登錄情感詞的情感傾向和強度,然后根據(jù)依存句法分析確定情感詞的真實上下文情感傾向,進而確定句子、文本以及話題的情感傾向。
　　第四:設計并實現(xiàn)了一個完整的基于論壇的網(wǎng)絡輿情系統(tǒng)。整個系統(tǒng)包