骨干通道上的網(wǎng)絡(luò)論壇通信信息監(jiān)測(cè)和分析的關(guān)鍵技術(shù)研究.pdf

1、經(jīng)過(guò)近二十年的飛速發(fā)展,互聯(lián)網(wǎng)已經(jīng)從一種便捷的通信工具,逐漸演變成為一個(gè)虛擬社會(huì)。網(wǎng)絡(luò)論壇是這個(gè)虛擬社會(huì)的重要組成部分,論壇中的言論傳播面廣、傳播速度快,在一定程度上引導(dǎo)了輿論傾向。因此對(duì)網(wǎng)絡(luò)論壇的通信信息進(jìn)行監(jiān)測(cè)和分析是了解當(dāng)前輿情態(tài)勢(shì)的有效渠道,對(duì)于網(wǎng)絡(luò)虛擬社會(huì)的有序治理具有重要意義。本論文針對(duì)骨干通道上的網(wǎng)絡(luò)論壇通信信息的監(jiān)測(cè)和分析的關(guān)鍵技術(shù)進(jìn)行了研究,主要包括以下內(nèi)容:
　　1.提出了一個(gè)“分層分布的高速骨干通信信息監(jiān)測(cè)分

2、析系統(tǒng)結(jié)構(gòu)模型”。該模型橫向根據(jù)功能和技術(shù)特性分層,縱向遵循骨干網(wǎng)通道的屬地化管理原則構(gòu)建分布式監(jiān)測(cè)節(jié)點(diǎn)。對(duì)網(wǎng)絡(luò)通信數(shù)據(jù)捕獲、信息抽取、信息存儲(chǔ)、深度分析、協(xié)同監(jiān)測(cè)業(yè)務(wù)等重要環(huán)節(jié)的處理過(guò)程進(jìn)行了歸納和抽象。其中的數(shù)據(jù)捕獲、信息抽取、深度分析技術(shù)作為后續(xù)章節(jié)展開(kāi)的重點(diǎn)。
　　2.提出了一個(gè)“基于邏輯輸出端口分組的過(guò)濾分流器設(shè)備”的設(shè)計(jì)方案。可以進(jìn)行靈活的數(shù)據(jù)包復(fù)制和過(guò)濾,實(shí)現(xiàn)組內(nèi)不同邏輯端口分流負(fù)載的靈活分配以及外接交換機(jī)二級(jí)分流。

3、并在此基礎(chǔ)上,提出了“動(dòng)態(tài)反饋式前向緩存的過(guò)濾分流機(jī)制”的過(guò)濾分流優(yōu)化機(jī)制,可以實(shí)現(xiàn)會(huì)話級(jí)別基于數(shù)據(jù)內(nèi)容的過(guò)濾,以及靈活的關(guān)聯(lián)數(shù)據(jù)完整截獲。可以顯著降低信息還原抽取層設(shè)備的規(guī)模。
　　3.提出了一個(gè)“基于SVM和層次CRF的旁路截獲數(shù)據(jù)的網(wǎng)絡(luò)論壇信息抽取方法”。采用SVM技術(shù)通過(guò)對(duì)截獲數(shù)據(jù)的宏觀特征分析,自動(dòng)識(shí)別論壇網(wǎng)站;采用層次CRF技術(shù),對(duì)網(wǎng)絡(luò)論壇會(huì)話的行為類型進(jìn)行判斷,并對(duì)相關(guān)信息元素進(jìn)行類型標(biāo)注,在此基礎(chǔ)上形成信息抽取所用

4、的wtapper;采用wrapper技術(shù)對(duì)骨干網(wǎng)通道上的網(wǎng)絡(luò)論壇信息進(jìn)行自動(dòng)抽取。
　　4.提出了“基于旁路截獲數(shù)據(jù)的網(wǎng)絡(luò)言論特征參量體系”,以及“基于網(wǎng)絡(luò)言論特征參量的深度分析方法”。充分考慮了論壇網(wǎng)站、版面、網(wǎng)民和帖子實(shí)體間的相互關(guān)系,將如網(wǎng)民對(duì)言論的興趣、網(wǎng)民參與議論的程度、言論的擴(kuò)散速度、網(wǎng)站關(guān)注程度等要素融合在一起;能夠充分利用旁路截獲數(shù)據(jù)的特性,通過(guò)對(duì)旁路截獲數(shù)據(jù)中抽取的重要元素進(jìn)行分析而獲取網(wǎng)絡(luò)言論規(guī)律特性,進(jìn)行網(wǎng)絡(luò)