基于協(xié)議分析的網(wǎng)絡(luò)信息還原及挖掘.pdf

1、隨著Internet的迅速發(fā)展，網(wǎng)絡(luò)技術(shù)和信息技術(shù)也得以廣泛的應(yīng)用與發(fā)展。據(jù)中國互聯(lián)網(wǎng)絡(luò)信息中心(CNNIC)發(fā)布的“第二十次中國互聯(lián)網(wǎng)絡(luò)發(fā)展?fàn)顩r統(tǒng)計(jì)報(bào)告”顯示，截至2007年6月，中國網(wǎng)民人數(shù)已經(jīng)達(dá)到1.62億，僅次于美國2.11億的網(wǎng)民規(guī)模，位居世界第二。比2006年年末新增了2500萬網(wǎng)民，與2006年同期相比，網(wǎng)民數(shù)一年內(nèi)增加了3900萬人。與2006年中相比，主要基礎(chǔ)資源呈爆炸式增長。其中，IP地址增長率接近40％，域名數(shù)增長

2、率達(dá)到211％，網(wǎng)站增長率達(dá)到66％，國際出口帶寬增長率達(dá)到46％，中國網(wǎng)民的網(wǎng)絡(luò)環(huán)境進(jìn)一步改善。 無論對(duì)于政府、企業(yè)，還是普通網(wǎng)民，網(wǎng)絡(luò)信息都已經(jīng)是一個(gè)重要的信息來源。通過基于網(wǎng)絡(luò)信息流的協(xié)議分析，可以用它來研究網(wǎng)絡(luò)的運(yùn)行狀況和信息監(jiān)控。 本文首先介紹了網(wǎng)絡(luò)的基本結(jié)構(gòu)，并結(jié)合筆者在網(wǎng)絡(luò)信息捕獲和還原方面的實(shí)際實(shí)習(xí)工作經(jīng)驗(yàn)，詳細(xì)分析了基于Linux平臺(tái)的網(wǎng)絡(luò)信息截獲技術(shù)，協(xié)議分析技術(shù)等；給出了網(wǎng)絡(luò)數(shù)據(jù)監(jiān)聽的工作原理，并對(duì)

3、數(shù)據(jù)包的捕獲機(jī)制和過濾機(jī)制進(jìn)行了一定的分析。然后，采用基于Libpcap函數(shù)庫的方案進(jìn)行數(shù)據(jù)監(jiān)聽的實(shí)現(xiàn)，并針對(duì)不同的應(yīng)用層協(xié)議，分別針對(duì)HTTP、MSN和YMSG協(xié)議中傳送的數(shù)據(jù)，進(jìn)行協(xié)議分析，并對(duì)網(wǎng)絡(luò)信息流進(jìn)行提取有用的信息，還原成標(biāo)準(zhǔn)格式的數(shù)據(jù)，并存入數(shù)據(jù)庫。 接下來，針對(duì)網(wǎng)絡(luò)信息的極其豐富，數(shù)據(jù)量特別巨大的特點(diǎn)，本文引進(jìn)了數(shù)據(jù)挖掘的方法，數(shù)據(jù)挖掘就是從大量的數(shù)據(jù)中挖掘出有用的信息。它是根據(jù)人們的特定要求，從浩如煙海的數(shù)據(jù)中