內(nèi)容審計(jì)狀態(tài)標(biāo)記與預(yù)處理在網(wǎng)絡(luò)監(jiān)控系統(tǒng)中的應(yīng)用及實(shí)現(xiàn).pdf

1、目前，網(wǎng)絡(luò)監(jiān)控方面的理論和產(chǎn)品都非常多，然而網(wǎng)絡(luò)監(jiān)控仍然面臨并將一直面臨多方面的挑戰(zhàn)。其中很重要的一方面是監(jiān)控處理速度問題，網(wǎng)絡(luò)傳輸技術(shù)的飛速發(fā)展帶來的海量數(shù)據(jù)使速度成為網(wǎng)絡(luò)監(jiān)控處理的“瓶頸”。本文針對網(wǎng)絡(luò)監(jiān)控的處理速度作出了思考，并提出了一種可以明顯提高處理速度的方法。 實(shí)際上，大量的網(wǎng)絡(luò)流量內(nèi)容是相同的(比如對同一熱點(diǎn)新聞的點(diǎn)擊)，而網(wǎng)絡(luò)經(jīng)濟(jì)也是“眼球經(jīng)濟(jì)”，這說明相同內(nèi)容在網(wǎng)絡(luò)中重復(fù)傳輸現(xiàn)象非常普遍。即使在同一局域網(wǎng)中，不

2、同的用戶對同一內(nèi)容重復(fù)訪問的幾率也非常大，因?yàn)檫@些相似用戶的身份使得他們關(guān)注的內(nèi)容比較趨同。由此可見，內(nèi)容審計(jì)網(wǎng)絡(luò)監(jiān)控系統(tǒng)做了大量重復(fù)的工作，即對同一內(nèi)容做了重復(fù)審計(jì)，而當(dāng)前大多數(shù)網(wǎng)絡(luò)監(jiān)控系統(tǒng)沒有考慮到這一點(diǎn)，這使得監(jiān)控系統(tǒng)進(jìn)行了很多重復(fù)審計(jì)，浪費(fèi)了系統(tǒng)資源。 基于此，本文引入了“內(nèi)容審計(jì)狀態(tài)標(biāo)記”機(jī)制，目的是減少不必要的重復(fù)審計(jì)。具體思路是：(1)在現(xiàn)有的網(wǎng)絡(luò)內(nèi)容審計(jì)監(jiān)控系統(tǒng)的基礎(chǔ)上，在監(jiān)控審計(jì)開始前，嵌入一段標(biāo)準(zhǔn)模塊，先到審

3、計(jì)結(jié)果狀態(tài)標(biāo)記數(shù)據(jù)庫中快速檢索此內(nèi)容(比如相同的URL)以前的審計(jì)結(jié)果，如果內(nèi)容相同，并且以前做過審計(jì)，則直接使用上次審計(jì)結(jié)果，如果沒有再返回進(jìn)行審計(jì)．；(2)在審計(jì)結(jié)束后，將結(jié)果保存到狀態(tài)標(biāo)記數(shù)據(jù)庫中，以備以后查詢。 本文就狀態(tài)標(biāo)記機(jī)制提出了模型框架設(shè)計(jì)、流程、數(shù)據(jù)庫設(shè)計(jì)、模塊設(shè)計(jì)及實(shí)現(xiàn)的具體思路，最后形成標(biāo)準(zhǔn)化組件。本文還討論了狀態(tài)標(biāo)記機(jī)制實(shí)現(xiàn)中的相關(guān)策略，針對審計(jì)結(jié)果可能已經(jīng)過期(比如結(jié)果保存后，相關(guān)網(wǎng)頁內(nèi)容被更新)的情況