智能化網(wǎng)絡(luò)信息篩選系統(tǒng)研究.pdf

1、網(wǎng)絡(luò)不良信息小到影響到個人的工作、學(xué)習(xí)與生活,大到危害到國家信息安全甚至主權(quán)安全。針對危害到政治、經(jīng)濟、軍事、文化等領(lǐng)域的不良信息、敏感信息,本文通過融合先進計算機技術(shù)的智能化網(wǎng)絡(luò)信息篩選系統(tǒng)的研究,在技術(shù)上為信息安全的保證提供一些思路、建議[0]。系統(tǒng)主要針對www協(xié)議進行研究。系統(tǒng)在整體架構(gòu)上,實現(xiàn)了針對網(wǎng)絡(luò)不良信息的智能化網(wǎng)絡(luò)信息篩選系統(tǒng)原型,研究了系統(tǒng)構(gòu)成所需要的各種技術(shù):本文首先定義待篩選主機為篩選客戶端,篩選代理運行在篩選客

2、戶端上。根據(jù)從服務(wù)器端接受的不斷更新的關(guān)鍵字列表,收集、分析篩選客戶端上的信息。將符合關(guān)鍵字信息的網(wǎng)址、ip地址、生成時間等加密后提交到篩選服務(wù)器端。服務(wù)器端存儲上述提交,按需發(fā)出報警。篩選代理借鑒智能代理理論,由spider、信息存儲、預(yù)處理器、詞法分析器、客戶端代理更新程序組成;篩選代理通過合法手段強制安裝、運行在篩選客戶端上。篩選服務(wù)器由關(guān)鍵字服務(wù)器、篩選結(jié)果接收器、存儲、報警器和更新中心組成。篩選代理運用經(jīng)改進的Spider技術(shù)

3、收集篩選客戶端上的信息。根據(jù)篩選關(guān)鍵字,基于語義單元表示樹剪枝的詞法分析原理,關(guān)鍵字Si=Wi,1 Wi,2…Wi,n(其中n為關(guān)鍵字Si的長度)變換為擴展形式S*i=W*i,1V1W*i,2V2…W*i,n-1Vn-1 W*i,n(其中W*i,k∈U(Wi,k)變換集,k=1,…,n;Vj∈V變換集的閉包,j=1,2,…,n-1)之后,以往從文本中簡單屏蔽關(guān)鍵字Si的操作就被擴展到屏蔽符合S*i這一模式的任何字符串。依照將語義單元表示

4、庫轉(zhuǎn)換為語義單元表示樹的方法,同樣可以將S*i= W*i,1V1W*i,2V2…W*i,n-1Vn-1W*i,n轉(zhuǎn)換為樹形表示。以句子為單位,依次取出待過濾的文本信息;對每一句,依次取出其中每一個字符;對每一個字符,比對其是否存在于U變換庫中,若存在,可以得到對應(yīng)的關(guān)鍵字符Wi,j;取以Wi,j為實量開始的關(guān)鍵字表示樹,使用快速剪枝算法,根據(jù)Wi,j對已經(jīng)取出的所有關(guān)鍵字表示樹進行剪枝。如果最終存在沒有被剪掉的關(guān)鍵字表示樹,說明該句中含

5、有需要過濾的關(guān)鍵字。對于篩選結(jié)果的存儲,系統(tǒng)采用LVS集群技術(shù)。這是因為:LVS整個系統(tǒng)很容易被擴展,無需重新設(shè)置整個系統(tǒng),無需中斷服務(wù),擴展系統(tǒng)的操作對最終用戶是透明的;滿足智能化網(wǎng)絡(luò)信息篩選系統(tǒng)服務(wù)器端的儲存要求。LVS有三種類型:VS/NAT,VS/TUN和VS/DR。在100M、正常網(wǎng)絡(luò)服務(wù)環(huán)境下,假設(shè)每個連接的平均數(shù)據(jù)量為10Kbytes,測得VS/NAT每秒處理的連接數(shù)為1139.2Connections/Second,VS