智能web過濾系統(tǒng)的研究與設(shè)計(jì).pdf

1、當(dāng)今的互聯(lián)網(wǎng)已經(jīng)成為人類生活和社會發(fā)展不可或缺的一部分。但其開放性，使一些色情的、暴力的、迷信等不良信息得以傳播，侵害人們的身心健康、危害社會的穩(wěn)定。如何過濾web不良信息，構(gòu)建健康、安全的資訊環(huán)境，保持互聯(lián)網(wǎng)的發(fā)展，已成為互聯(lián)網(wǎng)領(lǐng)域的研究熱點(diǎn)。
　　 本文首先研究了數(shù)據(jù)庫過濾(IP庫、URL庫)、關(guān)鍵詞過濾、內(nèi)容過濾等常見的web過濾技術(shù)，從過濾的速度、靈活性、技術(shù)難度、防欺騙性、互聯(lián)網(wǎng)覆蓋等方面對各種技術(shù)做了對比分析。隨后，

2、提出將人工神經(jīng)網(wǎng)絡(luò)應(yīng)用到web過濾系統(tǒng)中，引入智能化概念。為了進(jìn)一步優(yōu)化人工神經(jīng)網(wǎng)絡(luò)，提出了基于復(fù)合適應(yīng)度的單純微粒群神經(jīng)網(wǎng)絡(luò)訓(xùn)練優(yōu)化算法模型(CF-SPSO-ANN)。該模型用單純微粒群算法(SPSO)改進(jìn)了神經(jīng)網(wǎng)絡(luò)的學(xué)習(xí)算法，提高了網(wǎng)絡(luò)的達(dá)優(yōu)率和收斂速度：用復(fù)合適應(yīng)度(CF)改進(jìn)神經(jīng)網(wǎng)絡(luò)學(xué)習(xí)規(guī)則，提升了網(wǎng)絡(luò)的泛化能力。經(jīng)IRIS數(shù)據(jù)集實(shí)驗(yàn)表明：CF-SPSO-ANN算法比采用單純形PSO算法優(yōu)化以均方誤差為性能指標(biāo)的神經(jīng)網(wǎng)絡(luò)(SPS

3、O-ANN)、PSO訓(xùn)練復(fù)合適應(yīng)度網(wǎng)絡(luò)(CF-PSO-ANN)具有更好的預(yù)測準(zhǔn)確度和噪聲承受力。之后，本文提出了綜合運(yùn)用各種web過濾技術(shù)，設(shè)計(jì)分層、分級、分策略的web過濾模型的思想，形成以數(shù)據(jù)庫過濾(IP庫、URL庫)為主的初級過濾、以關(guān)鍵字和內(nèi)容過濾為主的二級過濾的多級過濾體系，極大的發(fā)揮各種過濾技術(shù)自身的特點(diǎn)。
　　 最后，將以上智能化思想和分級思想相結(jié)合，設(shè)計(jì)實(shí)現(xiàn)了一個基于ANN優(yōu)化算法的多級智能WEB過濾系統(tǒng)(簡稱A

4、OM-ML-SWFS)。其中的非法文檔過濾器模塊采用CF-SPSO-ANN算法。為了提高系統(tǒng)的智能性，本模型對日志記錄和過濾結(jié)果進(jìn)行處理，重新組織了訓(xùn)練庫并進(jìn)行學(xué)習(xí)。形成學(xué)習(xí)-調(diào)整-再學(xué)習(xí)-再調(diào)整的運(yùn)行機(jī)制。
　　 實(shí)驗(yàn)表明，本系統(tǒng)具有良好的可重用性、可擴(kuò)展性、可適應(yīng)性，在web過濾速度和精度等方面取得了較好的結(jié)果。本系統(tǒng)可作為中間服務(wù)器過濾系統(tǒng)，架設(shè)在網(wǎng)絡(luò)信息提供者和用戶之間專用的中間服務(wù)器上，通過網(wǎng)關(guān)或代理監(jiān)控用戶的信息訪問