校園網搜索引擎的分析與設計

1、1類別中小學信息技術編號校園網搜索引擎的分析與設計內容摘要內容摘要:隨著Inter的迅速發(fā)展，校園網也不斷發(fā)展，校園網中的信息量不斷增大，我們在查找信息時也因其信息資源量大而不能很快找到所需的信息，所以一種基于校園網的搜索引擎也就應運而生了。而網絡蜘蛛技術是搜索引擎的關鍵。本文圍繞這一技術而展開。首先從搜索引擎的種類和原理整體分析了搜索引擎，然后研究網絡蜘蛛這一技術，從網絡蜘蛛技術的原理、一般系統(tǒng)結構、關鍵技術、技術實現(xiàn)等幾個方面來分別

2、分析、為設計校園搜索引擎作最基本的工作。選擇.為設計平臺，以C#語言編寫程序。關鍵詞關鍵詞:搜索引擎；蜘蛛；超鏈接；爬?。籙RL1.引言隨著Inter的快速發(fā)展，網絡正在深刻地影響著我們的生活。而在網上發(fā)展最為迅速的WWW(WldWideWeb)技術，以其直觀、簡單、高效的使用方式和豐富的表達能力，已逐漸成為Inter上最重要的信息發(fā)布和交互方式。Inter上的數(shù)十億的網頁數(shù)量，這給人們帶來了前所未有的豐富的信息資源。然而，Web信息的

3、急速增長，在給人們提供豐富信息的同時，也存在信息量過大而導致人們不能很快找到自己所需信息的問題。因此，隨之而來的就出現(xiàn)了搜索引擎，但搜索引擎在如此快速的Inter發(fā)展之下也面臨很多挑戰(zhàn)[2]：（1）Web上的信息種類繁多、豐富多彩使得搜索引擎能夠檢索的范圍越來越小。（2）Web是一個動態(tài)增長的信息源，隨時會發(fā)生各種變化。（3）搜索引擎面對的用戶是形形色色的，這些用戶的信息需求、知識背景、興趣各不相同。對于目前搜索引擎存在的各種不足及面臨

4、解決的諸多難題，如：如何跟上Inter的發(fā)展速度，如何才能提供更加方便易用的搜索服務，如何才能為用戶提供更加精確的查詢結果等等，都是未來很長一段時間內搜索引擎的發(fā)展方向?？偟目磥恚湮磥戆l(fā)展的趨勢將主要體現(xiàn)在以下幾個方面[1429]：3用進行關鍵詞查詢，僅靠分類目錄也可找到需要的信息。它的優(yōu)點在于：目錄清晰、內容較準確、有效價值較高；缺點也比較明顯：分類體系不規(guī)范、不統(tǒng)一，交叉類目容易遺漏；人工分類，效率比較低，速度比較慢，更新不及時。

5、目錄搜索引擎中最具代表性的如Yahoo（雅虎）。2.1.3元搜索引擎元搜索引擎，即指在統(tǒng)一的用戶查詢界面與信息反饋的形式下，共享多個搜索引擎的資源庫為用戶提供信息服務的系統(tǒng)，又稱作搜索引擎之上的搜索引擎。元搜索引擎自身沒有建立存儲網頁信息的數(shù)據庫[7]，而是將用戶的查詢請求同時傳送至多個包含數(shù)據庫的搜索引擎，并行地訪問數(shù)個搜索引擎來查詢這個關鍵詞，然后對各搜索引擎返回的結果進行去重、排序等整理，最終響應給檢索用戶。嚴格意義上來講，元搜索

6、引擎只能算是一種用戶代理，而不是真正的搜索引擎。目前，沒有一個搜索引擎能涵蓋整個Inter，各搜索引擎的收錄范圍又有所差異，因此這類元搜索受到了一定程度的關注，特別適合于對查全率要求高的查詢。但是，不同的搜索引擎之間，建立索引數(shù)據庫和執(zhí)行提交檢索的具體方法或規(guī)則并不相同，因此，大大影響了元搜索的檢索效果。2.2搜索引擎工作原理搜索引擎的工作原理基本都是一樣的[10]，利用一個叫網絡蜘蛛的程序在網絡上爬行，自動地遍歷Web來獲得的網絡信息

7、并保存到本地服務器中。因此，我們通常所說的搜索引擎并不是真正的在搜索互聯(lián)網，而是通過用戶提供的關鍵詞，搜索引擎再根據此關鍵詞進行對其服務器的數(shù)據庫進行搜索。為了保證用戶查找信息的精度和及時，搜索引擎需要建立并維護一個龐大的索引數(shù)據庫，從而能夠迅速的從中找到相關的信息。搜索引擎的工作過程一般來說可以看作三大步：從互聯(lián)網上爬取網頁－預處理－查詢服務[23]，如圖1。WWW信息采集器分析索引排序索引庫進行檢索分析查詢結果排序用戶查詢返回信息處