【設(shè)計正文】模板(雙面打印)

1、西華大學畢業(yè)設(shè)計說明書摘要摘要搜索引擎（SearchEngine）是一個對互聯(lián)網(wǎng)上的信息資源進行搜集整理的應(yīng)用軟件系統(tǒng)。它主要包括信息搜集、索引建立和信息檢索三個部分。搜索引擎有很多類型，常見的有FTP搜索引擎和WEB搜索引擎。一般WEB搜索引擎較少處理FTP服務(wù)器上的數(shù)據(jù)。就信息規(guī)模而言，F(xiàn)TP服務(wù)器的信息量比WEB服務(wù)器小很多。因此FTP搜索引擎硬件投入和維護的費用也遠遠低于大型通用搜索引擎。本文針對在FTP服務(wù)器的搜索速度和效率問

2、題，對現(xiàn)有FTP搜索引擎技術(shù)進行了分析和研究，重點詳細介紹了爬蟲模塊和索引模塊的設(shè)計與實現(xiàn)。文章首先分析了FTP搜索引擎研究的背景和意義。然后在第3章節(jié)和第4章節(jié)中詳細描述了關(guān)鍵的爬蟲技術(shù)和索引技術(shù)，包括：如何進行網(wǎng)段掃描，獲取數(shù)據(jù)以及建立索引數(shù)據(jù)庫等。最后本文還分析了在爬蟲和索引實現(xiàn)時遇到的困難并提出了相應(yīng)的解決方案?！娟P(guān)鍵詞】FTP搜索引擎網(wǎng)絡(luò)爬蟲索引II西華大學畢業(yè)設(shè)計說明書1FTP搜索引擎爬蟲模塊介紹..............

3、...................................................................21.1設(shè)計思路.....................................................................................................21.2設(shè)計步驟....................................

4、.................................................................21.2.1掃描站點...........................................................................................21.2.2獲取數(shù)據(jù)............................................

5、...............................................21.2.3數(shù)據(jù)分類...........................................................................................21.2.4生成源文件.............................................................

6、..........................31.2.5生成站點列表...................................................................................31.2.6建立索引文件...................................................................................32FT

7、P搜索引擎概要設(shè)計.........................................................................................42.1工作原理.....................................................................................................42.2工作流程圖....

8、.............................................................................................53FTP搜索引爬蟲模塊擎詳細設(shè)計.........................................................................63.1設(shè)計目的.............................

9、........................................................................63.2功能模塊設(shè)計.............................................................................................63.2.1網(wǎng)段掃描...................................

10、........................................................63.2.2獲取數(shù)據(jù)...........................................................................................83.2.3關(guān)于編碼問題的解決................................................

11、.....................163.2.4服務(wù)器兼容.....................................................................................173.2.5生成數(shù)據(jù)文件.................................................................................213.2.6生

12、成站點列表.................................................................................244FTP搜索引擎索引模塊詳細設(shè)計.......................................................................264.1.1格式化數(shù)據(jù).................................

13、....................................................264.1.2匯總屬性文件.................................................................................284.1.3雙字母建立索引............................................................

14、.................294.1.4索引數(shù)據(jù)庫.....................................................................................314.1.5字符編碼.........................................................................................325開發(fā)環(huán)