基于本體的主題網(wǎng)絡(luò)蜘蛛研究.pdf

1、隨著網(wǎng)絡(luò)技術(shù)及信息技術(shù)的迅猛發(fā)展，搜索引擎已成為人們獲取信息的主要手段。然而傳統(tǒng)搜索引擎的查全率及查準(zhǔn)率不高，搜索效率低下，越來(lái)越不能滿足人們的需要。因此，針對(duì)特定領(lǐng)域的垂直搜索引擎逐漸成為發(fā)展趨勢(shì)，它能更快速、準(zhǔn)確的定位信息，提供更個(gè)性化、更專業(yè)的搜索服務(wù)。
　　 主題網(wǎng)絡(luò)蜘蛛是垂直搜索引擎的關(guān)鍵組成部分，直接決定了垂直搜索引擎的質(zhì)量。它能自動(dòng)對(duì)URL進(jìn)行主題識(shí)別，提取網(wǎng)頁(yè)鏈接，下載相應(yīng)的信息。目前的主題網(wǎng)絡(luò)蜘蛛大多采用傳統(tǒng)的

2、關(guān)鍵詞匹配模式，無(wú)法識(shí)別關(guān)鍵詞的一詞多義或者一義多詞的情況，也無(wú)法從語(yǔ)義的層面來(lái)智能的識(shí)別搜索意圖并對(duì)網(wǎng)頁(yè)進(jìn)行智能分類。
　　 本體可以解決語(yǔ)義異構(gòu)的問(wèn)題，促進(jìn)知識(shí)共享，實(shí)現(xiàn)概念上的互操作。本體論為語(yǔ)義搜索提供了可共享、概念化的知識(shí)體系，是語(yǔ)義搜索中實(shí)現(xiàn)知識(shí)理解和推理的基礎(chǔ)。因此將本體論與主題網(wǎng)絡(luò)蜘蛛結(jié)合，可以提高網(wǎng)絡(luò)信息服務(wù)的智能化與自動(dòng)化，為語(yǔ)義檢索中實(shí)現(xiàn)知識(shí)理解和推理提供基礎(chǔ)，為用戶共享知識(shí)提供便利。
　　 本文從

3、研究與設(shè)計(jì)的角度出發(fā)，以本體和垂直搜索引擎的理論為基礎(chǔ)，分析了主題網(wǎng)絡(luò)蜘蛛的研究現(xiàn)狀、不足之處、組成結(jié)構(gòu)和工作原理，設(shè)計(jì)了基于本體的主題網(wǎng)絡(luò)蜘蛛系統(tǒng)，該系統(tǒng)能夠?qū)τ脩舻恼嬲鈭D進(jìn)行識(shí)別，為用戶提供更規(guī)范及詳細(xì)的結(jié)果輸出。隨后，本文介紹了該系統(tǒng)的開(kāi)發(fā)環(huán)境、基本框架及各模塊的功能，包括頁(yè)面抓取模塊、頁(yè)面分析模塊、主題相關(guān)性分析模塊及排序模塊，并對(duì)各重要模塊的算法流程進(jìn)行了詳細(xì)說(shuō)明。另外，本文設(shè)計(jì)并實(shí)現(xiàn)了電子商務(wù)領(lǐng)域本體，主要分析了電子商務(wù)領(lǐng)