個(gè)性化垂直搜索引擎關(guān)鍵技術(shù)研究.pdf

1、隨著Internet的快速發(fā)展，Web上的信息量越來越大，為了幫助人們?cè)诤迫鐭熀５幕ヂ?lián)網(wǎng)中查找信息，搜索引擎應(yīng)運(yùn)而生并得到了快速發(fā)展。然而，由于人們對(duì)信息的需求越來越專業(yè)化、精確化和個(gè)性化，Google等通用搜索引擎暴露出諸多問題。如何讓用戶方便、快捷地找到自己需要的信息，成為一個(gè)亟待解決的問題。個(gè)性化的垂直搜索引擎能有效地解決了上述問題，正成為人們從互聯(lián)網(wǎng)上查找信息的一個(gè)重要工具。
　　本文首先介紹了搜索引擎的發(fā)展歷史、垂直搜索

2、和個(gè)性化信息服務(wù)的研究現(xiàn)狀，接著深入探討了構(gòu)建搜索引擎的核心技術(shù)，包括網(wǎng)頁抓取技術(shù)、信息抽取技術(shù)、中文分詞和索引技術(shù)等。然后又通過與通用搜索引擎進(jìn)行對(duì)比，簡(jiǎn)要介紹了構(gòu)造垂直搜索引擎需要注意的問題。
　　本文在分析垂直搜索特點(diǎn)和研究其關(guān)鍵技術(shù)的基礎(chǔ)上，主要做了以下工作：
　　(1)提出了一種構(gòu)建個(gè)性化用戶興趣模型的方法。在構(gòu)建個(gè)性化用戶興趣模型的過程中，利用用戶興趣樹表示用戶興趣，從用戶的日常瀏覽行為中不斷挖掘用戶興趣，并給出

3、了用戶興趣模型的表示和更新機(jī)制。
　　(2)提出了一種改進(jìn)的基于VSM的垂直搜索檢索模型。本文在傳統(tǒng)的基于VSM的檢索模型的基礎(chǔ)上，根據(jù)垂直搜索的特點(diǎn)，探討適合垂直搜索引擎的排序算法，并提出了一種改進(jìn)的基于VSM的垂直搜索檢索模型及其性能評(píng)測(cè)方法。經(jīng)實(shí)驗(yàn)驗(yàn)證，該方法具有較高的查準(zhǔn)率和查全率。
　　(3)設(shè)計(jì)并實(shí)現(xiàn)一個(gè)用于抓取工作職位信息的網(wǎng)絡(luò)爬蟲系統(tǒng) JobSpider。在本文最后，通過引入一個(gè)關(guān)于工作職位搜索的實(shí)例項(xiàng)目，給