面向美食網站的搜索及點評與圖片去重模塊的設計與實現.pdf

1、互聯網產業(yè),針對各行各業(yè)的門戶網站越來越多,包括旅游,美食,時事等。各種類型的門戶網站由于面對的用戶群以及自身所有元素的不同,需要處理的各種問題也不同。比如針對美食類的門戶網站,網站內容以圖片,介紹等居多,那么需要面對的問題大多在圖片以及內容處理等方面。
　　本課題所研究的內容是某美食類網站關于圖片,內容的處理以及垂直搜索的問題。對于圖片處理,簡單來說是圖片的匹配,采用匹配算法過濾出重復的圖片然后根據匹配數據采取不同的操作。該問題

2、通過建立數據庫存儲原來的圖片信息,使用顏色直方圖生成算法生成對應的顏色直方圖并用距離向量算法計算圖片的相似度數據來實現。內容處理問題即點評處理,該問題與圖片處理類似,通過中文分詞算法對點評內容進行分詞,然后根據規(guī)則對待匹配的內容進行排序,最后進行匹配操作計算匹配度。垂直搜索問題即針對美食類的信息進行專項搜索,該問題通過建立源數據的倒排索引樹,檢索索引并對結果進行排序的方式來實現。結果排序可分為熱度排序和按字段排序,熱度排序采用散熱算法模

3、擬熱度的增加和減少,從而達到熱度排名的效果。
　　通過解決上述問題,并實現其功能,可以總結出本課題的研究內容為美食類網站的搜索與圖片和點評數據匹配的研究與實現。目前點評處理以及圖片去重模塊都可以匹配出大部分的重復內容。站內搜索模塊可以完成基本的搜索和排序功能。不過點評和圖片去重模塊在性能上有待加強,另外在匹配精度上也需加強。搜索模塊的排序算法還需經過大量測試之后進一步進行調整。
　　通過完成本課題的設計與實現,對中文分詞,索