垂直搜索引擎爬蟲(chóng)系統(tǒng)其研究實(shí)現(xiàn).pdf 全文免費(fèi)在線閱讀
本文關(guān)鍵詞:垂直搜索引擎爬蟲(chóng)系統(tǒng)的研究與實(shí)現(xiàn),由筆耕文化傳播整理發(fā)布。
文檔介紹:
貴州大學(xué)碩士學(xué)位論文垂直搜索引擎爬蟲(chóng)系統(tǒng)的研究與實(shí)現(xiàn)姓名:吳建強(qiáng)申請(qǐng)學(xué)位級(jí)別:碩士專業(yè):計(jì)算機(jī)軟件與理論指導(dǎo)教師:羅文俊20080401摘要隨著因特網(wǎng)的迅猛發(fā)展,WEB信息的增加,用戶要在信息海洋里查找信息,就像大海撈針一樣,搜索引擎服務(wù)能成為最受歡迎的服務(wù)是因?yàn)樗鼛椭脩粼诤棋幕ヂ?lián)網(wǎng)快速的查找信息。在海量的網(wǎng)頁(yè)里找信息,按照傳統(tǒng)方式需要用戶逐個(gè)網(wǎng)站逐級(jí)目錄查找。要耗費(fèi)大量的精力和時(shí)間,幾乎是不可能實(shí)現(xiàn)的任務(wù);ヂ(lián)網(wǎng)的信息量爆炸性增長(zhǎng),幾年前全球式搜索引擎收錄的網(wǎng)頁(yè)量只有幾千萬(wàn)頁(yè),而現(xiàn)在已經(jīng)達(dá)到幾十億頁(yè)。數(shù)量增加帶來(lái)的是搜索服務(wù)的品質(zhì)下降,查詢的結(jié)果集已經(jīng)是海量級(jí)的,多達(dá)數(shù)十萬(wàn)條結(jié)果,結(jié)果里存在大量的重復(fù)信息和垃圾信息。用戶越來(lái)越感覺(jué)到很難在短時(shí)間內(nèi)準(zhǔn)確的篩選出需要的內(nèi)容,很難迅速的找到需要的信息。因此,搜索服務(wù)需要細(xì)化,需要提供更專業(yè),更有效的服務(wù)。垂直搜索引擎是針對(duì)某一特定領(lǐng)域、某一特定人群或某一特定需求提供的有一定價(jià)值的信息和相關(guān)服務(wù)。垂直搜索引擎主要涉及的技術(shù)有:爬蟲(chóng),網(wǎng)頁(yè)結(jié)構(gòu)化信息抽取技術(shù)或元數(shù)據(jù)采集技術(shù),分詞和索引,其它信息處理技術(shù)。本文的工作主要研究垂直搜索引擎的爬蟲(chóng)系統(tǒng),并用程序?qū)崿F(xiàn)整個(gè)爬蟲(chóng)系統(tǒng)。網(wǎng)絡(luò)爬...
內(nèi)容來(lái)自轉(zhuǎn)載請(qǐng)標(biāo)明出處.
本文關(guān)鍵詞:垂直搜索引擎爬蟲(chóng)系統(tǒng)的研究與實(shí)現(xiàn),由筆耕文化傳播整理發(fā)布。
,本文編號(hào):171267
本文鏈接:http://sikaile.net/kejilunwen/sousuoyinqinglunwen/171267.html