本文關(guān)鍵詞：淺談基于C#的網(wǎng)絡(luò)類垂直搜索引擎數(shù)據(jù)采集技術(shù)

  更多相關(guān)文章： 垂直搜素引擎 數(shù)據(jù)采集 C# 正則提取

【摘要】：該文設(shè)計(jì)和實(shí)現(xiàn)的基于C#的網(wǎng)絡(luò)類垂直搜索引擎數(shù)據(jù)采集,采用高效的URL去重,避免了數(shù)據(jù)的重復(fù)。本文剖析了網(wǎng)絡(luò)垂直搜索引擎中數(shù)據(jù)采集的基本方法和運(yùn)行機(jī)制,并通過程序設(shè)計(jì)現(xiàn)實(shí)了垂直搜索引擎數(shù)據(jù)的采集。
【作者單位】： 武漢科技大學(xué)城市學(xué)院;
【分類號(hào)】：TP391.3
【正文快照】： 一、背景與研究意義(一)研究背景�；ヂ�(lián)網(wǎng)發(fā)展十余年,在這十余年的市場(chǎng)培育,發(fā)展的方向始終跟隨者web用戶的腳步,用戶希望能有一種軟件能在一定區(qū)域上對(duì)信息的智能采集和加工,從而來提高工作效率,因此采集技術(shù)在不斷的更新,采集軟件也隨之備受歡迎。(二)開發(fā)背景。如今的互聯(lián)

【相似文獻(xiàn)】

中國(guó)期刊全文數(shù)據(jù)庫 前10條

1 顧鵬堯;;讓搜索引擎更好地服務(wù)于教育教學(xué)[J];科學(xué)24小時(shí);2003年Z1期

2 胡文勝;;垂直搜索助號(hào)碼百事通與商務(wù)領(lǐng)航[J];每周電腦報(bào);2006年32期

3 胡潔;丁寧;關(guān)靜;曹福年;張磊;;基于“PUBMED+PDF”的醫(yī)學(xué)垂直搜索引擎的實(shí)踐[J];信息系統(tǒng)工程;2009年05期

4 牟思;;基于垂直搜索引擎的學(xué)校網(wǎng)站的研究與建設(shè)[J];中國(guó)教育技術(shù)裝備;2011年21期

5 田野;垂直搜索火熱為哪般[J];中國(guó)計(jì)算機(jī)用戶;2005年37期

6 王雪冬;李偉英;李強(qiáng);;商業(yè)主題搜索引擎的研究[J];商場(chǎng)現(xiàn)代化;2008年29期

7 張美芳;張迎春;;淺議垂直搜索引擎服務(wù)市場(chǎng)的商業(yè)模式[J];現(xiàn)代商業(yè);2010年06期

8 陳利國(guó);劉忠民;;搜索引擎的工作原理和發(fā)展趨勢(shì)[J];電腦知識(shí)與技術(shù)(學(xué)術(shù)交流);2007年23期

9 張敏;;基于本體的垂直搜索引擎的研究[J];軟件導(dǎo)刊;2010年02期

10 祝奕;;垂直搜索引擎的構(gòu)建與應(yīng)用[J];信息與電腦(理論版);2010年01期

中國(guó)重要會(huì)議論文全文數(shù)據(jù)庫 前3條

1 王上;于海;王鉦旋;;Deep Web垂直搜索引擎設(shè)計(jì)與實(shí)現(xiàn)[A];第26屆中國(guó)數(shù)據(jù)庫學(xué)術(shù)會(huì)議論文集（B輯）[C];2009年

2 林歡歡;王文杰;史忠植;;移動(dòng)環(huán)境下垂直搜索引擎[A];第三屆全國(guó)信息檢索與內(nèi)容安全學(xué)術(shù)會(huì)議論文集[C];2007年

3 王旭;杜軍平;;質(zhì)檢總局互聯(lián)網(wǎng)輿情監(jiān)控系統(tǒng)中聚焦爬蟲的研究[A];中國(guó)電子學(xué)會(huì)第十七屆信息論學(xué)術(shù)年會(huì)論文集[C];2010年

中國(guó)重要報(bào)紙全文數(shù)據(jù)庫 前2條

1 電子工業(yè)出版社 董婭　工業(yè)和信息化部電子科學(xué)技術(shù)情報(bào)研究所 周峻松;用開源軟件建垂直搜索引擎[N];計(jì)算機(jī)世界;2010年

2 本報(bào)記者 陳嘉佳;網(wǎng)絡(luò)營(yíng)銷創(chuàng)新航空公司尋找的“冬季牧草”[N];中國(guó)民航報(bào);2009年

中國(guó)博士學(xué)位論文全文數(shù)據(jù)庫 前4條

1 王曄;垂直搜索引擎若干問題研究[D];復(fù)旦大學(xué);2011年

2 胡宜敏;農(nóng)業(yè)垂直搜索引擎語義化若干問題的研究與實(shí)現(xiàn)[D];中國(guó)科學(xué)技術(shù)大學(xué);2012年

3 汲業(yè);面向圖像的垂直搜索引擎關(guān)鍵技術(shù)研究[D];大連海事大學(xué);2013年

4 李傳席;基于本體的自適應(yīng)Web信息抽取方法研究[D];中國(guó)科學(xué)技術(shù)大學(xué);2012年

中國(guó)碩士學(xué)位論文全文數(shù)據(jù)庫 前10條

1 李春燕;企業(yè)信息垂直搜索引擎的研究與實(shí)現(xiàn)[D];中國(guó)地質(zhì)大學(xué)（北京）;2010年

2 齊鵬;垂直搜索引擎分類索引系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[D];大連海事大學(xué);2010年

3 張楠;面向汽車主題的垂直搜索引擎研究與實(shí)現(xiàn)[D];西南交通大學(xué);2010年

4 陳向東;寵物用品垂直搜索引擎研究與設(shè)計(jì)[D];西北農(nóng)林科技大學(xué);2010年

5 周佳慶;實(shí)時(shí)垂直搜索引擎數(shù)據(jù)抓取調(diào)度研究[D];浙江大學(xué);2010年

6 華大年;手機(jī)產(chǎn)品信息垂直搜索引擎系統(tǒng)設(shè)計(jì)與開發(fā)[D];武漢理工大學(xué);2011年

7 薛萍;基于教育領(lǐng)域的垂直搜索引擎的研究與實(shí)現(xiàn)[D];天津師范大學(xué);2011年

8 馮效棟;垂直搜索引擎技術(shù)在網(wǎng)絡(luò)輿情巡控中的研究與應(yīng)用[D];中國(guó)海洋大學(xué);2010年

9 張贏;個(gè)性化多媒體資源垂直搜索引擎技術(shù)研究[D];華東交通大學(xué);2009年

10 李海升;垂直搜索引擎的研究與實(shí)現(xiàn)[D];西安電子科技大學(xué);2009年

，

本文編號(hào)：1306414