本文選題：分布式系統(tǒng) + Web信息采集��； 參考：《哈爾濱理工大學(xué)學(xué)報》2010年01期

【摘要】：Web信息的急劇增長,給信息的有效使用帶來了巨大挑戰(zhàn).作為搜索引擎的重要組成部分,Web信息采集扮演著越來越重要的角色.文中從并行性、負載均衡、體系結(jié)構(gòu)以及可擴展性這4個方面詳細討論了分布式Web信息采集系統(tǒng)的設(shè)計與實現(xiàn).經(jīng)驗證,該分布式Web信息采集系統(tǒng)能夠?qū)崿F(xiàn)負載均衡,并具有良好的可擴展性.
[Abstract]:The rapid growth of Web information brings great challenges to the effective use of information. As an important part of search engine, Web information collection plays a more and more important role. This paper discusses the design and implementation of distributed Web information collection system from four aspects: parallelism, load balancing, architecture and extensibility. It is proved that the distributed Web information acquisition system can achieve load balance and has good scalability.
【作者單位】： 哈爾濱理工大學(xué)測控技術(shù)與通信工程學(xué)院;
【分類號】：TP274.2

【參考文獻】

相關(guān)期刊論文 前1條

1 張魁麟,邵春福,王力劭;基于分布式并行算法的動態(tài)交通流分配研究[J];北方交通大學(xué)學(xué)報;2002年05期

【共引文獻】

相關(guān)期刊論文 前4條

1 雋志才;高林杰;倪安寧;;面向?qū)ο蟮慕煌ňW(wǎng)絡(luò)分布式仿真并行數(shù)據(jù)結(jié)構(gòu)[J];交通與計算機;2006年01期

2 山嵐,徐耀;基于Agent的智能化專業(yè)信息采集系統(tǒng)[J];計算機工程與設(shè)計;2005年11期

3 李海英;;網(wǎng)絡(luò)時代信息資源的采集、描述與質(zhì)量控制——以東北林業(yè)大學(xué)重點學(xué)科導(dǎo)航庫為例[J];圖書館學(xué)研究;2006年03期

4 姜有輝;高琳琦;;個性化推薦系統(tǒng)中顧客信息的隱式采集方法研究[J];現(xiàn)代情報;2006年11期

相關(guān)會議論文 前1條

1 姜麗華;張宏斌;;基于Multi-Agent的個性化Web信息采集系統(tǒng)[A];中國農(nóng)業(yè)信息科技創(chuàng)新與學(xué)科發(fā)展大會論文匯編[C];2007年

相關(guān)博士學(xué)位論文 前7條

1 魏明;基于HLA的城市道路交通仿真系統(tǒng)研究[D];中國農(nóng)業(yè)大學(xué);2004年

2 高林杰;交通網(wǎng)絡(luò)動態(tài)路徑求解并行仿真算法研究與實現(xiàn)[D];吉林大學(xué);2006年

3 李巧茹;交通網(wǎng)絡(luò)動態(tài)配流及其相關(guān)問題研究[D];天津大學(xué);2006年

4 倪安寧;并行交通仿真模型及關(guān)鍵算法研究[D];吉林大學(xué);2007年

5 方輝;機械制造信息資源的非規(guī)范知識處理技術(shù)研究[D];四川大學(xué);2007年

6 任其亮;時空路網(wǎng)交通擁堵預(yù)測與疏導(dǎo)決策方法研究[D];西南交通大學(xué);2007年

7 尹世群;Web文本分類關(guān)鍵技術(shù)研究[D];西南大學(xué);2008年

相關(guān)碩士學(xué)位論文 前8條

1 歐歌;專題式Web信息獲取技術(shù)研究[D];北京化工大學(xué);2005年

2 田苗;岳陽林紙集團綜合信息管理系統(tǒng)[D];中南大學(xué);2004年

3 鄭火國;農(nóng)業(yè)信息服務(wù)平臺的構(gòu)建與實現(xiàn)[D];中國農(nóng)業(yè)科學(xué)院;2006年

4 叢磊;桌面搜索引擎的研究與實現(xiàn)[D];北京化工大學(xué);2006年

5 李春光;互聯(lián)網(wǎng)信息分布式深度搜索的研究[D];哈爾濱工程大學(xué);2006年

6 張真;基于Ontology的分布式信息檢索技術(shù)研究[D];中國海洋大學(xué);2006年

7 魏霞;面向網(wǎng)絡(luò)教育的學(xué)習(xí)評價依據(jù)采集系統(tǒng)的研究與實現(xiàn)[D];浙江工業(yè)大學(xué);2007年

8 吳兵華;基于深度網(wǎng)絡(luò)的信息檢索模型研究[D];武漢理工大學(xué);2008年

【二級參考文獻】

相關(guān)期刊論文 前1條

1 汪濤,樊孝忠;主題爬蟲的設(shè)計與實現(xiàn)[J];計算機應(yīng)用;2004年S1期

【相似文獻】

相關(guān)期刊論文 前10條

1 黃韜;;淺談遠程控制下通信電源分布式監(jiān)控系統(tǒng)[J];通信電源技術(shù);2011年04期

2 張冬;陳濤;喬玉龍;;AUV分布式自主控制與使命管理方法[J];火力與指揮控制;2011年09期

3 胡丕俊;李亮舉;彭會軍;李彥斌;周月杰;;冶金過程控制開發(fā)平臺中進程通信系統(tǒng)的開發(fā)及應(yīng)用[J];冶金自動化;2011年05期

4 郭力兵;饒愛水;奚宏明;茅文浩;張曉紅;;基于ICE的分布式火箭遙測數(shù)據(jù)處理架構(gòu)設(shè)計[J];遙測遙控;2011年04期

5 張巖;;流程空載實時監(jiān)測C/S系統(tǒng)下的語音報警系統(tǒng)[J];港口科技;2011年06期

6 徐英博;黃琰;朱善安;;基于GPRS網(wǎng)絡(luò)的遠程控制系統(tǒng)中心機軟件設(shè)計[J];機電工程;2011年06期

7 莊玉飛;黃琦;井實;;基于GPS和IEEE-1588協(xié)議的時鐘同步裝置的研制[J];電力系統(tǒng)保護與控制;2011年13期

8 王雪茹;袁建清;崔然;;多智能體技術(shù)及其在交通控制系統(tǒng)中的應(yīng)用[J];中國新技術(shù)新產(chǎn)品;2011年17期

9 李尚坤;蘇海哲;;調(diào)度主站系統(tǒng)的硬件架構(gòu)[J];科技傳播;2011年15期

10 陳馨;付志超;張聰;;LabVIEW Web Server在非正弦電能遠程測控系統(tǒng)中的應(yīng)用[J];宇航計測技術(shù);2011年03期

相關(guān)會議論文 前10條

1 劉淵;姜建國;繆繼東;范曉嵐;;一個分布式系統(tǒng)通信控制軟件的設(shè)計與實現(xiàn)[A];中國工程物理研究院科技年報（2002）[C];2002年

2 曹德亮;賈銀芳;賴森貞;;梅鋼冷連軋計算機過程控制系統(tǒng)[A];冶金企業(yè)自動化、信息化與創(chuàng)新——全國冶金自動化信息網(wǎng)建網(wǎng)30周年論文集[C];2007年

3 熊繼平;;基于JMF的運動檢測分布式系統(tǒng)的研究及實現(xiàn)[A];第七屆全國信息獲取與處理學(xué)術(shù)會議論文集[C];2009年

4 唐l，

本文編號：2004392