【摘要】：分析了網(wǎng)絡(luò)機器人的訪問特征,給出了從Web日志中檢測Web Robot的一般方法,并提出了一個新的基于頁面成員表的檢測算法。經(jīng)實驗驗證,該算法可以有效地檢測未知的和不遵守網(wǎng)絡(luò)機器人排斥標準的Robot。

【共引文獻】

相關(guān)期刊論文 前10條

1 馬國紅,陳善本,黎文航;網(wǎng)絡(luò)機器人的發(fā)展及其在焊接中的應(yīng)用現(xiàn)狀[J];焊接;2004年04期

2 盧健;刁雅靜;;Web日志挖掘中的數(shù)據(jù)預(yù)處理研究[J];江蘇科技大學(xué)學(xué)報(自然科學(xué)版);2012年01期

3 吳曉暉;紀星;;Web爬蟲檢測技術(shù)綜述[J];湖北汽車工業(yè)學(xué)院學(xué)報;2012年01期

4 吳俊杰;陳俊杰;趙栓柱;;基于用戶訪問興趣的路徑聚類研究[J];計算機工程與應(yīng)用;2005年36期

5 吳俊杰;劉耀軍;陳俊杰;;基于頻繁訪問頁組的路徑聚類研究[J];計算機工程與應(yīng)用;2010年33期

6 劉燕;帥典勛;柴震川;;基于群體智能的網(wǎng)絡(luò)信息自組織方式[J];計算機科學(xué);2003年06期

7 郭偉剛;鞠時光;;基于訪問內(nèi)容類型統(tǒng)計的Web Robot檢測算法[J];計算機科學(xué);2005年08期

8 劉立軍;周軍;梅紅巖;;Web使用挖掘的數(shù)據(jù)預(yù)處理[J];計算機科學(xué);2007年05期

9 郭偉剛,鞠時光;一個基于事務(wù)分析的Web Robot檢測算法[J];計算機應(yīng)用;2005年07期

10 范純龍;袁濱;余周華;徐蕾;;基于陷阱技術(shù)的網(wǎng)絡(luò)爬蟲檢測[J];計算機應(yīng)用;2010年07期

相關(guān)博士學(xué)位論文 前6條

1 邱峰;遠程醫(yī)學(xué)教育臨床技能培訓(xùn)模式與平臺研究[D];華東師范大學(xué);2011年

2 岑榮偉;基于用戶行為分析的搜索引擎評價研究[D];清華大學(xué);2010年

3 阮備軍;Web使用挖掘若干關(guān)鍵問題研究[D];復(fù)旦大學(xué);2004年

4 許智超;電子商務(wù)訂單實時處理的智能系統(tǒng)研究[D];大連理工大學(xué);2006年

5 董一鴻;動態(tài)數(shù)據(jù)庫增量式挖掘算法及其應(yīng)用的研究[D];浙江大學(xué);2007年

6 易明;基于Web挖掘的電子商務(wù)個性化推薦機理與方法研究[D];華中科技大學(xué);2006年

相關(guān)碩士學(xué)位論文 前10條

1 單蓉;基于WEB挖掘的E-learning環(huán)境下的個性化教學(xué)平臺研究[D];西安電子科技大學(xué);2009年

2 萬宇文;用戶訪問模式在線挖掘推薦系統(tǒng)的研究[D];江西師范大學(xué);2003年

3 曾義聰;基于概念樹的主題爬取技術(shù)研究[D];湖南大學(xué);2005年

4 吳俊杰;基于用戶訪問興趣的路徑聚類研究[D];太原理工大學(xué);2005年

5 鄭躍平;基于約束數(shù)據(jù)預(yù)處理的Web日志挖掘研究[D];福州大學(xué);2006年

6 鮮學(xué)豐;基于Web使用挖掘的個性化推薦服務(wù)研究[D];河海大學(xué);2006年

7 郭弘強;電子商務(wù)訂單實時處理的交互Multi-Agent系統(tǒng)研究[D];大連理工大學(xué);2007年

8 李勇;數(shù)據(jù)挖掘的算法研究及其在Web日志分析中的應(yīng)用[D];長春理工大學(xué);2008年

9 周恒;基于Web挖掘的個性化網(wǎng)站定制服務(wù)的研究和應(yīng)用[D];武漢理工大學(xué);2009年

10 姜宏飛;基于web日志的訪問行為分類技術(shù)研究[D];沈陽航空工業(yè)學(xué)院;2010年

【相似文獻】

相關(guān)期刊論文 前10條

1 郭偉剛;鞠時光;;基于訪問內(nèi)容類型統(tǒng)計的Web Robot檢測算法[J];計算機科學(xué);2005年08期

2 郭偉剛,鞠時光;一個基于事務(wù)分析的Web Robot檢測算法[J];計算機應(yīng)用;2005年07期

3 陳勇;劉勇;;中醫(yī)藥主題搜索網(wǎng)絡(luò)機器人的設(shè)計與實現(xiàn)[J];計算機技術(shù)與發(fā)展;2010年05期

4 鄒競輝;;智能搜索引擎的設(shè)計與實現(xiàn)[J];科技經(jīng)濟市場;2006年08期

5 梁雪松;;網(wǎng)絡(luò)機器人對網(wǎng)絡(luò)安全的影響及其應(yīng)對策略[J];信息安全與通信保密;2008年08期

6 張曉剛,李明樹;智能搜索引擎技術(shù)的研究與發(fā)展[J];計算機工程與應(yīng)用;2001年24期

7 崔澤永,常曉燕;搜索引擎的Web Robot技術(shù)與優(yōu)化[J];微機發(fā)展;2004年04期

8 張玉寶;;中文搜索引擎的原理及相關(guān)技術(shù)分析[J];福建電腦;2008年01期

9 趙恒永;沈堅;山嵐;;基于專業(yè)信息深度挖掘的搜索引擎Spider的設(shè)計與實現(xiàn)[J];計算機工程與科學(xué);2009年06期

10 張路;;從搜索到交互式發(fā)現(xiàn)[J];互聯(lián)網(wǎng)周刊;2007年09期

相關(guān)會議論文 前10條

1 彭軻;廖聞劍;;淺析搜索引擎[A];中國通信學(xué)會第五屆學(xué)術(shù)年會論文集[C];2008年

2 李丹;;如何利用搜索引擎查找中醫(yī)藥信息[A];中國中醫(yī)藥信息研究會第二屆理事大會暨學(xué)術(shù)交流會議論文匯編[C];2003年

3 鄧長壽;郭景峰;楊焱林;鄧安遠;;下一代Web搜索引擎初探[A];第十八屆全國數(shù)據(jù)庫學(xué)術(shù)會議論文集（研究報告篇）[C];2001年

4 維尼拉·木沙江;吐爾洪·吾司曼;;維、哈、柯文搜索引擎中網(wǎng)頁爬行器的設(shè)計與實現(xiàn)[A];少數(shù)民族青年自然語言處理技術(shù)研究與進展——第三屆全國少數(shù)民族青年自然語言信息處理、第二屆全國多語言知識庫建設(shè)聯(lián)合學(xué)術(shù)研討會論文集[C];2010年

5 湯薇;曾艷;;構(gòu)建校園網(wǎng)搜索引擎必要性分析[A];廣西計算機學(xué)會2008年年會論文集[C];2008年

6 姚樹宇;趙少東;;一種使用分布式技術(shù)的搜索引擎[A];2005年全國開放式分布與并行計算學(xué)術(shù)會議論文集[C];2005年

7 倪俊峰;;基于黃頁搜索引擎的關(guān)鍵字排名廣告系統(tǒng)的設(shè)計與實現(xiàn)[A];2005年中國索引學(xué)會年會暨學(xué)術(shù)研討會論文集[C];2005年

8 張怡;查貴庭;;SEO在信息服務(wù)中的應(yīng)用研究[A];2010年中國索引學(xué)會年會暨學(xué)術(shù)研討會論文集[C];2010年

9 陳援非;何哲;朱珍民;;基于普適計算的個性化搜索技術(shù)[A];第二屆和諧人機環(huán)境聯(lián)合學(xué)術(shù)會議(HHME2006)——第2屆中國普適計算學(xué)術(shù)會議(PCC'06)論文集[C];2006年

10 楊萌;李春麗;朱明;;網(wǎng)絡(luò)搜索技術(shù)下的編輯工作[A];學(xué)報編輯論叢（第十一集）[C];2003年

相關(guān)重要報紙文章 前10條

1 李一鑫;搜索排名的紅與黑[N];財經(jīng)時報;2007年

2 周文林;搜狗3.0能否撼動搜索市場[N];經(jīng)濟參考報;2007年

3 惠正一;比爾·蓋茨:微軟不怕Google[N];第一財經(jīng)日報;2005年

4 賽迪顧問股份有限公司互聯(lián)網(wǎng)與電子商務(wù)咨詢中心 常燕杰;搜索，還是門戶[N];中國計算機報;2005年

5 陳珊;浙江移動推出手機搜索引擎服務(wù)[N];人民郵電;2005年

6 趙法忠;搜索引擎還需悠著點[N];中國經(jīng)營報;2005年

7 金朝力;搜索引擎火拼搜索質(zhì)量[N];北京商報;2006年

8 本報記者　 趙曉輝 孟昭麗;搜索引擎駛?cè)搿氨茱L(fēng)港”[N];中國證券報;2006年

9 孫t;搜索引擎驚喜侵權(quán)官司止于“避風(fēng)港”？[N];第一財經(jīng)日報;2006年

10 姜蕊;問天下誰識搜索？[N];中國高新技術(shù)產(chǎn)業(yè)導(dǎo)報;2006年

相關(guān)博士學(xué)位論文 前10條

1 岑榮偉;基于用戶行為分析的搜索引擎評價研究[D];清華大學(xué);2010年

2 李群;主題搜索引擎聚類算法的研究[D];北京林業(yè)大學(xué);2011年

3 蘇君華;面向搜索引擎的技術(shù)接受模型研究[D];南京大學(xué);2011年

4 陳旭毅;基于索引云的企業(yè)搜索引擎實現(xiàn)研究[D];武漢大學(xué);2011年

5 郭眈;中文互聯(lián)網(wǎng)視頻搜索引擎系統(tǒng)策略研究[D];北京交通大學(xué);2012年

6 胡玲娜;靜止圖像數(shù)字水印的盲檢測算法研究[D];上海交通大學(xué);2010年

7 劉東飛;智能雙語搜索方法及搜索引擎的研究[D];武漢理工大學(xué);2009年

8 王昤璞;基于用戶體驗的互聯(lián)網(wǎng)搜索引擎醫(yī)學(xué)信息檢索可用性評估研究[D];吉林大學(xué);2010年

9 江亞群;電能質(zhì)量參數(shù)檢測算法的研究[D];湖南大學(xué);2009年

10 李莎莎;面向搜索引擎的自然語言處理關(guān)鍵技術(shù)研究[D];國防科學(xué)技術(shù)大學(xué);2011年

相關(guān)碩士學(xué)位論文 前10條

1 李建平;智能化WEB信息搜索引擎的研究與實現(xiàn)[D];大慶石油學(xué)院;2003年

2 呂韓飛;主題（topical）crawler及其應(yīng)用——主題搜索引擎[D];浙江大學(xué);2005年

3 田生偉;基于涉農(nóng)詞典的搜索引擎的研究與實踐[D];新疆大學(xué);2004年

4 廖程鋒;一種基于元數(shù)據(jù)的搜索引擎的設(shè)計與實現(xiàn)[D];中南大學(xué);2004年

5 高磊;基于LUCENE的搜索引擎研究與實現(xiàn)[D];武漢理工大學(xué);2007年

6 薛云;Internet上元搜索引擎的研究與設(shè)計[D];太原理工大學(xué);2003年

7 王春花;基于Nutch的農(nóng)業(yè)搜索引擎檢索結(jié)果排序策略的研究[D];西北農(nóng)林科技大學(xué);2010年

8 李雷;基于Nutch的農(nóng)業(yè)信息搜索引擎實現(xiàn)和優(yōu)化[D];吉林大學(xué);2011年

9 董晨;基于模糊聚類的個性化搜索引擎的研究[D];福州大學(xué);2005年

10 封俊;基于Hadoop的分布式搜索引擎研究與實現(xiàn)[D];太原理工大學(xué);2010年

，

本文編號：2560144