本文選題：主題網(wǎng)絡(luò)爬蟲 + 不良網(wǎng)頁�。� 參考：《鄭州大學(xué)學(xué)報(理學(xué)版)》2010年02期

【摘要】：針對互聯(lián)網(wǎng)中出現(xiàn)的大量不良內(nèi)容,分析出其主要特征,首次提出將不良網(wǎng)頁的文本特征與搜索引擎中網(wǎng)絡(luò)爬蟲相結(jié)合的技術(shù)來主動尋找互聯(lián)網(wǎng)中的不良網(wǎng)頁及不良網(wǎng)站,并將結(jié)果分級別反饋到用戶層以便對不良網(wǎng)頁和網(wǎng)站進(jìn)行處理,以達(dá)到凈化網(wǎng)絡(luò)環(huán)境的目的.實驗結(jié)果表明,所提出的算法能夠有效檢測不良網(wǎng)頁,并且能夠很好地應(yīng)對不良網(wǎng)站的反關(guān)鍵字過濾策略.
[Abstract]:In view of the large amount of bad content appearing in the Internet, this paper analyzes its main features, and puts forward for the first time the technology of combining the text features of the bad web pages with the web crawlers in search engines to actively search for the bad pages and websites in the Internet. The results are fed back to the user layer in order to deal with the bad web pages and websites in order to purify the network environment. Experimental results show that the proposed algorithm can effectively detect bad web pages and can deal with the anti-keyword filtering strategy of bad websites.
【作者單位】： 電子科技大學(xué)計算機(jī)科學(xué)與工程學(xué)院;
【基金】：國家自然科學(xué)基金資助項目,編號60973120,60903073 國家863計劃項目,編號2007AA01Z440 四川省科技攻關(guān)項目,編號2008GZ0009
【分類號】：TP393.092

【參考文獻(xiàn)】

相關(guān)期刊論文 前2條

1 張永奎,李東艷;互聯(lián)網(wǎng)中非法文本特征分析及其屬性預(yù)選取新方法[J];計算機(jī)應(yīng)用;2004年04期

2 陳平;劉曉霞;李亞軍;;文本分類中改進(jìn)型互信息特征選擇的研究[J];微電子學(xué)與計算機(jī);2008年06期

【共引文獻(xiàn)】

相關(guān)期刊論文 前10條

1 李東艷;黃鵬鶴;;基于雙層規(guī)則的內(nèi)容安全過濾方法[J];大連交通大學(xué)學(xué)報;2007年03期

2 李東艷;張永奎;;一個基于非法文本用詞特征分析的文本分類器[J];電腦開發(fā)與應(yīng)用;2006年10期

3 樊東輝;王治和;陳建華;許虎寅;;基于聚類的KNN算法改進(jìn)[J];電腦知識與技術(shù);2011年35期

4 樊東輝;王治和;陳建華;許虎寅;;基于DF算法改進(jìn)的文本聚類特征選擇算法[J];甘肅聯(lián)合大學(xué)學(xué)報(自然科學(xué)版);2012年01期

5 牛洪波;丁華福;;基于文本分類技術(shù)的信息過濾方法的研究[J];信息技術(shù);2007年12期

6 張永奎;高峰;;一種不良文本識別特征選擇方法[J];計算機(jī)工程與應(yīng)用;2010年02期

7 盧揚(yáng)竹;張新有;祁玉;;郵件過濾中特征選擇算法的研究及改進(jìn)[J];計算機(jī)應(yīng)用;2009年10期

8 彭昱忠;元昌安;王艷;覃曉;;基于內(nèi)容理解的不良信息過濾技術(shù)研究[J];計算機(jī)應(yīng)用研究;2009年02期

9 妥曉娜;吳承勇;;基于邏輯斯蒂方程的垃圾郵件過濾特征方法的研究[J];內(nèi)蒙古大學(xué)學(xué)報(自然科學(xué)版);2010年04期

10 吳慧玲;沈建京;賀廣生;;基于不良文本信息過濾預(yù)處理方法的研究[J];網(wǎng)絡(luò)安全技術(shù)與應(yīng)用;2006年11期

相關(guān)碩士學(xué)位論文 前10條

1 黃茜;基于行為分析的代碼危害性評估技術(shù)研究[D];解放軍信息工程大學(xué);2010年

2 鄧彩鳳;中文文本分類中互信息特征選擇方法研究[D];西南大學(xué);2011年

3 鄧冰娜;面向博客的垃圾評論識別方法研究[D];河北大學(xué);2011年

4 李東艷;互聯(lián)網(wǎng)信息內(nèi)容安全過濾方法研究[D];山西大學(xué);2004年

5 黃志剛;基于貝葉斯的中文垃圾郵件過濾系統(tǒng)的設(shè)計與實現(xiàn)[D];電子科技大學(xué);2007年

6 鄭梅;基于規(guī)則的垃圾郵件過濾系統(tǒng)設(shè)計與實現(xiàn)[D];電子科技大學(xué);2008年

7 原媛;基于感情色彩詞的非法信息過濾防火墻的設(shè)計[D];山西大學(xué);2008年

8 盧揚(yáng)竹;基于內(nèi)容的垃圾郵件過濾技術(shù)研究[D];西南交通大學(xué);2009年

9 歐紅星;電子郵件安全過濾與檢查技術(shù)研究[D];中南大學(xué);2008年

10 杜飛;基于特征字的病毒過濾防火墻技術(shù)研究[D];北方工業(yè)大學(xué);2010年

【二級參考文獻(xiàn)】

相關(guān)期刊論文 前5條

1 孫春來,段米毅,毛克峰;基于內(nèi)容過濾的網(wǎng)絡(luò)監(jiān)控技術(shù)研究[J];高技術(shù)通訊;2001年11期

2 陸玉昌,魯明羽,李凡,周立柱;向量空間法中單詞權(quán)重函數(shù)的分析和構(gòu)造[J];計算機(jī)研究與發(fā)展;2002年10期

3 趙仲孟,陳劍,張選平,翁莉萍;網(wǎng)絡(luò)內(nèi)容安全分析與對策[J];計算機(jī)工程;2002年05期

4 崔志明,謝春麗;基于Web的文本挖掘研究[J];微電子學(xué)與計算機(jī);2002年10期

5 賀賢明,戴堅峰;一種新型文本自動分類系統(tǒng)的研究與實現(xiàn)[J];微電子學(xué)與計算機(jī);2004年10期

【相似文獻(xiàn)】

相關(guān)期刊論文 前10條

1 王少康;董科軍;閻保平;;使用特征文本密度的網(wǎng)頁正文提取[J];計算機(jī)工程與應(yīng)用;2010年20期

2 肖建國;;試論文本挖掘及其應(yīng)用[J];圖書館學(xué)研究;2008年04期

3 張全力;何衛(wèi)平;秦忠寶;王政;;基于樣本公共特征的產(chǎn)品設(shè)計信息搜集[J];計算機(jī)工程;2006年03期

4 蔣人杰;戚飛虎;徐立;吳國榮;;基于連通分量特征的文本檢測與分割[J];中國圖象圖形學(xué)報;2006年11期

5 楊應(yīng)全;文汝;;網(wǎng)絡(luò)環(huán)境下文本自動分類分析[J];科技文獻(xiàn)信息管理;2005年01期

6 鄒臘梅;肖基毅;龔向堅;;Web文本挖掘技術(shù)研究[J];情報雜志;2007年02期

7 ;丑聞報告“火”了INTERNET[J];互聯(lián)網(wǎng)周刊;1998年06期

8 朱寶奇;互聯(lián)網(wǎng)與城市電視的新發(fā)展[J];中國有線電視;1999年12期

9 朱寶奇;互聯(lián)網(wǎng)與城市電視的新發(fā)展[J];揚(yáng)州大學(xué)學(xué)報(人文社會科學(xué)版);1999年06期

10 宋秀卿;;當(dāng)DELL成為動詞[J];互聯(lián)網(wǎng)周刊;1999年26期

相關(guān)會議論文 前10條

1 王錦;王會珍;張俐;;基于維基百科類別的文本特征表示[A];第五屆全國青年計算語言學(xué)研討會論文集[C];2010年

2 賀寧武;孫志剛;;面向流媒體傳輸研究的StreamSim模擬器設(shè)計與實現(xiàn)[A];中國電子學(xué)會第十六屆信息論學(xué)術(shù)年會論文集[C];2009年

3 汪明峰;;互聯(lián)網(wǎng)與城市地理學(xué):中國案例與研究進(jìn)展[A];中國地理學(xué)會百年慶典學(xué)術(shù)論文摘要集[C];2009年

4 李宏利;雷靂;王爭艷;;青少年在互聯(lián)網(wǎng)使用中的時間知覺研究[A];第九屆全國心理學(xué)學(xué)術(shù)會議文摘選集[C];2001年

5 佐斌;;互聯(lián)網(wǎng)對青少年心理與行為的影響[A];第九屆全國心理學(xué)學(xué)術(shù)會議文摘選集[C];2001年

6 楊菊紅;;科技期刊辦刊應(yīng)如何利用互聯(lián)網(wǎng)上的資源[A];第三屆中國科技期刊青年編輯學(xué)術(shù)研討會論文集[C];2003年

7 程葳;;網(wǎng)絡(luò)管理與構(gòu)建和諧城市社會的關(guān)系[A];第二屆城市科學(xué)論壇論文集[C];2006年

8 梁濤;;呼叫中心發(fā)展趨勢及實業(yè)呼叫中心應(yīng)對[A];廣東省通信學(xué)會2006年度學(xué)術(shù)論文集[C];2007年

9 周海倫;;首鋼總公司能源管理系統(tǒng)開發(fā)[A];中國計量協(xié)會冶金分會2007年會論文集[C];2007年

10 焦廣民;周玉龍;;互聯(lián)網(wǎng)對學(xué)生負(fù)面影響的成因與克服[A];全國教育科研“十五”成果論文集（第五卷）[C];2005年

相關(guān)重要報紙文章 前10條

1 本報記者 曹增光;互聯(lián)網(wǎng)2.0時代已經(jīng)到來？[N];中國經(jīng)濟(jì)時報;2005年

2 Google全球副總裁、大中華區(qū)總裁 李開復(fù);迎接互聯(lián)網(wǎng)明天的無限可能[N];計算機(jī)世界;2007年

3 ;幫助分支辦公室改善互聯(lián)網(wǎng)連接性能[N];網(wǎng)絡(luò)世界;2008年

4 記者 呂冰冰　蘇妮;深圳登錄全球設(shè)計互聯(lián)網(wǎng)[N];南方日報;2008年

5 記者 吳曉菁;重磅打造“互聯(lián)網(wǎng)手機(jī)”[N];廈門日報;2009年

6 記者 趙陜雄;新一代互聯(lián)網(wǎng)導(dǎo)航PDA打響價格戰(zhàn)[N];中國質(zhì)量報;2009年

7 本報記者 胡英;過濾互聯(lián)網(wǎng)內(nèi)容需采用新招[N];計算機(jī)世界;2009年

8 本報記者 梁靚;手機(jī)功能向互聯(lián)網(wǎng)深度延伸[N];中國電子報;2009年

9 記者謝麗容;整治互聯(lián)網(wǎng)低俗之風(fēng)取得階段性成果[N];通信產(chǎn)業(yè)報;2009年

10 本報記者 劉麗麗;航天信息 推動ERP與互聯(lián)網(wǎng)聯(lián)姻[N];計算機(jī)世界;2009年

相關(guān)博士學(xué)位論文 前10條

1 胡根紅;中國古代小品文研究[D];陜西師范大學(xué);2008年

2 李祖明;互聯(lián)網(wǎng)上的版權(quán)保護(hù)與限制[D];中國社會科學(xué)院研究生院;2002年

3 黃剛;整合與互動[D];中國傳媒大學(xué);2007年

4 章淼;互聯(lián)網(wǎng)端到端擁塞控制的研究[D];清華大學(xué);2004年

5 汪明峰;網(wǎng)絡(luò)空間的生產(chǎn)與消費[D];華東師范大學(xué);2005年

6 王小芳;文本主題域劃分與無監(jiān)督特征提取[D];吉林大學(xué);2009年

7 陳耀剛;互聯(lián)網(wǎng)商務(wù)主體的參與決策和競爭行為研究[D];清華大學(xué);2003年

8 吳玉榮;互聯(lián)網(wǎng)與社會主義意識形態(tài)建設(shè)研究[D];中共中央黨校;2004年

9 李婧;應(yīng)用層組播算法研究[D];中國科學(xué)技術(shù)大學(xué);2007年

10 張紅兵;虛擬企業(yè)中知識轉(zhuǎn)移的研究[D];天津大學(xué);2007年

相關(guān)碩士學(xué)位論文 前10條

1 林楠;文本特征選擇算法研究[D];遼寧師范大學(xué);2010年

2 張勇;試論互聯(lián)網(wǎng)對中日關(guān)系的影響[D];外交學(xué)院;2005年

3 曾超;論互聯(lián)網(wǎng)與手機(jī)的聯(lián)姻及其對大眾傳播的影響[D];廣西大學(xué);2005年

4 劉宇波;面向可下載資源的WEB搜索引擎的設(shè)計與實現(xiàn)[D];湖南大學(xué);2005年

5 劉君;解析新華網(wǎng)的成功軌跡[D];河北大學(xué);2005年

6 張晶;互聯(lián)網(wǎng)對中學(xué)生學(xué)習(xí)和人格發(fā)展影響的研究[D];延邊大學(xué);2005年

7 朱海明;上海信投互聯(lián)網(wǎng)應(yīng)用技術(shù)有限公司營銷戰(zhàn)略與策略研究[D];上海海事大學(xué);2005年

8 徐俊霞;網(wǎng)絡(luò)傳播中的政治溝通研究[D];武漢大學(xué);2005年

9 趙微;互聯(lián)網(wǎng)對高中生道德形成的負(fù)面影響與對策研究[D];東北師范大學(xué);2006年

10 梁思藝;互聯(lián)網(wǎng)環(huán)境下涉外民事管轄權(quán)制度研究[D];廣東外語外貿(mào)大學(xué);2006年

，

本文編號：1786608