本文關(guān)鍵詞：Nutch搜索引擎在網(wǎng)絡(luò)輿情管控中的應(yīng)用

  更多相關(guān)文章： 搜索引擎 Nutch 網(wǎng)絡(luò)輿情 信息搜索

【摘要】：介紹了搜索引擎的工作原理,詳細(xì)分析了Nutch的工作機(jī)制,并與商業(yè)搜索引擎進(jìn)行了比對(duì)分析。實(shí)驗(yàn)結(jié)果表明,商業(yè)搜索引擎在公安應(yīng)用中存在一定的局限性,在特定的公安應(yīng)用背景下,在搜索精度、結(jié)果排序方面,Nutch要優(yōu)于商業(yè)搜索引擎。
【作者單位】： 中國(guó)刑事警察學(xué)院;遼寧省大連市公安局西崗分局;
【關(guān)鍵詞】： 搜索引擎 Nutch 網(wǎng)絡(luò)輿情 信息搜索
【分類號(hào)】：TP391.3;D631.1
【正文快照】： 搜索引擎也稱為“網(wǎng)絡(luò)爬蟲(chóng)”,其核心任務(wù)是抓取網(wǎng)頁(yè),該過(guò)程復(fù)雜、多變。爬蟲(chóng)抓取過(guò)程總的來(lái)說(shuō),是依照“抓取生產(chǎn)更新”這一模式進(jìn)行的。具體過(guò)程是:添加初始URL,爬蟲(chóng)程序訪問(wèn)并解析初始網(wǎng)頁(yè)內(nèi)容,同時(shí)更新Visited表;分離初始網(wǎng)頁(yè)鏈接,保存初始網(wǎng)頁(yè)內(nèi)容,更新爬蟲(chóng)隊(duì)列(初始URL不

【參考文獻(xiàn)】

中國(guó)期刊全文數(shù)據(jù)庫(kù) 前2條

1 黃德才;戚華春;;PageRank算法研究[J];計(jì)算機(jī)工程;2006年04期

2 龔磊;武友新;;Lucene全文檢索系統(tǒng)的研究與實(shí)現(xiàn)[J];計(jì)算機(jī)與數(shù)字工程;2010年05期

【共引文獻(xiàn)】

中國(guó)期刊全文數(shù)據(jù)庫(kù) 前10條

1 鐘斌青;劉湘南;;基于空間化PageRank算法的人口流動(dòng)空間集聚性分析[J];地理與地理信息科學(xué);2011年05期

2 張玉寶;;中文搜索引擎的原理及相關(guān)技術(shù)分析[J];福建電腦;2008年01期

3 肖卓磊;;搜索引擎作弊及反作弊技術(shù)探究[J];阜陽(yáng)師范學(xué)院學(xué)報(bào)(自然科學(xué)版);2011年04期

4 王向陽(yáng);馬軍;;一個(gè)基于PageRank的科技文獻(xiàn)質(zhì)量評(píng)價(jià)算法[J];廣西師范大學(xué)學(xué)報(bào)(自然科學(xué)版);2009年01期

5 吳迪;周利娟;林鴻飛;;基于隨機(jī)游走的就業(yè)推薦系統(tǒng)研究與實(shí)現(xiàn)[J];廣西師范大學(xué)學(xué)報(bào)(自然科學(xué)版);2011年01期

6 梁迪龍;;云計(jì)算技術(shù)發(fā)展分析及其應(yīng)用探討[J];電腦知識(shí)與技術(shù);2012年19期

7 連雁平;章甲午;;網(wǎng)絡(luò)蜘蛛模擬系統(tǒng)分析與設(shè)計(jì)[J];安陽(yáng)工學(xué)院學(xué)報(bào);2012年06期

8 周豐;;基于用戶查詢偏好的搜索排序算法[J];電腦知識(shí)與技術(shù);2013年11期

9 張皓;王玉龍;;一種網(wǎng)站分析系統(tǒng)的設(shè)計(jì)方案[J];電信網(wǎng)技術(shù);2013年10期

10 劉喜文;鄭昌興;王文龍;湯剛強(qiáng);;構(gòu)建數(shù)據(jù)倉(cāng)庫(kù)過(guò)程中的數(shù)據(jù)清洗研究[J];圖書(shū)與情報(bào);2013年05期

中國(guó)重要會(huì)議論文全文數(shù)據(jù)庫(kù) 前2條

1 徐曉東;郭燕慧;;AppStore應(yīng)用信息自動(dòng)化采集系統(tǒng)設(shè)計(jì)與實(shí)現(xiàn)[A];2013年中國(guó)信息通信研究新進(jìn)展論文集[C];2014年

2 徐曉東;郭燕慧;;App Store應(yīng)用信息自動(dòng)化采集系統(tǒng)設(shè)計(jì)與實(shí)現(xiàn)[A];2013年中國(guó)信息通信研究新進(jìn)展論文集[C];2014年

中國(guó)博士學(xué)位論文全文數(shù)據(jù)庫(kù) 前10條

1 李強(qiáng);基于本體論的個(gè)性化和社會(huì)化元搜索引擎的研究[D];浙江大學(xué);2006年

2 陳紅濤;基于搜索日志的用戶行為研究及應(yīng)用[D];北京郵電大學(xué);2008年

3 劉馨月;Web挖掘中的鏈接分析與話題檢測(cè)研究[D];大連理工大學(xué);2012年

4 馬飛;云數(shù)據(jù)中心中虛擬機(jī)放置和實(shí)時(shí)遷移研究[D];北京交通大學(xué);2013年

5 樂(lè)承毅;企業(yè)知識(shí)與員工知識(shí)貢獻(xiàn)度集成評(píng)價(jià)方法及應(yīng)用研究[D];浙江大學(xué);2013年

6 孫甲申;基于主題模型和隨機(jī)游走的標(biāo)簽技術(shù)研究[D];北京郵電大學(xué);2013年

7 張鵬;數(shù)據(jù)中心網(wǎng)絡(luò)的流量管理和優(yōu)化問(wèn)題研究[D];北京郵電大學(xué);2013年

8 龔書(shū);抽取式多文檔文摘的文本表示研究[D];北京交通大學(xué);2013年

9 尹莉;基礎(chǔ)數(shù)學(xué)領(lǐng)域作者合作網(wǎng)絡(luò)實(shí)證分析[D];西北大學(xué);2013年

10 李朋;異構(gòu)信息網(wǎng)絡(luò)分析模型及其應(yīng)用研究[D];重慶大學(xué);2013年

中國(guó)碩士學(xué)位論文全文數(shù)據(jù)庫(kù) 前10條

1 吳迪;高校畢業(yè)生就業(yè)推薦系統(tǒng)的設(shè)計(jì)與開(kāi)發(fā)[D];大連理工大學(xué);2010年

2 龔磊;統(tǒng)一數(shù)據(jù)交換平臺(tái)的研究與應(yīng)用[D];南昌大學(xué);2010年

3 李娟;電信公司薪酬管理系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[D];電子科技大學(xué);2010年

4 周志剛;數(shù)據(jù)挖掘技術(shù)在計(jì)算機(jī)取證的研究[D];大連交通大學(xué);2010年

5 范先爽;基于個(gè)性化服務(wù)的汽車信息搜索引擎的研究[D];武漢理工大學(xué);2011年

6 陳凱;搜索引擎有關(guān)排序算法研究[D];武漢理工大學(xué);2011年

7 涂能彬;圖書(shū)館檢索系統(tǒng)中圖書(shū)推薦技術(shù)的研究[D];暨南大學(xué);2011年

8 郭笑笑;基于雙結(jié)構(gòu)網(wǎng)絡(luò)的信息準(zhǔn)實(shí)時(shí)公平共享系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[D];湖北師范學(xué)院;2011年

9 李宜兵;基于搜索引擎網(wǎng)頁(yè)排序算法研究[D];沈陽(yáng)理工大學(xué);2011年

10 金川明;垂直搜索引擎研究與實(shí)現(xiàn)[D];云南大學(xué);2011年

【二級(jí)參考文獻(xiàn)】

中國(guó)期刊全文數(shù)據(jù)庫(kù) 前8條

1 徐海;李軍民;;基于LUCENE的站內(nèi)搜索的研究與實(shí)現(xiàn)[J];河北軟件職業(yè)技術(shù)學(xué)院學(xué)報(bào);2009年01期

2 張嶺,馬范援;加速評(píng)估算法:一種提高Web結(jié)構(gòu)挖掘質(zhì)量的新方法[J];計(jì)算機(jī)研究與發(fā)展;2004年01期

3 宋佳;諸云強(qiáng);劉潤(rùn)達(dá);;一種基于Lucene改進(jìn)的全文檢索工具包[J];計(jì)算機(jī)工程與應(yīng)用;2008年04期

4 嚴(yán)良達(dá);;基于Lucene搜索引擎的設(shè)計(jì)與實(shí)現(xiàn)[J];寧波職業(yè)技術(shù)學(xué)院學(xué)報(bào);2009年02期

5 周錦程;王丹;;基于Lucene的全文搜索引擎研究與應(yīng)用[J];黔南民族師范學(xué)院學(xué)報(bào);2009年03期

6 宋聚平,王永成,尹中航,滕偉;對(duì)網(wǎng)頁(yè)P(yáng)ageRank算法的改進(jìn)[J];上海交通大學(xué)學(xué)報(bào);2003年03期

7 王鵑;洪承煜;沈哲;;基于Compass框架的電子商務(wù)網(wǎng)站搜索引擎設(shè)計(jì)[J];現(xiàn)代計(jì)算機(jī)(專業(yè)版);2009年02期

8 黃少林;王華;張玉紅;蔣一峰;;基于Lucene的索引系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[J];現(xiàn)代情報(bào);2009年07期

【相似文獻(xiàn)】

中國(guó)期刊全文數(shù)據(jù)庫(kù) 前10條

1 王琳;汪海燕;吳武忠;張建升;張敬博;孟澍菲;;如何做好涉檢網(wǎng)絡(luò)輿情的研判與應(yīng)對(duì)工作[J];人民檢察;2009年21期

2 潘輝;;關(guān)于新時(shí)期網(wǎng)絡(luò)輿情工作的思考[J];理論學(xué)習(xí)與探索;2009年06期

3 王克群;;網(wǎng)絡(luò)輿情的研判與應(yīng)對(duì)[J];長(zhǎng)白學(xué)刊;2010年01期

4 顧明;;論涉檢網(wǎng)絡(luò)輿情危機(jī)的應(yīng)對(duì)[J];法制與社會(huì);2010年18期

5 曹勁松;;政府網(wǎng)絡(luò)輿情的研判機(jī)制研究[J];領(lǐng)導(dǎo)科學(xué);2010年15期

6 李昌祖;;網(wǎng)絡(luò)輿情研判的類型分析及其制度建設(shè)的途徑思考[J];上海黨史與黨建;2010年06期

7 李飛;;推進(jìn)地方政府網(wǎng)絡(luò)輿情引導(dǎo)及調(diào)控機(jī)制建設(shè)[J];大連干部學(xué)刊;2010年06期

8 姜?jiǎng)俸?;把握網(wǎng)絡(luò)輿情規(guī)律 加強(qiáng)正面輿論引導(dǎo)——以杭州飆車案的網(wǎng)絡(luò)輿情變動(dòng)為例[J];中國(guó)黨政干部論壇;2010年07期

9 馬映紅;;關(guān)于網(wǎng)絡(luò)輿情基本特點(diǎn)的思考[J];學(xué)理論;2010年18期

10 林葦;;涉警網(wǎng)絡(luò)輿情應(yīng)對(duì)策略研究[J];武漢公安干部學(xué)院學(xué)報(bào);2010年02期

中國(guó)重要會(huì)議論文全文數(shù)據(jù)庫(kù) 前10條

1 任銘;陳俊鑫;;我國(guó)網(wǎng)絡(luò)輿情及管理策略研究[A];2011年全國(guó)通信安全學(xué)術(shù)會(huì)議論文集[C];2011年

2 潘崇霞;;網(wǎng)絡(luò)輿情演化的階段分析[A];信息化、工業(yè)化融合與服務(wù)創(chuàng)新——第十三屆計(jì)算機(jī)模擬與信息技術(shù)學(xué)術(shù)會(huì)議論文集[C];2011年

3 潘慶芳;周萍;;涉路網(wǎng)絡(luò)輿情的現(xiàn)狀及應(yīng)對(duì)建議[A];中國(guó)公路學(xué)會(huì)高速公路運(yùn)營(yíng)管理分會(huì)2011年度年會(huì)暨第十八次全國(guó)高速公路運(yùn)營(yíng)管理工作研討會(huì)論文集[C];2011年

4 李大鵬;;加強(qiáng)新形勢(shì)下檢察機(jī)關(guān)網(wǎng)絡(luò)輿情體系建設(shè)[A];第27次全國(guó)計(jì)算機(jī)安全學(xué)術(shù)交流會(huì)論文集[C];2012年

5 曹俊喜;劉云;徐希源;;電力行業(yè)網(wǎng)絡(luò)輿情監(jiān)測(cè)分析技術(shù)研究與系統(tǒng)設(shè)計(jì)[A];2012年電力通信管理暨智能電網(wǎng)通信技術(shù)論壇論文集[C];2013年

6 冉治平;;提高網(wǎng)絡(luò)輿情應(yīng)對(duì)能力的幾點(diǎn)思考[A];浙江煙草（2012年第3期總第122期）[C];2012年

7 疏學(xué)明;鄭魁;張輝;袁宏永;;突發(fā)事件中網(wǎng)絡(luò)輿情信息管理方式探討[A];中國(guó)突發(fā)事件防范與快速處置優(yōu)秀成果選編[C];2009年

8 耿騫;劉穎;;網(wǎng)絡(luò)輿情的形成、傳播及監(jiān)測(cè)方法[A];科學(xué)發(fā)展：文化軟實(shí)力與民族復(fù)興——紀(jì)念中華人民共和國(guó)成立60周年論文集（下卷）[C];2009年

9 韓偉;張洪濤;;網(wǎng)絡(luò)輿情與青少年媒介認(rèn)知能力構(gòu)建[A];網(wǎng)絡(luò)時(shí)代的青少年和青少年工作研究報(bào)告——第六屆中國(guó)青少年發(fā)展論壇暨中國(guó)青少年研究會(huì)優(yōu)秀論文集（2010）[C];2010年

10 曾華藝;;網(wǎng)絡(luò)輿情危機(jī)事件指標(biāo)體系探討[A];信息化、工業(yè)化融合與服務(wù)創(chuàng)新——第十三屆計(jì)算機(jī)模擬與信息技術(shù)學(xué)術(shù)會(huì)議論文集[C];2011年

中國(guó)重要報(bào)紙全文數(shù)據(jù)庫(kù) 前10條

1 記者 劉自賢　通訊員 吳濤;網(wǎng)絡(luò)輿情助推漢江中院司法為民[N];湖北日?qǐng)?bào);2010年

2 通訊員 王宏杰;注重網(wǎng)絡(luò)輿情監(jiān)督 網(wǎng)上網(wǎng)下良性互動(dòng)[N];檢察日?qǐng)?bào);2010年

3 唐莉　記者 郭樹(shù)仁;梅河口檢察院加強(qiáng)涉檢網(wǎng)絡(luò)輿情研判與應(yīng)對(duì)工作[N];北方法制報(bào);2010年

4 記者 盧志堅(jiān)　通訊員 胡連芳;江蘇大豐:征聘百名“網(wǎng)絡(luò)輿情監(jiān)督員”[N];檢察日?qǐng)?bào);2009年

5 見(jiàn)習(xí)記者 施燕燕;應(yīng)對(duì)網(wǎng)絡(luò)輿情與三項(xiàng)重點(diǎn)工作息息相關(guān)[N];檢察日?qǐng)?bào);2010年

6 記者 吳漢松;提升引導(dǎo)網(wǎng)絡(luò)輿情能力[N];石獅日?qǐng)?bào);2010年

7 四川省內(nèi)江市工商局 吳明顯　楊曉彬;建議加強(qiáng)網(wǎng)絡(luò)輿情收集分析及引導(dǎo)工作(下)[N];中國(guó)工商報(bào);2010年

8 吳明顯;內(nèi)江積極加強(qiáng)網(wǎng)絡(luò)輿情監(jiān)測(cè)[N];中國(guó)工商報(bào);2010年

9 本報(bào)記者 白真智;探秘網(wǎng)絡(luò)輿情市場(chǎng)[N];人民日?qǐng)?bào);2010年

10 方山縣政協(xié)主席 林祥;加強(qiáng)網(wǎng)絡(luò)輿情實(shí)時(shí)監(jiān)測(cè) 做好網(wǎng)絡(luò)輿情應(yīng)對(duì)工作[N];山西政協(xié)報(bào);2011年

中國(guó)博士學(xué)位論文全文數(shù)據(jù)庫(kù) 前9條

1 張玉強(qiáng);網(wǎng)絡(luò)輿情危機(jī)的政府適度反應(yīng)研究[D];中央民族大學(xué);2011年

2 方付建;突發(fā)事件網(wǎng)絡(luò)輿情演變研究[D];華中科技大學(xué);2011年

3 張偉;基于復(fù)雜社會(huì)網(wǎng)絡(luò)的網(wǎng)絡(luò)輿情演化模型研究[D];哈爾濱工業(yè)大學(xué);2014年

4 陳t熀，

本文編號(hào)：614954