【摘要】：互聯(lián)網(wǎng)信息平臺目前已經(jīng)成為我國最大的信息交流和發(fā)布平臺。人們通過互聯(lián)網(wǎng)能夠及時的了解全球熱點事情,并且能夠根據(jù)事件來表達自己的想法,以及對事件處理的看法等。雖然互聯(lián)網(wǎng)平臺給人們帶來了信息、財富以及便捷的服務外,但互聯(lián)網(wǎng)平臺也出現(xiàn)了類似像反動、色情以及網(wǎng)絡犯罪等方面輿論信息,這些信息正在慢慢的侵蝕著人類的精神文明。為了能夠有效控制網(wǎng)絡輿情誘導事情的發(fā)生,必須將各類網(wǎng)絡信息進行提取、分析和判斷,從而有效監(jiān)控網(wǎng)絡輿情信息。系統(tǒng)利用爬蟲技術(shù)對新聞信息、論壇數(shù)據(jù)和博客數(shù)據(jù)的敏感詞匯進行提取,通過數(shù)據(jù)分析與處理技術(shù)來對熱點事情和敏感詞匯進行分析和挖掘,確保相關(guān)部門能夠及時的監(jiān)控社會熱點事情。首先,通過詳細分析國內(nèi)外輿情監(jiān)控管理系統(tǒng)的研究現(xiàn)狀,明確課題所要實現(xiàn)的研究內(nèi)容,在分析公安輿情建設目標的基礎上,對系統(tǒng)核心功能性需求和非功能性需求進行詳細的分析。其次,課題按照層次化結(jié)構(gòu)設計理念,對系統(tǒng)功能架構(gòu)和技術(shù)架構(gòu)進行了重點的設計,通過層次化結(jié)構(gòu)可以有效的降低系統(tǒng)模塊之間的關(guān)聯(lián)度,從根本上提高系統(tǒng)運行的穩(wěn)定性和效率;接著,重點對公安輿情數(shù)據(jù)采集、預處理、任務調(diào)度等功能進行詳細的設計,從而實現(xiàn)公安輿情數(shù)據(jù)的自動化、網(wǎng)絡化、標準化的采集及預處理。最后,課題對系統(tǒng)使用的分詞索引算法進行了詳細的設計與實現(xiàn),并實現(xiàn)系統(tǒng)的核心功能模塊。課題在設計與實現(xiàn)公安輿情監(jiān)控管理系統(tǒng)的基礎上,按照軟件測試的流程和測試方法對系統(tǒng)的核心功能進行了詳細的測試,通過系統(tǒng)測試說明,課題所實現(xiàn)的公安輿情監(jiān)控管理系統(tǒng)滿足用戶的實際需求,達到了系統(tǒng)建設的預期目標。
【圖文】：

針對公安輿情的結(jié)構(gòu)化數(shù)據(jù)、非結(jié)構(gòu)化數(shù)據(jù)、圖型數(shù)據(jù)等多類型數(shù)據(jù)，設計與實現(xiàn)逡逑公安輿情監(jiān)控管理系統(tǒng)的采集、存儲、分析和應用研宄。本系統(tǒng)的具體研宄內(nèi)容主要包逡逑括五個部分。本文研宄內(nèi)容關(guān)系框架如圖１．１所示。逡逑一：公安輿情數(shù)據(jù)邐丨二：公安輿情數(shù)據(jù)邐｜三：公安輿情數(shù)據(jù)逡逑獲取邐存儲邐分析與處理逡逑＾邐邐邐Ｎ邐／＊邐＼邐／邐＼逡逑＆安輿Ｗ存儲灥邐■數(shù)據(jù)處理逡逑ｖ邐Ｊ邐建立邐Ｖ邐ｙ逡逑ｆ公安輿情數(shù)據(jù)質(zhì)量＾ｆ分布式分析模逡逑提升邐，邐＾建逡逑＼邐ｙ邋Ｃ邐］邋Ｖ．邐邐逡逑（邐公安輿情數(shù)據(jù)分布邐（邐＾逡逑分布式數(shù)據(jù)采集邐式管理邐圖像數(shù)據(jù)解析逡逑＼邐ｙ邐Ｖ．邐ｙ邐ｖ邐ｙ逡逑四：公安輿情監(jiān)控管理系統(tǒng)平臺構(gòu)建逡逑、＋前１４１抵加＇ｉ邋ｆ數(shù)據(jù)分析與建模式具＂ｉ逡逑Ｉ平臺體系結(jié)構(gòu)設計ｊ邋ｉ邋計算基礎框架ｊ邐邐ｊ逡逑五：公安輿情系統(tǒng)應用逡逑［數(shù)據(jù)統(tǒng)計）［輿髓警）［信息查詢］ｆ敏感詞管理＇逡逑圖１．１研究內(nèi)容結(jié)構(gòu)圖逡逑Ｆｉｇ．邋１．１邋Ｔｈｅ邋ｓｔｒｕｃｔｕｒｅ邋ｏｆ邋ｒｅｓｅａｒｃｈ邋ｃｏｎｔｅｎｔｓ逡逑（ｉ）公安輿情數(shù)據(jù)的獲取逡逑完成標準化公安輿情數(shù)據(jù)定義與接口規(guī)范制定、數(shù)據(jù)質(zhì)量提升和分布式公安輿情數(shù)逡逑據(jù)采集的研宄

（存儲ｇＭＬ文＾逡逑Ｃ結(jié)束）逡逑圖２．１網(wǎng)絡爬蟲工作流程圖逡逑Ｆｉｇ．邋２．１邋Ｗｏｒｋ邋ｆｌｏｗ邋ｃｈａｒｔ邋ｏｆ邋ｗｅｂ邋ｃｒａｗｌｅｒ逡逑２．１．２網(wǎng)頁提取技術(shù)逡逑隨著網(wǎng)絡技術(shù)的不斷發(fā)展，各種海量數(shù)據(jù)信息以網(wǎng)頁的形式在互聯(lián)網(wǎng)平臺上展示，逡逑從而供訪問者進行瀏覽和利用。通過網(wǎng)絡爬蟲技術(shù)在互聯(lián)網(wǎng)平臺上獲得的數(shù)據(jù)大多數(shù)都逡逑是以ＨＭＴＬ形式進行存儲的。ＨＴＭＬ網(wǎng)頁格式多數(shù)是非結(jié)構(gòu)化的、分散和異構(gòu)的數(shù)據(jù)逡逑信息。通常包含兩部分內(nèi)容，，分別是展示信息的網(wǎng)頁正文，另一個是與網(wǎng)頁不相關(guān)的數(shù)逡逑據(jù)信息，比如廣告、版權(quán)信息等，這部分數(shù)據(jù)與正文內(nèi)容不相關(guān)，通常需要對這部分的逡逑內(nèi)容進行過濾。由于ＨＴＭＬ網(wǎng)頁格式?jīng)]有固定的標準，內(nèi)容和界面風格多樣化，從而逡逑９逡逑
【學位授予單位】：大連海事大學
【學位級別】：碩士
【學位授予年份】：2018
【分類號】：D631.4;TP311.52

【參考文獻】

相關(guān)期刊論文 前9條

1 諶艷青;;公安網(wǎng)絡輿情分析師職業(yè)素養(yǎng)初探[J];辦公室業(yè)務;2014年15期

2 馬海兵;畢久陽;邱君瑞;;網(wǎng)絡輿情安全應用中主題分類方法的研究與實現(xiàn)[J];現(xiàn)代情報;2012年04期

3 肖文濤;范達超;;網(wǎng)絡輿情事件的引導策略探究[J];中國行政管理;2011年12期

4 羅愛民;;信息系統(tǒng)體系結(jié)構(gòu)的復雜性分析方法[J];計算機科學;2011年10期

5 梅松;;政府網(wǎng)絡輿情監(jiān)控系統(tǒng)的實現(xiàn)[J];信息技術(shù);2011年09期

6 王青;成穎;巢乃鵬;;網(wǎng)絡輿情監(jiān)測及預警指標體系構(gòu)建研究[J];圖書情報工作;2011年08期

7 李云云;;淺析B/S和C/S體系結(jié)構(gòu)[J];科學之友;2011年01期

8 趙靖;劉宏偉;崔剛;王慧強;;Analysis on testing and operational reliability of software[J];Journal of Harbin Institute of Technology;2008年03期

9 王維江;面向?qū)ο蠓椒ǖ某绦蛟O計簡述[J];航空計算技術(shù);2004年02期

本文編號：2673404