基于大數(shù)據(jù)的政府公共輿論信息平臺(tái)存儲(chǔ)與處理技術(shù)研究
發(fā)布時(shí)間:2025-04-11 03:30
隨著我國(guó)各方面的飛速發(fā)展,經(jīng)濟(jì)實(shí)力和在世界上的地位顯著提升,目前已經(jīng)是世界第二大經(jīng)濟(jì);因此,我國(guó)的公民無(wú)論是在國(guó)內(nèi)還是在國(guó)際上,都有了話語(yǔ)權(quán),這就使得人們?cè)谠u(píng)判議論事情時(shí),通常會(huì)按照自己的主觀意見(jiàn)去考慮,自由發(fā)表觀點(diǎn)看法,有時(shí)并不能真實(shí)的客觀的去反映事實(shí),人云亦云,從而造成錯(cuò)誤輿論。本文根據(jù)上述情況,針對(duì)豐鎮(zhèn)市輿情信息監(jiān)測(cè)不精確耗時(shí)長(zhǎng)的問(wèn)題,基于大數(shù)據(jù)方面的對(duì)政府信息處理的建議,進(jìn)行了有關(guān)系統(tǒng)在需求方面的相關(guān)研究,并對(duì)相關(guān)的系統(tǒng)功能的實(shí)驗(yàn)設(shè)計(jì)都進(jìn)行了研究。以大數(shù)據(jù)儲(chǔ)存作為研究的原則,豐鎮(zhèn)市政府公共輿論信息平臺(tái)將輿論信息分為四個(gè)階段,即為設(shè)定、采集、分析和服務(wù)四個(gè)階段。根據(jù)豐鎮(zhèn)市的民族特色,主要抓取當(dāng)前包含了蒙古族、漢族沖突等主題的內(nèi)容,設(shè)置網(wǎng)頁(yè)爬蟲(chóng)的基本類型后,爬蟲(chóng)系統(tǒng)就可以進(jìn)行網(wǎng)頁(yè)信息抓取工作了,抓取有效的主題用戶評(píng)論信息,上傳到服務(wù)器中進(jìn)行剖析,判斷用戶評(píng)論是否為負(fù)面評(píng)論。索引服務(wù)器主要方便用戶對(duì)輿論進(jìn)行查詢工作,WEB服務(wù)器主要作用就是對(duì)網(wǎng)頁(yè)的交互信息進(jìn)行管理。在網(wǎng)絡(luò)上是根據(jù)網(wǎng)絡(luò)留言的實(shí)際情況,判斷用戶留言是否針對(duì)某件事進(jìn)行負(fù)面評(píng)論的情況,在這之前,設(shè)定一個(gè)閾值,一旦超過(guò)閾值,系統(tǒng)...
【文章頁(yè)數(shù)】:63 頁(yè)
【學(xué)位級(jí)別】:碩士
【文章目錄】:
摘要
ABSTRACT
一、緒論
1.1 研究背景
1.2 國(guó)內(nèi)外輿論信息系統(tǒng)研究現(xiàn)狀
1.2.1 國(guó)外研究現(xiàn)狀
1.2.2 國(guó)內(nèi)研究現(xiàn)狀
1.3 研究?jī)?nèi)容及意義
1.4 研究路線及其方法
1.5 各章節(jié)內(nèi)容安排
二、關(guān)鍵技術(shù)研究
2.1 大數(shù)據(jù)概述
2.1.1 大數(shù)據(jù)相關(guān)技術(shù)
2.1.2 大數(shù)據(jù)平臺(tái)系統(tǒng)框架
2.2 網(wǎng)絡(luò)爬蟲(chóng)技術(shù)分析研究
2.2.1 網(wǎng)絡(luò)爬蟲(chóng)技術(shù)概述
2.2.2 網(wǎng)絡(luò)爬蟲(chóng)的分類及特點(diǎn)
2.2.3 網(wǎng)絡(luò)爬蟲(chóng)在公共輿論信息平臺(tái)中的應(yīng)用背景
2.3 Lucene索引技術(shù)分析研究
2.3.1 Lucene索引技術(shù)概述
2.3.2 Lucene索引技術(shù)的特點(diǎn)
2.3.3 Lucene索引技術(shù)在公共輿論信息平臺(tái)中的應(yīng)用背景
2.4 SSH2框架技術(shù)分析研究
2.4.1 SSH2框架概述
2.4.2 SSH2框架分析
2.5 文本分類技術(shù)
2.5.1 中文分詞技術(shù)
2.5.2 文檔分類算法
2.6 情感分類技術(shù)及方法
2.7 WEKA平臺(tái)技術(shù)分析研究
2.7.1 WEKA平臺(tái)概述
2.7.2 WEKA平臺(tái)功能介紹
2.7.3 WEKA平臺(tái)的分類算法
2.8 本章小結(jié)
三、需求分析
3.1 政府公共輿論信息平臺(tái)的業(yè)務(wù)需求分析
3.2 政府公共輿論信息平臺(tái)的功能需求分析
3.2.1 用戶用例
3.2.2 功能需求
3.3 政府公共輿論信息平臺(tái)的非功能性需求
3.3.1 性能需求
3.3.2 準(zhǔn)確性需求
3.3.3 擴(kuò)展性需求
3.3.4 可靠性需求
3.4 本章小結(jié)
四、政府公共輿論信息平臺(tái)設(shè)計(jì)
4.1 系統(tǒng)架構(gòu)設(shè)計(jì)
4.1.1 系統(tǒng)軟件架構(gòu)
4.1.2 系統(tǒng)服務(wù)器部署
4.2 系統(tǒng)詳細(xì)設(shè)計(jì)
4.2.1 信息采集模塊
4.2.2 信息索引模塊
4.2.3 信息處理模塊
4.2.4 信息分析模塊
4.2.5 信息預(yù)警模塊
4.2.6 系統(tǒng)管理模塊
4.3 系統(tǒng)數(shù)據(jù)庫(kù)設(shè)計(jì)
4.4 本章小結(jié)
五、政府公共輿論信息平臺(tái)的實(shí)現(xiàn)
5.1 系統(tǒng)的實(shí)現(xiàn)
5.1.1 信息采集模塊的實(shí)現(xiàn)
5.1.2 信息索引模塊的實(shí)現(xiàn)
5.1.3 信息分析模塊的實(shí)現(xiàn)
5.2 系統(tǒng)測(cè)試
5.2.1 功能測(cè)試
5.2.2 系統(tǒng)性能測(cè)試
5.3 本章小結(jié)
六、總結(jié)與展望
6.1 總結(jié)
6.2 展望
參考文獻(xiàn)
致謝
本文編號(hào):4039437
【文章頁(yè)數(shù)】:63 頁(yè)
【學(xué)位級(jí)別】:碩士
【文章目錄】:
摘要
ABSTRACT
一、緒論
1.1 研究背景
1.2 國(guó)內(nèi)外輿論信息系統(tǒng)研究現(xiàn)狀
1.2.1 國(guó)外研究現(xiàn)狀
1.2.2 國(guó)內(nèi)研究現(xiàn)狀
1.3 研究?jī)?nèi)容及意義
1.4 研究路線及其方法
1.5 各章節(jié)內(nèi)容安排
二、關(guān)鍵技術(shù)研究
2.1 大數(shù)據(jù)概述
2.1.1 大數(shù)據(jù)相關(guān)技術(shù)
2.1.2 大數(shù)據(jù)平臺(tái)系統(tǒng)框架
2.2 網(wǎng)絡(luò)爬蟲(chóng)技術(shù)分析研究
2.2.1 網(wǎng)絡(luò)爬蟲(chóng)技術(shù)概述
2.2.2 網(wǎng)絡(luò)爬蟲(chóng)的分類及特點(diǎn)
2.2.3 網(wǎng)絡(luò)爬蟲(chóng)在公共輿論信息平臺(tái)中的應(yīng)用背景
2.3 Lucene索引技術(shù)分析研究
2.3.1 Lucene索引技術(shù)概述
2.3.2 Lucene索引技術(shù)的特點(diǎn)
2.3.3 Lucene索引技術(shù)在公共輿論信息平臺(tái)中的應(yīng)用背景
2.4 SSH2框架技術(shù)分析研究
2.4.1 SSH2框架概述
2.4.2 SSH2框架分析
2.5 文本分類技術(shù)
2.5.1 中文分詞技術(shù)
2.5.2 文檔分類算法
2.6 情感分類技術(shù)及方法
2.7 WEKA平臺(tái)技術(shù)分析研究
2.7.1 WEKA平臺(tái)概述
2.7.2 WEKA平臺(tái)功能介紹
2.7.3 WEKA平臺(tái)的分類算法
2.8 本章小結(jié)
三、需求分析
3.1 政府公共輿論信息平臺(tái)的業(yè)務(wù)需求分析
3.2 政府公共輿論信息平臺(tái)的功能需求分析
3.2.1 用戶用例
3.2.2 功能需求
3.3 政府公共輿論信息平臺(tái)的非功能性需求
3.3.1 性能需求
3.3.2 準(zhǔn)確性需求
3.3.3 擴(kuò)展性需求
3.3.4 可靠性需求
3.4 本章小結(jié)
四、政府公共輿論信息平臺(tái)設(shè)計(jì)
4.1 系統(tǒng)架構(gòu)設(shè)計(jì)
4.1.1 系統(tǒng)軟件架構(gòu)
4.1.2 系統(tǒng)服務(wù)器部署
4.2 系統(tǒng)詳細(xì)設(shè)計(jì)
4.2.1 信息采集模塊
4.2.2 信息索引模塊
4.2.3 信息處理模塊
4.2.4 信息分析模塊
4.2.5 信息預(yù)警模塊
4.2.6 系統(tǒng)管理模塊
4.3 系統(tǒng)數(shù)據(jù)庫(kù)設(shè)計(jì)
4.4 本章小結(jié)
五、政府公共輿論信息平臺(tái)的實(shí)現(xiàn)
5.1 系統(tǒng)的實(shí)現(xiàn)
5.1.1 信息采集模塊的實(shí)現(xiàn)
5.1.2 信息索引模塊的實(shí)現(xiàn)
5.1.3 信息分析模塊的實(shí)現(xiàn)
5.2 系統(tǒng)測(cè)試
5.2.1 功能測(cè)試
5.2.2 系統(tǒng)性能測(cè)試
5.3 本章小結(jié)
六、總結(jié)與展望
6.1 總結(jié)
6.2 展望
參考文獻(xiàn)
致謝
本文編號(hào):4039437
本文鏈接:http://sikaile.net/kejilunwen/shengwushengchang/4039437.html
最近更新
教材專著