本文選題：全球整合新聞數(shù)據(jù)庫 + 可視化分析��； 參考：《情報學(xué)報》2017年02期

【摘要】：GDELT是一個實時、開源、全球性的社會事件新聞數(shù)據(jù)庫,它收錄全世界從1979年至今的網(wǎng)絡(luò)、紙質(zhì)新聞報道中抽取的事件。本文設(shè)計并實現(xiàn)了一個GDELT數(shù)據(jù)庫采集器,實時采集GDELT的元數(shù)據(jù),并將其存儲在HDFS分布式文件系統(tǒng)中;提出了一種基于哈希的方法在Spark中對GDELT的三個主要數(shù)據(jù)表進行快速的連接操作,得到GDELT聯(lián)合數(shù)據(jù)集,以便充分挖掘每個事件的詳細信息;最后,以韓國地區(qū)的GDELT聯(lián)合數(shù)據(jù)集為例進行了時空可視化分析,如事件熱度的區(qū)域時間分布、關(guān)注媒體分布、抽取結(jié)果的置信度分布等。為情報科技工作者及相關(guān)人員提供了一個新的角度和鰓決方案。
[Abstract]:GDELT is a real-time, open source, global social news database, it included the world from 1979 to the present network, extraction paper in news events. This paper designs and implements a GDELT data collector, real-time acquisition of GDELT metadata, which is stored in the HDFS distributed file system is put forward; for the three main data on the GDELT table in the Spark connection operation fast hash based method, GDELT combined data sets, in order to fully tap the details of each event; finally, to South Korea's GDELT data sets for the visualization analysis for example, such as the regional distribution of the incident heat time, attention media distribution, extraction results of the confidence distribution. To provide a new perspective for information technology solutions and gill workers and related personnel.

【作者單位】： 國防科學(xué)技術(shù)大學(xué)信息系統(tǒng)與管理學(xué)院;
【分類號】：G219.1;TP311.13

【相似文獻】

相關(guān)期刊論文 前10條

1 趙麗華;聶建國;;可視化技術(shù)在圖書館中的應(yīng)用[J];圖書館學(xué)刊;2011年03期

2 趙倩;任磊;滕東興;;基于筆式界面的交互式可視化分析系統(tǒng)[J];計算機工程與應(yīng)用;2009年06期

3 劉真真;;探討園藝植物可視化技術(shù)的應(yīng)用[J];現(xiàn)代園藝;2013年16期

4 畢曉君;李博;;基于單目標(biāo)擬合度的高維多目標(biāo)可視化[J];吉林大學(xué)學(xué)報(工學(xué)版);2013年06期

5 畢曉君;李博;蒼巖;;基于交互式?jīng)Q策的旋轉(zhuǎn)基多目標(biāo)可視化技術(shù)[J];計算機輔助設(shè)計與圖形學(xué)學(xué)報;2014年05期

6 吳多勝,葉雪梅,王帆;計算機輔助可視化故障樹分析系統(tǒng)[J];微計算機信息;2005年08期

7 趙蓉英;王敏;;國際視野下中醫(yī)研究的可視化分析[J];醫(yī)學(xué)信息學(xué)雜志;2011年07期

8 朱明;;可視化及其在情報分析中的應(yīng)用[J];佳木斯教育學(xué)院學(xué)報;2012年06期

9 吳萍,吳先良;高頻區(qū)目標(biāo)小角度雙站散射特性的可視化電磁分析[J];合肥工業(yè)大學(xué)學(xué)報(自然科學(xué)版);2003年04期

10 魏瑞斌;;國內(nèi)知識圖譜研究的可視化分析[J];圖書情報工作;2011年08期

相關(guān)會議論文 前4條

1 郭建勇;劉俊;張鑒;遲學(xué)斌;;5·12汶川地震的可視化與分析[A];圖像圖形技術(shù)研究與應(yīng)用(2010)[C];2010年

2 柳輝;;基于AutoCAD的維修性人機可視化分析[A];面向制造業(yè)的自動化與信息化技術(shù)創(chuàng)新設(shè)計的基礎(chǔ)技術(shù)——2001年中國機械工程學(xué)會年會暨第九屆全國特種加工學(xué)術(shù)年會論文集[C];2001年

3 楊璐;伍蓓;杜杰麗;;IT外包決策研究回顧和模型評介——基于CiteSpaceⅡ的可視化分析[A];第九屆中國科技政策與管理學(xué)術(shù)年會論文集[C];2013年

4 李紅綱;鮑玉斌;焦洪國;于戈;鄭懷遠;;維分析樹導(dǎo)航下的可視化OLAP分析[A];第十八屆全國數(shù)據(jù)庫學(xué)術(shù)會議論文集（研究報告篇）[C];2001年

相關(guān)碩士學(xué)位論文 前10條

1 夏晴;科研工作成功原因挖掘及可視化[D];上海大學(xué);2015年

2 楊陽;微博內(nèi)容的采集、分析及其可視化研究[D];大連理工大學(xué);2015年

3 趙玨;區(qū)域經(jīng)濟普查數(shù)據(jù)可視化分析系統(tǒng)的設(shè)計與實現(xiàn)[D];電子科技大學(xué);2015年

4 孫偉偉;圖結(jié)構(gòu)數(shù)據(jù)的可視化分析系統(tǒng)的設(shè)計與實現(xiàn)[D];東南大學(xué);2016年

5 呂朝陽;基于個人檔案的信息提取和可視化分析[D];山東大學(xué);2017年

6 馬井剛;面向復(fù)雜網(wǎng)絡(luò)的可視化分析工具的設(shè)計與實現(xiàn)[D];北京郵電大學(xué);2010年

7 張勉;在線社會網(wǎng)絡(luò)可視化分析應(yīng)用的設(shè)計與實現(xiàn)[D];華東師范大學(xué);2012年

8 王瓊;實時分布仿真平臺下的可視化技術(shù)研究[D];西北工業(yè)大學(xué);2004年

9 丁曉東;用于網(wǎng)絡(luò)監(jiān)管的社交網(wǎng)絡(luò)可視化分析工具的設(shè)計與實現(xiàn)[D];上海交通大學(xué);2007年

10 于石林;可視化流程建模與監(jiān)控方案的設(shè)計與實現(xiàn)[D];北京交通大學(xué);2011年

，

本文編號：1754629