本文關(guān)鍵詞：大并發(fā)、高吞吐量實時數(shù)據(jù)平臺的研究

  更多相關(guān)文章： Storm Kafka ActiveMQ JMX 實時計算 數(shù)據(jù)處理 大數(shù)據(jù)

【摘要】：為了解決某省正在運行的"全省實時警情抽取平臺"的數(shù)據(jù)吞吐量較低的問題,文章對影響平臺的并發(fā)數(shù)和數(shù)據(jù)吞吐量的相關(guān)因素進行深入分析,并對數(shù)據(jù)平臺中的匯聚隊列進行性能調(diào)優(yōu)。文章還對比ActiveMQ和Kafka隊列系統(tǒng)的實現(xiàn)原理,針對大并發(fā)和高吞吐量設計仿真測試方案,同時還引入Drools規(guī)則引擎,以適應數(shù)據(jù)平臺中的相關(guān)計算規(guī)則的變化;最后設計一套通過驗證的完全可以應對大并發(fā)、高數(shù)據(jù)吞吐需求場景下的實時數(shù)據(jù)平臺。
【作者單位】： 上海迪愛斯通信設備有限公司;
【關(guān)鍵詞】： Storm Kafka ActiveMQ JMX 實時計算 數(shù)據(jù)處理 大數(shù)據(jù)
【分類號】：TP311.52
【正文快照】： Twitter、Weather、Spark、FullContact、雅虎等很多知名廠商和知名項目的使用和支持,并由Storm衍生1.1研究背景 出storm-website、storm-starter、storm-deploy、storm-隨著近年來互聯(lián)網(wǎng)、移動互聯(lián)網(wǎng)、物聯(lián)網(wǎng)、云計contrib、storm-mesos、storm-yam等相關(guān)項目,社區(qū)發(fā)算技術(shù)的

【相似文獻】

中國期刊全文數(shù)據(jù)庫 前10條

1 陳強;立足國情 提供統(tǒng)一數(shù)據(jù)平臺的整體解決方案與服務[J];CAD/CAM與制造業(yè)信息化;2002年07期

2 韓宏,梁向東;我國省級衛(wèi)生監(jiān)督執(zhí)法數(shù)據(jù)平臺建設的基本構(gòu)想[J];中國衛(wèi)生監(jiān)督雜志;2005年03期

3 周琴芳;;實現(xiàn)精確營銷——本地業(yè)務數(shù)據(jù)平臺建設思路[J];每周電腦報;2006年15期

4 聶靖松;李維銘;邸瑞華;;主題數(shù)據(jù)平臺[J];計算機與信息技術(shù);2007年06期

5 臧鐵軍;;高可用的數(shù)據(jù)平臺是信息化建設的基石[J];中國教育信息化;2009年15期

6 陸寧;劉成;;煉化企業(yè)應用數(shù)據(jù)平臺的設計與應用[J];中國科技信息;2010年23期

7 李響;;微軟發(fā)布新一代私有云及數(shù)據(jù)平臺[J];石油工業(yè)計算機應用;2012年02期

8 夏蕾;;基于手機短信功能的數(shù)據(jù)平臺分析與應用[J];電子制作;2012年11期

9 解玉婧;;大數(shù)據(jù)時代已來臨,“你”準備好了嗎?——飛揚大數(shù)據(jù)平臺備戰(zhàn)大數(shù)據(jù)時代來臨[J];機電兵船檔案;2013年05期

10 本刊訊;;歐盟開放數(shù)據(jù)平臺Open Data Portal[J];現(xiàn)代圖書情報技術(shù);2013年Z1期

中國重要會議論文全文數(shù)據(jù)庫 前1條

1 李育芳;彭豐林;楊京鳳;薛國強;王源;李敏;;地球物理信息數(shù)據(jù)平臺設計與實現(xiàn)[A];中國地球物理2013——第十八專題論文集[C];2013年

中國重要報紙全文數(shù)據(jù)庫 前6條

1 本報記者 程彥博;吉林農(nóng)信數(shù)據(jù)平臺三步走[N];中國計算機報;2013年

2 本報記者 羅強;SQL Server 2008戰(zhàn)前預演 微軟展示數(shù)據(jù)平臺全新愿景[N];中國計算機報;2008年

3 本報記者 張惠;研發(fā)大數(shù)據(jù)平臺打造智慧企業(yè)[N];中國信息化周報;2013年

4 本報記者 霍娜;SAP推出新一代實時數(shù)據(jù)平臺[N];中國計算機報;2012年

5 本報記者 鄒大斌;UMA大數(shù)據(jù)平臺啟動[N];計算機世界;2014年

6 艾童;向世界知名數(shù)據(jù)庫邁進[N];中國社會科學院報;2009年

中國碩士學位論文全文數(shù)據(jù)庫 前10條

1 呂平;面向銀行業(yè)務的數(shù)據(jù)平臺的設計與實現(xiàn)[D];哈爾濱工業(yè)大學;2015年

2 胡琳惠;基于Web的工程項目管理軟件數(shù)據(jù)平臺設計[D];電子科技大學;2014年

3 李維辰;江蘇省國稅系統(tǒng)綜合數(shù)據(jù)平臺的設計和實現(xiàn)[D];電子科技大學;2014年

4 胡日新;公共交通開放數(shù)據(jù)平臺及服務的設計與實現(xiàn)[D];電子科技大學;2015年

5 閆石磊;基于GeoServer的WebGIS共享數(shù)據(jù)平臺[D];西安電子科技大學;2015年

6 邊煬凱;警用勤務智能分析系統(tǒng)數(shù)據(jù)平臺軟件設計[D];浙江大學;2016年

7 王長晟;沈陽地稅數(shù)據(jù)平臺征管子系統(tǒng)設計與實現(xiàn)[D];吉林大學;2016年

8 趙衛(wèi)丹;基于大數(shù)據(jù)平臺的城市地鐵交通模式研究[D];吉林大學;2016年

9 呂泓源;區(qū)域信息資源數(shù)據(jù)平臺的設計與實現(xiàn)[D];吉林大學;2016年

10 樂柏成;基于Hadoop大數(shù)據(jù)平臺的交通行人流量預測方法及應用[D];廣東工業(yè)大學;2016年

，

本文編號：775436