本文關(guān)鍵詞： 實(shí)時(shí)分析 分布式 對等網(wǎng)絡(luò) 節(jié)點(diǎn)管理　出處：《北京郵電大學(xué)》2014年碩士論文　論文類型：學(xué)位論文

【摘要】：隨著網(wǎng)絡(luò)速度和網(wǎng)絡(luò)數(shù)據(jù)流量的不斷增長,網(wǎng)絡(luò)數(shù)據(jù)分析的實(shí)時(shí)性需求越來越高。單一主機(jī)的處理性能不足促進(jìn)了分布式實(shí)時(shí)數(shù)據(jù)處理系統(tǒng)的快速發(fā)展,對此類分布式系統(tǒng)的各個(gè)節(jié)點(diǎn)進(jìn)行有效管理成為重要的研究內(nèi)容。 在研究現(xiàn)有的分布式系統(tǒng)節(jié)點(diǎn)管理功能的基礎(chǔ)上,確定了網(wǎng)絡(luò)實(shí)時(shí)分析系統(tǒng)節(jié)點(diǎn)管理功能的設(shè)計(jì)目標(biāo)：針對系統(tǒng)的“去中心節(jié)點(diǎn)的對等架構(gòu)”的節(jié)點(diǎn)集群進(jìn)行管理,該網(wǎng)絡(luò)實(shí)時(shí)分析系統(tǒng)支持搭建可伸縮的節(jié)點(diǎn)群集,節(jié)點(diǎn)管理功能支持系統(tǒng)的可擴(kuò)展性,節(jié)點(diǎn)管理功能可以處理集群中部分節(jié)點(diǎn)發(fā)生故障的情況,當(dāng)某些處理節(jié)點(diǎn)發(fā)生故障無法正常工作時(shí),由其他節(jié)點(diǎn)接手故障節(jié)點(diǎn)的工作。 本論文首先介紹根據(jù)流計(jì)算模型開發(fā)的分布式系統(tǒng)——網(wǎng)絡(luò)實(shí)時(shí)分析系統(tǒng),重點(diǎn)描述該系統(tǒng)的總體架構(gòu)與節(jié)點(diǎn)管理相關(guān)部分,然后分析網(wǎng)絡(luò)實(shí)時(shí)分析系統(tǒng)的節(jié)點(diǎn)管理的詳細(xì)需求,包括對數(shù)據(jù)適配節(jié)點(diǎn)和數(shù)據(jù)分析節(jié)點(diǎn)進(jìn)行狀態(tài)監(jiān)控和有效管理,對各個(gè)數(shù)據(jù)分析節(jié)點(diǎn)的負(fù)載任務(wù)進(jìn)行負(fù)載均衡,具體來說,節(jié)點(diǎn)管理可以詳細(xì)分為五個(gè)部分：1)節(jié)點(diǎn)配置管理功能,2)節(jié)點(diǎn)的增刪改查基本操作功能,3)節(jié)點(diǎn)保活功能,4)節(jié)點(diǎn)故障管理功能,5)節(jié)點(diǎn)負(fù)載均衡功能。之后根據(jù)需求設(shè)計(jì)出詳細(xì)的相關(guān)方案和架構(gòu),在實(shí)現(xiàn)以上功能之后對網(wǎng)絡(luò)實(shí)時(shí)分析系統(tǒng)節(jié)點(diǎn)管理各項(xiàng)功能進(jìn)行全面的功能和性能測試,驗(yàn)證了本文設(shè)計(jì)實(shí)現(xiàn)的網(wǎng)絡(luò)實(shí)時(shí)分析系統(tǒng)節(jié)點(diǎn)管理在功能和性能方面的優(yōu)勢。最后對本文設(shè)計(jì)實(shí)現(xiàn)的網(wǎng)絡(luò)實(shí)時(shí)分析系統(tǒng)節(jié)點(diǎn)管理提出建議和下一步研究方向。
[Abstract]:With the increasing of network speed and network data flow, the real-time requirement of network data analysis is more and more high. The lack of processing performance of single host promotes the rapid development of distributed real-time data processing system. The effective management of each node in this kind of distributed system becomes an important research content. On the basis of studying the existing node management function of distributed system, the design goal of node management function of network real-time analysis system is determined: to manage the node cluster of "peer-to-peer architecture of de-central node" in the system. The network real-time analysis system supports the construction of scalable node cluster, the node management function supports the expansibility of the system, and the node management function can deal with the failure of some nodes in the cluster. When some processing nodes fail to work properly, other nodes take over the work of the failed nodes. In this paper, we first introduce the distributed network real-time analysis system, which is developed according to the flow computing model, and mainly describe the overall architecture of the system and the related parts of node management. Then the detailed requirements of node management of network real-time analysis system are analyzed, including monitoring and effective management of data adaptation node and data analysis node, load balancing of each data analysis node, specifically, Node management can be divided into five parts in detail: 1) node configuration management function. Figure out the details of the relevant programs and structures, After realizing the above functions, the functions of node management in the network real-time analysis system are tested. The advantages of node management in the function and performance of the network real-time analysis system designed and implemented in this paper are verified. Finally, the suggestions and the next research direction of node management of the network real-time analysis system designed and implemented in this paper are put forward.
【學(xué)位授予單位】：北京郵電大學(xué)
【學(xué)位級別】：碩士
【學(xué)位授予年份】：2014
【分類號】：TP393.06

【相似文獻(xiàn)】

相關(guān)期刊論文 前10條

1 滕福生,滕歡;實(shí)時(shí)分析理論和應(yīng)用[J];計(jì)算機(jī)應(yīng)用;1998年01期

2 ;實(shí)時(shí)分析軟件提升運(yùn)行和績效[J];現(xiàn)代制造;2005年21期

3 ;資訊[J];金融電子化;2010年03期

4 ;能實(shí)時(shí)分析復(fù)雜系統(tǒng)的軟件[J];軍民兩用技術(shù)與產(chǎn)品;2009年09期

5 于小雅;;大數(shù)據(jù)的發(fā)展及其治理[J];中國建設(shè)信息;2013年20期

6 譚漫華;王丹;;水下設(shè)備自測環(huán)境參數(shù)實(shí)時(shí)分析軟件[J];科技視界;2013年32期

7 ;順風(fēng)耳[J];信息方略;2010年06期

8 ;IBM發(fā)布全新的POWER7系統(tǒng)[J];計(jì)算機(jī)安全;2010年03期

9 康曉丹;季穎斐;高海峰;;基于BI的圖書館信息實(shí)時(shí)分析系統(tǒng)——使用Cognos搭建圖書館用戶行為實(shí)時(shí)分析系統(tǒng)[J];現(xiàn)代情報(bào);2009年09期

10 肖小玲;李臘元;;基于多層事件融合的場景事件實(shí)時(shí)分析[J];武漢理工大學(xué)學(xué)報(bào)(交通科學(xué)與工程版);2008年02期

相關(guān)會議論文 前1條

1 左智波;王威廉;孫靜;苗晟;;基于DSP的便攜式心電實(shí)時(shí)分析系統(tǒng)設(shè)計(jì)[A];2007'儀表，自動化及先進(jìn)集成技術(shù)大會論文集（二）[C];2007年

相關(guān)重要報(bào)紙文章 前7條

1 本報(bào)記者 金小鹿;始于“芯”的實(shí)時(shí)分析力量[N];中國計(jì)算機(jī)報(bào);2014年

2 本報(bào)記者 郭平;構(gòu)筑大數(shù)據(jù)實(shí)時(shí)分析平臺[N];計(jì)算機(jī)世界;2014年

3 ;自助服務(wù)BI、實(shí)時(shí)分析聲勢漸強(qiáng)[N];網(wǎng)絡(luò)世界;2011年

4 《網(wǎng)絡(luò)世界》記者 于翔;Splunk：實(shí)時(shí)分析機(jī)器數(shù)據(jù)[N];網(wǎng)絡(luò)世界;2013年

5 赫澄;視頻監(jiān)控進(jìn)入自動報(bào)警時(shí)代[N];中國國門時(shí)報(bào);2006年

6 記者 梁永軍　通訊員 馮語文 林志文;自主研發(fā) 國內(nèi)首家[N];中國民航報(bào);2009年

7 鄭榮娜　朱珊珊;【漳州市檢察院】 查辦職務(wù)罪案周周通報(bào)[N];檢察日報(bào);2010年

相關(guān)碩士學(xué)位論文 前3條

1 陳雪龍;網(wǎng)絡(luò)實(shí)時(shí)分析系統(tǒng)的節(jié)點(diǎn)管理功能的設(shè)計(jì)與實(shí)現(xiàn)[D];北京郵電大學(xué);2014年

2 錢同海;大客戶節(jié)電降耗實(shí)時(shí)分析系統(tǒng)的研究與開發(fā)[D];廣東工業(yè)大學(xué);2011年

3 馮海文;上海移動信令實(shí)時(shí)分析系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[D];北京郵電大學(xué);2010年

，

本文編號：1522662