近年來,隨著互聯(lián)網(wǎng)技術(shù)的蓬勃發(fā)展,網(wǎng)絡(luò)上的應(yīng)用越來越多,網(wǎng)絡(luò)拓?fù)湟约熬W(wǎng)絡(luò)環(huán)境日益復(fù)雜。網(wǎng)絡(luò)上的負(fù)載逐漸加重,導(dǎo)致網(wǎng)絡(luò)性能下降等網(wǎng)絡(luò)安全和服務(wù)質(zhì)量問題。這些問題引起了越來越多的關(guān)注。為解決這些問題,為新的網(wǎng)絡(luò)業(yè)務(wù)進(jìn)行規(guī)劃,需要對(duì)網(wǎng)絡(luò)的性能指標(biāo)進(jìn)行分析,對(duì)網(wǎng)絡(luò)服務(wù)質(zhì)量進(jìn)行監(jiān)控和評(píng)估,從而評(píng)估網(wǎng)絡(luò)的總體性能。如何對(duì)海量的測(cè)量數(shù)據(jù)進(jìn)行統(tǒng)計(jì)分析,從中得出網(wǎng)絡(luò)總體性能情況,是網(wǎng)絡(luò)測(cè)量的研究重點(diǎn)。在現(xiàn)有技術(shù)中,網(wǎng)絡(luò)測(cè)量的數(shù)據(jù)分析操作大多采用集中管理的平臺(tái)。由獨(dú)立的一個(gè)管理平臺(tái)同時(shí)對(duì)多個(gè)測(cè)量探針的海量測(cè)量數(shù)據(jù)進(jìn)行采集與分析,無法保證數(shù)據(jù)的完整性和可靠性。另一方面,在面對(duì)海量的測(cè)量數(shù)據(jù)時(shí),因其計(jì)算能力有限,不具備對(duì)海量數(shù)據(jù)進(jìn)行分析的能力。隨著云計(jì)算技術(shù)的推廣,利用云計(jì)算平臺(tái)強(qiáng)大的計(jì)算能力來處理海量數(shù)據(jù),已經(jīng)成為當(dāng)前網(wǎng)絡(luò)測(cè)量的研究與發(fā)展趨勢(shì)。分布式業(yè)務(wù)性能采集與海量數(shù)據(jù)分析系統(tǒng)利用Hadoop平臺(tái)的MapReduce計(jì)算模型,解決了海量數(shù)據(jù)的快速計(jì)算的問題,并運(yùn)用性能評(píng)估算法,從海量測(cè)量數(shù)據(jù)中分析出網(wǎng)絡(luò)的整體性能情況。在Hadoop框架的任務(wù)分配和失效容錯(cuò)原理的基礎(chǔ)上,為系統(tǒng)添加了任務(wù)分配和節(jié)點(diǎn)失效容錯(cuò)機(jī)... 

【文章來源】：北京郵電大學(xué)北京市 211工程院校 教育部直屬院校

【文章頁數(shù)】：75 頁

【學(xué)位級(jí)別】：碩士

【文章目錄】：
摘要
ABSTRACT
第一節(jié) 緒論
    1.1 選題背景及意義
    1.2 主要研究工作及貢獻(xiàn)
    1.3 論文組織結(jié)構(gòu)
第二章 相關(guān)技術(shù)背景介紹
    2.1 云計(jì)算簡介
        2.1.1 什么是云計(jì)算
        2.1.2 Hadoop云計(jì)算框架
    2.2 網(wǎng)絡(luò)測(cè)量相關(guān)研究現(xiàn)狀
    2.3 網(wǎng)絡(luò)性能指標(biāo)簡介
        2.3.1 基礎(chǔ)網(wǎng)絡(luò)性能指標(biāo)簡介
        2.3.2 網(wǎng)絡(luò)所承載業(yè)務(wù)性能指標(biāo)簡介
    2.4 網(wǎng)絡(luò)性能評(píng)價(jià)方法簡介
第三章 分布式業(yè)務(wù)性能采集與海量數(shù)據(jù)分析系統(tǒng)需求分析
    3.1 需求分析
    3.2 設(shè)計(jì)原則
    3.3 系統(tǒng)功能劃分
        3.3.1 數(shù)據(jù)分析
        3.3.2 任務(wù)分配
        3.3.3 失效容錯(cuò)
    3.4 性能要求
    3.5 本章小結(jié)
第四章 分布式業(yè)務(wù)性能采集與海量數(shù)據(jù)分析系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)
    4.1 系統(tǒng)總體架構(gòu)
    4.2 系統(tǒng)服務(wù)層次
    4.3 海量測(cè)量數(shù)據(jù)統(tǒng)計(jì)分析功能的設(shè)計(jì)與實(shí)現(xiàn)
        4.3.1 性能評(píng)價(jià)方法
        4.3.2 海量測(cè)量數(shù)據(jù)統(tǒng)計(jì)分析功能的設(shè)計(jì)
        4.3.3 海量測(cè)量數(shù)據(jù)統(tǒng)計(jì)分析模塊的實(shí)現(xiàn)
    4.4 任務(wù)分配機(jī)制的設(shè)計(jì)與實(shí)現(xiàn)
        4.4.1 數(shù)據(jù)分析器管理機(jī)制的設(shè)計(jì)與實(shí)現(xiàn)
        4.4.2 數(shù)據(jù)分析器選擇機(jī)制的設(shè)計(jì)與實(shí)現(xiàn)
    4.5 節(jié)點(diǎn)失效容錯(cuò)機(jī)制的設(shè)計(jì)與實(shí)現(xiàn)
        4.5.1 數(shù)據(jù)分析器節(jié)點(diǎn)失效容錯(cuò)機(jī)制的設(shè)計(jì)與實(shí)現(xiàn)
        4.5.2 負(fù)載均衡器失效容錯(cuò)機(jī)制的設(shè)計(jì)與實(shí)現(xiàn)
        4.5.3 集中管理平臺(tái)失效容錯(cuò)機(jī)制的設(shè)計(jì)與實(shí)現(xiàn)
    4.6 本章小結(jié)
第五章 測(cè)試與分析
    5.1 測(cè)試環(huán)境
        5.1.1 系統(tǒng)開發(fā)工具
        5.1.2 系統(tǒng)硬件配置
        5.1.3 實(shí)驗(yàn)環(huán)境
    5.2 海量測(cè)量數(shù)據(jù)統(tǒng)計(jì)分析功能的測(cè)試與分析
        5.2.1 功能測(cè)試
        5.2.2 性能測(cè)試
    5.3 任務(wù)分配機(jī)制測(cè)試與分析
        5.3.1 數(shù)據(jù)分析器管理機(jī)制測(cè)試
        5.3.2 數(shù)據(jù)分析器選擇機(jī)制測(cè)試
    5.4 節(jié)點(diǎn)失效容錯(cuò)機(jī)制的測(cè)試與分析
    5.5 本章小結(jié)
第六章 總結(jié)和展望
    6.1 本文總結(jié)
    6.2 未來工作展望
    6.3 研究生期間工作
        6.3.1 發(fā)表論文
        6.3.2 參與項(xiàng)目
        6.3.3 主要負(fù)責(zé)的工作
        6.3.4 提交文檔
參考文獻(xiàn)
致謝
攻讀學(xué)位期間發(fā)表的學(xué)術(shù)論文目錄


【參考文獻(xiàn)】：
期刊論文
[1]基于Eucalyptus構(gòu)建私有云計(jì)算平臺(tái)[J]. 張帆,李磊,楊成胡,陳麗珍.  電信科學(xué). 2011(11)
[2]基于Hadoop架構(gòu)的分布式計(jì)算和存儲(chǔ)技術(shù)及其應(yīng)用[J]. 田秀霞,周耀君,畢忠勤,彭源.  上海電力學(xué)院學(xué)報(bào). 2011(01)
[3]IPTV測(cè)試儀媒體流傳送指標(biāo)（MDI）監(jiān)測(cè)子系統(tǒng)的FPGA實(shí)現(xiàn)[J]. 任波,雒江濤,滕歡.  內(nèi)江師范學(xué)院學(xué)報(bào). 2011(02)
[4]云計(jì)算的核心技術(shù)——粒度計(jì)算[J]. 楊秋杰.  信息安全與技術(shù). 2010(08)
[5]云計(jì)算開源先鋒Hadoop——第四屆Hadoop中國云計(jì)算大會(huì)紀(jì)實(shí)[J]. 董世曉.  程序員. 2010(10)
[6]基于Hadoop的網(wǎng)絡(luò)日志分析系統(tǒng)研究[J]. 胡光民,周亮,柯立新.  電腦知識(shí)與技術(shù). 2010(22)
[7]單向時(shí)延測(cè)量中的時(shí)間同步問題[J]. 聶玉婷,高仲合.  通信技術(shù). 2009(10)
[8]云計(jì)算及其關(guān)鍵技術(shù)[J]. 陳全,鄧倩妮.  計(jì)算機(jī)應(yīng)用. 2009(09)
[9]基于測(cè)量的網(wǎng)絡(luò)性能評(píng)價(jià)方法研究[J]. 張冬艷,胡銘曾,張宏莉.  通信學(xué)報(bào). 2006(10)
[10]基于Web Service的大規(guī)模網(wǎng)絡(luò)測(cè)量平臺(tái)的研究與實(shí)現(xiàn)[J]. 孫小寧,康建初.  計(jì)算機(jī)工程與應(yīng)用. 2003(12)

碩士論文
[1]基于Hadoop的海量影像數(shù)據(jù)管理關(guān)鍵技術(shù)研究[D]. 霍樹民.國防科學(xué)技術(shù)大學(xué) 2010



本文編號(hào)：3474336