基于時(shí)空的多源數(shù)據(jù)趨勢(shì)預(yù)測(cè)研究
發(fā)布時(shí)間:2020-02-07 10:58
【摘要】:隨著互聯(lián)網(wǎng)的高速發(fā)展與廣泛應(yīng)用,人們的生活與工作越來(lái)越便利。但是人們?cè)诶没ヂ?lián)網(wǎng)進(jìn)行生活與娛樂(lè)的同時(shí)網(wǎng)絡(luò)上會(huì)有大量的網(wǎng)絡(luò)流量數(shù)據(jù)產(chǎn)生。這些數(shù)據(jù)大部分是沒(méi)有危害的,只是用于信息的交互,但肯定還是會(huì)有一些威脅隱藏在網(wǎng)絡(luò)流量中,這些威脅可能會(huì)對(duì)網(wǎng)絡(luò)或網(wǎng)絡(luò)上的主機(jī)等造成不同程度的危害等。正是因?yàn)檫@些威脅的存在,現(xiàn)在越來(lái)越多的研究機(jī)構(gòu)或企業(yè)開(kāi)始關(guān)注網(wǎng)絡(luò)中的數(shù)據(jù),他們一直努力想在這些數(shù)據(jù)的基礎(chǔ)上取得成果:有些研究者從流量數(shù)據(jù)中分析潛在的威脅,提出了各種檢測(cè)算法;有些研究者分析了流量數(shù)據(jù)的特點(diǎn),并利用這些數(shù)據(jù)研究網(wǎng)絡(luò)安全,比如通過(guò)分析數(shù)據(jù)的特點(diǎn)研究網(wǎng)絡(luò)安全的技術(shù)手段如防火墻等;還有一些想利用這些數(shù)據(jù)來(lái)預(yù)測(cè)趨勢(shì)變化,從而提前部署安全防范措施或者改善已有的安全技術(shù)。然而,想要研究這些數(shù)據(jù),必須要能夠采集到數(shù)據(jù)。這樣一來(lái),如何快速穩(wěn)健的采集、保存與分析這些數(shù)據(jù)就成了一個(gè)難題。本文首先對(duì)網(wǎng)絡(luò)環(huán)境下的多源數(shù)據(jù),尤其是對(duì)不同類(lèi)別流量數(shù)據(jù)的特點(diǎn)進(jìn)行了驗(yàn)證分析,然后在此基礎(chǔ)上提出了一種綜合的預(yù)測(cè)算法用于趨勢(shì)預(yù)測(cè),最后提出了一個(gè)多源數(shù)據(jù)采集分析框架用于采集分析數(shù)據(jù)?傊,本文的研究包括以下幾個(gè)方面:1.分析了多源數(shù)據(jù)預(yù)測(cè)算法、采集方法的研究現(xiàn)狀:研究了基于時(shí)間序列的預(yù)測(cè)算法現(xiàn)狀;以網(wǎng)絡(luò)流量的采集方法為例,研究了多源數(shù)據(jù)采集方法的現(xiàn)狀;2.研究網(wǎng)絡(luò)環(huán)境下多源數(shù)據(jù)的特點(diǎn):以有線(xiàn)網(wǎng)絡(luò)流量數(shù)據(jù)與無(wú)線(xiàn)網(wǎng)絡(luò)流量數(shù)據(jù)為例,研究其長(zhǎng)度、周期、自相似特征等特點(diǎn)及其分析方法,并對(duì)多源數(shù)據(jù)的特點(diǎn)研究做出總結(jié);3.研究了多源數(shù)據(jù)趨勢(shì)預(yù)測(cè)模型:研究了FARIMA模型,在此基礎(chǔ)上提出一種新的基于小波變換與時(shí)間序列相結(jié)合的算法用于多源數(shù)據(jù)預(yù)測(cè),并用真實(shí)的網(wǎng)絡(luò)流量數(shù)據(jù)進(jìn)行了實(shí)驗(yàn),經(jīng)實(shí)驗(yàn)分析表明該預(yù)測(cè)算法可以有效的減少大量計(jì)算,并能提高預(yù)測(cè)準(zhǔn)確率。4.在研究了多源數(shù)據(jù)特點(diǎn)與數(shù)據(jù)預(yù)測(cè)模型的基礎(chǔ)上,提出了一種針對(duì)多源數(shù)據(jù)采集分析框架,該框架有效的結(jié)合了Nagios網(wǎng)絡(luò)監(jiān)控工具以及多源數(shù)據(jù)趨勢(shì)預(yù)測(cè)模型,使用“主動(dòng)+被動(dòng)”多層分布式模型采集、存儲(chǔ)、分析多種來(lái)源的數(shù)據(jù)。該系統(tǒng)最基本的目的是用于網(wǎng)絡(luò)監(jiān)控,通過(guò)大量的測(cè)試表明該系統(tǒng)增加了對(duì)數(shù)據(jù)的分析之后,不僅能夠完成大量的采集監(jiān)控任務(wù),還可以更好的維護(hù)網(wǎng)絡(luò)安全。
【圖文】:
圖 5-2 多源數(shù)據(jù)采集分析系統(tǒng)網(wǎng)絡(luò)架構(gòu)5.2 系統(tǒng)整體設(shè)計(jì)系統(tǒng)包括采集子系統(tǒng)模塊(各種客戶(hù)端與代理)、采集監(jiān)聽(tīng)服務(wù)器與采集服務(wù)器模塊、采集監(jiān)控管理中心模塊、數(shù)據(jù)與備份中心模塊等四個(gè)主要的模塊,如圖5-3 所示。采集監(jiān)控管理中心模塊主要是用于監(jiān)控各個(gè)采集服務(wù)器中心與采集客戶(hù)端的異常,并接收下層傳輸來(lái)的數(shù)據(jù),進(jìn)行匯總,,提供圖形化的界面方便管理員查看。另外,采集監(jiān)控管理中心主要是以 Nagios 的框架為基礎(chǔ)的,因此這里還保留了Nagios 的一些功能,包括資源監(jiān)控等。同時(shí)采集監(jiān)控管理中心提供了數(shù)據(jù)分析的能力,如第三章、第四章所描述的數(shù)據(jù)特征分析、數(shù)據(jù)趨勢(shì)預(yù)測(cè)都在監(jiān)控管理中心完成,并且分析的結(jié)果將會(huì)為采集服務(wù)器制定一些合理的策略。采集監(jiān)聽(tīng)服務(wù)器模塊:負(fù)責(zé)監(jiān)聽(tīng)采集客戶(hù)端與采集代理的連接請(qǐng)求,并判斷采集的數(shù)據(jù)類(lèi)型、采集的客戶(hù)端類(lèi)型,從線(xiàn)程池中取出線(xiàn)程處理數(shù)據(jù)的解析、分
圖 5-2 多源數(shù)據(jù)采集分析系統(tǒng)網(wǎng)絡(luò)架構(gòu)5.2 系統(tǒng)整體設(shè)計(jì)系統(tǒng)包括采集子系統(tǒng)模塊(各種客戶(hù)端與代理)、采集監(jiān)聽(tīng)服務(wù)器與采集服務(wù)器模塊、采集監(jiān)控管理中心模塊、數(shù)據(jù)與備份中心模塊等四個(gè)主要的模塊,如圖5-3 所示。采集監(jiān)控管理中心模塊主要是用于監(jiān)控各個(gè)采集服務(wù)器中心與采集客戶(hù)端的異常,并接收下層傳輸來(lái)的數(shù)據(jù),進(jìn)行匯總,提供圖形化的界面方便管理員查看。另外,采集監(jiān)控管理中心主要是以 Nagios 的框架為基礎(chǔ)的,因此這里還保留了Nagios 的一些功能,包括資源監(jiān)控等。同時(shí)采集監(jiān)控管理中心提供了數(shù)據(jù)分析的能力,如第三章、第四章所描述的數(shù)據(jù)特征分析、數(shù)據(jù)趨勢(shì)預(yù)測(cè)都在監(jiān)控管理中心完成,并且分析的結(jié)果將會(huì)為采集服務(wù)器制定一些合理的策略。采集監(jiān)聽(tīng)服務(wù)器模塊:負(fù)責(zé)監(jiān)聽(tīng)采集客戶(hù)端與采集代理的連接請(qǐng)求,并判斷采集的數(shù)據(jù)類(lèi)型、采集的客戶(hù)端類(lèi)型,從線(xiàn)程池中取出線(xiàn)程處理數(shù)據(jù)的解析、分
【學(xué)位授予單位】:電子科技大學(xué)
【學(xué)位級(jí)別】:碩士
【學(xué)位授予年份】:2014
【分類(lèi)號(hào)】:TP393.08
本文編號(hào):2577156
【圖文】:
圖 5-2 多源數(shù)據(jù)采集分析系統(tǒng)網(wǎng)絡(luò)架構(gòu)5.2 系統(tǒng)整體設(shè)計(jì)系統(tǒng)包括采集子系統(tǒng)模塊(各種客戶(hù)端與代理)、采集監(jiān)聽(tīng)服務(wù)器與采集服務(wù)器模塊、采集監(jiān)控管理中心模塊、數(shù)據(jù)與備份中心模塊等四個(gè)主要的模塊,如圖5-3 所示。采集監(jiān)控管理中心模塊主要是用于監(jiān)控各個(gè)采集服務(wù)器中心與采集客戶(hù)端的異常,并接收下層傳輸來(lái)的數(shù)據(jù),進(jìn)行匯總,,提供圖形化的界面方便管理員查看。另外,采集監(jiān)控管理中心主要是以 Nagios 的框架為基礎(chǔ)的,因此這里還保留了Nagios 的一些功能,包括資源監(jiān)控等。同時(shí)采集監(jiān)控管理中心提供了數(shù)據(jù)分析的能力,如第三章、第四章所描述的數(shù)據(jù)特征分析、數(shù)據(jù)趨勢(shì)預(yù)測(cè)都在監(jiān)控管理中心完成,并且分析的結(jié)果將會(huì)為采集服務(wù)器制定一些合理的策略。采集監(jiān)聽(tīng)服務(wù)器模塊:負(fù)責(zé)監(jiān)聽(tīng)采集客戶(hù)端與采集代理的連接請(qǐng)求,并判斷采集的數(shù)據(jù)類(lèi)型、采集的客戶(hù)端類(lèi)型,從線(xiàn)程池中取出線(xiàn)程處理數(shù)據(jù)的解析、分
圖 5-2 多源數(shù)據(jù)采集分析系統(tǒng)網(wǎng)絡(luò)架構(gòu)5.2 系統(tǒng)整體設(shè)計(jì)系統(tǒng)包括采集子系統(tǒng)模塊(各種客戶(hù)端與代理)、采集監(jiān)聽(tīng)服務(wù)器與采集服務(wù)器模塊、采集監(jiān)控管理中心模塊、數(shù)據(jù)與備份中心模塊等四個(gè)主要的模塊,如圖5-3 所示。采集監(jiān)控管理中心模塊主要是用于監(jiān)控各個(gè)采集服務(wù)器中心與采集客戶(hù)端的異常,并接收下層傳輸來(lái)的數(shù)據(jù),進(jìn)行匯總,提供圖形化的界面方便管理員查看。另外,采集監(jiān)控管理中心主要是以 Nagios 的框架為基礎(chǔ)的,因此這里還保留了Nagios 的一些功能,包括資源監(jiān)控等。同時(shí)采集監(jiān)控管理中心提供了數(shù)據(jù)分析的能力,如第三章、第四章所描述的數(shù)據(jù)特征分析、數(shù)據(jù)趨勢(shì)預(yù)測(cè)都在監(jiān)控管理中心完成,并且分析的結(jié)果將會(huì)為采集服務(wù)器制定一些合理的策略。采集監(jiān)聽(tīng)服務(wù)器模塊:負(fù)責(zé)監(jiān)聽(tīng)采集客戶(hù)端與采集代理的連接請(qǐng)求,并判斷采集的數(shù)據(jù)類(lèi)型、采集的客戶(hù)端類(lèi)型,從線(xiàn)程池中取出線(xiàn)程處理數(shù)據(jù)的解析、分
【學(xué)位授予單位】:電子科技大學(xué)
【學(xué)位級(jí)別】:碩士
【學(xué)位授予年份】:2014
【分類(lèi)號(hào)】:TP393.08
【參考文獻(xiàn)】
相關(guān)期刊論文 前2條
1 陳鏗;韓伯棠;;混沌時(shí)間序列分析中的相空間重構(gòu)技術(shù)綜述[J];計(jì)算機(jī)科學(xué);2005年04期
2 張弦;王宏力;張金生;孫淵;;狀態(tài)時(shí)間序列預(yù)測(cè)的貝葉斯最小二乘支持向量機(jī)方法[J];西安交通大學(xué)學(xué)報(bào);2010年10期
相關(guān)碩士學(xué)位論文 前1條
1 王昶;改進(jìn)遺傳神經(jīng)網(wǎng)絡(luò)在時(shí)間序列預(yù)測(cè)中的研究與應(yīng)用[D];四川師范大學(xué);2010年
本文編號(hào):2577156
本文鏈接:http://sikaile.net/guanlilunwen/ydhl/2577156.html
最近更新
教材專(zhuān)著