云存儲技術(shù)在網(wǎng)絡(luò)安全設(shè)備聯(lián)動系統(tǒng)中的研究與應(yīng)用
本文關(guān)鍵詞:云存儲技術(shù)在網(wǎng)絡(luò)安全設(shè)備聯(lián)動系統(tǒng)中的研究與應(yīng)用,,由筆耕文化傳播整理發(fā)布。
【摘要】:隨著數(shù)據(jù)存儲的高速增長,傳統(tǒng)的數(shù)據(jù)庫已經(jīng)無法滿足人們處理大規(guī)模數(shù)據(jù)的需求,有關(guān)海量數(shù)據(jù)的處理與存儲成為當(dāng)前的研究熱點。Hadoop文件系統(tǒng)HDFS成為研究云存儲應(yīng)用的參考模型。但現(xiàn)有的HDFS架構(gòu)對小文件的存儲支持不足,而且默認的副本放置策略會影響存儲性能。本文深入研究了HDFS的副本放置策略以及小文件存儲問題。本文從課題的研究背景和意義出發(fā),分析了云存儲系統(tǒng)及聯(lián)動系統(tǒng)的研究現(xiàn)狀,明確了云存儲對于網(wǎng)絡(luò)安全設(shè)備聯(lián)動系統(tǒng)日志文件存儲的必要性和現(xiàn)實意義。主要解決了以下兩個問題:第一,改進了HDFS中的默認副本放置策略,采用基于信息熵的TOPSIS多屬性決策方法,為數(shù)據(jù)塊的副本選擇數(shù)據(jù)節(jié)點,利用具體實例對改進方案進行了驗證,實驗表明改進方案提高了系統(tǒng)的整體性能;第二,優(yōu)化了小文件存儲方案,對整個優(yōu)化方案進行了設(shè)計,包括數(shù)據(jù)預(yù)存儲節(jié)點的設(shè)計,小文件合并算法的設(shè)計,小文件索引結(jié)構(gòu)的設(shè)計,小文件合并過程的設(shè)計,并通過實驗進行了驗證,實驗表明在存儲海量小文件時,小文件的存儲優(yōu)化方案提高了整個系統(tǒng)的存儲性能。本文將改進的方案應(yīng)用到網(wǎng)絡(luò)安全設(shè)備聯(lián)動系統(tǒng)中,設(shè)計并實現(xiàn)了基于網(wǎng)絡(luò)安全設(shè)備聯(lián)動日志的云存儲系統(tǒng)。對系統(tǒng)的總體構(gòu)架及設(shè)計思路進行了概述。闡述了各功能模塊的設(shè)計理念及主要功能實現(xiàn)并對系統(tǒng)運行結(jié)果進行了分析評價。
【關(guān)鍵詞】:聯(lián)動 云存儲 HDFS 小文件 副本放置
【學(xué)位授予單位】:華北電力大學(xué)
【學(xué)位級別】:碩士
【學(xué)位授予年份】:2015
【分類號】:TP333;TP393.08
【目錄】:
- 摘要5-6
- Abstract6-9
- 第1章 緒論9-13
- 1.1 課題研究背景及意義9-10
- 1.2 國內(nèi)外研究現(xiàn)狀10-11
- 1.2.1 聯(lián)動系統(tǒng)的國內(nèi)外研究現(xiàn)狀10
- 1.2.2 云存儲技術(shù)的國內(nèi)外研究現(xiàn)狀10-11
- 1.3 課題研究的主要內(nèi)容11-12
- 1.4 本文的組織結(jié)構(gòu)12-13
- 第2章 網(wǎng)絡(luò)安全設(shè)備聯(lián)動系統(tǒng)及云存儲技術(shù)分析13-21
- 2.1 網(wǎng)絡(luò)安全設(shè)備聯(lián)動系統(tǒng)簡介13-14
- 2.2 云存儲概述14-15
- 2.2.1 云存儲的概念14
- 2.2.2 云存儲的結(jié)構(gòu)模型14-15
- 2.3 HDFS的基本概念15-19
- 2.3.1 數(shù)據(jù)塊和HDFS節(jié)點15-17
- 2.3.2 數(shù)據(jù)流17-19
- 2.4 Hadoop在處理小文件中存在的問題19-20
- 2.5 副本技術(shù)20
- 2.6 本章小結(jié)20-21
- 第3章 云存儲中數(shù)據(jù)塊副本放置策略的改進21-32
- 3.1 HDFS默認副本放置策略21-23
- 3.2 利用多屬性決策方法對默認副本放置策略進行改進23-27
- 3.3 實驗驗證與結(jié)果分析27-31
- 3.3.1 評價指標(biāo)的確定27-28
- 3.3.2 實驗驗證28-30
- 3.3.3 實驗結(jié)果分析30-31
- 3.4 本章小結(jié)31-32
- 第4章 云存儲中小文件存儲優(yōu)化方案研究32-39
- 4.1 整體方案優(yōu)化設(shè)計32-34
- 4.2 小文件存儲優(yōu)化方案34-37
- 4.2.1 數(shù)據(jù)預(yù)存儲節(jié)點功能設(shè)計34
- 4.2.2 小文件合并算法設(shè)計34-36
- 4.2.3 小文件索引結(jié)構(gòu)的設(shè)計36-37
- 4.2.4 小文件合并過程的整體設(shè)計37
- 4.3 優(yōu)化方案效果評價37-38
- 4.4 本章小結(jié)38-39
- 第5章 云存儲技術(shù)在網(wǎng)絡(luò)安全設(shè)備聯(lián)動系統(tǒng)中的應(yīng)用39-46
- 5.1 系統(tǒng)總體結(jié)構(gòu)39-40
- 5.2 系統(tǒng)詳細設(shè)計40-41
- 5.2.1 數(shù)據(jù)庫設(shè)計40-41
- 5.2.2 功能模塊設(shè)計41
- 5.3 系統(tǒng)運行環(huán)境41-43
- 5.3.1 系統(tǒng)硬件環(huán)境41
- 5.3.2 系統(tǒng)軟件環(huán)境41-43
- 5.4 系統(tǒng)主要功能實現(xiàn)43-45
- 5.5 本章小結(jié)45-46
- 第6章 結(jié)論與展望46-48
- 6.1 結(jié)論46
- 6.2 展望46-48
- 參考文獻48-51
- 攻讀碩士學(xué)位期間發(fā)表的學(xué)術(shù)論文及其它成果51-52
- 致謝52
【相似文獻】
中國期刊全文數(shù)據(jù)庫 前10條
1 杜皎;李國輝;馮登國;;用錯誤圍堵策略建立可生存的網(wǎng)絡(luò)安全設(shè)備內(nèi)核[J];國防科技大學(xué)學(xué)報;2005年06期
2 ;網(wǎng)絡(luò)安全設(shè)備市場回顧與展望[J];電子商務(wù);2008年04期
3 楊志延;;安全走向簡單[J];軟件世界;2007年10期
4 張勇;;基于異構(gòu)網(wǎng)絡(luò)安全設(shè)備的管理平臺構(gòu)建[J];信息安全與技術(shù);2012年11期
5 田文英;王麗華;;關(guān)于網(wǎng)絡(luò)安全設(shè)備聯(lián)動的研究[J];大家;2012年18期
6 杜皎,馮登國,李國輝;打造高效穩(wěn)固的網(wǎng)絡(luò)安全設(shè)備內(nèi)核[J];計算機工程與應(yīng)用;2004年34期
7 劉鵬;馬琳;廉新科;;網(wǎng)絡(luò)安全設(shè)備的統(tǒng)一管理方法研究[J];信息安全與通信保密;2010年07期
8 杜皎,馮登國;打造高效穩(wěn)固的網(wǎng)絡(luò)安全設(shè)備內(nèi)核[J];信息網(wǎng)絡(luò)安全;2005年04期
9 葉茴;;“萬能”的防火墻——論防火墻的優(yōu)點和不足[J];科技信息;2009年01期
10 許浩;許衛(wèi)中;高東懷;靳豪杰;張軍超;;異構(gòu)網(wǎng)絡(luò)安全設(shè)備統(tǒng)一管理平臺研究與構(gòu)建[J];科學(xué)技術(shù)與工程;2012年01期
中國重要會議論文全文數(shù)據(jù)庫 前1條
1 杜皎;馮登國;李國輝;;打造高效穩(wěn)固的網(wǎng)絡(luò)安全設(shè)備內(nèi)核[A];第十九次全國計算機安全學(xué)術(shù)交流會論文集[C];2004年
中國重要報紙全文數(shù)據(jù)庫 前10條
1 陳榮富邋陳宏;網(wǎng)絡(luò)安全設(shè)備在福建遭冷遇[N];中國稅務(wù)報;2007年
2 陳宏;“立竿”不能“見影”,網(wǎng)絡(luò)安全設(shè)備在福建遇冷[N];海峽財經(jīng)導(dǎo)報;2007年
3 賽迪顧問通信產(chǎn)業(yè)研究中心咨詢師 張澤斌;多層次自動防御引爆角逐[N];通信產(chǎn)業(yè)報;2008年
4 《網(wǎng)絡(luò)世界》記者 岑義濤;依托大數(shù)據(jù) 云監(jiān)測讓企業(yè)更安全[N];網(wǎng)絡(luò)世界;2013年
5 許曉耕;三季度銷售額同比增長25.1%[N];中國經(jīng)濟導(dǎo)報;2007年
6 伍艷;借采購東風(fēng) 練企業(yè)內(nèi)功[N];中國財經(jīng)報;2004年
7 電腦商報記者 劉一冰;2010年的增長點在哪里?[N];電腦商報;2009年
8 電腦商報記者 張戈;WatchGuard CEO來華推薦XTM[N];電腦商報;2008年
9 本報記者 劉兵;網(wǎng)絡(luò)安全設(shè)備采購的三大誤區(qū)[N];計算機世界;2002年
10 陳長松;防火墻必須使用安全的身份認證[N];中國計算機報;2003年
中國碩士學(xué)位論文全文數(shù)據(jù)庫 前10條
1 王金華;云存儲技術(shù)在網(wǎng)絡(luò)安全設(shè)備聯(lián)動系統(tǒng)中的研究與應(yīng)用[D];華北電力大學(xué);2015年
2 郭云龍;基于狀態(tài)遷移的網(wǎng)絡(luò)安全設(shè)備聯(lián)動策略研究[D];華北電力大學(xué);2015年
3 馮理達;數(shù)據(jù)融合技術(shù)在網(wǎng)絡(luò)安全設(shè)備聯(lián)動系統(tǒng)中的應(yīng)用[D];華北電力大學(xué);2015年
4 李紅宇;基于內(nèi)容檢查的網(wǎng)絡(luò)安全設(shè)備模擬測試軟件的設(shè)計與實現(xiàn)[D];國防科學(xué)技術(shù)大學(xué);2008年
5 劉惠;網(wǎng)絡(luò)安全設(shè)備聯(lián)動系統(tǒng)日志預(yù)處理的研究與設(shè)計[D];華北電力大學(xué);2014年
6 馮志偉;網(wǎng)絡(luò)安全設(shè)備聯(lián)動策略的研究與應(yīng)用[D];華北電力大學(xué);2014年
7 郭慶;基于P4080構(gòu)建網(wǎng)絡(luò)安全設(shè)備平臺[D];電子科技大學(xué);2013年
8 王新華;大規(guī)模網(wǎng)絡(luò)安全設(shè)備的動態(tài)集中策略管理[D];中國科學(xué)院研究生院(計算技術(shù)研究所);2005年
9 曹利蒲;網(wǎng)絡(luò)安全設(shè)備聯(lián)動系統(tǒng)中事件關(guān)聯(lián)模型的研究與應(yīng)用[D];華北電力大學(xué);2014年
10 李桐;IPsec VPN和SSL VPN的研究與實現(xiàn)[D];山東大學(xué);2005年
本文關(guān)鍵詞:云存儲技術(shù)在網(wǎng)絡(luò)安全設(shè)備聯(lián)動系統(tǒng)中的研究與應(yīng)用,由筆耕文化傳播整理發(fā)布。
本文編號:328995
本文鏈接:http://sikaile.net/kejilunwen/jisuanjikexuelunwen/328995.html