面向大數(shù)據(jù)的分布式存儲系統(tǒng)元數(shù)據(jù)管理技術(shù)研究
發(fā)布時間:2023-04-22 04:47
近年來,隨著信息技術(shù)的迅猛發(fā)展,數(shù)據(jù)呈現(xiàn)指數(shù)式的爆發(fā)增長,分布式存儲系統(tǒng)應(yīng)運得到飛速發(fā)展,隨之而來的存儲系統(tǒng)中的性能和安全問題也受到學術(shù)界和產(chǎn)業(yè)界的廣泛關(guān)注。Hadoop Distributed File Syetem(HDFS)采用主從架構(gòu),作為Google File System(GFS)的一種開源實現(xiàn),成為目前最受歡迎的一種分布式存儲框架。然而,在當前的HDFS框架中,單一的NameNode節(jié)點已經(jīng)無法滿足日益增長的數(shù)據(jù)需求,雖然HDFS對其進行了相應(yīng)的改進,但未能考慮元數(shù)據(jù)服務(wù)器作為NameNode節(jié)點負載均衡的問題。并且,當前的HDFS架構(gòu)無法應(yīng)對當前日益嚴重的數(shù)據(jù)泄露等安全問題。而擬態(tài)防御作為一種新的防御手段,可以有效地改變當前的網(wǎng)絡(luò)安全格局,已經(jīng)廣泛的應(yīng)用于各個方面,并得到了實際驗證,因此,在當前的HDFS架構(gòu)應(yīng)用擬態(tài)防御的思想進行擬態(tài)化的改造具有十分重要的學術(shù)研究意義和實際應(yīng)用價值。本文依托國家863計劃課題“網(wǎng)絡(luò)空間主動防御體系戰(zhàn)略研究(續(xù))”和上海市信息化發(fā)展專項資金項目,圍繞面向大數(shù)據(jù)的分布式存儲系統(tǒng)元數(shù)據(jù)管理技術(shù)研究,針對當前的HDFS架構(gòu)存在的性能、安全等問題...
【文章頁數(shù)】:76 頁
【學位級別】:碩士
【文章目錄】:
摘要
Abstract
第一章 緒論
1.1 課題研究背景與意義
1.1.1 課題研究背景
1.1.2 HDFS簡介
1.1.3 擬態(tài)防御簡介
1.1.4 研究意義
1.2 研究現(xiàn)狀與問題提出
1.2.1 研究現(xiàn)狀
1.2.2 問題提出
1.3 研究內(nèi)容與貢獻
1.4 章節(jié)安排
第二章 基于強化學習的元數(shù)據(jù)動態(tài)負載均衡算法
2.1 引言
2.2 設(shè)計目標
2.3 基于Nginx代理的HDFS結(jié)構(gòu)設(shè)計
2.3.1 HDFS基本架構(gòu)
2.3.2 引入Nginx代理的HDFS架構(gòu)
2.4 相關(guān)概念和模型建立
2.4.1 相關(guān)定義
2.4.2 強化學習模型
2.4.3 元數(shù)據(jù)動態(tài)負載均衡機制模型
2.4.4 獎勵與目標函數(shù)
2.4.5 算法復雜度分析
2.5 性能測試與分析
2.5.1 元數(shù)據(jù)服務(wù)器資源利用率分析
2.5.2 動態(tài)負載均衡分析
2.5.3 元數(shù)據(jù)服務(wù)器延遲時間超調(diào)量與調(diào)節(jié)時間分析
2.5.4 元數(shù)據(jù)分布分析
2.5.5 實驗結(jié)論分析
2.6 小結(jié)
第三章 基于擬態(tài)的HDFS架構(gòu)改進及調(diào)度優(yōu)化
3.1 引言
3.2 基于擬態(tài)防御的HDFS架構(gòu)
3.3 問題建模
3.3.1 概念和符號描述
3.3.2 模型分析
3.4 基于執(zhí)行體異構(gòu)度、性能和歷史置信度的隨機種子調(diào)度算法
3.4.1 基于執(zhí)行體異構(gòu)度、性能和歷史置信度的隨機種子調(diào)度算法
3.5 實驗結(jié)果及分析
3.5.1 實驗環(huán)境
3.5.2 性能分析
3.6 小結(jié)
第四章 一種基于執(zhí)行體異構(gòu)度的擬態(tài)裁決優(yōu)化方法
4.1 引言
4.2 問題描述與模型建立
4.2.1 問題描述
4.2.2 模型建立
4.3 算法描述
4.3.1 算法設(shè)計
4.3.2 算法的具體實現(xiàn)
4.4 實驗結(jié)果及評估
4.4.1 算法仿真
4.4.2 實驗結(jié)果分析
4.5 小結(jié)
第五章 結(jié)束語
5.1 研究工作總結(jié)
5.2 后續(xù)工作展望
致謝
參考文獻
作者簡歷
本文編號:3796945
【文章頁數(shù)】:76 頁
【學位級別】:碩士
【文章目錄】:
摘要
Abstract
第一章 緒論
1.1 課題研究背景與意義
1.1.1 課題研究背景
1.1.2 HDFS簡介
1.1.3 擬態(tài)防御簡介
1.1.4 研究意義
1.2 研究現(xiàn)狀與問題提出
1.2.1 研究現(xiàn)狀
1.2.2 問題提出
1.3 研究內(nèi)容與貢獻
1.4 章節(jié)安排
第二章 基于強化學習的元數(shù)據(jù)動態(tài)負載均衡算法
2.1 引言
2.2 設(shè)計目標
2.3 基于Nginx代理的HDFS結(jié)構(gòu)設(shè)計
2.3.1 HDFS基本架構(gòu)
2.3.2 引入Nginx代理的HDFS架構(gòu)
2.4 相關(guān)概念和模型建立
2.4.1 相關(guān)定義
2.4.2 強化學習模型
2.4.3 元數(shù)據(jù)動態(tài)負載均衡機制模型
2.4.4 獎勵與目標函數(shù)
2.4.5 算法復雜度分析
2.5 性能測試與分析
2.5.1 元數(shù)據(jù)服務(wù)器資源利用率分析
2.5.2 動態(tài)負載均衡分析
2.5.3 元數(shù)據(jù)服務(wù)器延遲時間超調(diào)量與調(diào)節(jié)時間分析
2.5.4 元數(shù)據(jù)分布分析
2.5.5 實驗結(jié)論分析
2.6 小結(jié)
第三章 基于擬態(tài)的HDFS架構(gòu)改進及調(diào)度優(yōu)化
3.1 引言
3.2 基于擬態(tài)防御的HDFS架構(gòu)
3.3 問題建模
3.3.1 概念和符號描述
3.3.2 模型分析
3.4 基于執(zhí)行體異構(gòu)度、性能和歷史置信度的隨機種子調(diào)度算法
3.4.1 基于執(zhí)行體異構(gòu)度、性能和歷史置信度的隨機種子調(diào)度算法
3.5 實驗結(jié)果及分析
3.5.1 實驗環(huán)境
3.5.2 性能分析
3.6 小結(jié)
第四章 一種基于執(zhí)行體異構(gòu)度的擬態(tài)裁決優(yōu)化方法
4.1 引言
4.2 問題描述與模型建立
4.2.1 問題描述
4.2.2 模型建立
4.3 算法描述
4.3.1 算法設(shè)計
4.3.2 算法的具體實現(xiàn)
4.4 實驗結(jié)果及評估
4.4.1 算法仿真
4.4.2 實驗結(jié)果分析
4.5 小結(jié)
第五章 結(jié)束語
5.1 研究工作總結(jié)
5.2 后續(xù)工作展望
致謝
參考文獻
作者簡歷
本文編號:3796945
本文鏈接:http://sikaile.net/kejilunwen/ruanjiangongchenglunwen/3796945.html
最近更新
教材專著