基于MapReduce云環(huán)境中惡意節(jié)點檢測技術(shù)的研究
發(fā)布時間:2022-02-24 00:39
互聯(lián)網(wǎng)信息技術(shù)的快速發(fā)展,出現(xiàn)了以社交化網(wǎng)絡(luò)和電子商務(wù)為代表的應(yīng)用,它們擁有龐大的用戶群體,對大數(shù)據(jù)量的處理需求日益增加,云計算技術(shù)應(yīng)運而生。云計算主要使用MapReduce分布式并行處理模型,能夠高效地并行處理超大規(guī)模數(shù)據(jù)集,當前主流的云服務(wù)提供商都采用MapReduce的開源實現(xiàn)Hadoop來搭建云計算平臺。MapReduce計算模型是分布式并行處理架構(gòu),注重大數(shù)據(jù)量的處理性能,而其服務(wù)完整性保證機制相對薄弱。在云計算環(huán)境中,某個惡意節(jié)點產(chǎn)生的惡意結(jié)果會導(dǎo)致整個計算任務(wù)失敗,嚴重浪費計算和存儲資源,并對云計算客戶造成損害,所以如何高效、準確地檢測出云環(huán)境中的惡意節(jié)點,對確保云計算服務(wù)完整性非常重要。本文研究了云環(huán)境中的惡意節(jié)點檢測技術(shù),提出一種高效的惡意節(jié)點檢測方案。主要工作如下:首先分析了云計算環(huán)境的特點,研究現(xiàn)有的基于MapReduce云環(huán)境中服務(wù)完整性保證方案,對其優(yōu)點和不足進行總結(jié)分析,詳細介紹本方案中使用的相關(guān)技術(shù)。在此基礎(chǔ)上,本論文提出一種高效的惡意節(jié)點檢測方案。該方案基于對工作節(jié)點集群分域管理的思想,對不同安全域采用適合的任務(wù)調(diào)度策略,合理、高效地使用計算資源;引入可...
【文章來源】:北京郵電大學北京市211工程院校教育部直屬院校
【文章頁數(shù)】:51 頁
【學位級別】:碩士
【文章目錄】:
摘要
ABSTRACT
第一章 緒論
1.1 研究背景
1.1.1 選題背景
1.1.2 研究意義
1.2 研究現(xiàn)狀
1.3 研究內(nèi)容
1.4 論文組織結(jié)構(gòu)
第二章 相關(guān)技術(shù)和工作
2.1 MapReduce相關(guān)概念
2.1.1 MapReduce概述
2.1.2 MapReduce計算模型
2.2 Apache Hadoop框架
2.2.1 HDFS分布式文件系統(tǒng)
2.2.2 Hadoop中MapReduce運行機制
2.2.3 Hadoop Streaming編程
2.3 緩存技術(shù)介紹
2.3.1 常見緩存算法
2.3.2 Memcached緩存框架
2.4 本章小結(jié)
第三章 云環(huán)境中惡意節(jié)點檢測方案
3.1 計算集群中工作節(jié)點分域管理
3.1.1 環(huán)境中計算節(jié)點分類
3.1.2 Hadoop的心跳機制
3.1.3 計算集群中安全域劃分
3.2 普通域中惡意節(jié)點檢測方案
3.2.1 整體架構(gòu)方案
3.2.2 惡意節(jié)點檢測流程
3.2.3 系統(tǒng)分析
3.3 可信域中惡意節(jié)點檢測方案
3.3.1 整體架構(gòu)方案
3.3.2 惡意節(jié)點檢測流程
3.3.3 系統(tǒng)分析
3.4 隔離域中可疑節(jié)點的處理
3.5 本章小結(jié)
第四章 系統(tǒng)理論分析
4.1 任務(wù)限時執(zhí)行分析
4.2 任務(wù)調(diào)度策略分析
4.3 本章小結(jié)
第五章 結(jié)束語
5.1 本文工作總結(jié)
5.2 展望
參考文獻
致謝
攻讀碩士學位期間發(fā)表的論文
【參考文獻】:
期刊論文
[1]安全等級劃分方法研究綜述[J]. 周煥盛. 科技傳播. 2011(02)
[2]云計算安全研究[J]. 馮登國,張敏,張妍,徐震. 軟件學報. 2011(01)
[3]Hadoop平臺的性能優(yōu)化研究[J]. 欒亞建,黃翀民,龔高晟,趙鐵柱. 計算機工程. 2010(14)
[4]Google云計算平臺的技術(shù)架構(gòu)及對其成本的影響研究[J]. 孫健,賈曉菁. 電信科學. 2010(01)
[5]云計算及其關(guān)鍵技術(shù)[J]. 陳全,鄧倩妮. 計算機應(yīng)用. 2009(09)
[6]基于Hadoop集群的分布式日志分析系統(tǒng)研究[J]. 王潤華. 科技信息. 2009(15)
[7]MapReduce模型的調(diào)度及容錯機制研究[J]. 孫廣中,肖鋒,熊曦. 微電子學與計算機. 2007(09)
碩士論文
[1]改進型MapReduce框架的研究與設(shè)計[D]. 常濤.北京郵電大學 2011
本文編號:3641617
【文章來源】:北京郵電大學北京市211工程院校教育部直屬院校
【文章頁數(shù)】:51 頁
【學位級別】:碩士
【文章目錄】:
摘要
ABSTRACT
第一章 緒論
1.1 研究背景
1.1.1 選題背景
1.1.2 研究意義
1.2 研究現(xiàn)狀
1.3 研究內(nèi)容
1.4 論文組織結(jié)構(gòu)
第二章 相關(guān)技術(shù)和工作
2.1 MapReduce相關(guān)概念
2.1.1 MapReduce概述
2.1.2 MapReduce計算模型
2.2 Apache Hadoop框架
2.2.1 HDFS分布式文件系統(tǒng)
2.2.2 Hadoop中MapReduce運行機制
2.2.3 Hadoop Streaming編程
2.3 緩存技術(shù)介紹
2.3.1 常見緩存算法
2.3.2 Memcached緩存框架
2.4 本章小結(jié)
第三章 云環(huán)境中惡意節(jié)點檢測方案
3.1 計算集群中工作節(jié)點分域管理
3.1.1 環(huán)境中計算節(jié)點分類
3.1.2 Hadoop的心跳機制
3.1.3 計算集群中安全域劃分
3.2 普通域中惡意節(jié)點檢測方案
3.2.1 整體架構(gòu)方案
3.2.2 惡意節(jié)點檢測流程
3.2.3 系統(tǒng)分析
3.3 可信域中惡意節(jié)點檢測方案
3.3.1 整體架構(gòu)方案
3.3.2 惡意節(jié)點檢測流程
3.3.3 系統(tǒng)分析
3.4 隔離域中可疑節(jié)點的處理
3.5 本章小結(jié)
第四章 系統(tǒng)理論分析
4.1 任務(wù)限時執(zhí)行分析
4.2 任務(wù)調(diào)度策略分析
4.3 本章小結(jié)
第五章 結(jié)束語
5.1 本文工作總結(jié)
5.2 展望
參考文獻
致謝
攻讀碩士學位期間發(fā)表的論文
【參考文獻】:
期刊論文
[1]安全等級劃分方法研究綜述[J]. 周煥盛. 科技傳播. 2011(02)
[2]云計算安全研究[J]. 馮登國,張敏,張妍,徐震. 軟件學報. 2011(01)
[3]Hadoop平臺的性能優(yōu)化研究[J]. 欒亞建,黃翀民,龔高晟,趙鐵柱. 計算機工程. 2010(14)
[4]Google云計算平臺的技術(shù)架構(gòu)及對其成本的影響研究[J]. 孫健,賈曉菁. 電信科學. 2010(01)
[5]云計算及其關(guān)鍵技術(shù)[J]. 陳全,鄧倩妮. 計算機應(yīng)用. 2009(09)
[6]基于Hadoop集群的分布式日志分析系統(tǒng)研究[J]. 王潤華. 科技信息. 2009(15)
[7]MapReduce模型的調(diào)度及容錯機制研究[J]. 孫廣中,肖鋒,熊曦. 微電子學與計算機. 2007(09)
碩士論文
[1]改進型MapReduce框架的研究與設(shè)計[D]. 常濤.北京郵電大學 2011
本文編號:3641617
本文鏈接:http://sikaile.net/guanlilunwen/ydhl/3641617.html
最近更新
教材專著