基于云計算的海量數(shù)據(jù)虛擬存儲的研究與設(shè)計
發(fā)布時間:2021-08-25 04:20
過去十年中,數(shù)據(jù)管理領(lǐng)域出現(xiàn)了新的挑戰(zhàn)—數(shù)據(jù)量爆炸性增長。問題來源于一個事實,即訪問時間和硬盤驅(qū)動器的傳輸速率沒有跟上步伐,所以限制了改善的進(jìn)程。當(dāng)今,虛擬存儲系統(tǒng)的概念和工具已經(jīng)非常成熟,它們?yōu)榭茖W(xué)的數(shù)據(jù)管理帶來了曙光;同時,云計算極大地吸引了科學(xué)界人士,他們越來越將云計算視為解決大量新數(shù)據(jù)的有效辦法,因為云計算不僅使得大規(guī)模的設(shè)施設(shè)計和硬件建設(shè)成為可能,而且允許部分用戶組管理、處理和從各種資源中分析大量的有用數(shù)據(jù)。如何將虛擬存儲與云計算相結(jié)合來解決海量數(shù)據(jù)存儲問題,現(xiàn)在已經(jīng)成為了很多云計算和虛擬存儲研究者共同研究的目標(biāo)。因為虛擬存儲可以為系統(tǒng)帶來更高的可靠性和數(shù)據(jù)一致性,而云計算能夠給系統(tǒng)帶來高性能,將它們相結(jié)合構(gòu)成基于云計算的虛擬存儲系統(tǒng)勢必成為今后海量數(shù)據(jù)存儲的首要選擇方式。本文基于這個觀點提出了一種優(yōu)化的副本放置策略—最小值算法。該算法旨在充分考慮系統(tǒng)負(fù)載平衡的前提下,對每個節(jié)點的性能/負(fù)載比作出科學(xué)計算,從而使得數(shù)據(jù)的主、次副本能夠放置在最佳的位置,同時針對系統(tǒng)中可能出現(xiàn)的諸如計算錯誤、節(jié)點內(nèi)存不足等各種實際問題都提出了解決方案。
【文章來源】:電子科技大學(xué)四川省 211工程院校 985工程院校 教育部直屬院校
【文章頁數(shù)】:67 頁
【學(xué)位級別】:碩士
【文章目錄】:
摘要
Abstract
第一章 緒論
1.1 研究背景
1.1.1 云計算的發(fā)展現(xiàn)狀
1.1.2 目前先進(jìn)的云計算系統(tǒng)
1.1.3 虛擬存儲技術(shù)
1.2 課題研究目的與意義
1.2.1 數(shù)據(jù)管理的需求
1.2.2 當(dāng)前云計算面臨的幾大問題
1.3 課題研究內(nèi)容與論文結(jié)構(gòu)
1.3.1 課題研究內(nèi)容
1.3.2 論文結(jié)構(gòu)
第二章 相關(guān)理論研究
2.1 容災(zāi)系統(tǒng)
2.1.1 容災(zāi)系統(tǒng)的概念
2.1.2 容災(zāi)系統(tǒng)的關(guān)鍵技術(shù)
2.1.3 典型分布式容災(zāi)系統(tǒng)
2.2 副本備份
2.2.1 副本管理
2.2.2 負(fù)載均衡
2.2.3 數(shù)據(jù)塊掃描器
2.2.4 節(jié)點退役
2.2.5 集群內(nèi)的數(shù)據(jù)復(fù)制
2.3 本章小結(jié)
第三章 基于云計算的海量數(shù)據(jù)虛擬存儲的設(shè)計與實現(xiàn)
3.1 三層容災(zāi)系統(tǒng)
3.2 一種改進(jìn)的副本放置策略
3.3 針對小文件的優(yōu)化系統(tǒng)
3.3.1 需求分析
3.3.2 優(yōu)化系統(tǒng)的意義
3.3.3 方法核心思想
3.4 本章小結(jié)
第四章 基于云計算的海量數(shù)據(jù)虛擬存儲的測試
4.1 方案部署
4.2 運行結(jié)果以及分析
4.2.1 數(shù)據(jù)集
4.2.2 寫操作
4.2.3 讀操作
4.2.4 原型系統(tǒng)驗證
4.2.5 相關(guān)工作
4.2.6 結(jié)論
4.3 本章小結(jié)
第五章 總結(jié)與展望
致謝
參考文獻(xiàn)
【參考文獻(xiàn)】:
期刊論文
[1]遠(yuǎn)程容災(zāi)系統(tǒng)設(shè)計框架[J]. 于新華,劉川意. 計算機(jī)工程與應(yīng)用. 2006(24)
[2]容災(zāi)的理論與關(guān)鍵技術(shù)分析[J]. 王樹鵬,云曉春,余翔湛,胡銘曾. 計算機(jī)工程與應(yīng)用. 2004(28)
[3]容災(zāi)技術(shù)概覽[J]. 侯海波,楊軍. 網(wǎng)絡(luò)安全技術(shù)與應(yīng)用. 2004(09)
本文編號:3361384
【文章來源】:電子科技大學(xué)四川省 211工程院校 985工程院校 教育部直屬院校
【文章頁數(shù)】:67 頁
【學(xué)位級別】:碩士
【文章目錄】:
摘要
Abstract
第一章 緒論
1.1 研究背景
1.1.1 云計算的發(fā)展現(xiàn)狀
1.1.2 目前先進(jìn)的云計算系統(tǒng)
1.1.3 虛擬存儲技術(shù)
1.2 課題研究目的與意義
1.2.1 數(shù)據(jù)管理的需求
1.2.2 當(dāng)前云計算面臨的幾大問題
1.3 課題研究內(nèi)容與論文結(jié)構(gòu)
1.3.1 課題研究內(nèi)容
1.3.2 論文結(jié)構(gòu)
第二章 相關(guān)理論研究
2.1 容災(zāi)系統(tǒng)
2.1.1 容災(zāi)系統(tǒng)的概念
2.1.2 容災(zāi)系統(tǒng)的關(guān)鍵技術(shù)
2.1.3 典型分布式容災(zāi)系統(tǒng)
2.2 副本備份
2.2.1 副本管理
2.2.2 負(fù)載均衡
2.2.3 數(shù)據(jù)塊掃描器
2.2.4 節(jié)點退役
2.2.5 集群內(nèi)的數(shù)據(jù)復(fù)制
2.3 本章小結(jié)
第三章 基于云計算的海量數(shù)據(jù)虛擬存儲的設(shè)計與實現(xiàn)
3.1 三層容災(zāi)系統(tǒng)
3.2 一種改進(jìn)的副本放置策略
3.3 針對小文件的優(yōu)化系統(tǒng)
3.3.1 需求分析
3.3.2 優(yōu)化系統(tǒng)的意義
3.3.3 方法核心思想
3.4 本章小結(jié)
第四章 基于云計算的海量數(shù)據(jù)虛擬存儲的測試
4.1 方案部署
4.2 運行結(jié)果以及分析
4.2.1 數(shù)據(jù)集
4.2.2 寫操作
4.2.3 讀操作
4.2.4 原型系統(tǒng)驗證
4.2.5 相關(guān)工作
4.2.6 結(jié)論
4.3 本章小結(jié)
第五章 總結(jié)與展望
致謝
參考文獻(xiàn)
【參考文獻(xiàn)】:
期刊論文
[1]遠(yuǎn)程容災(zāi)系統(tǒng)設(shè)計框架[J]. 于新華,劉川意. 計算機(jī)工程與應(yīng)用. 2006(24)
[2]容災(zāi)的理論與關(guān)鍵技術(shù)分析[J]. 王樹鵬,云曉春,余翔湛,胡銘曾. 計算機(jī)工程與應(yīng)用. 2004(28)
[3]容災(zāi)技術(shù)概覽[J]. 侯海波,楊軍. 網(wǎng)絡(luò)安全技術(shù)與應(yīng)用. 2004(09)
本文編號:3361384
本文鏈接:http://sikaile.net/kejilunwen/jisuanjikexuelunwen/3361384.html
最近更新
教材專著