云存儲(chǔ)系統(tǒng)中副本管理機(jī)制的研究
本文關(guān)鍵詞:云存儲(chǔ)系統(tǒng)中副本管理機(jī)制的研究,,由筆耕文化傳播整理發(fā)布。
【摘要】:網(wǎng)絡(luò)信息急劇增長(zhǎng)的環(huán)境中,云存儲(chǔ)系統(tǒng)的副本管理機(jī)制應(yīng)滿足系統(tǒng)的高可靠性、良好的負(fù)載均衡性、高副本利用率、低網(wǎng)絡(luò)擁塞概率等需求。 本文提出了兩個(gè)關(guān)于副本管理方法的策略—基于節(jié)點(diǎn)分組與分布式哈希表技術(shù)的副本部署策略和基于數(shù)據(jù)分類與流行度預(yù)測(cè)的副本復(fù)制策略,并且對(duì)應(yīng)地進(jìn)行了基于副本部署機(jī)制和副本復(fù)制機(jī)制的副本管理模塊的設(shè)計(jì)。本文主要工作如下: 1.基于節(jié)點(diǎn)分組與分布式哈希表技術(shù)的副本部署策略。該策略將云存儲(chǔ)系統(tǒng)中的節(jié)點(diǎn)以災(zāi)難域?yàn)閱挝贿M(jìn)行劃分,并對(duì)節(jié)點(diǎn)和副本以分布式哈希表技術(shù)進(jìn)行映射;為了防止計(jì)算機(jī)節(jié)點(diǎn)過熱,僅考慮熱度較低的節(jié)點(diǎn)進(jìn)行副本存儲(chǔ)。本策略輕量級(jí)自適應(yīng)的復(fù)制方法相比具有更好的系統(tǒng)可靠性,與基于服務(wù)質(zhì)量感知的核心選擇副本部署策略和基于多層虛擬節(jié)點(diǎn)環(huán)結(jié)構(gòu)的副本部署策略相比,具有更好的系統(tǒng)負(fù)載均衡性。 2.基于數(shù)據(jù)分類與流行度預(yù)測(cè)的副本復(fù)制策略。在該策略中,為了減少信息訪問高峰期的網(wǎng)絡(luò)擁塞問題,同時(shí)較好地控制副本全局?jǐn)?shù)量,歸納了用戶的數(shù)據(jù)訪問規(guī)律,并檢測(cè)在同訪問規(guī)律下可以提前創(chuàng)建和部署的數(shù)據(jù)副本。此副本復(fù)制策略主要包含判斷當(dāng)前數(shù)據(jù)類型、計(jì)算期望副本數(shù)及熱點(diǎn)副本處理三項(xiàng)內(nèi)容。與單純流行度復(fù)制策略相比較,該副本復(fù)制策略能以更少的副本數(shù)滿足用戶的信息需求,并且使得在訪問高峰期,高溫節(jié)點(diǎn)數(shù)量較少。 3.副本管理機(jī)制的模塊設(shè)計(jì)。本文副本管理機(jī)制包含五個(gè)模塊:為節(jié)點(diǎn)和數(shù)據(jù)進(jìn)行標(biāo)識(shí)的資源邏輯組織模塊;創(chuàng)建原始數(shù)據(jù)兩份子副本的初始副本復(fù)制模塊;提前創(chuàng)建副本的副本預(yù)測(cè)復(fù)制模塊;將副本存儲(chǔ)于目標(biāo)節(jié)點(diǎn)的副本部署模塊;節(jié)點(diǎn)自行檢查負(fù)載的熱點(diǎn)檢測(cè)模塊。
【關(guān)鍵詞】:云存儲(chǔ) 副本部署 副本復(fù)制 分布式哈希表
【學(xué)位授予單位】:南京郵電大學(xué)
【學(xué)位級(jí)別】:碩士
【學(xué)位授予年份】:2014
【分類號(hào)】:TP333
【目錄】:
- 摘要4-5
- Abstract5-8
- 第一章 緒論8-14
- 1.1 研究背景8-11
- 1.2 研究意義11-12
- 1.2.1 云存儲(chǔ)面臨的副本管理問題11-12
- 1.2.2 云存儲(chǔ)中的副本部署與副本復(fù)制12
- 1.3 本文主要工作與論文組織結(jié)構(gòu)12-13
- 1.3.1 本文主要工作12-13
- 1.3.2 論文組織結(jié)構(gòu)13
- 1.4 本章小結(jié)13-14
- 第二章 云存儲(chǔ)及副本管理機(jī)制的相關(guān)研究14-22
- 2.1 云存儲(chǔ)14-17
- 2.1.1 云存儲(chǔ)體系架構(gòu)14-15
- 2.1.2 云存儲(chǔ)關(guān)鍵技術(shù)15-17
- 2.2 副本管理機(jī)制17-18
- 2.3 資源定位技術(shù)18-19
- 2.4 相關(guān)工作19-21
- 2.5 本章小結(jié)21-22
- 第三章 云存儲(chǔ)系統(tǒng)中的副本部署22-36
- 3.1 問題分析22-24
- 3.1.1 副本部署與系統(tǒng)性能22
- 3.1.2 副本部署策略22-24
- 3.2 基本思想24-25
- 3.3 基于分組與 DHT 技術(shù)的副本部署策略25-31
- 3.3.1 節(jié)點(diǎn)分組25-26
- 3.3.2 DHT 技術(shù)的應(yīng)用26-27
- 3.3.3 副本組織27-29
- 3.3.4 熱度計(jì)算29-30
- 3.3.5 副本部署30-31
- 3.4 實(shí)驗(yàn)驗(yàn)證與性能分析31-35
- 3.4.1 實(shí)驗(yàn)平臺(tái) OMNet++31
- 3.4.2 實(shí)驗(yàn)設(shè)置31-32
- 3.4.3 實(shí)驗(yàn)結(jié)果與性能分析32-35
- 3.5 本章小結(jié)35-36
- 第四章 云存儲(chǔ)系統(tǒng)中的副本復(fù)制36-46
- 4.1 問題分析36
- 4.2 基本思路36-37
- 4.3 基于數(shù)據(jù)分類與流行度預(yù)測(cè)的副本復(fù)制策略37-42
- 4.3.1 預(yù)測(cè)模型分析37-39
- 4.3.2 預(yù)測(cè)副本數(shù)39-41
- 4.3.3 副本添加/刪除41
- 4.3.4 預(yù)測(cè)型決策的補(bǔ)充——熱點(diǎn)型決策41-42
- 4.4 實(shí)驗(yàn)驗(yàn)證與性能分析42-45
- 4.4.1 實(shí)驗(yàn)設(shè)置42-43
- 4.4.2 實(shí)驗(yàn)結(jié)果與性能分析43-45
- 4.5 本章小結(jié)45-46
- 第五章 云存儲(chǔ)系統(tǒng)中副本管理模塊的設(shè)計(jì)46-58
- 5.1 模塊設(shè)計(jì)思路46-52
- 5.1.1 模塊設(shè)計(jì)框架46
- 5.1.2 模塊設(shè)計(jì)的相關(guān)數(shù)據(jù)結(jié)構(gòu)46-50
- 5.1.3 模塊設(shè)計(jì)相關(guān)流程50-52
- 5.2 模塊設(shè)計(jì)與功能實(shí)現(xiàn)52-57
- 5.2.1 資源邏輯組織模塊52-53
- 5.2.2 初始副本復(fù)制模塊53-54
- 5.2.3 副本預(yù)測(cè)復(fù)制模塊54-56
- 5.2.4 副本部署模塊與熱點(diǎn)檢測(cè)模塊56-57
- 5.3 本章小結(jié)57-58
- 第六章 總結(jié)與展望58-59
- 6.1 總結(jié)58
- 6.2 展望58-59
- 參考文獻(xiàn)59-62
- 致謝62-63
- 附錄 攻讀碩士學(xué)位期間撰寫的論文63
【相似文獻(xiàn)】
中國期刊全文數(shù)據(jù)庫 前10條
1 于翔;日立數(shù)據(jù)推出Lightning 9900 V系列存儲(chǔ)系統(tǒng)[J];微電腦世界;2002年11期
2 周可,張江陵,馮丹;基于數(shù)據(jù)塊的對(duì)等存儲(chǔ)系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[J];計(jì)算機(jī)工程與科學(xué);2003年03期
3 毛宇星;存儲(chǔ)系統(tǒng)未來發(fā)展的新趨勢(shì)[J];中國金融電腦;2004年03期
4 王洛;制造業(yè)存儲(chǔ)系統(tǒng)應(yīng)用選型[J];電子商務(wù)世界;2004年04期
5 李瑋;日立力推新存儲(chǔ)系統(tǒng)[J];微電腦世界;2004年11期
6 ;存儲(chǔ)系統(tǒng) 電信行業(yè)服務(wù)滿意獎(jiǎng)[J];每周電腦報(bào);2004年20期
7 ;存儲(chǔ)系統(tǒng) 金融行業(yè)服務(wù)滿意獎(jiǎng) 電信行業(yè)應(yīng)用卓越獎(jiǎng)[J];每周電腦報(bào);2004年20期
8 ;存儲(chǔ)系統(tǒng) 制造行業(yè)產(chǎn)品創(chuàng)新獎(jiǎng)[J];每周電腦報(bào);2004年20期
9 ;存儲(chǔ)系統(tǒng) 電信行業(yè)技術(shù)領(lǐng)先獎(jiǎng)[J];每周電腦報(bào);2004年20期
10 ;快速恢復(fù)免重安裝——山東師范大學(xué)完成圖書館存儲(chǔ)系統(tǒng)建設(shè)[J];每周電腦報(bào);2004年28期
中國重要會(huì)議論文全文數(shù)據(jù)庫 前10條
1 趙志剛;;存儲(chǔ)系統(tǒng)在企業(yè)信息化中的應(yīng)用[A];2005年安徽通信論文集[C];2006年
2 黃曉峰;張杰;;礦井信息中心存儲(chǔ)系統(tǒng)設(shè)計(jì)[A];安全高效礦井機(jī)電裝備及信息化技術(shù)——陜西省煤炭學(xué)會(huì)學(xué)術(shù)年會(huì)論文集(2011)[C];2011年
3 孫哲;李昌銀;;構(gòu)建核電高可用云存儲(chǔ)系統(tǒng)[A];2012電力行業(yè)信息化年會(huì)優(yōu)秀論文專輯[C];2012年
4 焦超;周天彤;李祥學(xué);李建華;;面向?yàn)?zāi)備的高性能可信存儲(chǔ)系統(tǒng)設(shè)計(jì)[A];第十一屆保密通信與信息安全現(xiàn)狀研討會(huì)論文集[C];2009年
5 汪位龍;;設(shè)計(jì)院存儲(chǔ)系統(tǒng)建設(shè)初探[A];中國公路學(xué)會(huì)計(jì)算機(jī)應(yīng)用分會(huì)2004年年會(huì)學(xué)術(shù)論文集[C];2004年
6 梅松竹;李宗伯;;Storage 7000系列混合存儲(chǔ)系統(tǒng)分析[A];2009年中國高校通信類院系學(xué)術(shù)研討會(huì)論文集[C];2009年
7 王克敏;張璽;胡江凱;王毅濤;;NWP資料歸檔方法及其存儲(chǔ)系統(tǒng)的應(yīng)用[A];中國氣象學(xué)會(huì)2006年年會(huì)“中尺度天氣動(dòng)力學(xué)、數(shù)值模擬和預(yù)測(cè)”分會(huì)場(chǎng)論文集[C];2006年
8 孫哲;李昌銀;;DeDu:基于云計(jì)算的冗余刪除存儲(chǔ)系統(tǒng)[A];電力行業(yè)新一代信息技術(shù)研討會(huì)論文集[C];2011年
9 高小伍;黨齊民;林晨;;校園網(wǎng)存儲(chǔ)系統(tǒng)的研究與實(shí)現(xiàn)[A];中國高等教育學(xué)會(huì)教育信息化分會(huì)第十次學(xué)術(shù)年會(huì)論文集[C];2010年
10 宮海林;郭長(zhǎng)國;苑洪亮;王懷民;;支持事務(wù)的非結(jié)構(gòu)化數(shù)據(jù)聚合存儲(chǔ)系統(tǒng)GSL[A];2006年全國開放式分布與并行計(jì)算機(jī)學(xué)術(shù)會(huì)議論文集(三)[C];2006年
中國重要報(bào)紙全文數(shù)據(jù)庫 前10條
1 記者 孫永杰;存儲(chǔ):中低端應(yīng)用漸成熱點(diǎn)[N];中國電子報(bào);2005年
2 ;HP再度出擊 EMC腹背受敵[N];計(jì)算機(jī)世界;2000年
3 ;湖北移動(dòng)建設(shè)智能存儲(chǔ)系統(tǒng)[N];人民郵電;2002年
4 本報(bào)記者 郭平;同有飛驥自主研發(fā)統(tǒng)一存儲(chǔ)系統(tǒng)[N];計(jì)算機(jī)世界;2010年
5 ;浪潮存儲(chǔ)為北航網(wǎng)絡(luò)中心升級(jí)[N];人民郵電;2007年
6 ;解決方案面向誰?[N];中國高新技術(shù)產(chǎn)業(yè)導(dǎo)報(bào);2001年
7 張峰 劉平;決戰(zhàn)存儲(chǔ)之巔[N];網(wǎng)絡(luò)世界;2003年
8 ;賽 迪 觀 市[N];中國計(jì)算機(jī)報(bào);2003年
9 雪梅;統(tǒng)一存儲(chǔ)發(fā)展新趨勢(shì)[N];人民郵電;2012年
10 宋家雨;山東建筑大學(xué)圖書館存儲(chǔ)系統(tǒng)建設(shè)[N];網(wǎng)絡(luò)世界;2007年
中國博士學(xué)位論文全文數(shù)據(jù)庫 前10條
1 陸承濤;存儲(chǔ)系統(tǒng)性能管理問題的研究[D];華中科技大學(xué);2010年
2 聶雪軍;內(nèi)容感知存儲(chǔ)系統(tǒng)中信息信息生命周期管理關(guān)鍵技術(shù)研究[D];華中科技大學(xué);2011年
3 羅東健;大規(guī)模存儲(chǔ)系統(tǒng)高可靠性關(guān)鍵技術(shù)研究[D];華中科技大學(xué);2011年
4 聶雪軍;內(nèi)容感知存儲(chǔ)系統(tǒng)中信息生命周期管理關(guān)鍵技術(shù)研究[D];華中科技大學(xué);2010年
5 王鵬;低密度奇偶校驗(yàn)碼應(yīng)用于存儲(chǔ)系統(tǒng)的關(guān)鍵技術(shù)研究[D];華中科技大學(xué);2013年
6 刁瑩;用數(shù)學(xué)建模方法評(píng)價(jià)存儲(chǔ)系統(tǒng)性能[D];哈爾濱工程大學(xué);2013年
7 符青云;面向大規(guī)模流媒體服務(wù)的高性能存儲(chǔ)系統(tǒng)研究[D];電子科技大學(xué);2009年
8 王玉林;多節(jié)點(diǎn)容錯(cuò)存儲(chǔ)系統(tǒng)的數(shù)據(jù)與緩存組織研究[D];電子科技大學(xué);2010年
9 田敬;對(duì)等存儲(chǔ)系統(tǒng)中的數(shù)據(jù)可用性與安全性研究[D];北京大學(xué);2007年
10 李懷陽;進(jìn)化存儲(chǔ)系統(tǒng)數(shù)據(jù)組織模式研究[D];華中科技大學(xué);2006年
中國碩士學(xué)位論文全文數(shù)據(jù)庫 前10條
1 許偉民;非編網(wǎng)存儲(chǔ)系統(tǒng)規(guī)劃與分析[D];廈門大學(xué);2008年
2 王宇德;進(jìn)化存儲(chǔ)系統(tǒng)的研究及其關(guān)鍵技術(shù)分析[D];華中科技大學(xué);2004年
3 雷小強(qiáng);基于閃存的混合式存儲(chǔ)系統(tǒng)研究[D];華中科技大學(xué);2011年
4 吳永發(fā);面向終端應(yīng)用的云存儲(chǔ)系統(tǒng)研究與設(shè)計(jì)[D];廣東工業(yè)大學(xué);2013年
5 胡偉明;云存儲(chǔ)系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[D];中國地質(zhì)大學(xué)(北京);2013年
6 吉永光;樹型結(jié)構(gòu)存儲(chǔ)系統(tǒng)設(shè)計(jì)與層間緩存技術(shù)[D];華中科技大學(xué);2007年
7 戴澤福;高性能層次并行流存儲(chǔ)系統(tǒng)研究與實(shí)現(xiàn)[D];國防科學(xué)技術(shù)大學(xué);2007年
8 王強(qiáng);社交網(wǎng)站的群集存儲(chǔ)系統(tǒng)的研究與設(shè)計(jì)[D];上海交通大學(xué);2009年
9 馬墨峰;基于存儲(chǔ)局域網(wǎng)的存儲(chǔ)系統(tǒng)的實(shí)現(xiàn)[D];西北工業(yè)大學(xué);2001年
10 伍開文;低能耗存儲(chǔ)系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[D];華中科技大學(xué);2012年
本文關(guān)鍵詞:云存儲(chǔ)系統(tǒng)中副本管理機(jī)制的研究,由筆耕文化傳播整理發(fā)布。
本文編號(hào):400944
本文鏈接:http://sikaile.net/kejilunwen/jisuanjikexuelunwen/400944.html