云存儲系統(tǒng)高效數(shù)據(jù)傳輸機(jī)制的研究
發(fā)布時間:2021-05-10 09:04
為了適應(yīng)數(shù)據(jù)迅速增長的趨勢和用戶隨處存取的需求,越來越多的企業(yè)開始部署云存儲系統(tǒng)。網(wǎng)絡(luò)服務(wù)存儲系統(tǒng)將網(wǎng)絡(luò)中大量存在的開放存儲服務(wù)聚合起來,提供了較為可觀的空間和帶寬總量,并具有強(qiáng)服務(wù)能力、高透明性、高可擴(kuò)展性等特點。但是在網(wǎng)絡(luò)服務(wù)存儲系統(tǒng)中,有限的邊緣存儲服務(wù)運(yùn)營商與龐大的用戶存儲數(shù)據(jù)量之間相互牽制。當(dāng)某種存儲服務(wù)同一時刻接受大量任務(wù)請求時,極有可能導(dǎo)致用戶數(shù)據(jù)丟失,從而降低了系統(tǒng)可用性。高效數(shù)據(jù)傳輸機(jī)制有效解決了上述問題。該機(jī)制根據(jù)網(wǎng)絡(luò)服務(wù)存儲系統(tǒng)中文件特點,改進(jìn)了Kademlia算法,在用戶節(jié)點組建底層的peer-to-peer(P2P)網(wǎng)絡(luò)結(jié)構(gòu),實現(xiàn)了用戶節(jié)點之間數(shù)據(jù)共享。通過分析了系統(tǒng)用戶在線時間和行為特征,提出并實現(xiàn)了超級節(jié)點選擇算法。同時根據(jù)系統(tǒng)中文件備份數(shù)和數(shù)據(jù)下載成功率,結(jié)合超級節(jié)點信息,實現(xiàn)了基于協(xié)同傳輸節(jié)點群的高效備份策略。高效數(shù)據(jù)傳輸機(jī)制設(shè)計了一套完善的數(shù)據(jù)傳輸算法,針對用戶不同的操作如上傳,下載和協(xié)同傳輸而實現(xiàn)了不同的透明傳輸策略。最后該機(jī)制為系統(tǒng)引進(jìn)了緩存服務(wù)器,它保存了一份完整的冗余文件,并承擔(dān)系統(tǒng)復(fù)制策略的主要數(shù)據(jù)分發(fā)工作。系統(tǒng)測試日志表明,高效數(shù)據(jù)傳輸機(jī)...
【文章來源】:華中科技大學(xué)湖北省 211工程院校 985工程院校 教育部直屬院校
【文章頁數(shù)】:63 頁
【學(xué)位級別】:碩士
【文章目錄】:
摘要
Abstract
1 緒論
1.1 問題提出
1.2 國內(nèi)外研究現(xiàn)狀
1.3 課題背景與研究內(nèi)容
1.4 文章框架結(jié)構(gòu)
2 高效數(shù)據(jù)傳輸機(jī)制的設(shè)計
2.1 設(shè)計思想
2.2 體系結(jié)構(gòu)
2.3 模塊結(jié)構(gòu)
2.4 處理流程
2.5 小結(jié)
3 用戶節(jié)點動態(tài)管理
3.1 超級節(jié)點選擇策略
3.2 協(xié)同備份節(jié)點選擇策略
3.3 用戶節(jié)點信息統(tǒng)計與收集
3.4 用戶節(jié)點組織與管理實現(xiàn)
3.5 小結(jié)
4 數(shù)據(jù)傳輸控制管理
4.1 數(shù)據(jù)流傳輸策略
4.2 數(shù)據(jù)傳輸實現(xiàn)方式
4.3 數(shù)據(jù)傳輸任務(wù)調(diào)度
4.4 本章小結(jié)
5 系統(tǒng)測試與分析
5.1 測試環(huán)境
5.2 功能測試
5.3 性能測試與結(jié)果分析
5.4 本章小結(jié)
6 總結(jié)與展望
致謝
參考文獻(xiàn)
【參考文獻(xiàn)】:
期刊論文
[1]分布式任務(wù)調(diào)度與副本復(fù)制集成策略研究[J]. 易侃,王汝傳. 通信學(xué)報. 2010(09)
[2]云計算與云數(shù)據(jù)存儲技術(shù)研究[J]. 拓守恒. 電腦開發(fā)與應(yīng)用. 2010(09)
[3]面向本地分布式存儲系統(tǒng)的動態(tài)副本策略[J]. 伍文靜,程耀東,汪璐,武杰,陳剛. 計算機(jī)工程與應(yīng)用. 2010(12)
[4]P2P網(wǎng)絡(luò)的節(jié)點狀態(tài)研究[J]. 魯薇,周竹榮,邱玉輝. 計算機(jī)應(yīng)用. 2009(08)
[5]云存儲系統(tǒng)的分析與應(yīng)用研究[J]. 唐箭. 電腦知識與技術(shù). 2009(20)
[6]P2P系統(tǒng)中基于信譽(yù)感知的超級節(jié)點選擇算法研究[J]. 劉玉枚,楊壽保,陳萬明,郭磊濤,韋冬. 中國科學(xué)院研究生院學(xué)報. 2008(02)
[7]一種高效的基于可復(fù)制資源的分布式負(fù)載均衡策略[J]. 王征,劉心松,李美安. 電子學(xué)報. 2006(08)
本文編號:3179094
【文章來源】:華中科技大學(xué)湖北省 211工程院校 985工程院校 教育部直屬院校
【文章頁數(shù)】:63 頁
【學(xué)位級別】:碩士
【文章目錄】:
摘要
Abstract
1 緒論
1.1 問題提出
1.2 國內(nèi)外研究現(xiàn)狀
1.3 課題背景與研究內(nèi)容
1.4 文章框架結(jié)構(gòu)
2 高效數(shù)據(jù)傳輸機(jī)制的設(shè)計
2.1 設(shè)計思想
2.2 體系結(jié)構(gòu)
2.3 模塊結(jié)構(gòu)
2.4 處理流程
2.5 小結(jié)
3 用戶節(jié)點動態(tài)管理
3.1 超級節(jié)點選擇策略
3.2 協(xié)同備份節(jié)點選擇策略
3.3 用戶節(jié)點信息統(tǒng)計與收集
3.4 用戶節(jié)點組織與管理實現(xiàn)
3.5 小結(jié)
4 數(shù)據(jù)傳輸控制管理
4.1 數(shù)據(jù)流傳輸策略
4.2 數(shù)據(jù)傳輸實現(xiàn)方式
4.3 數(shù)據(jù)傳輸任務(wù)調(diào)度
4.4 本章小結(jié)
5 系統(tǒng)測試與分析
5.1 測試環(huán)境
5.2 功能測試
5.3 性能測試與結(jié)果分析
5.4 本章小結(jié)
6 總結(jié)與展望
致謝
參考文獻(xiàn)
【參考文獻(xiàn)】:
期刊論文
[1]分布式任務(wù)調(diào)度與副本復(fù)制集成策略研究[J]. 易侃,王汝傳. 通信學(xué)報. 2010(09)
[2]云計算與云數(shù)據(jù)存儲技術(shù)研究[J]. 拓守恒. 電腦開發(fā)與應(yīng)用. 2010(09)
[3]面向本地分布式存儲系統(tǒng)的動態(tài)副本策略[J]. 伍文靜,程耀東,汪璐,武杰,陳剛. 計算機(jī)工程與應(yīng)用. 2010(12)
[4]P2P網(wǎng)絡(luò)的節(jié)點狀態(tài)研究[J]. 魯薇,周竹榮,邱玉輝. 計算機(jī)應(yīng)用. 2009(08)
[5]云存儲系統(tǒng)的分析與應(yīng)用研究[J]. 唐箭. 電腦知識與技術(shù). 2009(20)
[6]P2P系統(tǒng)中基于信譽(yù)感知的超級節(jié)點選擇算法研究[J]. 劉玉枚,楊壽保,陳萬明,郭磊濤,韋冬. 中國科學(xué)院研究生院學(xué)報. 2008(02)
[7]一種高效的基于可復(fù)制資源的分布式負(fù)載均衡策略[J]. 王征,劉心松,李美安. 電子學(xué)報. 2006(08)
本文編號:3179094
本文鏈接:http://sikaile.net/kejilunwen/jisuanjikexuelunwen/3179094.html
最近更新
教材專著