本文關鍵詞：基于隨機線性網絡編碼的云存儲系統(tǒng)研究，，由筆耕文化傳播整理發(fā)布。

【摘要】：與傳統(tǒng)計算機集群相比,基礎設施云在彈性運算,負載均衡等方面有諸多優(yōu)勢,而且基礎設施云可以在性能比較低的機器上運行,這就使得基于基礎設施云的服務有良好的可擴展性。OpenStack是與EC2類似的開源基礎設施云服務,它借用了虛擬化技術管理來大規(guī)模的計算機集群。本文會先介紹OpenStack云計算平臺的部署流程,并基于該云計算平臺搭建HDFS云存儲系統(tǒng)。 HDFS是一種分布式云存儲系統(tǒng),屬于Hadoop項目的子項目,它提供了高吞吐率的數據讀取,適用于那些需要大數據量的應用。HDFS適合在廉價的機器上運行,因此在HDFS上存儲數據時要更加關注數據的可靠性。目前HDFS通過副本冗余的方式實現高容錯性,該方法最大壞處在于占用的磁盤空間過大。本文將提供一種基于隨機線性網絡編碼的數據冗余方案,該方案適用于分布式存儲系統(tǒng),其最大的優(yōu)點在于保證相同數據可靠性的前提下,能大幅降低數據的冗余。使用隨機線性網絡編碼,即使部分數據在傳輸途中被第三方劫持,第三方也難以通過這些被劫持的數據恢復原始數據,因此數據的安全性也可以得到保證。 云存儲可以為用戶提供良好的服務,比如現如今風靡全球的文件同步服務的后端一般使用云存儲服務。HDFS作為分布式存儲系統(tǒng)中的佼佼者,同樣可以給用戶提供優(yōu)質的服務,不過基于HDFS的應用少之又少。我們基于HDFS開發(fā)了VISG云同步軟件,它可以將多種文件系統(tǒng)和HDFS系統(tǒng)中的文件進行同步,而且操作簡易,用戶無需了解HDFS即可快速上手。本文將會對該軟件的設計過程,軟件應用到主要算法以及軟件的使用方法做詳細的說明。
【關鍵詞】：基礎設施云 OpenStack HDFS 隨機線性網絡編碼 數據冗余 VISG云同步軟件
【學位授予單位】：南京大學
【學位級別】：碩士
【學位授予年份】：2014
【分類號】：TP333
【目錄】：

• 摘要4-5
• Abstract5-11
• 第一章 緒論11-19
• 1.1 研究背景11-12
• 1.2 OpenStack 介紹12-14
• 1.3 HDFS的優(yōu)勢及其應用場合14-15
• 1.3.1 適合大規(guī)模數據14
• 1.3.2 數據的高可靠性14-15
• 1.3.3 擴展性強15
• 1.4 HDFS 架構15-17
• 1.5 本文工作及組織結構17-19
• 第二章 基于OpenStack的云計算實驗平臺設計19-31
• 2.1 實驗平臺硬件環(huán)境19
• 2.2 實驗平臺系統(tǒng)架構19-20
• 2.3 實驗平臺技術細節(jié)20-28
• 2.3.1 虛擬化技術選擇20-22
• 2.3.2 網絡類型選擇22-24
• 2.3.3 虛擬機調度算法24-28
• 2.4 Hadoop在云計算實驗平臺的部署28-30
• 2.4.1 虛擬機與物理機上部署Hadoop的差異28
• 2.4.2 在虛擬機部署Hadoop的優(yōu)勢和劣勢28-29
• 2.4.3 Hadoop在云計算實驗平臺的部署步驟29-30
• 2.5 本章小結30-31
• 第三章 基于網絡編碼和多節(jié)點讀取的分布式文件存儲系統(tǒng)方案31-44
• 3.1 相關工作31
• 3.2 網絡編碼與HDFS中的數據冗余方案31-35
• 3.2.1 網絡編碼介紹32
• 3.2.2 隨機線性網絡編碼32-34
• 3.2.3 HDFS中副本放置方案和副本選擇方案34-35
• 3.3 系統(tǒng)編解碼方案設計35-37
• 3.4 系統(tǒng)詳細架構設計37-40
• 3.4.1 寫文件操作37-38
• 3.4.2 讀文件操作38-40
• 3.4.3 數據修復操作40
• 3.5 實驗結果與性能分析40-42
• 3.5.1 文件讀性能比較40-42
• 3.5.2 文件寫性能比較42
• 3.6 本章小結42-44
• 第四章 VISG云同步軟件設計44-57
• 4.1 相關工作44
• 4.2 軟件架構設計44-47
• 4.3 詳細技術細節(jié)47-53
• 4.3.1 使用Maven解決依賴關系47-48
• 4.3.2 文件同步算法48-50
• 4.3.3 HDFS文件操作接口50-53
• 4.4 VISG云同步軟件使用說明53-55
• 4.4.1 登錄53
• 4.4.2 同步文件53-55
• 4.4.3 收藏55
• 4.4.4 關于55
• 4.5 本章小結55-57
• 第五章 總結與展望57-60
• 5.1 本文的創(chuàng)新點57-58
• 5.2 展望58-60
• 附錄A 相關代碼60-64
• A.1 使用Maven解決依賴關系的XML配置文件60-64
• 參考文獻64-66
• 致謝66-67

【相似文獻】

中國期刊全文數據庫 前10條

1 夏凱銓;;《信號與線性網絡分析》中一個例題解答的探討[J];高等學校電工課程教學工作通訊;1984年Z1期

2 李春明;含有零泛器的線性網絡的稀疏表分析法[J];內蒙古工業(yè)大學學報(自然科學版);1994年04期

3 黃汝激;一般線性網絡的混合分析法[J];電子學通訊;1982年04期

4 李國吉;等值電路法列寫線性網絡的狀態(tài)方程[J];國防科技大學學報;1983年03期

5 李竹英;陳崇源;;線性網絡分析中動態(tài)元件的初始條件用奇異函數描述的必要性——對電工教學中一疑點的剖析[J];工科電工教學;1984年04期

6 劉衛(wèi)紅;;線性網絡直、交流與頻譜的計算機分析[J];華東地質學院學報;1988年03期

7 邱東明;新穎的甚低頻線性網絡頻率響應測量方法[J];儀器儀表學報;1994年03期

8 鈕王杰;線性網絡分析方法教學之我見[J];運城高專學報;1996年04期

9 王建成,蘇武潯,陳年;場論說對含互感線性網絡的迭加定理的證明[J];電子學報;1998年03期

10 康巨珍;線性網絡研究[J];天津職業(yè)技術師范學院學報;1998年01期

中國重要會議論文全文數據庫 前1條

1 鄭應文;;線性網絡故障診斷的定向激勵方法[A];1994中國控制與決策學術年會論文集[C];1994年

中國博士學位論文全文數據庫 前1條

1 司菁菁;面向異構網絡的網絡編碼技術研究[D];北京郵電大學;2010年

中國碩士學位論文全文數據庫 前9條

1 陳濤;網絡組播中線性網絡編碼研究[D];武漢理工大學;2009年

2 李海濤;多主體線性網絡系統(tǒng)的魯棒同步性[D];華中科技大學;2013年

3 李江濤;一種線性網絡動態(tài)分析的新方法[D];華北電力大學（北京）;2007年

4 張益明;線性網絡編碼研究[D];揚州大學;2009年

5 蔣銘勛;隨機線性網絡編碼中安全性問題研究[D];復旦大學;2010年

6 孫杰英;基于滑動窗口的隨機線性網絡編碼研究[D];中南大學;2012年

7 湯文杰;基于隨機線性網絡編碼的云存儲系統(tǒng)研究[D];南京大學;2014年

8 劉柏江;基于線性網絡特性系統(tǒng)穩(wěn)態(tài)運行控制的潮流算法研究[D];廣西大學;2014年

9 韓旭;線性網絡編碼相關性分析及其在傳染路由中的應用研究[D];南京理工大學;2012年

  本文關鍵詞：基于隨機線性網絡編碼的云存儲系統(tǒng)研究，由筆耕文化傳播整理發(fā)布。

本文編號：481745