云平臺跨域分布式共享文件系統(tǒng)的設計與實現(xiàn)
本文關鍵詞:云平臺跨域分布式共享文件系統(tǒng)的設計與實現(xiàn)
更多相關文章: DartCloud 跨域分布式共享文件系統(tǒng) 分布式文件系統(tǒng) 集中式元數(shù)據(jù)管理 一致性哈希算法
【摘要】:隨著云計算,大數(shù)據(jù)技術的興起,互聯(lián)網(wǎng)產(chǎn)業(yè)正顛覆著傳統(tǒng)的商業(yè)模式和生活方式,跨領域,跨行業(yè)的大數(shù)據(jù)共享云平臺開始廣泛應用于各個領域。而支持共享文件需求的跨域云管理系統(tǒng)目前還沒有開源系統(tǒng)實現(xiàn)。本文的研究工作是國家863計劃課題“基于互聯(lián)網(wǎng)海量資源的語言翻譯分布并行處理技術”的一部分,目的是在跨域的云環(huán)境中提供方便靈活的共享文件系統(tǒng),滿足跨地域多協(xié)同單位在云環(huán)境下的分級文件共享需求。本文在跨域的云平臺DartCloud環(huán)境中設計實現(xiàn)了一個跨域分布式共享文件系統(tǒng)。主要貢獻如下:◆分析和研究了分布式文件系統(tǒng)的兩種主流設計思想,分析比較了兩種設計思想的優(yōu)缺點;同時分析了在DartCloud云平臺環(huán)境下跨域分布式共享文件系統(tǒng)的應用需求,指出現(xiàn)有的文件系統(tǒng)的不足!粼O計和實現(xiàn)了跨域分布式共享文件系統(tǒng)。該系統(tǒng)能夠很好的支持跨地域集群的云平臺數(shù)據(jù)管理需求,同時系統(tǒng)采用分級共享策略,根據(jù)用戶權限設置分享級別。此外,該文件共享系統(tǒng)也打通了與云平臺虛擬機的連接,從而方便了用戶本地主機和遠程虛擬機的文件交換!魧artCloud云平臺相關子系統(tǒng)進行了設計與開發(fā)工作,包括Topology網(wǎng)絡拓撲系統(tǒng),和DartCloudDemo翻譯并行系統(tǒng),通過這兩個子系統(tǒng),可以方便查詢到云平臺的網(wǎng)絡拓撲結構,以及自動化的協(xié)同運行各家單位的翻譯系統(tǒng)。
【關鍵詞】:DartCloud 跨域分布式共享文件系統(tǒng) 分布式文件系統(tǒng) 集中式元數(shù)據(jù)管理 一致性哈希算法
【學位授予單位】:浙江大學
【學位級別】:碩士
【學位授予年份】:2015
【分類號】:TP393.09
【目錄】:
- 摘要4-5
- Abstract5-13
- 第1章 緒論13-22
- 1.1 課題背景13-18
- 1.1.1 云計算時代的服務方式13-14
- 1.1.2 大數(shù)據(jù)對文件存儲的挑戰(zhàn)14-15
- 1.1.3 云存儲技術的發(fā)展15-16
- 1.1.4 DartCloud云平臺整體背景16-18
- 1.2 國內(nèi)外發(fā)展現(xiàn)狀18-20
- 1.3 本文的主要內(nèi)容20-21
- 1.4 論文組織結構21
- 1.5 本章小結21-22
- 第2章 分布式文件系統(tǒng)相關技術22-38
- 2.1 引言22
- 2.2 分布式文件系統(tǒng)概述22-24
- 2.3 集中式元數(shù)據(jù)管理代表系統(tǒng)GFS24-29
- 2.3.1 GFS簡介24-25
- 2.3.2 GFS系統(tǒng)結構設計25-26
- 2.3.3 GFS的METADATA26-27
- 2.3.4 GFS的可靠性保證27-29
- 2.4 一致性哈希算法29-36
- 2.4.1 分布式哈希算法的衡量標準29-30
- 2.4.2 一致性哈希算法基本思想30-34
- 2.4.3 一致性哈希算法的平衡性改進34-36
- 2.5 兩種設計思想的優(yōu)缺點比較36-37
- 2.6 本章小結37-38
- 第3章 跨域分布式共享文件系統(tǒng)的設計38-48
- 3.1 引言38
- 3.2 云平臺文件中心需求分析38-39
- 3.3 現(xiàn)有文件系統(tǒng)分析比較39-41
- 3.3.1 Google File System優(yōu)缺點分析39-40
- 3.3.2 Hadoop Distributed File System優(yōu)缺點分析40
- 3.3.3 Amazon S3優(yōu)缺點分析40-41
- 3.4 跨域分布式共享文件系統(tǒng)設計41-47
- 3.4.1 跨域分布式共享文件系統(tǒng)的功能特點41-42
- 3.4.2 文件分布策略設計42-43
- 3.4.3 文件系統(tǒng)和虛擬機連通設計43
- 3.4.4 文件共享策略設計43-45
- 3.4.5 系統(tǒng)穩(wěn)定性設計45-46
- 3.4.6 文件傳輸性能優(yōu)化設計46-47
- 3.5 本章小結47-48
- 第4章 跨域分布式共享文件系統(tǒng)的實現(xiàn)48-59
- 4.1 引言48
- 4.2 用戶權限模塊實現(xiàn)48
- 4.3 文件上傳模塊實現(xiàn)48-51
- 4.4 文件下載模塊實現(xiàn)51-54
- 4.5 文件共享模塊實現(xiàn)54-55
- 4.6 文件刪除模塊實現(xiàn)55
- 4.7 增刪存儲節(jié)點的系統(tǒng)穩(wěn)定性實現(xiàn)55
- 4.8 文件傳輸性能實驗55-58
- 4.9 本章小結58-59
- 第5章 DartCloud云平臺子系統(tǒng)設計與實現(xiàn)59-69
- 5.1 引言59
- 5.2 Topology網(wǎng)絡拓撲子系統(tǒng)的設計與實現(xiàn)59-63
- 5.2.1 系統(tǒng)概述59-60
- 5.2.2 核心技術Flex事件機制研究60-63
- 5.3 DartCloudDemo翻譯并行系統(tǒng)的設計與實現(xiàn)63-68
- 5.3.1 系統(tǒng)概述63-64
- 5.3.2 核心技術SSH端口轉發(fā)機制研究64-68
- 5.4 本章小結68-69
- 第6章 總結與展望69-71
- 6.1 論文總結69
- 6.2 展望69-71
- 參考文獻71-73
- 攻讀碩士學位期間主要的研究成果73-74
- 致謝74
【相似文獻】
中國期刊全文數(shù)據(jù)庫 前10條
1 倪力舜;;基于聯(lián)邦的跨域身份認證平臺的研究[J];電腦知識與技術;2011年01期
2 王福;周家晶;;基于屬性的跨域訪問方法研究[J];信息網(wǎng)絡安全;2011年09期
3 張秋余;張啟坤;袁占亭;王銳芳;;基于格的跨域認證聯(lián)盟協(xié)議[J];計算機應用;2007年04期
4 鄒翔;金波;倪力舜;;跨域訪問控制與邊界防御方法研究[J];計算機應用研究;2010年04期
5 匡振國;倪宏;嵇智輝;;基于代理的跨域業(yè)務管理方法研究[J];微計算機信息;2010年12期
6 崔立真;田君杰;王海洋;;基于兩階段規(guī)劃模型的跨域服務流程動態(tài)構造方法[J];小型微型計算機系統(tǒng);2011年09期
7 李勇;馬滿福;何廷年;曲偉麗;;網(wǎng)絡環(huán)境下跨域信任調度模型[J];計算機工程與應用;2009年20期
8 鄧一貴;張海龍;唐學文;;跨域的混合包標記編碼方案[J];計算機工程與應用;2011年08期
9 袁家斌;魏利利;曾青華;;面向移動終端的云計算跨域訪問委托模型[J];軟件學報;2013年03期
10 何良;方勇;方f ;蒲偉;;瀏覽器跨域通信安全技術研究[J];信息安全與通信保密;2013年04期
中國重要會議論文全文數(shù)據(jù)庫 前9條
1 王福;周家晶;;基于屬性的跨域訪問方法研究[A];第26次全國計算機安全學術交流會論文集[C];2011年
2 張紅旗;;網(wǎng)格環(huán)境下基于協(xié)商的跨域訪問控制模型[A];第十一屆保密通信與信息安全現(xiàn)狀研討會論文集[C];2009年
3 沈寒輝;鄒翔;周家晶;;基于PKI的跨域邊界信任計算方法[A];全國計算機安全學術交流會論文集·第二十五卷[C];2010年
4 楊宇;譚平嶂;李鐳;周楝淞;;基于標識的跨域認證系統(tǒng)研究[A];第十一屆保密通信與信息安全現(xiàn)狀研討會論文集[C];2009年
5 李衛(wèi)兵;;跨域MPLS VPN實現(xiàn)方式及應用案例[A];廣東省通信學會2006年度學術論文集[C];2007年
6 劉欣;沈寒輝;周家晶;;一種動態(tài)細粒度跨域訪問控制模型[A];全國計算機安全學術交流會論文集·第二十五卷[C];2010年
7 陳建元;;跨域VPN部署要點[A];中國通信學會信息通信網(wǎng)絡技術委員會2009年年會論文集(上冊)[C];2009年
8 王鵬;;跨域治理中的地方政府間關系及其協(xié)調路徑研究[A];市場經(jīng)濟與政府職能轉變——2012年嶺南經(jīng)濟論壇暨廣東經(jīng)濟學會年會論文集[C];2012年
9 華靜;;基于E通VPN跨域CN2備份組網(wǎng)設計[A];中國通信學會信息通信網(wǎng)絡技術委員會2011年年會論文集(上冊)[C];2011年
中國重要報紙全文數(shù)據(jù)庫 前10條
1 聞穎;“跨域企業(yè)通訊專網(wǎng)”提升辦公效率[N];中國經(jīng)營報;2005年
2 本報記者 劉芳君;算大賬 跨域合作的“成阿”樣本[N];成都日報;2014年
3 張志偉 劉兆忠;跨域優(yōu)選:信息化作戰(zhàn)聚能新方式[N];中國國防報;2013年
4 張穎;提升企業(yè)競爭力的利器[N];中國經(jīng)濟導報;2005年
5 本報記者 覃世默 本報通訊員 蒙鴻翔;“跨域聯(lián)建”破難題[N];廣西日報;2013年
6 記者 馮愛華;“紅色旅游鏈”呼喚跨域協(xié)作[N];長江日報;2005年
7 李東杰;“跨域作戰(zhàn)”新解[N];解放軍報;2014年
8 ;TrueConnect用MPLS實現(xiàn)企業(yè)跨域網(wǎng)絡[N];中國計算機報;2002年
9 本報記者 蒲婧;政務騰上云端 跨域資源整合是推力[N];政府采購信息報;2013年
10 宋;IBM、Red Hat、 TCS聯(lián)手Linux[N];計算機世界;2005年
中國博士學位論文全文數(shù)據(jù)庫 前4條
1 姚瑤;互聯(lián)網(wǎng)跨域認證關鍵技術研究[D];東北大學;2012年
2 李小標;跨域認證關鍵技術研究[D];北京郵電大學;2011年
3 鄒華;NGN業(yè)務跨域互操作訪問控制研究[D];北京郵電大學;2010年
4 梁海英;基于MPLS跨域VPN若干問題研究[D];東北大學;2008年
中國碩士學位論文全文數(shù)據(jù)庫 前10條
1 黃小香;醫(yī)用詞語跨域使用研究[D];暨南大學;2010年
2 王虹;基于信任度量的Web服務跨域訪問控制模型的研究[D];河北大學;2015年
3 魯昕佳;軟件定義網(wǎng)絡的跨域交互及其應用研究[D];浙江大學;2015年
4 楊紅星;云平臺跨域分布式共享文件系統(tǒng)的設計與實現(xiàn)[D];浙江大學;2015年
5 盧靜;我國地方政府空氣污染跨域合作治理研究[D];南京大學;2015年
6 仇華炳;跨域鑒別與授權研究[D];武漢理工大學;2009年
7 林智鑫;跨域訪問控制研究[D];武漢理工大學;2008年
8 裴俐春;基于信任管理的跨域認證與跨域授權機制研究[D];解放軍信息工程大學;2008年
9 高燕燕;基于通用屬性庫的跨域訪問控制[D];鄭州大學;2014年
10 李勇;網(wǎng)絡環(huán)境下跨域可信調度模型[D];西北師范大學;2010年
,本文編號:612172
本文鏈接:http://sikaile.net/guanlilunwen/ydhl/612172.html