【摘要】：大規(guī)模分布式存儲系統(tǒng)具有高可擴(kuò)展性、高可用性等優(yōu)點(diǎn)，已成為存儲領(lǐng)域的研究和發(fā)展方向，在各大互聯(lián)網(wǎng)公司和企業(yè)數(shù)據(jù)中心都有著廣泛的應(yīng)用。由于分布式存儲系統(tǒng)規(guī)模龐大，功能復(fù)雜，完善的管理系統(tǒng)則是實(shí)現(xiàn)存儲系統(tǒng)可管理、高可靠運(yùn)行的重要前提。 BlueOcean是我們實(shí)驗(yàn)室設(shè)計(jì)開發(fā)的基于對象存儲的大規(guī)模分布式文件系統(tǒng)，其架構(gòu)類似于Google File System，它由一個(gè)元數(shù)據(jù)結(jié)點(diǎn)，一個(gè)備份結(jié)點(diǎn)（可選），多個(gè)數(shù)據(jù)結(jié)點(diǎn)和若干個(gè)客戶端組成。其中元數(shù)據(jù)結(jié)點(diǎn)主要用于管理文件元數(shù)據(jù)信息，，并負(fù)責(zé)負(fù)載均衡和租約管理等；數(shù)據(jù)結(jié)點(diǎn)負(fù)責(zé)保存數(shù)據(jù)，并以線程池的方式高并發(fā)處理來自客戶端的I/O請求；客戶端為應(yīng)用程序提供POSIX接口，其內(nèi)部采用了單線程異步事件驅(qū)動(dòng)的框架，與元數(shù)據(jù)結(jié)點(diǎn)進(jìn)行元數(shù)據(jù)交互，與數(shù)據(jù)結(jié)點(diǎn)進(jìn)行數(shù)據(jù)交互。 本文基于BlueOcean分布式文件系統(tǒng)。研究了在設(shè)計(jì)與實(shí)現(xiàn)管理系統(tǒng)過程中需要解決的關(guān)鍵技術(shù)問題，提出了相應(yīng)的解決方法，并詳細(xì)描述了其管理系統(tǒng)的設(shè)計(jì)細(xì)節(jié)。本文的主要工作包括： (1)深入分析和研究現(xiàn)有的分布式文件系統(tǒng)； (2)分析實(shí)驗(yàn)室開發(fā)的BlueOcean分布式文件系統(tǒng)的總體架構(gòu)及其各類結(jié)點(diǎn)的內(nèi)部實(shí)現(xiàn)細(xì)節(jié)； (3)分析了在設(shè)計(jì)BlueOcean分布式文件系統(tǒng)的管理系統(tǒng)的過程中所遇到的關(guān)鍵問題，并針對這些問題提出了相應(yīng)的解決方案； (4)全面描述了BlueOcean分布式文件系統(tǒng)的管理系統(tǒng)的設(shè)計(jì)細(xì)節(jié)，并展示了其功能和使用效果。 本文設(shè)計(jì)的BlueOcean分布式文件系統(tǒng)的管理系統(tǒng)具有易配置、易監(jiān)控、易管理的優(yōu)點(diǎn)。論文的成果對其他分布式存儲系統(tǒng)的管理系統(tǒng)的設(shè)計(jì)也具有較好的借鑒作用。
【學(xué)位授予單位】：上海交通大學(xué)
【學(xué)位級別】：碩士
【學(xué)位授予年份】：2013
【分類號】：TP333;TP316.4

【相似文獻(xiàn)】

相關(guān)期刊論文 前10條

1 許春聰;黃小猛;吳諾;孫寧偉;楊廣文;;分布式文件系統(tǒng)存儲介質(zhì)評測與分析[J];計(jì)算機(jī)學(xué)報(bào);2010年10期

2 郭亨亨;趙文靜;;語義Web數(shù)據(jù)的云存儲研究[J];電子科技;2010年05期

3 張子鵬;劉海濤;管海兵;;采用信任管理的分布式文件系統(tǒng)TrustFs[J];計(jì)算機(jī)工程;2009年01期

4 陳建榮;傅黎;;Novell網(wǎng)絡(luò)環(huán)境下分布式文件系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[J];海軍工程大學(xué)學(xué)報(bào);1993年03期

5 李相娜;曹強(qiáng);趙旺;魏沁祺;;加快分布式文件系統(tǒng)元數(shù)據(jù)訪問的研究與實(shí)現(xiàn)[J];微處理機(jī);2008年02期

6 劉偉;劉露;陳犖;鐘志農(nóng);;海量遙感影像數(shù)據(jù)存儲技術(shù)研究[J];計(jì)算機(jī)工程;2009年05期

7 何公明;張?jiān)獫?;面向數(shù)字媒體的高性能分布式存儲系統(tǒng)的研究與應(yīng)用[J];廣播電視信息;2009年10期

8 周建強(qiáng);薛行;徐希豪;楊培根;孫鐘秀;;分布式文件系統(tǒng)NDFS的設(shè)計(jì)和實(shí)現(xiàn)[J];計(jì)算機(jī)研究與發(fā)展;1990年07期

9 李桂萍;;云計(jì)算的兩大特性:虛擬化、分布式[J];通信世界;2011年16期

10 張維慶,袁宏春;基于E-mail的分布式文件系統(tǒng)(MDFS)[J];福建電腦;2004年07期

相關(guān)會議論文 前10條

1 趙輝;何連躍;;基于異構(gòu)分布式存儲系統(tǒng)的動(dòng)態(tài)反饋負(fù)載均衡技術(shù)[A];第15屆全國信息存儲技術(shù)學(xué)術(shù)會議論文集[C];2008年

2 邢海韜;黃孜祺;肖健;;應(yīng)用動(dòng)態(tài)管理技術(shù)優(yōu)化海量數(shù)據(jù)管理[A];廣西計(jì)算機(jī)學(xué)會2008年年會論文集[C];2008年

3 洪穗;;微軟WINDOWS Server 2003 R2分布式文件系統(tǒng)解決方案分析[A];中國新聞技術(shù)工作者聯(lián)合會2008年學(xué)術(shù)年會論文集（上）[C];2008年

4 華清;黃林鵬;;基于分片、松耦合的分布式文件系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[A];2006年全國開放式分布與并行計(jì)算學(xué)術(shù)會議論文集（二）[C];2006年

5 付萬;任學(xué)慧;張海靜;林霞;;基于GIS的遼寧省氣象災(zāi)害與保險(xiǎn)風(fēng)險(xiǎn)管理系統(tǒng)[A];第26屆中國氣象學(xué)會年會公共氣象服務(wù)與災(zāi)害管理分會場論文集[C];2009年

6 王良駿;劉偉;劉國強(qiáng);吳再海;;基于Web的民用爆破物品信息管理系統(tǒng)的設(shè)計(jì)與開發(fā)[A];第八屆全國采礦學(xué)術(shù)會議論文集[C];2009年

7 李淑娟;楊菊梅;尹紅生;;基于ASP.NET的科技干部信息管理系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[A];決策科學(xué)與評價(jià)——中國系統(tǒng)工程學(xué)會決策科學(xué)專業(yè)委員會第八屆學(xué)術(shù)年會論文集[C];2009年

8 封保霞;李蘇劍;;鋼卷庫管理系統(tǒng)物流合理化研究[A];全國冶金自動(dòng)化信息網(wǎng)2010年年會論文集[C];2010年

9 楊沙強(qiáng);;FX2N模塊在切換車型各崗位作業(yè)變化點(diǎn)管理系統(tǒng)的應(yīng)用[A];“廣汽部件杯”廣東省汽車行業(yè)第六期學(xué)術(shù)論文集[C];2011年

10 趙文強(qiáng);趙清;;基于物聯(lián)網(wǎng)的自動(dòng)入庫管理系統(tǒng)及其應(yīng)用研究[A];第十三屆中國科協(xié)年會第10分會場-節(jié)能減排戰(zhàn)略與測控技術(shù)發(fā)展學(xué)術(shù)研討會論文集[C];2011年

相關(guān)重要報(bào)紙文章 前10條

1 ;分布式文件系統(tǒng)一瞥[N];網(wǎng)絡(luò)世界;2002年

2 王春海 劉立;分布式文件系統(tǒng)在網(wǎng)絡(luò)中的應(yīng)用[N];電腦報(bào);2004年

3 本報(bào)記者 蔡方;“一站式服務(wù)”助企業(yè)跨越綠色壁壘[N];中國環(huán)境報(bào);2005年

4 ;神州數(shù)碼：物流GPS+CDMA 1X兼控管理系統(tǒng)[N];通信產(chǎn)業(yè)報(bào);2004年

5 李軍 喬元鳳 喬海元;泗水供電公司建立低壓業(yè)擴(kuò)管理系統(tǒng)[N];中國電力報(bào);2006年

6 余紅　徐震 鄭景云 陳曉光;執(zhí)法管理系統(tǒng)扣分不講情面[N];中國稅務(wù)報(bào);2007年

7 陳軍 林寶會;承鋼物資采購價(jià)格管理系統(tǒng)上線[N];中國冶金報(bào);2007年

8 耿捷;“進(jìn)境凍肉冷庫查驗(yàn)管理系統(tǒng)”通過鑒定[N];中國國門時(shí)報(bào);2006年

9 京客隆運(yùn)維部主任 張勛軍;實(shí)現(xiàn)“透明式”運(yùn)維管理[N];中國計(jì)算機(jī)報(bào);2006年

10 胡英;SafeNet推移動(dòng)數(shù)字版權(quán)管理系統(tǒng)[N];計(jì)算機(jī)世界;2007年

相關(guān)博士學(xué)位論文 前10條

1 趙鐵柱;分布式文件系統(tǒng)性能建模及應(yīng)用研究[D];華南理工大學(xué);2011年

2 王禹;分布式存儲系統(tǒng)中的數(shù)據(jù)冗余與維護(hù)技術(shù)研究[D];華南理工大學(xué);2011年

3 萬亞平;基于P2P的分布式存儲系統(tǒng)可靠性及故障檢測研究[D];華中科技大學(xué);2010年

4 李彭軍;醫(yī)學(xué)影像云服務(wù)平臺基礎(chǔ)架構(gòu)研究與實(shí)踐[D];南方醫(yī)科大學(xué);2011年

5 姚杰;分布式存儲系統(tǒng)文件級連續(xù)數(shù)據(jù)保護(hù)技術(shù)研究[D];華中科技大學(xué);2009年

6 閆希軍;現(xiàn)代中藥產(chǎn)業(yè)鏈管理系統(tǒng)研究[D];南京農(nóng)業(yè)大學(xué);2007年

7 宋瑋;分布式存儲系統(tǒng)中的節(jié)點(diǎn)自主性問題研究[D];華南理工大學(xué);2010年

8 陳遠(yuǎn)章;轉(zhuǎn)型期中國突發(fā)事件社會風(fēng)險(xiǎn)管理研究[D];中南大學(xué);2009年

9 林琳;基于網(wǎng)格數(shù)據(jù)交換區(qū)的網(wǎng)格作業(yè)性能優(yōu)化[D];吉林大學(xué);2011年

10 穆罕默德·馬斯理;城市垃圾管理系統(tǒng)優(yōu)化的研究[D];武漢大學(xué);2004年

相關(guān)碩士學(xué)位論文 前10條

1 董曉明;分布式存儲系統(tǒng)的管理系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[D];上海交通大學(xué);2013年

2 龔高晟;通用分布式文件系統(tǒng)的研究與改進(jìn)[D];華南理工大學(xué);2010年

3 李書鵬;分布式文件系統(tǒng)在云存儲環(huán)境下的若干問題研究[D];中國科學(xué)技術(shù)大學(xué);2011年

4 劉飛;基于云計(jì)算的分布式存儲系統(tǒng)的研究和應(yīng)用[D];西安工業(yè)大學(xué);2012年

5 周昶;基于對象分布式文件系統(tǒng)的存儲緩存研究[D];杭州電子科技大學(xué);2011年

6 趙黎斌;面向云存儲的分布式文件系統(tǒng)關(guān)鍵技術(shù)研究[D];西安電子科技大學(xué);2011年

7 胡振欣;分布式文件系統(tǒng)中的軟件開發(fā)管理[D];上海交通大學(xué);2012年

8 呂磊;迅雷離線下載分布式文件系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[D];哈爾濱工業(yè)大學(xué);2010年

9 張紅林;分布式文件系統(tǒng)中集中安全管理服務(wù)器設(shè)計(jì)與實(shí)現(xiàn)[D];華中科技大學(xué);2011年

10 王旭東;面向海量遙感影像數(shù)據(jù)的分布式文件系統(tǒng)管理技術(shù)研究[D];蘭州交通大學(xué);2012年

本文編號：2528764