BlueOcean海量存儲(chǔ)系統(tǒng)高并發(fā)客戶端的設(shè)計(jì)與實(shí)現(xiàn)
發(fā)布時(shí)間:2020-02-18 12:22
【摘要】:隨著信息量的飛速增長(zhǎng),如何高效地存儲(chǔ)和處理海量數(shù)據(jù)成為了當(dāng)今計(jì)算機(jī)科學(xué)面臨的挑戰(zhàn)。傳統(tǒng)的文件系統(tǒng)在存儲(chǔ)容量和性能的提升上已遇到瓶頸,分布式海量存儲(chǔ)系統(tǒng)是未來存儲(chǔ)發(fā)展的必然趨勢(shì),在此類系統(tǒng)中,良好的客戶端設(shè)計(jì)對(duì)于存儲(chǔ)系統(tǒng)的總體性能有著重要影響。 BlueOcean是基于對(duì)象存儲(chǔ)技術(shù)實(shí)現(xiàn)的大規(guī)模分布式存儲(chǔ)系統(tǒng),具有性能高,容量大,可靠性強(qiáng),管理簡(jiǎn)易等特性。該系統(tǒng)由單一元數(shù)據(jù)服務(wù)器和大量數(shù)據(jù)存儲(chǔ)服務(wù)器構(gòu)成,并通過客戶端軟件對(duì)應(yīng)用軟件提供POSIX訪問接口,支持現(xiàn)有的絕大部分應(yīng)用軟件在其上透明運(yùn)行。 本文對(duì)海量存儲(chǔ)系統(tǒng)的關(guān)鍵技術(shù)與實(shí)現(xiàn)方案進(jìn)行了深入的研究,并在此基礎(chǔ)上針對(duì)BlueOcean存儲(chǔ)系統(tǒng)設(shè)計(jì)并實(shí)現(xiàn)了高并發(fā)的客戶端FuseAgent。本文的主要工作如下: (1)闡述了存儲(chǔ)系統(tǒng)的架構(gòu)演進(jìn),通過對(duì)典型海量存儲(chǔ)系統(tǒng)的研究,分析了此類架構(gòu)的關(guān)鍵技術(shù)。 (2)分析了目前客戶端實(shí)現(xiàn)方案的缺陷,采用事件驅(qū)動(dòng)模型設(shè)計(jì)了一個(gè)通用的高并發(fā)客戶端。 (3)詳細(xì)描述了高并發(fā)客戶端中功能模塊的具體實(shí)現(xiàn)。 (4)針對(duì)高并發(fā)客戶端的實(shí)現(xiàn)特性,從FUSE框架優(yōu)化、數(shù)據(jù)零拷貝、寫并行化三個(gè)方面對(duì)其寫操作進(jìn)行優(yōu)化。 (5)對(duì)BlueOcean的高并發(fā)客戶端進(jìn)行性能測(cè)試。 測(cè)試表明,對(duì)該客戶端寫性能的優(yōu)化效果明顯;并且隨著并發(fā)訪問文件數(shù)的增多,系統(tǒng)總體的數(shù)據(jù)讀寫性能,,元數(shù)據(jù)操作性能以及事務(wù)操作性能均有很顯著的提升。本論文的研究成果對(duì)于其它的海量存儲(chǔ)系統(tǒng)高并發(fā)客戶端的設(shè)計(jì)也具有較好的借鑒價(jià)值。
【學(xué)位授予單位】:上海交通大學(xué)
【學(xué)位級(jí)別】:碩士
【學(xué)位授予年份】:2013
【分類號(hào)】:TP333
本文編號(hào):2580706
【學(xué)位授予單位】:上海交通大學(xué)
【學(xué)位級(jí)別】:碩士
【學(xué)位授予年份】:2013
【分類號(hào)】:TP333
【參考文獻(xiàn)】
相關(guān)期刊論文 前5條
1 楊德志,黃華,張建剛,許魯;大容量、高性能、高擴(kuò)展能力的藍(lán)鯨分布式文件系統(tǒng)[J];計(jì)算機(jī)研究與發(fā)展;2005年06期
2 田怡萌;李小勇;劉海濤;;分布式文件系統(tǒng)副本一致性檢測(cè)研究[J];計(jì)算機(jī)研究與發(fā)展;2012年S1期
3 曾令仿;馮丹;周可;王芳;;網(wǎng)絡(luò)存儲(chǔ)I/O流水機(jī)制研究[J];小型微型計(jì)算機(jī)系統(tǒng);2006年01期
4 王皓;李小勇;;分布式存儲(chǔ)系統(tǒng)中客戶端的設(shè)計(jì)與實(shí)現(xiàn)[J];微型電腦應(yīng)用;2012年02期
5 董曉明;李小勇;程煜;;分布式文件系統(tǒng)的寫性能優(yōu)化[J];微型電腦應(yīng)用;2012年12期
相關(guān)碩士學(xué)位論文 前1條
1 戰(zhàn)科宇;分布式文件系統(tǒng)元數(shù)據(jù)服務(wù)器高可用設(shè)計(jì)與實(shí)現(xiàn)[D];上海交通大學(xué);2012年
本文編號(hào):2580706
本文鏈接:http://sikaile.net/kejilunwen/jisuanjikexuelunwen/2580706.html
最近更新
教材專著