【摘要】：現(xiàn)有分布式文件存儲(chǔ)系統(tǒng)存在數(shù)據(jù)組織低效和訪問語義冗余等問題,嚴(yán)重限制了系統(tǒng)性能。為此,借鑒對(duì)象存儲(chǔ)思想,設(shè)計(jì)面向高性能計(jì)算的分布式對(duì)象存儲(chǔ)系統(tǒng)。分離數(shù)據(jù)訪問和數(shù)據(jù)管理,實(shí)現(xiàn)更精簡(jiǎn)高效的訪問語義,同時(shí)采用分布式全局對(duì)象數(shù)據(jù)組織方式,運(yùn)用基于內(nèi)存的元數(shù)據(jù)管理方法提升系統(tǒng)性能。實(shí)驗(yàn)結(jié)果表明,在大規(guī)模并發(fā)訪問時(shí),該系統(tǒng)的讀/寫聚合帶寬相比Lustre系統(tǒng)分別提升22.5%和50.4%,文件創(chuàng)建、刪除性能分別達(dá)到Lustre系統(tǒng)的2.15倍和5.13倍。此外,該系統(tǒng)還具有擬線性的數(shù)據(jù)讀/寫和元數(shù)據(jù)管理功能,可擴(kuò)展性較好。
[Abstract]:The existing distributed file storage system has some problems, such as inefficient data organization and access semantic redundancy, which seriously limits the performance of the system. For this reason, a distributed object storage system for high performance computing is designed by using the idea of object storage for reference. Data access and data management are separated to achieve more concise and efficient access semantics. At the same time, distributed global object data organization is adopted, and memory-based metadata management method is used to improve the performance of the system. The experimental results show that the read / write aggregation bandwidth of the system is 22.5% and 50.4% higher than that of the Lustre system, and the file creation and deletion performance is 2.15 times and 5.13 times of that of the Lustre system, respectively. In addition, the system also has quasilinear data reading / writing and metadata management functions, and has good scalability.
【作者單位】： 江南計(jì)算技術(shù)研究所;
【基金】：國家高技術(shù)研究發(fā)展計(jì)劃項(xiàng)目(2013AA013203,2013AA01A210)
【分類號(hào)】：TP333;TP38

【相似文獻(xiàn)】

相關(guān)期刊論文 前10條

1 周功業(yè);雷偉;陳進(jìn)才;;基于對(duì)象存儲(chǔ)系統(tǒng)中的熱點(diǎn)數(shù)據(jù)平衡策略[J];華中科技大學(xué)學(xué)報(bào)(自然科學(xué)版);2007年12期

2 劉群;馮丹;李堅(jiān);;基于對(duì)象存儲(chǔ)系統(tǒng)的負(fù)載均衡模型分析[J];武漢理工大學(xué)學(xué)報(bào);2009年18期

3 陶偉，，麥中凡;基于虛存映射的對(duì)象存儲(chǔ)系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[J];計(jì)算機(jī)學(xué)報(bào);1997年06期

4 譚支鵬;馮丹;;基于對(duì)象的存儲(chǔ)系統(tǒng)對(duì)象遷移策略[J];計(jì)算機(jī)科學(xué);2006年06期

5 譚支鵬;馮丹;;對(duì)象存儲(chǔ)系統(tǒng)形式化研究[J];計(jì)算機(jī)科學(xué);2006年12期

6 王芳;張順達(dá);馮丹;曾令仿;;對(duì)象存儲(chǔ)系統(tǒng)中的柔性對(duì)象分布策略[J];華中科技大學(xué)學(xué)報(bào)(自然科學(xué)版);2007年03期

7 王慧麗;馮丹;覃靈軍;;基于對(duì)象存儲(chǔ)系統(tǒng)中屬性管理的研究與實(shí)現(xiàn)[J];計(jì)算機(jī)應(yīng)用研究;2007年11期

8 王芳;陳亮;;對(duì)象存儲(chǔ)系統(tǒng)中基于負(fù)載均衡的設(shè)備選擇算法[J];華中科技大學(xué)學(xué)報(bào)(自然科學(xué)版);2007年10期

9 王永魁;朱蘭娟;;對(duì)象存儲(chǔ)系統(tǒng)的研究[J];計(jì)算機(jī)工程;2007年24期

10 宋健;劉川意;鞠大鵬;汪東升;;基于對(duì)象存儲(chǔ)系統(tǒng)中多維服務(wù)質(zhì)量保證的設(shè)計(jì)與實(shí)現(xiàn)[J];計(jì)算機(jī)工程與設(shè)計(jì);2008年03期

相關(guān)會(huì)議論文 前5條

1 肖亮;謝長(zhǎng)生;魏沁祺;李馨;;基于屬性控制的對(duì)象存儲(chǔ)系統(tǒng)[A];2008'中國信息技術(shù)與應(yīng)用學(xué)術(shù)論壇論文集（二）[C];2008年

2 單穎;姚念民;趙建明;;基于對(duì)象存儲(chǔ)系統(tǒng)體系結(jié)構(gòu)的研究[A];第15屆全國信息存儲(chǔ)技術(shù)學(xué)術(shù)會(huì)議論文集[C];2008年

3 陶偉;麥中凡;;MIDS引擎的對(duì)象存儲(chǔ)系統(tǒng)[A];數(shù)據(jù)庫研究與進(jìn)展95——第十三屆全國數(shù)據(jù)庫學(xué)術(shù)會(huì)議論文集[C];1995年

4 朱立谷;孫志偉;任勇;張雷;彭建峰;楊柳;陽小珊;李強(qiáng);;基于內(nèi)容的對(duì)象存儲(chǔ)技術(shù)的研究[A];第15屆全國信息存儲(chǔ)技術(shù)學(xué)術(shù)會(huì)議論文集[C];2008年

5 高媛;莊嚴(yán);朱坎;鄭振楣;石樹剛;;os的虛存技術(shù)與雙緩沖機(jī)制相結(jié)合—Sambase中對(duì)象存儲(chǔ)系統(tǒng)的新奉獻(xiàn)[A];數(shù)據(jù)庫研究與進(jìn)展95——第十三屆全國數(shù)據(jù)庫學(xué)術(shù)會(huì)議論文集[C];1995年

相關(guān)重要報(bào)紙文章 前1條

1 中興通訊;云存儲(chǔ)鋪就海量數(shù)據(jù)之路[N];通信產(chǎn)業(yè)報(bào);2011年

相關(guān)博士學(xué)位論文 前3條

1 羅益輝;海量對(duì)象存儲(chǔ)系統(tǒng)數(shù)據(jù)組織算法的研究[D];華中科技大學(xué);2006年

2 吳晨濤;對(duì)象存儲(chǔ)系統(tǒng)中熱點(diǎn)數(shù)據(jù)的研究[D];華中科技大學(xué);2010年

3 曾令仿;基于對(duì)象的網(wǎng)絡(luò)存儲(chǔ)智能處理方法研究[D];華中科技大學(xué);2006年

相關(guān)碩士學(xué)位論文 前10條

1 楊軍;基于OpenStack對(duì)象存儲(chǔ)的性能及安全性研究[D];閩南師范大學(xué);2016年

2 陳亮;對(duì)象存儲(chǔ)系統(tǒng)的客戶端設(shè)計(jì)和負(fù)載均衡研究[D];華中科技大學(xué);2007年

3 朱堯;對(duì)象存儲(chǔ)系統(tǒng)安全檢測(cè)技術(shù)的研究[D];華中科技大學(xué);2009年

4 戴毅;基于對(duì)象存儲(chǔ)系統(tǒng)負(fù)載均衡技術(shù)研究[D];華中科技大學(xué);2007年

5 張偉;對(duì)象存儲(chǔ)系統(tǒng)中數(shù)據(jù)通道的設(shè)計(jì)與實(shí)現(xiàn)[D];華中科技大學(xué);2008年

6 張順達(dá);對(duì)象存儲(chǔ)系統(tǒng)的元數(shù)據(jù)管理[D];華中科技大學(xué);2006年

7 衣國壘;基于中心節(jié)點(diǎn)架構(gòu)的大規(guī)模數(shù)據(jù)對(duì)象存儲(chǔ)系統(tǒng)[D];清華大學(xué);2013年

8 田亞坤;基于對(duì)象存儲(chǔ)系統(tǒng)中元數(shù)據(jù)管理方法的研究[D];哈爾濱工程大學(xué);2010年

9 盧錦;對(duì)象存儲(chǔ)系統(tǒng)中數(shù)據(jù)私密性保護(hù)與共享[D];華中科技大學(xué);2012年

10 劉佳;基于對(duì)象相關(guān)性的緩存策略的設(shè)計(jì)與實(shí)現(xiàn)[D];華中科技大學(xué);2009年

本文編號(hào)：2498858