發(fā)布時間：2019-06-13 22:19

【摘要】：現(xiàn)有分布式文件存儲系統(tǒng)存在數(shù)據(jù)組織低效和訪問語義冗余等問題,嚴重限制了系統(tǒng)性能。為此,借鑒對象存儲思想,設(shè)計面向高性能計算的分布式對象存儲系統(tǒng)。分離數(shù)據(jù)訪問和數(shù)據(jù)管理,實現(xiàn)更精簡高效的訪問語義,同時采用分布式全局對象數(shù)據(jù)組織方式,運用基于內(nèi)存的元數(shù)據(jù)管理方法提升系統(tǒng)性能。實驗結(jié)果表明,在大規(guī)模并發(fā)訪問時,該系統(tǒng)的讀/寫聚合帶寬相比Lustre系統(tǒng)分別提升22.5%和50.4%,文件創(chuàng)建、刪除性能分別達到Lustre系統(tǒng)的2.15倍和5.13倍。此外,該系統(tǒng)還具有擬線性的數(shù)據(jù)讀/寫和元數(shù)據(jù)管理功能,可擴展性較好。
[Abstract]:The existing distributed file storage system has some problems, such as inefficient data organization and access semantic redundancy, which seriously limits the performance of the system. For this reason, a distributed object storage system for high performance computing is designed by using the idea of object storage for reference. Data access and data management are separated to achieve more concise and efficient access semantics. At the same time, distributed global object data organization is adopted, and memory-based metadata management method is used to improve the performance of the system. The experimental results show that the read / write aggregation bandwidth of the system is 22.5% and 50.4% higher than that of the Lustre system, and the file creation and deletion performance is 2.15 times and 5.13 times of that of the Lustre system, respectively. In addition, the system also has quasilinear data reading / writing and metadata management functions, and has good scalability.
【作者單位】： 江南計算技術(shù)研究所;
【基金】：國家高技術(shù)研究發(fā)展計劃項目(2013AA013203,2013AA01A210)
【分類號】：TP333;TP38

【相似文獻】

相關(guān)期刊論文 前10條

1 周功業(yè);雷偉;陳進才;;基于對象存儲系統(tǒng)中的熱點數(shù)據(jù)平衡策略[J];華中科技大學學報(自然科學版);2007年12期

2 劉群;馮丹;李堅;;基于對象存儲系統(tǒng)的負載均衡模型分析[J];武漢理工大學學報;2009年18期

3 陶偉，，麥中凡;基于虛存映射的對象存儲系統(tǒng)的設(shè)計與實現(xiàn)[J];計算機學報;1997年06期

4 譚支鵬;馮丹;;基于對象的存儲系統(tǒng)對象遷移策略[J];計算機科學;2006年06期

5 譚支鵬;馮丹;;對象存儲系統(tǒng)形式化研究[J];計算機科學;2006年12期

6 王芳;張順達;馮丹;曾令仿;;對象存儲系統(tǒng)中的柔性對象分布策略[J];華中科技大學學報(自然科學版);2007年03期

7 王慧麗;馮丹;覃靈軍;;基于對象存儲系統(tǒng)中屬性管理的研究與實現(xiàn)[J];計算機應用研究;2007年11期

8 王芳;陳亮;;對象存儲系統(tǒng)中基于負載均衡的設(shè)備選擇算法[J];華中科技大學學報(自然科學版);2007年10期

9 王永魁;朱蘭娟;;對象存儲系統(tǒng)的研究[J];計算機工程;2007年24期

10 宋健;劉川意;鞠大鵬;汪東升;;基于對象存儲系統(tǒng)中多維服務(wù)質(zhì)量保證的設(shè)計與實現(xiàn)[J];計算機工程與設(shè)計;2008年03期

相關(guān)會議論文 前5條

1 肖亮;謝長生;魏沁祺;李馨;;基于屬性控制的對象存儲系統(tǒng)[A];2008'中國信息技術(shù)與應用學術(shù)論壇論文集（二）[C];2008年

2 單穎;姚念民;趙建明;;基于對象存儲系統(tǒng)體系結(jié)構(gòu)的研究[A];第15屆全國信息存儲技術(shù)學術(shù)會議論文集[C];2008年

3 陶偉;麥中凡;;MIDS引擎的對象存儲系統(tǒng)[A];數(shù)據(jù)庫研究與進展95——第十三屆全國數(shù)據(jù)庫學術(shù)會議論文集[C];1995年

4 朱立谷;孫志偉;任勇;張雷;彭建峰;楊柳;陽小珊;李強;;基于內(nèi)容的對象存儲技術(shù)的研究[A];第15屆全國信息存儲技術(shù)學術(shù)會議論文集[C];2008年

5 高媛;莊嚴;朱坎;鄭振楣;石樹剛;;os的虛存技術(shù)與雙緩沖機制相結(jié)合—Sambase中對象存儲系統(tǒng)的新奉獻[A];數(shù)據(jù)庫研究與進展95——第十三屆全國數(shù)據(jù)庫學術(shù)會議論文集[C];1995年

相關(guān)重要報紙文章 前1條

1 中興通訊;云存儲鋪就海量數(shù)據(jù)之路[N];通信產(chǎn)業(yè)報;2011年

相關(guān)博士學位論文 前3條

1 羅益輝;海量對象存儲系統(tǒng)數(shù)據(jù)組織算法的研究[D];華中科技大學;2006年

2 吳晨濤;對象存儲系統(tǒng)中熱點數(shù)據(jù)的研究[D];華中科技大學;2010年

3 曾令仿;基于對象的網(wǎng)絡(luò)存儲智能處理方法研究[D];華中科技大學;2006年

相關(guān)碩士學位論文 前10條

1 楊軍;基于OpenStack對象存儲的性能及安全性研究[D];閩南師范大學;2016年

2 陳亮;對象存儲系統(tǒng)的客戶端設(shè)計和負載均衡研究[D];華中科技大學;2007年

3 朱堯;對象存儲系統(tǒng)安全檢測技術(shù)的研究[D];華中科技大學;2009年

4 戴毅;基于對象存儲系統(tǒng)負載均衡技術(shù)研究[D];華中科技大學;2007年

5 張偉;對象存儲系統(tǒng)中數(shù)據(jù)通道的設(shè)計與實現(xiàn)[D];華中科技大學;2008年

6 張順達;對象存儲系統(tǒng)的元數(shù)據(jù)管理[D];華中科技大學;2006年

7 衣國壘;基于中心節(jié)點架構(gòu)的大規(guī)模數(shù)據(jù)對象存儲系統(tǒng)[D];清華大學;2013年

8 田亞坤;基于對象存儲系統(tǒng)中元數(shù)據(jù)管理方法的研究[D];哈爾濱工程大學;2010年

9 盧錦;對象存儲系統(tǒng)中數(shù)據(jù)私密性保護與共享[D];華中科技大學;2012年

10 劉佳;基于對象相關(guān)性的緩存策略的設(shè)計與實現(xiàn)[D];華中科技大學;2009年

本文編號：2498858