【摘要】：海量小文件聚合存儲(chǔ)技術(shù)大多以目錄或邏輯目錄為單位,將小文件聚合為實(shí)際存儲(chǔ)的大文件并建立小文件的元數(shù)據(jù)信息,實(shí)現(xiàn)小文件的快速訪問(wèn).傳統(tǒng)小文件聚合存儲(chǔ)技術(shù)讀寫(xiě)操作性能受目錄結(jié)構(gòu)的影響差別較大.在現(xiàn)有研究成果的基礎(chǔ)上,分析不同目錄結(jié)構(gòu)聚合空間的特征,提出大空間聚合存儲(chǔ)技術(shù)和元數(shù)據(jù)分裂技術(shù),為不同目錄結(jié)構(gòu)的海量小文件存儲(chǔ)提供通用的解決方法,并基于開(kāi)源分布式文件系統(tǒng)HDFS實(shí)現(xiàn)了一個(gè)分布式海量小文件系統(tǒng)SMDFS.測(cè)試表明,大空間聚合技術(shù)能有效支持不同目錄結(jié)構(gòu)的海量小文件數(shù)據(jù),相較于SMDFS早期版本,小文件數(shù)據(jù)裝載和訪問(wèn)性能均有很大程度的提高.

【相似文獻(xiàn)】

相關(guān)期刊論文 前10條

1 劉明;張軍平;;并行文件系統(tǒng)的應(yīng)用探討[J];軟件;2010年11期

2 張?jiān)谫F;張立強(qiáng);李瑞東;文中領(lǐng);張海濤;;一種適用于集群文件系統(tǒng)分級(jí)存儲(chǔ)的分布式鎖設(shè)計(jì)與分析[J];計(jì)算機(jī)研究與發(fā)展;2012年S1期

3 周恩強(qiáng);董勇;張偉;盧宇彤;;對(duì)象存儲(chǔ)并行文件系統(tǒng)小文件性能優(yōu)化研究[J];計(jì)算機(jī)工程與科學(xué);2013年12期

4 陳禹;;用戶心中的誤區(qū)[J];中國(guó)計(jì)算機(jī)用戶;2007年10期

5 萌萌;;老命令新用 讓閃存支持單個(gè)大容量文件[J];電腦迷;2010年03期

6 蔣玲;林海冪;;基于C++的精簡(jiǎn)式文件系統(tǒng)在嵌入式系統(tǒng)中的應(yīng)用[J];西華大學(xué)學(xué)報(bào)(自然科學(xué)版);2010年05期

7 ;施樂(lè)生產(chǎn)中心 8233/8234——工程文件系統(tǒng)簡(jiǎn)介[J];導(dǎo)彈與航天運(yùn)載技術(shù);1998年01期

8 ;施樂(lè)8855數(shù)碼工程文件系統(tǒng)[J];計(jì)算機(jī)輔助設(shè)計(jì)與制造;2000年01期

9 全小寧;AIX系統(tǒng)的故障解決方法[J];鐵路計(jì)算機(jī)應(yīng)用;2004年08期

10 孫凝暉;并行文件系統(tǒng)的設(shè)計(jì)[J];計(jì)算機(jī)學(xué)報(bào);1994年12期

相關(guān)會(huì)議論文 前3條

1 王永瑞;熊劍平;;基于CF卡的特定FAT文件系統(tǒng)的軟硬件設(shè)計(jì)與實(shí)現(xiàn)[A];2008中國(guó)儀器儀表與測(cè)控技術(shù)進(jìn)展大會(huì)論文集（Ⅲ）[C];2008年

2 王雪嬌;錢(qián)軍;溫東新;張展;崔忠強(qiáng);;基于Linux虛擬文件系統(tǒng)故障注入器的設(shè)計(jì)與實(shí)現(xiàn)[A];第六屆中國(guó)測(cè)試學(xué)術(shù)會(huì)議論文集[C];2010年

3 錢(qián)迎進(jìn);金士堯;肖儂;;大規(guī)模集群文件系統(tǒng)中的I/O擁塞控制機(jī)制[A];2010年第16屆全國(guó)信息存儲(chǔ)技術(shù)大會(huì)（IST2010）論文集[C];2010年

相關(guān)重要報(bào)紙文章 前10條

1 李檸 許冰;Linux的“心”事[N];中國(guó)計(jì)算機(jī)報(bào);2000年

2 河北 廉育功;Linux技巧[N];中國(guó)電腦教育報(bào);2001年

3 陽(yáng)光;一臺(tái)PC機(jī)上安裝Win98、NT、Linux[N];中國(guó)礦業(yè)報(bào);2000年

4 小雨;FAT享年25歲——觸摸未來(lái)文件系統(tǒng)[N];電腦報(bào);2003年

5 北京捷華潤(rùn)公司 郝常杰;對(duì)象存儲(chǔ)：塊和文件之外的存儲(chǔ)形式[N];中國(guó)計(jì)算機(jī)報(bào);2006年

6 門(mén)宣;走進(jìn)Linux2.4的精彩世界[N];中國(guó)計(jì)算機(jī)報(bào);2001年

7 ;驅(qū)動(dòng)器與DOS兼容文件系統(tǒng)[N];電腦報(bào);2002年

8 任勇;在Linux中訪問(wèn)DOS的方法[N];大眾科技報(bào);2000年

9 ;Veritas展示用于Oracle9i RAC的群集系統(tǒng)[N];計(jì)算機(jī)世界;2003年

10 趙宇明;建設(shè)完美的存儲(chǔ)世界[N];網(wǎng)絡(luò)世界;2008年

相關(guān)博士學(xué)位論文 前3條

1 陳杰;本地文件系統(tǒng)數(shù)據(jù)更新模式研究[D];華中科技大學(xué);2014年

2 孫凝暉;可擴(kuò)展I/O的研究和參考實(shí)現(xiàn)[D];中國(guó)科學(xué)院研究生院（計(jì)算技術(shù)研究所）;1999年

3 錢(qián)迎進(jìn);大規(guī)模Lustre集群文件系統(tǒng)關(guān)鍵技術(shù)的研究[D];國(guó)防科學(xué)技術(shù)大學(xué);2011年

相關(guān)碩士學(xué)位論文 前10條

1 顧喜梅;文件系統(tǒng)及磁盤(pán)管理實(shí)現(xiàn)機(jī)制深入研究[D];南京航空航天大學(xué);2002年

2 劉洋;閃存文件系統(tǒng)的底層結(jié)構(gòu)與性能研究[D];復(fù)旦大學(xué);2009年

3 蘇鵬;基于智能卡的閃存文件系統(tǒng)的研究[D];武漢科技大學(xué);2010年

4 杜聰;機(jī)群文件系統(tǒng)的實(shí)現(xiàn)、評(píng)測(cè)與分析[D];中國(guó)科學(xué)院研究生院（計(jì)算技術(shù)研究所）;2000年

5 胡永奎;對(duì)象存儲(chǔ)設(shè)備中文件系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[D];解放軍信息工程大學(xué);2010年

6 葉宇鵬;安全私有云存儲(chǔ)的文件系統(tǒng)數(shù)據(jù)組織設(shè)計(jì)[D];華南理工大學(xué);2013年

7 劉曉東;并行文件系統(tǒng)緩存技術(shù)的研究[D];北京交通大學(xué);2013年

8 武寧遠(yuǎn);基于藍(lán)光技術(shù)的UDF文件系統(tǒng)的開(kāi)發(fā)與研究[D];西安電子科技大學(xué);2009年

9 劉媛;個(gè)人云存儲(chǔ)技術(shù)研究[D];電子科技大學(xué);2010年

10 慎涵;一種基于PCM的文件系統(tǒng)設(shè)計(jì)與實(shí)現(xiàn)[D];華中科技大學(xué);2013年

，

本文編號(hào)：2572612