本文選題：Lustre + 高性能計(jì)算　； 參考：《計(jì)算機(jī)科學(xué)》2015年09期

【摘要】：Lustre的重啟恢復(fù)算法需要集群中所有客戶端在指定的恢復(fù)時(shí)間窗口內(nèi)與服務(wù)器重新建立連接,客戶端重傳未提交的事務(wù)請(qǐng)求,服務(wù)器嚴(yán)格按照事務(wù)序列號(hào)重放所有未提交的事務(wù),要求過(guò)于嚴(yán)格。針對(duì)Lustre可恢復(fù)性不強(qiáng)的缺點(diǎn),提出了基于版本的恢復(fù)和共享時(shí)提交算法,它們分別對(duì)Lustre現(xiàn)有的元數(shù)據(jù)更新和恢復(fù)機(jī)制進(jìn)行了改進(jìn)和擴(kuò)展,根據(jù)事務(wù)之間的依賴(lài)關(guān)系,允許客戶端在更為寬松的條件下進(jìn)行恢復(fù)并加入到集群而不被驅(qū)逐,提高了Lustre文件系統(tǒng)的可用性和可恢復(fù)性。最后通過(guò)一系列實(shí)驗(yàn)對(duì)改進(jìn)后的算法的性能進(jìn)行了評(píng)估。
[Abstract]:Lustre's restart recovery algorithm requires all clients in the cluster to re-establish connections with the server within a specified recovery time window. The client retransmits uncommitted transaction requests, and the server replays all uncommitted transactions strictly according to the transaction sequence number. The requirements are too strict. Aiming at the weakness of Lustre's recoverability, a version-based recovery and shared-time commit algorithm is proposed, which improves and extends Lustre's existing metadata update and recovery mechanism, according to the dependency relationship between transactions. Allowing clients to recover and join the cluster without being evicted under looser conditions improves the availability and recoverability of the Lustre file system. Finally, the performance of the improved algorithm is evaluated through a series of experiments.
【作者單位】： 中國(guó)衛(wèi)星海上測(cè)控部技術(shù)部;
【基金】：國(guó)家973計(jì)劃資助項(xiàng)目(2009CB723803) 國(guó)家自然科學(xué)基金資助項(xiàng)目(60873120)資助
【分類(lèi)號(hào)】：TP333;TP309

【參考文獻(xiàn)】

相關(guān)期刊論文 前2條

1 錢(qián)迎進(jìn);金士堯;肖儂;;Lustre文件系統(tǒng)I/O鎖的應(yīng)用與優(yōu)化[J];計(jì)算機(jī)工程與應(yīng)用;2011年03期

2 錢(qián)迎進(jìn);肖儂;金士堯;;Lustre分布式鎖管理器的分析與改進(jìn)[J];計(jì)算機(jī)工程與科學(xué);2009年S1期

相關(guān)博士學(xué)位論文 前1條

1 錢(qián)迎進(jìn);大規(guī)模Lustre集群文件系統(tǒng)關(guān)鍵技術(shù)的研究[D];國(guó)防科學(xué)技術(shù)大學(xué);2011年

【共引文獻(xiàn)】

相關(guān)期刊論文 前10條

1 熊安萍;葛軍;鄒洋;;Lustre文件系統(tǒng)中范圍鎖機(jī)制的應(yīng)用研究[J];重慶郵電大學(xué)學(xué)報(bào)(自然科學(xué)版);2011年02期

2 王巍;李旺;;基于Lustre文件系統(tǒng)的MPI-IO編程接口改進(jìn)[J];電子技術(shù)應(yīng)用;2012年05期

3 宋龍;李延杰;韓錦寧;;基于Lustre文件系統(tǒng)的分布式地理環(huán)境構(gòu)建[J];地理空間信息;2015年02期

4 張?jiān)谫F;張立強(qiáng);李瑞東;文中領(lǐng);張海濤;;一種適用于集群文件系統(tǒng)分級(jí)存儲(chǔ)的分布式鎖設(shè)計(jì)與分析[J];計(jì)算機(jī)研究與發(fā)展;2012年S1期

5 李林林;吳萬(wàn)國(guó);孫良旭;;并行文件系統(tǒng)Lustre細(xì)粒度I/O性能優(yōu)化[J];計(jì)算機(jī)工程與應(yīng)用;2012年17期

6 金紅琳;劉波;;分布式鎖的Petri網(wǎng)建模及死鎖檢測(cè)[J];計(jì)算機(jī)科學(xué);2011年08期

7 朱小謙;孫超;孟祥飛;張保;馮景華;;NEMO模式系統(tǒng)基于“天河一號(hào)”的存儲(chǔ)性能分析與優(yōu)化[J];計(jì)算機(jī)應(yīng)用;2012年05期

8 馬艷軍;呂爽;劉一謙;;集群文件系統(tǒng)lustre的介紹及應(yīng)用[J];科技信息;2012年05期

9 劉戀;鄭彪;龔奕利;;分布式文件系統(tǒng)中元數(shù)據(jù)操作的優(yōu)化[J];計(jì)算機(jī)應(yīng)用;2012年12期

10 閆鵬飛;吳雪麗;蔡杰明;馬留英;劉振軍;;基于廣域存儲(chǔ)系統(tǒng)的副本技術(shù)研究[J];網(wǎng)絡(luò)新媒體技術(shù);2015年03期

相關(guān)博士學(xué)位論文 前4條

1 伍江江;面向服務(wù)應(yīng)急響應(yīng)的數(shù)據(jù)保護(hù)關(guān)鍵技術(shù)研究[D];國(guó)防科學(xué)技術(shù)大學(xué);2012年

2 楊磊;基于P2P結(jié)構(gòu)的廣域分布式存儲(chǔ)相關(guān)技術(shù)研究[D];湖南大學(xué);2013年

3 毛華堅(jiān);云環(huán)境中的移動(dòng)文件存儲(chǔ)和時(shí)空數(shù)據(jù)分析關(guān)鍵技術(shù)研究[D];國(guó)防科學(xué)技術(shù)大學(xué);2013年

4 萬(wàn)勇;集群系統(tǒng)中的網(wǎng)絡(luò)性能優(yōu)化方法研究[D];華中科技大學(xué);2013年

相關(guān)碩士學(xué)位論文 前10條

1 彭龍;分布式文件系統(tǒng)CeipFS的設(shè)計(jì)與實(shí)現(xiàn)[D];國(guó)防科學(xué)技術(shù)大學(xué);2011年

2 許敏;分布式文件系統(tǒng)容錯(cuò)機(jī)制的研究與實(shí)現(xiàn)[D];電子科技大學(xué);2012年

3 景蕊;分布式文件系統(tǒng)下數(shù)據(jù)校驗(yàn)策略的研究與改進(jìn)[D];吉林大學(xué);2013年

4 史曉嬋;基于eyeOS的網(wǎng)絡(luò)瀏覽器的設(shè)計(jì)與實(shí)現(xiàn)[D];哈爾濱工業(yè)大學(xué);2012年

5 張強(qiáng);基于模塊化的集群NAS存儲(chǔ)系統(tǒng)的研究與實(shí)現(xiàn)[D];山東大學(xué);2013年

6 石彥博;網(wǎng)絡(luò)硬盤(pán)系統(tǒng)中的數(shù)據(jù)私密性與一致性技術(shù)研究[D];遼寧師范大學(xué);2013年

7 詹海鯨;群智感知環(huán)境下的分布式文件系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[D];華南理工大學(xué);2013年

8 王建光;大規(guī)模時(shí)間序列數(shù)據(jù)存儲(chǔ)系統(tǒng)的研究與實(shí)現(xiàn)[D];華中科技大學(xué);2013年

9 儲(chǔ)兵;基于粗糙集的神經(jīng)網(wǎng)絡(luò)在數(shù)據(jù)挖掘中的應(yīng)用研究[D];江蘇科技大學(xué);2013年

10 申彤;云存儲(chǔ)網(wǎng)關(guān)的分布式緩存系統(tǒng)的研究與實(shí)現(xiàn)[D];國(guó)防科學(xué)技術(shù)大學(xué);2012年

【二級(jí)參考文獻(xiàn)】

相關(guān)期刊論文 前2條

1 姚念民,舒繼武,鄭緯民;SAN中的分布式鎖機(jī)制[J];計(jì)算機(jī)研究與發(fā)展;2005年02期

2 趙旺;曹強(qiáng);;分布式并行文件系統(tǒng)中鎖管理的研究[J];計(jì)算機(jī)應(yīng)用研究;2007年09期

相關(guān)博士學(xué)位論文 前2條

1 吳思寧;機(jī)群文件系統(tǒng)服務(wù)器關(guān)鍵技術(shù)研究[D];中國(guó)科學(xué)院研究生院（計(jì)算技術(shù)研究所）;2004年

2 史小冬;分布式文件系統(tǒng)高可用問(wèn)題研究[D];中國(guó)科學(xué)院研究生院（計(jì)算技術(shù)研究所）;2002年

相關(guān)碩士學(xué)位論文 前2條

1 范勇;藍(lán)鯨分布式文件系統(tǒng)數(shù)據(jù)一致性語(yǔ)義研究[D];中國(guó)科學(xué)院研究生院（計(jì)算技術(shù)研究所）;2006年

2 李暉;基于日志的機(jī)群文件系統(tǒng)高可用關(guān)鍵技術(shù)研究[D];中國(guó)科學(xué)院研究生院（計(jì)算技術(shù)研究所）;2005年

【相似文獻(xiàn)】

相關(guān)期刊論文 前10條

1 ;文件、文件系統(tǒng)、文件庫(kù)[J];電子科技文摘;2001年01期

2 鐘忻,慕春棣;基于閃存的文件系統(tǒng)的實(shí)現(xiàn)[J];計(jì)算機(jī)工程與應(yīng)用;2003年24期

3 劉欣;淺談HP小型機(jī)文件維護(hù)經(jīng)驗(yàn)[J];天津通信技術(shù);2004年02期

4 景志潔,朱建濤;基于直接數(shù)據(jù)訪問(wèn)的并行文件系統(tǒng)[J];計(jì)算機(jī)工程;2004年S1期

5 曾碧卿,陳敏,鄧會(huì)敏,曾志文;一種基于集群的新型并行文件系統(tǒng)研究[J];信息技術(shù);2005年08期

6 曾碧卿,陳志剛,呂西紅,曾志文;集群計(jì)算中并行文件系統(tǒng)的設(shè)計(jì)研究[J];微電子學(xué)與計(jì)算機(jī);2005年03期

7 胥怡心;張其善;;智能IC卡文件系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[J];微計(jì)算機(jī)應(yīng)用;2007年01期

8 吳俊軍;朱建新;白U，

本文編號(hào)：2087919