高能物理環(huán)境中混合存儲系統(tǒng)的設計與優(yōu)化
本文選題:海量存儲系統(tǒng) + 高能物理。 參考:《計算機科學》2017年10期
【摘要】:高能物理是典型的數(shù)據(jù)密集型計算環(huán)境,數(shù)據(jù)處理包括模擬計算、重建計算以及物理分析。其中大文件計算占據(jù)較大比重,并且高能物理文件訪問模式以跳讀為主,因此大文件的高速訪問成為整個系統(tǒng)性能的重要影響因素。首先剖析傳統(tǒng)高能物理計算環(huán)境的典型架構及其文件訪問模式的特點,介紹混合存儲模式在高能物理計算環(huán)境中的優(yōu)勢,總結其數(shù)據(jù)訪問方式的特點,對其各種讀寫方式進行數(shù)據(jù)測試;然后提出針對該環(huán)境的混合存儲系統(tǒng)的部署設計和優(yōu)化,使該環(huán)境下的數(shù)據(jù)讀寫性能得到明顯提高;同時將成本因素考慮到系統(tǒng)設計中,實現(xiàn)了一個低成本高性能的存儲系統(tǒng)。測試表明,混合存儲系統(tǒng)在高能物理等大數(shù)據(jù)存儲系統(tǒng)中具有高效的I/O性能。文中全面分析了影響其性能的各種因素,實現(xiàn)了最優(yōu)化配置的低成本高性能混合存儲系統(tǒng),并對該系統(tǒng)的未來發(fā)展趨勢進行了分析和展望。
[Abstract]:High energy physics is a typical data intensive computing environment. Data processing includes analog computing, reconstruction calculation and physical analysis. Large file computing occupies a large proportion, and high energy physical file access mode is dominated by skipping, so the high speed access of large files has become an important factor in the whole system performance. The typical architecture of high energy physics computing environment and the characteristics of file access mode are introduced. The advantages of hybrid storage mode in high energy physical computing environment are introduced, the characteristics of the data access mode are summarized, and the data of various reading and writing methods are tested. Then, the design and optimization of the mixed storage system for this environment are put forward, so that the design and optimization of the hybrid storage system for this environment are proposed. The performance of data reading and writing in the environment has been greatly improved. At the same time, the cost factor is considered in the system design, and a low cost and high performance storage system has been realized. The test shows that the hybrid storage system has high performance I/O performance in high energy physics and other large data storage systems. The low-cost and high-performance hybrid storage system with optimized configuration is analyzed, and the future development trend of the system is analyzed and prospected.
【作者單位】: 中國科學院大學物理科學學院;中國科學院高能物理研究所;
【基金】:國家自然科學基金項目:高能物理實驗的大規(guī)模離線數(shù)據(jù)存儲技術研究(11575223);國家自然科學基金項目:基于SDN的高能物理云數(shù)據(jù)中心彈性網(wǎng)絡關鍵技術研究與應用(11605224)資助 國家重點研發(fā)計劃項目:科學大數(shù)據(jù)管理系統(tǒng)(2016YFB1000605)
【分類號】:TP333
【相似文獻】
相關期刊論文 前10條
1 ;領先的技術是應用的保證──貴州中行存儲系統(tǒng)淺析[J];計算機周刊;2001年43期
2 李紅;藍光存儲系統(tǒng) 光盤容量高達23G[J];信息記錄材料;2004年01期
3 ;存儲系統(tǒng) 金融行業(yè)應用卓越獎 醫(yī)療行業(yè)應用卓越獎[J];每周電腦報;2004年20期
4 諾拉;EMC Symmetrix DMX-3存儲系統(tǒng) 超大容量 高速存取[J];中國計算機用戶;2005年31期
5 謝世誠;;浪潮推出4Gb光纖存儲系統(tǒng)[J];微型機與應用;2006年07期
6 ;昆騰分級存儲系統(tǒng)[J];軟件世界;2009年11期
7 ;超低功耗云存儲系統(tǒng)或被地方政府看好[J];中國有線電視;2013年08期
8 湯赫男;;云存儲系統(tǒng)的分析與應用研究[J];計算機光盤軟件與應用;2013年24期
9 諶偉;;云存儲系統(tǒng)的分析與應用探討[J];數(shù)字技術與應用;2013年10期
10 雅君;跟上企業(yè)的匆匆腳步——利用HP SureStoreEXP256構筑企業(yè)存儲系統(tǒng)[J];中國計算機用戶;2000年08期
相關會議論文 前10條
1 趙志剛;;存儲系統(tǒng)在企業(yè)信息化中的應用[A];2005年安徽通信論文集[C];2006年
2 黃曉峰;張杰;;礦井信息中心存儲系統(tǒng)設計[A];安全高效礦井機電裝備及信息化技術——陜西省煤炭學會學術年會論文集(2011)[C];2011年
3 孫哲;李昌銀;;構建核電高可用云存儲系統(tǒng)[A];2012電力行業(yè)信息化年會優(yōu)秀論文專輯[C];2012年
4 汪位龍;;設計院存儲系統(tǒng)建設初探[A];中國公路學會計算機應用分會2004年年會學術論文集[C];2004年
5 梅松竹;李宗伯;;Storage 7000系列混合存儲系統(tǒng)分析[A];2009年中國高校通信類院系學術研討會論文集[C];2009年
6 孫哲;李昌銀;;DeDu:基于云計算的冗余刪除存儲系統(tǒng)[A];電力行業(yè)新一代信息技術研討會論文集[C];2011年
7 高小伍;黨齊民;林晨;;校園網(wǎng)存儲系統(tǒng)的研究與實現(xiàn)[A];中國高等教育學會教育信息化分會第十次學術年會論文集[C];2010年
8 陳天洲;章鐵飛;嚴力科;鄧迎;;MEMS存儲系統(tǒng)存儲優(yōu)化研究[A];第三屆和諧人機環(huán)境聯(lián)合學術會議(HHME2007)論文集[C];2007年
9 那文武;孟曉p,
本文編號:1965795
本文鏈接:http://sikaile.net/kejilunwen/jisuanjikexuelunwen/1965795.html