高能物理環(huán)境中混合存儲(chǔ)系統(tǒng)的設(shè)計(jì)與優(yōu)化
本文選題:海量存儲(chǔ)系統(tǒng) + 高能物理。 參考:《計(jì)算機(jī)科學(xué)》2017年10期
【摘要】:高能物理是典型的數(shù)據(jù)密集型計(jì)算環(huán)境,數(shù)據(jù)處理包括模擬計(jì)算、重建計(jì)算以及物理分析。其中大文件計(jì)算占據(jù)較大比重,并且高能物理文件訪問(wèn)模式以跳讀為主,因此大文件的高速訪問(wèn)成為整個(gè)系統(tǒng)性能的重要影響因素。首先剖析傳統(tǒng)高能物理計(jì)算環(huán)境的典型架構(gòu)及其文件訪問(wèn)模式的特點(diǎn),介紹混合存儲(chǔ)模式在高能物理計(jì)算環(huán)境中的優(yōu)勢(shì),總結(jié)其數(shù)據(jù)訪問(wèn)方式的特點(diǎn),對(duì)其各種讀寫方式進(jìn)行數(shù)據(jù)測(cè)試;然后提出針對(duì)該環(huán)境的混合存儲(chǔ)系統(tǒng)的部署設(shè)計(jì)和優(yōu)化,使該環(huán)境下的數(shù)據(jù)讀寫性能得到明顯提高;同時(shí)將成本因素考慮到系統(tǒng)設(shè)計(jì)中,實(shí)現(xiàn)了一個(gè)低成本高性能的存儲(chǔ)系統(tǒng)。測(cè)試表明,混合存儲(chǔ)系統(tǒng)在高能物理等大數(shù)據(jù)存儲(chǔ)系統(tǒng)中具有高效的I/O性能。文中全面分析了影響其性能的各種因素,實(shí)現(xiàn)了最優(yōu)化配置的低成本高性能混合存儲(chǔ)系統(tǒng),并對(duì)該系統(tǒng)的未來(lái)發(fā)展趨勢(shì)進(jìn)行了分析和展望。
[Abstract]:High energy physics is a typical data intensive computing environment. Data processing includes analog computing, reconstruction calculation and physical analysis. Large file computing occupies a large proportion, and high energy physical file access mode is dominated by skipping, so the high speed access of large files has become an important factor in the whole system performance. The typical architecture of high energy physics computing environment and the characteristics of file access mode are introduced. The advantages of hybrid storage mode in high energy physical computing environment are introduced, the characteristics of the data access mode are summarized, and the data of various reading and writing methods are tested. Then, the design and optimization of the mixed storage system for this environment are put forward, so that the design and optimization of the hybrid storage system for this environment are proposed. The performance of data reading and writing in the environment has been greatly improved. At the same time, the cost factor is considered in the system design, and a low cost and high performance storage system has been realized. The test shows that the hybrid storage system has high performance I/O performance in high energy physics and other large data storage systems. The low-cost and high-performance hybrid storage system with optimized configuration is analyzed, and the future development trend of the system is analyzed and prospected.
【作者單位】: 中國(guó)科學(xué)院大學(xué)物理科學(xué)學(xué)院;中國(guó)科學(xué)院高能物理研究所;
【基金】:國(guó)家自然科學(xué)基金項(xiàng)目:高能物理實(shí)驗(yàn)的大規(guī)模離線數(shù)據(jù)存儲(chǔ)技術(shù)研究(11575223);國(guó)家自然科學(xué)基金項(xiàng)目:基于SDN的高能物理云數(shù)據(jù)中心彈性網(wǎng)絡(luò)關(guān)鍵技術(shù)研究與應(yīng)用(11605224)資助 國(guó)家重點(diǎn)研發(fā)計(jì)劃項(xiàng)目:科學(xué)大數(shù)據(jù)管理系統(tǒng)(2016YFB1000605)
【分類號(hào)】:TP333
【相似文獻(xiàn)】
相關(guān)期刊論文 前10條
1 ;領(lǐng)先的技術(shù)是應(yīng)用的保證──貴州中行存儲(chǔ)系統(tǒng)淺析[J];計(jì)算機(jī)周刊;2001年43期
2 李紅;藍(lán)光存儲(chǔ)系統(tǒng) 光盤容量高達(dá)23G[J];信息記錄材料;2004年01期
3 ;存儲(chǔ)系統(tǒng) 金融行業(yè)應(yīng)用卓越獎(jiǎng) 醫(yī)療行業(yè)應(yīng)用卓越獎(jiǎng)[J];每周電腦報(bào);2004年20期
4 諾拉;EMC Symmetrix DMX-3存儲(chǔ)系統(tǒng) 超大容量 高速存取[J];中國(guó)計(jì)算機(jī)用戶;2005年31期
5 謝世誠(chéng);;浪潮推出4Gb光纖存儲(chǔ)系統(tǒng)[J];微型機(jī)與應(yīng)用;2006年07期
6 ;昆騰分級(jí)存儲(chǔ)系統(tǒng)[J];軟件世界;2009年11期
7 ;超低功耗云存儲(chǔ)系統(tǒng)或被地方政府看好[J];中國(guó)有線電視;2013年08期
8 湯赫男;;云存儲(chǔ)系統(tǒng)的分析與應(yīng)用研究[J];計(jì)算機(jī)光盤軟件與應(yīng)用;2013年24期
9 諶偉;;云存儲(chǔ)系統(tǒng)的分析與應(yīng)用探討[J];數(shù)字技術(shù)與應(yīng)用;2013年10期
10 雅君;跟上企業(yè)的匆匆腳步——利用HP SureStoreEXP256構(gòu)筑企業(yè)存儲(chǔ)系統(tǒng)[J];中國(guó)計(jì)算機(jī)用戶;2000年08期
相關(guān)會(huì)議論文 前10條
1 趙志剛;;存儲(chǔ)系統(tǒng)在企業(yè)信息化中的應(yīng)用[A];2005年安徽通信論文集[C];2006年
2 黃曉峰;張杰;;礦井信息中心存儲(chǔ)系統(tǒng)設(shè)計(jì)[A];安全高效礦井機(jī)電裝備及信息化技術(shù)——陜西省煤炭學(xué)會(huì)學(xué)術(shù)年會(huì)論文集(2011)[C];2011年
3 孫哲;李昌銀;;構(gòu)建核電高可用云存儲(chǔ)系統(tǒng)[A];2012電力行業(yè)信息化年會(huì)優(yōu)秀論文專輯[C];2012年
4 汪位龍;;設(shè)計(jì)院存儲(chǔ)系統(tǒng)建設(shè)初探[A];中國(guó)公路學(xué)會(huì)計(jì)算機(jī)應(yīng)用分會(huì)2004年年會(huì)學(xué)術(shù)論文集[C];2004年
5 梅松竹;李宗伯;;Storage 7000系列混合存儲(chǔ)系統(tǒng)分析[A];2009年中國(guó)高校通信類院系學(xué)術(shù)研討會(huì)論文集[C];2009年
6 孫哲;李昌銀;;DeDu:基于云計(jì)算的冗余刪除存儲(chǔ)系統(tǒng)[A];電力行業(yè)新一代信息技術(shù)研討會(huì)論文集[C];2011年
7 高小伍;黨齊民;林晨;;校園網(wǎng)存儲(chǔ)系統(tǒng)的研究與實(shí)現(xiàn)[A];中國(guó)高等教育學(xué)會(huì)教育信息化分會(huì)第十次學(xué)術(shù)年會(huì)論文集[C];2010年
8 陳天洲;章鐵飛;嚴(yán)力科;鄧迎;;MEMS存儲(chǔ)系統(tǒng)存儲(chǔ)優(yōu)化研究[A];第三屆和諧人機(jī)環(huán)境聯(lián)合學(xué)術(shù)會(huì)議(HHME2007)論文集[C];2007年
9 那文武;孟曉p,
本文編號(hào):1965795
本文鏈接:http://sikaile.net/kejilunwen/jisuanjikexuelunwen/1965795.html