發(fā)布時間：2018-03-01 23:06

  本文關(guān)鍵詞： 混合存儲 非易失性隨機存儲器 固態(tài)盤 磁盤　出處：《上海交通大學(xué)》2013年碩士論文　論文類型：學(xué)位論文

【摘要】：目前存儲系統(tǒng)的發(fā)展趨向于大容量、低成本和高性能，而任何單一的存儲器件如非易失性隨機存儲器、固態(tài)盤、磁盤等由于其物理特性的限制，并不能滿足以上需求。混合存儲充分利用不同存儲器件的特性組成高效的存儲系統(tǒng)，既能支持存儲系統(tǒng)容量的大幅擴展，又能在保持系統(tǒng)低成本的前提下，，顯著提高存儲系統(tǒng)的性能，成為目前存儲技術(shù)發(fā)展的方向。 本文首先介紹了混合存儲系統(tǒng)的概念及其發(fā)展歷程，以及目前各種混合存儲系統(tǒng)所面臨的問題。在此基礎(chǔ)上設(shè)計和實現(xiàn)了一個基于NVRAM、SSD、HDD的混合存儲系統(tǒng)Trident。論文的主要工作如下： (1)對現(xiàn)有的主流持久存儲器件的特性進(jìn)行了研究，在隨機性能、順序性能、容量、成本、性能等幾個方面進(jìn)行了對比。 (2)對混合存儲系統(tǒng)的發(fā)展歷程進(jìn)行了研究，并深入分析了混合存儲設(shè)計中的關(guān)鍵技術(shù)問題。 (3)設(shè)計并實現(xiàn)了基于NVRAM、SSD、HDD的混合存儲系統(tǒng)Trident，主要包括架構(gòu)、映射策略、熱點數(shù)據(jù)識別、數(shù)據(jù)的緩存和遷移等方面。 (4)使用人工合成負(fù)載和實際工作負(fù)載對基于HDD的存儲系統(tǒng)、Facebook的FlashCache混合存儲系統(tǒng)、以及Trident混合存儲系統(tǒng)的隨機性能和順序性能進(jìn)行了對比測試，并且對比了FlashCache和Trident中的緩存命中率。 測試結(jié)果顯示，Trident混合存儲系統(tǒng)的順序讀寫性能接近基于HDD的存儲系統(tǒng)，隨機IOPS部分超過FlashCache，緩存命中率接近FlashCache，且對SSD的寫入次數(shù)也少于FlashCache。系統(tǒng)通過Linux內(nèi)核模塊實現(xiàn)，對上層用戶的訪問透明。本論文的研究成果對于其它的混合存儲系統(tǒng)設(shè)計與實現(xiàn)也具有較好的借鑒價值。
[Abstract]:At present, the development of memory system tends to be large capacity, low cost and high performance. However, any single memory device, such as non-volatile random access memory, solid state disk, disk, etc., is limited by its physical characteristics. Hybrid storage can make full use of the characteristics of different memory devices to form an efficient storage system, which can not only support the large expansion of storage system capacity, but also maintain the low cost of the system. Improving the performance of storage system has become the direction of storage technology development. This paper first introduces the concept of hybrid storage system and its development process, as well as the problems faced by various hybrid storage systems. On this basis, we design and implement a hybrid storage system based on NVRAMN SSD-HDD. The main work of this paper is as follows:. 1) the characteristics of existing mainstream persistent memory devices are studied and compared in random performance, sequential performance, capacity, cost, performance and so on. In this paper, the development of hybrid storage system is studied, and the key technical problems in hybrid storage design are analyzed. The design and implementation of a hybrid storage system based on NVRAMN SSDN HDD includes architecture, mapping strategy, hot data identification, data cache and migration. Using synthetic load and actual workload, the random and sequential performances of FlashCache hybrid storage system based on HDD and Trident hybrid storage system are compared and tested. The cache hit ratio in FlashCache and Trident is compared. The test results show that the sequential read and write performance of the Trident hybrid storage system is similar to that of the HDD based storage system. The random IOPS is more than Flash Cache. the cache hit ratio is close to Flash Cache.And the number of writing to SSD is also less than that of Flash Cache. the system is implemented through the Linux kernel module. The research results of this paper can also be used for reference in the design and implementation of other hybrid storage systems.
【學(xué)位授予單位】：上海交通大學(xué)
【學(xué)位級別】：碩士
【學(xué)位授予年份】：2013
【分類號】：TP333

【相似文獻(xiàn)】

相關(guān)期刊論文 前10條

1 張詢;速度快容量大的新型存儲系統(tǒng)[J];世界電子元器件;1997年09期

2 楊春燕;用SAN構(gòu)筑現(xiàn)代企業(yè)信息存儲系統(tǒng)的優(yōu)勢[J];內(nèi)蒙古電力技術(shù);2002年S1期

3 ;專家觀點[J];中國計算機用戶;2006年43期

4 ;HDS AMS 2000系列的創(chuàng)新之道[J];通信世界;2009年08期

5 金文新;;大型高校圖書館計算機網(wǎng)絡(luò)集成系統(tǒng)建設(shè)[J];情報科學(xué);2009年04期

6 李靜;;淺談HIS系統(tǒng)對服務(wù)器和存儲設(shè)備的要求及設(shè)計方案[J];信息與電腦(理論版);2009年11期

7 劉剛;張海濤;李瑞東;張強;;一種基于模塊化設(shè)計的NAS集群存儲系統(tǒng)[J];微計算機信息;2011年05期

8 于耳;;建立面向應(yīng)用的存儲系統(tǒng)[J];中國教育網(wǎng)絡(luò);2011年06期

9 ;數(shù)字視頻存儲系統(tǒng)[J];光學(xué)精密工程;1977年06期

10 ;BMD1廣播級音像資料存儲系統(tǒng)——DVD的質(zhì)量、VCD的價格[J];電子與電腦;1998年10期

相關(guān)會議論文 前10條

1 趙志剛;;存儲系統(tǒng)在企業(yè)信息化中的應(yīng)用[A];2005年安徽通信論文集[C];2006年

2 朱平;朱建濤;高劍剛;蔣金虎;;高性能計算存儲關(guān)鍵技術(shù)研究[A];2010年第16屆全國信息存儲技術(shù)大會（IST2010）論文集[C];2010年

3 周博;宿紹瑩;陳曾平;;基于CPCI總線的寬帶雷達(dá)數(shù)據(jù)傳輸存儲系統(tǒng)設(shè)計[A];全國第二屆信號處理與應(yīng)用學(xué)術(shù)會議�？痆C];2008年

4 周功業(yè);周江;陳希;陳進(jìn)才;;寄生存儲原理及實現(xiàn)機制[A];第15屆全國信息存儲技術(shù)學(xué)術(shù)會議論文集[C];2008年

5 汪黎;章文嵩;楊學(xué)軍;;Cfslight:一個新型的輕量級對象存儲集群文件系統(tǒng)[A];2006年全國開放式分布與并行計算學(xué)術(shù)會議論文集（一）[C];2006年

6 聶明;;構(gòu)建海量存儲系統(tǒng) 提升媒體競爭力[A];中國新聞技術(shù)工作者聯(lián)合會2008年學(xué)術(shù)年會論文集（下）[C];2008年

7 王克敏;張璽;胡江凱;王毅濤;;NWP資料歸檔方法及其存儲系統(tǒng)的應(yīng)用[A];中國氣象學(xué)會2006年年會“中尺度天氣動力學(xué)、數(shù)值模擬和預(yù)測”分會場論文集[C];2006年

8 劉湛明;吳柳堅;;數(shù)字電視臺的建設(shè)[A];2007第二屆全國廣播電視技術(shù)論文集2（下）[C];2007年

9 羅香玉;李傳佑;汪蕓;;糾刪碼容錯組的布局策略研究[A];第18屆全國多媒體學(xué)術(shù)會議（NCMT2009）、第5屆全國人機交互學(xué)術(shù)會議（CHCI2009）、第5屆全國普適計算學(xué)術(shù)會議（PCC2009）論文集[C];2009年

10 林茂;張峰;許濤;塔依爾;劉磊;;構(gòu)建石油地震勘探開發(fā)需求的PC集群存儲系統(tǒng)[A];第十屆全國信息技術(shù)化工應(yīng)用年會論文集[C];2005年

相關(guān)重要報紙文章 前10條

1 朗飛;IBM“冰立方”就像搭積木[N];中國計算機報;2006年

2 郭濤;MediaGrid既不是SAN也不是NAS[N];中國計算機報;2007年

3 ;IBM收購存儲解決方案公司[N];計算機世界;2007年

4 本報記者　　張峰;知己知彼建存儲（上）[N];網(wǎng)絡(luò)世界;2006年

5 森林;NAS資源存儲系統(tǒng)[N];中國電腦教育報;2002年

6 Hifn(漢帆)杭州信息技術(shù)有限公司 馬劍杰;自動精簡配置：提升存儲利用率有絕招[N];中國計算機報;2009年

7 本報記者 徐恒;面臨機遇 中國新型存儲業(yè)合作求創(chuàng)新[N];中國電子報;2011年

8 李想 徐晉;福州電業(yè)局研發(fā)個人文件安全存儲系統(tǒng)[N];中國電力報;2006年

9 ;HDS推出企業(yè)入門級存儲系統(tǒng)[N];計算機世界;2005年

10 ;戴爾EMC打造新一代高容量存儲系統(tǒng)[N];人民郵電;2004年

相關(guān)博士學(xué)位論文 前10條

1 杜明;基于Flash混合存儲的電子商務(wù)數(shù)據(jù)庫性能優(yōu)化研究[D];東華大學(xué);2013年

2 陸承濤;存儲系統(tǒng)性能管理問題的研究[D];華中科技大學(xué);2010年

3 聶雪軍;內(nèi)容感知存儲系統(tǒng)中信息信息生命周期管理關(guān)鍵技術(shù)研究[D];華中科技大學(xué);2011年

4 羅東健;大規(guī)模存儲系統(tǒng)高可靠性關(guān)鍵技術(shù)研究[D];華中科技大學(xué);2011年

5 聶雪軍;內(nèi)容感知存儲系統(tǒng)中信息生命周期管理關(guān)鍵技術(shù)研究[D];華中科技大學(xué);2010年

6 王玉林;多節(jié)點容錯存儲系統(tǒng)的數(shù)據(jù)與緩存組織研究[D];電子科技大學(xué);2010年

7 施展;基于本體的存儲系統(tǒng)管理研究[D];華中科技大學(xué);2011年

8 姜明華;基于冗余智能存儲通道的存儲系統(tǒng)關(guān)鍵技術(shù)研究[D];華中科技大學(xué);2011年

9 黃繼鵬;高速高可靠小型數(shù)字視頻存儲系統(tǒng)的設(shè)計與實現(xiàn)[D];中國科學(xué)院研究生院（長春光學(xué)精密機械與物理研究所）;2012年

10 劉科;內(nèi)容感知存儲系統(tǒng)中的信息檢索關(guān)鍵技術(shù)研究[D];華中科技大學(xué);2012年

相關(guān)碩士學(xué)位論文 前10條

1 祝青;混合存儲系統(tǒng)研究[D];上海交通大學(xué);2013年

2 劉金壘;層次式并行混合存儲系統(tǒng)關(guān)鍵技術(shù)研究[D];國防科學(xué)技術(shù)大學(xué);2011年

3 陸正武;面向流媒體應(yīng)用存儲系統(tǒng)的研究與實現(xiàn)[D];華中科技大學(xué);2004年

4 杜睿;基于IP-SAN技術(shù)的石化企業(yè)數(shù)據(jù)集中存儲系統(tǒng)的設(shè)計與實現(xiàn)[D];華東理工大學(xué);2010年

5 金強;基于HBase的RDF存儲系統(tǒng)的研究與設(shè)計[D];浙江大學(xué);2011年

6 余智敏;數(shù)字化圖書館的數(shù)據(jù)存儲技術(shù)的研究[D];武漢理工大學(xué);2006年

7 蔣亞群;基于DLX體系結(jié)構(gòu)的微處理器核的設(shè)計與實現(xiàn)[D];中國人民解放軍國防科學(xué)技術(shù)大學(xué);2002年

8 陶博舟;磁盤陣列快照系統(tǒng)的設(shè)計與實現(xiàn)[D];華中科技大學(xué);2007年

9 張小艷;基于嵌入式技術(shù)的USB存儲系統(tǒng)的設(shè)計與實現(xiàn)[D];內(nèi)蒙古大學(xué);2011年

10 亓偉;關(guān)系數(shù)據(jù)庫存儲子系統(tǒng)研究與實現(xiàn)[D];清華大學(xué);2005年

本文編號：1553963