天堂国产午夜亚洲专区-少妇人妻综合久久蜜臀-国产成人户外露出视频在线-国产91传媒一区二区三区

當(dāng)前位置:主頁 > 碩博論文 > 信息類博士論文 >

瓦記錄磁盤系統(tǒng)數(shù)據(jù)組織關(guān)鍵技術(shù)研究

發(fā)布時(shí)間:2018-06-16 19:39

  本文選題:瓦記錄 + 瓦記錄磁盤; 參考:《華中科技大學(xué)》2016年博士論文


【摘要】:瓦記錄技術(shù)對(duì)當(dāng)前磁盤的磁記錄介質(zhì)和制造工藝只帶來很小的改動(dòng),是當(dāng)前提高磁盤存儲(chǔ)密度非常有前景的技術(shù)。瓦記錄技術(shù)通過部分重疊磁道的方式來提高存儲(chǔ)密度。使用瓦記錄技術(shù)的磁盤稱為瓦記錄磁盤,它繼承了瓦記錄技術(shù)的所有特性。因此,瓦記錄磁盤存在一個(gè)固有的寫訪問限制:寫入數(shù)據(jù)到一個(gè)磁道會(huì)損壞后續(xù)磁道中的數(shù)據(jù),即如果后續(xù)磁道存在有效數(shù)據(jù),更新當(dāng)前磁道的數(shù)據(jù)必須重寫后續(xù)磁道的數(shù)據(jù)。因此,一個(gè)寫操作可能能會(huì)帶來大量的額外讀寫操作,產(chǎn)生寫放大問題。為了把瓦記錄磁盤整合到現(xiàn)有的存儲(chǔ)系統(tǒng)中,必須克服瓦記錄磁盤物理特性帶來的寫訪問限制。因此,必須設(shè)計(jì)新的數(shù)據(jù)組織方式來解決這個(gè)問題,同時(shí)提高瓦記錄磁盤的性能。自治式瓦記錄磁盤可以直接替換傳統(tǒng)磁盤,應(yīng)用到現(xiàn)有的存儲(chǔ)系統(tǒng)中。自治式瓦記錄磁盤通過瓦記錄轉(zhuǎn)換層來屏蔽寫訪問限制,它的作用類似于SSD中的閃存轉(zhuǎn)換層。為了提高自治式瓦記錄磁盤的性能,設(shè)計(jì)了一種基于段的瓦記錄轉(zhuǎn)換層SSTL(Segment-based Shingled Translation Layer)。首先,SSTL把瓦記錄區(qū)在徑向方向上劃分為段,段結(jié)構(gòu)的瓦記錄磁盤把寫放大單元從區(qū)大小減少到段大小。其次,在一個(gè)段內(nèi),SSTL采用段內(nèi)動(dòng)態(tài)塊映射的方式存儲(chǔ)數(shù)據(jù),有效地減少了數(shù)據(jù)的寫放大倍數(shù)。最后,SSTL使用一個(gè)小容量的非易失性設(shè)備來緩存頻繁訪問的數(shù)據(jù),最近最久未被訪問段的緩存替換算法被設(shè)計(jì)來管理非易失性緩存。實(shí)驗(yàn)結(jié)果表明:在六種不同的工作負(fù)載下,SSTL相比于循環(huán)日志結(jié)構(gòu)瓦記錄磁盤Sblock:提供了2.1-8.4倍的加速比。磁盤陣列技術(shù)廣泛應(yīng)用于當(dāng)前的存儲(chǔ)系統(tǒng)中。但是,現(xiàn)有的磁盤陣列技術(shù)是為傳統(tǒng)磁盤設(shè)計(jì)的,并沒有考慮瓦記錄磁盤的讀寫特性。針對(duì)這一問題,為瓦記錄磁盤提出了一種動(dòng)態(tài)可變長條帶的磁盤陣列技術(shù)DVS-RAID (Dynamic Variable-width Striping RAID),用于減少校驗(yàn)塊更新開銷。在數(shù)據(jù)布局上,DVS-RAID把陣列的整個(gè)地址空間劃分成條帶組。DVS-RAID的核心思想是:在一個(gè)條帶組內(nèi),DVS-RAID從來不覆蓋舊數(shù)據(jù)塊,無論是新寫入的數(shù)據(jù)塊還是更新的數(shù)據(jù)塊,DVS-RAID總是使用這些數(shù)據(jù)塊動(dòng)態(tài)生成一個(gè)新的條帶,然后以追加的形式寫入到磁盤。條帶的大小是可以變化的,可以是滿條帶,也可以是部分條帶。同時(shí),DVS-Cache的寫緩存管理算法被設(shè)計(jì)來管理陣列的緩存。實(shí)驗(yàn)結(jié)果表明:對(duì)于一些以讀為主的,或者以順序訪問為主的,亦或是數(shù)據(jù)更新頻率低的工作負(fù)載,DVS-RAID提供的性能比基于傳統(tǒng)磁盤的IAID5的性能還要好:而對(duì)于數(shù)據(jù)更新頻率很高的工作負(fù)載,DVS-RAID的性能比基于傳統(tǒng)磁盤的RAID5也只稍差一點(diǎn)。為了把瓦記錄磁盤應(yīng)用到對(duì)象存儲(chǔ)系統(tǒng)中,本文設(shè)計(jì)了一種基于對(duì)象的瓦記錄轉(zhuǎn)換層OSTL (Object-based Shingled Translation Layer)。OSTL建立在日志式文件系統(tǒng)的基礎(chǔ)上,向上層提供ANSI T10一樣的對(duì)象訪問接口。在數(shù)據(jù)組織上,OSTL把頻繁更新的瓦記錄區(qū)信息表和目錄樹的索引信息存儲(chǔ)在瓦記錄磁盤的隨機(jī)訪問區(qū),把日志和文件數(shù)據(jù)存儲(chǔ)在瓦記錄區(qū),從而提高數(shù)據(jù)的訪問速度和垃圾回收的效率。OSTL使用對(duì)象地址轉(zhuǎn)換機(jī)制來維護(hù)磁盤上對(duì)象的索引信息,該機(jī)制消除了B+樹的遞歸更新問題,內(nèi)存中使用B+樹來維護(hù)對(duì)象的索引信息。由于不能從市面上得到Host-aware類型的瓦記錄磁盤,開發(fā)了一個(gè)符合ZBC規(guī)格的瓦記錄磁盤模擬器。通過向Ceph添加一種新的存儲(chǔ)引擎,實(shí)現(xiàn)了OSTL的原型系統(tǒng)。與Ceph中原有Key/Value的存儲(chǔ)引擎對(duì)比,在Postmark基準(zhǔn)測試下,OSTL的執(zhí)行時(shí)間減少了13.7%:在Vdbench基準(zhǔn)測試下,OSTL的寫性能提高了7%左右。
[Abstract]:Tile recording technology only brings small changes to the magnetic recording medium and manufacturing process of current disk. It is a very promising technology to improve disk storage density. Tile recording technology improves storage density by partially overlapping tracks. The disk using tile recording technique is called tile recording disk, which inherits the tile recording technology. All features. Therefore, the tile recording disk has an inherent write access limit: writing data to a track will damage the data in the follow track, that is, if the following track has valid data, updating the current track data must rewrite the data of the follow track. Therefore, a write operation may bring a lot of extra reading and writing. In order to integrate the tile record disk into the existing storage system, it is necessary to overcome the write access restrictions caused by the physical characteristics of the tile recording disk. Therefore, a new data organization must be designed to solve this problem and improve the performance of the tile recording disk. The autonomous tile record disk can be replaced directly. Unified disk, applied to existing storage systems. Autonomous tile record disks shield write access restrictions through the tile record conversion layer, which is similar to the flash memory conversion layer in SSD. In order to improve the performance of autonomous tile recording disk, a segment based tile record transfer layer SSTL (Segment-based Shingled Translation Layer) is designed. First, SSTL divides the tile recording area into a segment in the radial direction, and the tile recording disk of the segment structure reduces the write and amplification units from the area size to the segment size. Secondly, in one segment, the SSTL uses the dynamic block mapping in the segment to store the data, effectively reducing the write magnification of the data. Finally, the SSTL uses a small capacity nonloss. The device is used to cache frequently accessed data, and the latest cache replacement algorithm, which has not been accessed most recently, is designed to manage nonvolatile caches. Experimental results show that SSTL provides a 2.1-8.4 times acceleration ratio compared to the circular log structure tile record disk Sblock: under six different workloads. Disk array technology is widely used. In the current storage system, however, the existing disk array technology is designed for traditional disks and does not take into account the read and write characteristics of the tile recording disk. For this problem, a dynamic variable strip disk array technology DVS-RAID (Dynamic Variable-width Striping RAID) is proposed for the tile recording disk, which is used to reduce the check block more. In data layout, the core idea that DVS-RAID divides the entire address space of the array into a band group.DVS-RAID is that in a band group, DVS-RAID never covers old data blocks, whether it is a newly written block or a updated block of data, and DVS-RAID always makes a dynamic generation of a new band with these data blocks. The size of the strip can be changed, can be a full band, or a part of the band. At the same time, the DVS-Cache's write cache management algorithm is designed to manage the array cache. Experimental results show that for some read based, or sequential access mainly, or low update frequency of data. The performance of the DVS-RAID provides better performance than the traditional disk based IAID5: and for a workload with high data update frequency, the performance of the DVS-RAID is a little worse than the RAID5 based on the traditional disk. In order to apply the tile record disk to the object storage system, this article designs an object based tile. The record conversion layer OSTL (Object-based Shingled Translation Layer).OSTL is based on the log file system and provides the object access interface like the ANSI T10 to the upper level. In data organization, OSTL stores the index letters of the frequently updated tile record area and the directory tree in the random access area of the tile record disk. The data and file data are stored in the tile record area to improve the access speed of the data and the efficiency of the garbage collection..OSTL uses the object address conversion mechanism to maintain the index information on the object on the disk. This mechanism eliminates the recursion update problem of the B+ tree. In memory, the B+ tree is used to maintain the index information of the image. Because the H can not be obtained from the market. Ost-aware type tile recording disk has developed a tile record disk simulator that conforms to the ZBC specification. By adding a new storage engine to Ceph, the prototype system of OSTL is implemented. Compared with the Key/Value storage engine in Ceph, the execution time of OSTL is reduced by 13.7% under the Postmark benchmark: the Vdbench benchmark test. At the same time, the writing performance of OSTL has been improved by about 7%.
【學(xué)位授予單位】:華中科技大學(xué)
【學(xué)位級(jí)別】:博士
【學(xué)位授予年份】:2016
【分類號(hào)】:TP333

【相似文獻(xiàn)】

相關(guān)期刊論文 前10條

1 王知昒;我要整理磁盤空間[J];上海微型計(jì)算機(jī);2000年Z2期

2 胥志剛,,陳進(jìn);優(yōu)化磁盤 消除碎片[J];微型電腦應(yīng)用;1996年03期

3 ;小巧的磁盤空間分析軟件[J];網(wǎng)絡(luò)與信息;1998年11期

4 韓宗芬,秦嘯,龐麗萍,高蘭;雙拷貝磁盤技術(shù)及其性能評(píng)價(jià)[J];小型微型計(jì)算機(jī)系統(tǒng);2000年07期

5 ;節(jié)省磁盤空間有招數(shù)[J];電腦知識(shí)與技術(shù);2001年18期

6 楊利明;;安全刪除無用軟件[J];電腦愛好者(普及版);2008年11期

7 行人三;;利用TreeSize Professional挖出系統(tǒng)大戶[J];電腦迷;2012年18期

8 楊興平;;找出文件大胖子,是誰偷占了磁盤空間[J];微電腦世界;2013年04期

9 陳瑋;格式化磁盤做了些什么[J];電腦技術(shù);1995年07期

10 王慧強(qiáng);分布式冗余磁盤新概念及其實(shí)現(xiàn)研究[J];小型微型計(jì)算機(jī)系統(tǒng);1996年12期

相關(guān)會(huì)議論文 前8條

1 張金鑫;韓宏亮;;配置地市農(nóng)網(wǎng)磁盤配額[A];黑龍江省氣象計(jì)算機(jī)應(yīng)用與通信交流會(huì)論文集[C];2006年

2 萬繼光;王英建;王繼彬;謝長生;;面向流媒體的智能瓦記錄磁盤系統(tǒng)的研究[A];第七屆和諧人機(jī)環(huán)境聯(lián)合學(xué)術(shù)會(huì)議(HHME2011)論文集【poster】[C];2011年

3 朱惠友;;微型機(jī)磁盤信息保密探討[A];第一次全國計(jì)算機(jī)安全技術(shù)交流會(huì)論文集[C];1986年

4 鄧波;蒲昌平;;磁盤自動(dòng)保護(hù)功能的實(shí)現(xiàn)[A];第八次全國計(jì)算機(jī)安全學(xué)術(shù)交流會(huì)論文集[C];1993年

5 伍永俊;;PC電腦磁盤數(shù)據(jù)的維護(hù)與恢復(fù)[A];第六次全國計(jì)算機(jī)安全技術(shù)交流會(huì)論文集[C];1991年

6 趙來程;;DECnet-VAX網(wǎng)絡(luò)文件訪問中磁盤擁塞及解決方法[A];第六次全國計(jì)算機(jī)安全技術(shù)交流會(huì)論文集[C];1991年

7 劉寶良;李建中;張艷秋;;CDT-PH——一種盡早產(chǎn)生結(jié)果的非阻塞并發(fā)磁盤-磁帶連接算法[A];第二十一屆中國數(shù)據(jù)庫學(xué)術(shù)會(huì)議論文集(研究報(bào)告篇)[C];2004年

8 敖一峰;鄒恒明;;磁盤級(jí)的ZFS數(shù)據(jù)跟蹤技術(shù)與分析[A];2010年第16屆全國信息存儲(chǔ)技術(shù)大會(huì)(IST2010)論文集[C];2010年

相關(guān)重要報(bào)紙文章 前10條

1 北京市角門小學(xué) 盧均峰;我的磁盤你“少”用[N];中國電腦教育報(bào);2004年

2 王杰;公共電腦上的“私人磁盤”[N];中國計(jì)算機(jī)報(bào);2004年

3 李鵬;怎樣用好磁盤配額[N];中國電腦教育報(bào);2003年

4 湖北 冰人;明明白白整理磁盤[N];中國電腦教育報(bào);2000年

5 孟海江;磁盤空間的按需分配[N];中國計(jì)算機(jī)報(bào);2001年

6 陳中才;創(chuàng)建跨距磁盤區(qū) 實(shí)現(xiàn)磁盤管理[N];中國電腦教育報(bào);2003年

7 村干部;將磁盤健康搬到桌面上[N];中國電腦教育報(bào);2005年

8 劉曉輝;輕松學(xué)會(huì)磁盤配額[N];中國計(jì)算機(jī)報(bào);2007年

9 劉曉輝;各取所需[N];中國電腦教育報(bào);2004年

10 四川 謝魏;妙用磁盤配額讓黑客無從下手[N];電腦報(bào);2005年

相關(guān)博士學(xué)位論文 前6條

1 羅旦;瓦記錄磁盤系統(tǒng)數(shù)據(jù)組織關(guān)鍵技術(shù)研究[D];華中科技大學(xué);2016年

2 毛宇;磁盤陣列及磁盤塊級(jí)容量提升技術(shù)研究[D];華中科技大學(xué);2014年

3 劉軍平;磁盤存儲(chǔ)系統(tǒng)可靠性技術(shù)研究[D];華中科技大學(xué);2011年

4 詹玲;面向應(yīng)用的對(duì)象存儲(chǔ)設(shè)備的數(shù)據(jù)組織研究[D];華中科技大學(xué);2009年

5 史曉東;并行磁盤系統(tǒng)的預(yù)取及緩存技術(shù)研究[D];華中科技大學(xué);2012年

6 楊廷毅;磁頭/磁盤系統(tǒng)沖擊響應(yīng)數(shù)值分析及實(shí)驗(yàn)研究[D];山東大學(xué);2014年

相關(guān)碩士學(xué)位論文 前10條

1 張阿楠;云計(jì)算平臺(tái)中P2V遷移工具的設(shè)計(jì)及實(shí)現(xiàn)[D];東南大學(xué);2015年

2 江文;基于壓縮Cache的磁盤性能優(yōu)化研究[D];暨南大學(xué);2016年

3 劉春燕;基于磁盤訪問日志的碎片文件恢復(fù)系統(tǒng)[D];蘇州大學(xué);2016年

4 聶昌盛;位圖案化介質(zhì)瓦記錄地址映射[D];華中科技大學(xué);2015年

5 吳春歡;磁盤偽裝與隱藏技術(shù)研究[D];哈爾濱工業(yè)大學(xué);2008年

6 曾夢岐;自安全磁盤研究、設(shè)計(jì)與實(shí)現(xiàn)[D];上海交通大學(xué);2009年

7 羅招生;具有公平帶寬分配高效實(shí)時(shí)磁盤調(diào)度研究[D];中南大學(xué);2012年

8 周志華;瓦記錄磁盤寫特征研究與優(yōu)化設(shè)計(jì)[D];華中科技大學(xué);2012年

9 曾銳;瓦記錄磁盤數(shù)據(jù)組織方式設(shè)計(jì)與實(shí)現(xiàn)[D];華中科技大學(xué);2012年

10 高偉;磁盤數(shù)據(jù)安全保護(hù)技術(shù)研究[D];上海交通大學(xué);2008年



本文編號(hào):2027876

資料下載
論文發(fā)表

本文鏈接:http://sikaile.net/shoufeilunwen/xxkjbs/2027876.html


Copyright(c)文論論文網(wǎng)All Rights Reserved | 網(wǎng)站地圖 |

版權(quán)申明:資料由用戶e2d06***提供,本站僅收錄摘要或目錄,作者需要?jiǎng)h除請(qǐng)E-mail郵箱bigeng88@qq.com