分級(jí)存儲(chǔ)系統(tǒng)中元數(shù)據(jù)管理的設(shè)計(jì)與實(shí)現(xiàn)
發(fā)布時(shí)間:2020-05-17 10:52
【摘要】: 數(shù)字信息的飛速增長(zhǎng)使得信息存儲(chǔ)管理的復(fù)雜性不斷增加,分級(jí)存儲(chǔ)管理(Hierarchy Storage Management簡(jiǎn)稱HSM)作為存儲(chǔ)領(lǐng)域一個(gè)重要的角色受到了越來越多的關(guān)注。HSM通過對(duì)信息的分類和價(jià)值評(píng)價(jià),合理地將數(shù)據(jù)信息存儲(chǔ)于整個(gè)存儲(chǔ)系統(tǒng)中的適當(dāng)位置,并在信息從創(chuàng)建到銷毀的整個(gè)生命周期中提供最優(yōu)的管理服務(wù)。其中高適用性的系統(tǒng)結(jié)構(gòu)、高效的管理策略以及透明的動(dòng)態(tài)存儲(chǔ)訪問成為大規(guī)模數(shù)據(jù)管理系統(tǒng)的重大挑戰(zhàn)。為此,本文分析了HSM的體系結(jié)構(gòu)和設(shè)計(jì)方法,設(shè)計(jì)并實(shí)現(xiàn)了SAN存儲(chǔ)網(wǎng)絡(luò)下的威視分級(jí)管理系統(tǒng)(WISHSM),同時(shí)通過對(duì)文件重解析、數(shù)據(jù)遷移、數(shù)據(jù)回遷、策略緩存以及數(shù)據(jù)庫性能的優(yōu)化等關(guān)鍵技術(shù)的研究和實(shí)現(xiàn),使WISHSM具備了很高的適用性和性能,實(shí)現(xiàn)了高效的數(shù)據(jù)信息管理的目標(biāo)。 本文重點(diǎn)論述了元數(shù)據(jù)管理的設(shè)計(jì)與實(shí)現(xiàn)。WISHSM針對(duì)數(shù)據(jù)分類和信息價(jià)值評(píng)價(jià)的配置設(shè)計(jì)了分級(jí)存儲(chǔ)管理中需要的應(yīng)用元數(shù)據(jù),文件系統(tǒng)監(jiān)測(cè)采集和統(tǒng)計(jì)應(yīng)用元數(shù)據(jù)信息,并根據(jù)文件操作(如創(chuàng)建,修改,刪除等),對(duì)這些信息進(jìn)行更新和維護(hù)。采集的元數(shù)據(jù)信息通過應(yīng)用服務(wù)器代理模塊發(fā)送給元數(shù)據(jù)服務(wù)器,最后由元數(shù)據(jù)管理模塊保存在數(shù)據(jù)庫當(dāng)中,提供給數(shù)據(jù)遷移服務(wù)使用。通過壓力性能測(cè)試,證明該實(shí)現(xiàn)可以達(dá)到實(shí)際需要。通過性能測(cè)試,策略緩存技術(shù)使系統(tǒng)的策略執(zhí)行性能提高了一個(gè)數(shù)量級(jí)。另外針對(duì)原策略緩存初始化性能低下的問題,采用策略元數(shù)據(jù)池(Policy Metadata Container)進(jìn)行優(yōu)化,在WISHSM上策略緩存的初始化時(shí)間降低了16~20倍。
【圖文】:
F19.1.1structureddataandinformation12]隨著信息的爆炸式的增長(zhǎng),數(shù)據(jù)的有效組織和存儲(chǔ)卻成為一個(gè)非常嚴(yán)重的問題。如圖1.1所示,,全球的信息量以每年30一70%的速度在增長(zhǎng),而結(jié)構(gòu)化有序有效被組織起來的數(shù)據(jù)只有30%一50%,沒有有效組織起來可以被方便利用的數(shù)據(jù)信息達(dá)到35%一55%,
圖 1.2不同形式硬盤中新建單一數(shù)據(jù)與總數(shù)據(jù)比較川 F19.1.2Uniqueandtotaldatasummaryinharddiskdrive11]如圖1.2所示,藍(lán)色代表不同形式硬盤數(shù)據(jù)中總的數(shù)據(jù),紫色代表不存在副本的單一數(shù)據(jù)的比例。在個(gè)人電腦上絕大多數(shù)數(shù)據(jù)都是副本,而在企業(yè)中則新建的原創(chuàng)數(shù)據(jù)占了40%的比重。這同時(shí)也反映出一個(gè)問題,企業(yè)中的數(shù)據(jù)比較有組織性,利用的效率比較高,從而新建數(shù)據(jù)中副本比較少。
【學(xué)位授予單位】:大連海事大學(xué)
【學(xué)位級(jí)別】:碩士
【學(xué)位授予年份】:2008
【分類號(hào)】:TP333
本文編號(hào):2668420
【圖文】:
F19.1.1structureddataandinformation12]隨著信息的爆炸式的增長(zhǎng),數(shù)據(jù)的有效組織和存儲(chǔ)卻成為一個(gè)非常嚴(yán)重的問題。如圖1.1所示,,全球的信息量以每年30一70%的速度在增長(zhǎng),而結(jié)構(gòu)化有序有效被組織起來的數(shù)據(jù)只有30%一50%,沒有有效組織起來可以被方便利用的數(shù)據(jù)信息達(dá)到35%一55%,
圖 1.2不同形式硬盤中新建單一數(shù)據(jù)與總數(shù)據(jù)比較川 F19.1.2Uniqueandtotaldatasummaryinharddiskdrive11]如圖1.2所示,藍(lán)色代表不同形式硬盤數(shù)據(jù)中總的數(shù)據(jù),紫色代表不存在副本的單一數(shù)據(jù)的比例。在個(gè)人電腦上絕大多數(shù)數(shù)據(jù)都是副本,而在企業(yè)中則新建的原創(chuàng)數(shù)據(jù)占了40%的比重。這同時(shí)也反映出一個(gè)問題,企業(yè)中的數(shù)據(jù)比較有組織性,利用的效率比較高,從而新建數(shù)據(jù)中副本比較少。
【學(xué)位授予單位】:大連海事大學(xué)
【學(xué)位級(jí)別】:碩士
【學(xué)位授予年份】:2008
【分類號(hào)】:TP333
【參考文獻(xiàn)】
相關(guān)期刊論文 前1條
1 王蘭英;居錦武;;NTFS文件系統(tǒng)結(jié)構(gòu)分析[J];計(jì)算機(jī)工程與設(shè)計(jì);2006年03期
本文編號(hào):2668420
本文鏈接:http://sikaile.net/kejilunwen/jisuanjikexuelunwen/2668420.html
最近更新
教材專著