溯源感知存儲系統(tǒng)中高效存儲與檢索溯源的方法研究
本文關鍵詞:溯源感知存儲系統(tǒng)中高效存儲與檢索溯源的方法研究 出處:《華中科技大學》2014年碩士論文 論文類型:學位論文
【摘要】:溯源感知存儲系統(tǒng)是可以自動收集并管理對象溯源的存儲系統(tǒng),是存儲系統(tǒng)的一種變革。它不僅存儲對象(文件、進程、管道)本身,也可以維護對象的溯源。溯源是描述對象詳細歷史信息的一種元數(shù)據(jù),它提升了數(shù)字信息的價值。然而,隨著數(shù)字信息的爆炸式增長,存儲系統(tǒng)對數(shù)字信息的管理面臨著巨大的挑戰(zhàn)。經(jīng)統(tǒng)計,溯源是數(shù)字信息數(shù)據(jù)量的十倍以上,如何高效的存儲并檢索溯源是一個亟待解決的難題。 為了實現(xiàn)高效的存儲并檢索溯源,分析了溯源感知存儲系統(tǒng)的工作原理并研究了溯源的類型及收集方法。研究發(fā)現(xiàn)溯源感知存儲系統(tǒng)收集的是整個系統(tǒng)中所有文件、進程和管道的溯源。其中,沒有對溯源感知存儲系統(tǒng)卷上的文件產(chǎn)生影響的對象的溯源是沒有利用價值的,并且沒有利用價值的溯源是有利用價值的溯源的數(shù)倍。因此,對系統(tǒng)收集到的溯源進行了提取,消除沒有利用價值的溯源,大大減少了溯源占用的存儲空間。溯源是半結構化數(shù)據(jù),研究了半結構化數(shù)據(jù)存儲與檢索技術,提出了用有向無環(huán)圖表示溯源,分析了環(huán)檢測和消除算法以及環(huán)避免算法在消除溯源圖中的環(huán)性能上的差異。研究了溯源的存儲格式,提出將與對象相關的溯源集中存儲到一起的存儲方式。提出了用圖形數(shù)據(jù)庫、伯克利數(shù)據(jù)庫、文本文件存儲和檢索溯源的方法并從理論上分析了這三個解決方案性能上的差異,,設計與實現(xiàn)了用伯克利數(shù)據(jù)庫和文本文件存儲和檢索溯源。 最后,在本地存儲系統(tǒng)環(huán)境下測試了系統(tǒng)收集溯源的功能,分析了對溯源進行提取之后收集到的溯源的正確性,保證了有價值的溯源信息的完整性。測試了經(jīng)提取之后的溯源占用的存儲空間。然后分析了數(shù)據(jù)庫和文本文件在存儲、檢索和更新溯源方面的性能。
[Abstract]:Traceability storage system is a storage system that can automatically collect and manage object traceability. It is a kind of change of storage system. It not only stores the object (file, process, pipeline) itself. Traceability can also be maintained. Traceability is a metadata that describes the detailed historical information of an object, which enhances the value of digital information. However, with the explosive growth of digital information. The management of digital information in storage system is facing a great challenge. According to statistics, traceability is more than ten times the amount of digital information. How to store and retrieve the digital information efficiently is a difficult problem to be solved. In order to achieve efficient storage and retrieval traceability. The working principle of traceability sensing storage system is analyzed, and the types and collection methods of traceability are studied. It is found that traceability storage system collects all files, processes and pipelines in the whole system. The traceability of objects that do not have an impact on traceability awareness of files on the volume of storage systems is of no value, and the traceability of unexploited values is several times greater than that of traceability of exploitable values. The traceability collected by the system is extracted to eliminate the traceability without using value and greatly reduce the storage space occupied by traceability. The traceability is semi-structured data. The technology of semi-structured data storage and retrieval is studied. The traceability is represented by directed acyclic graph, and the difference of loop detection and elimination algorithm and ring avoidance algorithm in eliminating the loop performance in traceability graph is analyzed, and the storage format of traceability is studied. This paper presents a storage method of centralized storage of traceability related to objects, and presents the use of graphic database, Berkeley database. The methods of text file storage and retrieval traceability are analyzed in theory. The author designs and implements the Berkeley database and text file storage and retrieval traceability. Finally, the function of system collection traceability is tested in the local storage system environment, and the correctness of traceability collected after traceability extraction is analyzed. The integrity of valuable traceability information is guaranteed. The storage space occupied by traceability after extraction is tested. Then the performance of database and text file in storage retrieval and update traceability is analyzed.
【學位授予單位】:華中科技大學
【學位級別】:碩士
【學位授予年份】:2014
【分類號】:TP333
【相似文獻】
相關期刊論文 前10條
1 李紅;藍光存儲系統(tǒng) 光盤容量高達23G[J];信息記錄材料;2004年01期
2 ;存儲系統(tǒng) 金融行業(yè)應用卓越獎 醫(yī)療行業(yè)應用卓越獎[J];每周電腦報;2004年20期
3 諾拉;EMC Symmetrix DMX-3存儲系統(tǒng) 超大容量 高速存取[J];中國計算機用戶;2005年31期
4 謝世誠;;浪潮推出4Gb光纖存儲系統(tǒng)[J];微型機與應用;2006年07期
5 ;昆騰分級存儲系統(tǒng)[J];軟件世界;2009年11期
6 ;超低功耗云存儲系統(tǒng)或被地方政府看好[J];中國有線電視;2013年08期
7 湯赫男;;云存儲系統(tǒng)的分析與應用研究[J];計算機光盤軟件與應用;2013年24期
8 諶偉;;云存儲系統(tǒng)的分析與應用探討[J];數(shù)字技術與應用;2013年10期
9 雅君;跟上企業(yè)的匆匆腳步——利用HP SureStoreEXP256構筑企業(yè)存儲系統(tǒng)[J];中國計算機用戶;2000年08期
10 賈莉;;Symmetrix8000實現(xiàn)19TB存儲[J];每周電腦報;2000年18期
相關會議論文 前10條
1 趙志剛;;存儲系統(tǒng)在企業(yè)信息化中的應用[A];2005年安徽通信論文集[C];2006年
2 黃曉峰;張杰;;礦井信息中心存儲系統(tǒng)設計[A];安全高效礦井機電裝備及信息化技術——陜西省煤炭學會學術年會論文集(2011)[C];2011年
3 孫哲;李昌銀;;構建核電高可用云存儲系統(tǒng)[A];2012電力行業(yè)信息化年會優(yōu)秀論文專輯[C];2012年
4 焦超;周天彤;李祥學;李建華;;面向災備的高性能可信存儲系統(tǒng)設計[A];第十一屆保密通信與信息安全現(xiàn)狀研討會論文集[C];2009年
5 汪位龍;;設計院存儲系統(tǒng)建設初探[A];中國公路學會計算機應用分會2004年年會學術論文集[C];2004年
6 梅松竹;李宗伯;;Storage 7000系列混合存儲系統(tǒng)分析[A];2009年中國高校通信類院系學術研討會論文集[C];2009年
7 王克敏;張璽;胡江凱;王毅濤;;NWP資料歸檔方法及其存儲系統(tǒng)的應用[A];中國氣象學會2006年年會“中尺度天氣動力學、數(shù)值模擬和預測”分會場論文集[C];2006年
8 孫哲;李昌銀;;DeDu:基于云計算的冗余刪除存儲系統(tǒng)[A];電力行業(yè)新一代信息技術研討會論文集[C];2011年
9 高小伍;黨齊民;林晨;;校園網(wǎng)存儲系統(tǒng)的研究與實現(xiàn)[A];中國高等教育學會教育信息化分會第十次學術年會論文集[C];2010年
10 宮海林;郭長國;苑洪亮;王懷民;;支持事務的非結構化數(shù)據(jù)聚合存儲系統(tǒng)GSL[A];2006年全國開放式分布與并行計算機學術會議論文集(三)[C];2006年
相關重要報紙文章 前10條
1 ;第三季度中國存儲系統(tǒng)市場達19.1億元[N];中國高新技術產(chǎn)業(yè)導報;2005年
2 本報記者 薛斐;服務:存儲系統(tǒng)的靈魂[N];計算機世界;2002年
3 單群一;惠普推出全新一體化存儲系統(tǒng)[N];中國稅務報;2007年
4 ;浪潮推出4Gb光纖存儲系統(tǒng)[N];人民郵電;2006年
5 ;今年第二季度 存儲系統(tǒng)市場價值達12.6億元[N];人民郵電;2006年
6 郭;日立推出普及型存儲系統(tǒng)[N];計算機世界;2007年
7 陳耀光;朗登 扛起存儲系統(tǒng)設計院的大旗[N];中國企業(yè)報;2001年
8 ;富士通存儲系統(tǒng)全面升級[N];網(wǎng)絡世界;2009年
9 ;EMC亞洲生產(chǎn)制造中心落戶深圳[N];網(wǎng)絡世界;2009年
10 臨履;存儲系統(tǒng)有了“設計院”[N];網(wǎng)絡世界;2001年
相關博士學位論文 前10條
1 趙雨虹;云存儲系統(tǒng)資源調度技術研究[D];華中科技大學;2015年
2 陸承濤;存儲系統(tǒng)性能管理問題的研究[D];華中科技大學;2010年
3 聶雪軍;內容感知存儲系統(tǒng)中信息信息生命周期管理關鍵技術研究[D];華中科技大學;2011年
4 羅東健;大規(guī)模存儲系統(tǒng)高可靠性關鍵技術研究[D];華中科技大學;2011年
5 聶雪軍;內容感知存儲系統(tǒng)中信息生命周期管理關鍵技術研究[D];華中科技大學;2010年
6 王鵬;低密度奇偶校驗碼應用于存儲系統(tǒng)的關鍵技術研究[D];華中科技大學;2013年
7 刁瑩;用數(shù)學建模方法評價存儲系統(tǒng)性能[D];哈爾濱工程大學;2013年
8 符青云;面向大規(guī)模流媒體服務的高性能存儲系統(tǒng)研究[D];電子科技大學;2009年
9 王玉林;多節(jié)點容錯存儲系統(tǒng)的數(shù)據(jù)與緩存組織研究[D];電子科技大學;2010年
10 田敬;對等存儲系統(tǒng)中的數(shù)據(jù)可用性與安全性研究[D];北京大學;2007年
相關碩士學位論文 前10條
1 馮漢超;基于Hadoop的分布式副本策略研究[D];河北工程大學;2015年
2 張明;IaaS中基于熱點數(shù)據(jù)的存儲系統(tǒng)研究與實現(xiàn)[D];哈爾濱工業(yè)大學;2015年
3 蔣靜遠;基于數(shù)據(jù)通道的非結構化數(shù)據(jù)多存儲系統(tǒng)[D];浙江大學;2015年
4 郭暉;面向高清視頻監(jiān)控的流存儲系統(tǒng)設計與實現(xiàn)[D];電子科技大學;2015年
5 許孟杰;嵌入式快速存儲模塊的研究與實現(xiàn)[D];中國艦船研究院;2015年
6 何潔和;面向POI的分布式結構化存儲系統(tǒng)存儲引擎設計與實現(xiàn)[D];電子科技大學;2014年
7 王曉;混合存儲系統(tǒng)高效快照技術研究[D];北京理工大學;2015年
8 邱登峰;基于Hadoop可公共審計云存儲的設計與實現(xiàn)[D];大連理工大學;2015年
9 張致元;電子商品存儲系統(tǒng)設計與研究[D];復旦大學;2014年
10 劉秉煦;云存儲環(huán)境下的混合存儲算法研究與實現(xiàn)[D];上海交通大學;2015年
本文編號:1421180
本文鏈接:http://sikaile.net/kejilunwen/jisuanjikexuelunwen/1421180.html