本文關(guān)鍵詞：分布式存儲(chǔ)系統(tǒng)中海量文件隨機(jī)存取技術(shù)研究

  更多相關(guān)文章： 分布式存儲(chǔ) 元數(shù)據(jù)擴(kuò)展 元數(shù)據(jù)緩存 副本技術(shù) 存取性能

【摘要】：隨著網(wǎng)絡(luò)和信息技術(shù)的飛速發(fā)展,各種互聯(lián)網(wǎng)應(yīng)用、電子商務(wù)平臺(tái)、穿戴設(shè)備乃至各領(lǐng)域的科學(xué)研究監(jiān)測(cè)設(shè)備都產(chǎn)生了海量的數(shù)據(jù)信息,我們已進(jìn)入大數(shù)據(jù)時(shí)代。面對(duì)海量數(shù)據(jù)存儲(chǔ)和處理的需求,分布式存儲(chǔ)技術(shù)被提出并得到廣泛的應(yīng)用。分布式文件系統(tǒng)是分布式存儲(chǔ)系統(tǒng)的一個(gè)重要分支,主要用于處理海量文件的隨機(jī)存取問(wèn)題。 本文首先調(diào)研了分布式存儲(chǔ)系統(tǒng)的研究背景和發(fā)展現(xiàn)狀,回顧了幾種典型的分布式文件系統(tǒng)。 其次,本文分析了單節(jié)點(diǎn)元數(shù)據(jù)服務(wù)器架構(gòu)的分布式文件系統(tǒng)的特點(diǎn)。為解決存儲(chǔ)海量文件的問(wèn)題,提出了一種基于微子樹(shù)的元數(shù)據(jù)管理方法。該方法把一棵完整的目錄樹(shù)拆分成多棵微子樹(shù),并把微子樹(shù)分布到元數(shù)據(jù)服務(wù)器集群中,從而實(shí)現(xiàn)了一臺(tái)元數(shù)據(jù)服務(wù)器到元數(shù)據(jù)服務(wù)器集群管理元數(shù)據(jù)的擴(kuò)展,另外新增了微子樹(shù)管理服務(wù)器管理微子樹(shù)。本方法有效提高了元數(shù)據(jù)的存儲(chǔ)量和分布式文件系統(tǒng)的并發(fā)訪問(wèn)性能。 再次,基于微子樹(shù)分割的分布式文件系統(tǒng)與基于子樹(shù)分割策略的分布式文件系統(tǒng)有相同的缺陷,即查詢(xún)文件元數(shù)據(jù)需要按全路徑逐級(jí)查找。本文針對(duì)此問(wèn)題,提出了微子樹(shù)元數(shù)據(jù)分類(lèi)緩存機(jī)制。實(shí)驗(yàn)結(jié)果表明,此元數(shù)據(jù)緩存機(jī)制能在一定程度上提高元數(shù)據(jù)操作速率。 最后,針對(duì)鏈?zhǔn)礁北就降奶攸c(diǎn),詳細(xì)分析了文件寫(xiě)操作的每個(gè)步驟,力爭(zhēng)在寫(xiě)文件的每個(gè)步驟都充分優(yōu)化,以加快寫(xiě)小文件的響應(yīng)速度。實(shí)驗(yàn)證明：鏈?zhǔn)礁北就较碌男∥募䦟?xiě)加速方法優(yōu)化了寫(xiě)操作的流程,減少了系統(tǒng)響應(yīng)時(shí)間、提高了系統(tǒng)的吞吐量。
【關(guān)鍵詞】：分布式存儲(chǔ) 元數(shù)據(jù)擴(kuò)展 元數(shù)據(jù)緩存 副本技術(shù) 存取性能
【學(xué)位授予單位】：北京郵電大學(xué)
【學(xué)位級(jí)別】：碩士
【學(xué)位授予年份】：2015
【分類(lèi)號(hào)】：TP333
【目錄】：

• 摘要4-5
• ABSTRACT5-8
• 第一章 緒論8-12
• 1.1 研究背景及意義8-9
• 1.2 研究?jī)?nèi)容9
• 1.3 論文結(jié)構(gòu)9-12
• 第二章 國(guó)內(nèi)外研究現(xiàn)狀12-20
• 2.1 NFS12-13
• 2.2 GPFS13-14
• 2.3 Lustre14-16
• 2.4 HDFS16-18
• 2.5 MooseFS18
• 2.6 本章小結(jié)18-20
• 第三章 基于微子樹(shù)分割的元數(shù)據(jù)管理系統(tǒng)20-36
• 3.1 元數(shù)據(jù)管理系統(tǒng)的設(shè)計(jì)目標(biāo)20-21
• 3.2 元數(shù)據(jù)管理策略簡(jiǎn)介21-22
• 3.3 基于微子樹(shù)分割的元數(shù)據(jù)管理系統(tǒng)22-29
• 3.3.1 微子樹(shù)分割法22-24
• 3.3.2 基于微子樹(shù)分割的元數(shù)據(jù)管理系統(tǒng)設(shè)計(jì)24-27
• 3.3.3 執(zhí)行流程27-29
• 3.4 系統(tǒng)測(cè)試29-34
• 3.5 本章小結(jié)34-36
• 第四章 微子樹(shù)元數(shù)據(jù)分類(lèi)緩存機(jī)制36-46
• 4.1 緩存關(guān)鍵技術(shù)介紹36-37
• 4.2 微子樹(shù)元數(shù)據(jù)分類(lèi)緩存機(jī)制37-42
• 4.3 實(shí)驗(yàn)結(jié)果與分析42-45
• 4.4 本章小結(jié)45-46
• 第五章 鏈?zhǔn)礁北就较碌男∥募䦟?xiě)加速方法46-56
• 5.1 分布式副本技術(shù)46-47
• 5.2 數(shù)據(jù)一致性47-48
• 5.3 鏈?zhǔn)礁北就较碌男∥募䦟?xiě)加速方法48-51
• 5.4 實(shí)驗(yàn)結(jié)果與分析51-55
• 5.5 本章小結(jié)55-56
• 第六章 總結(jié)與展望56-58
• 6.1 全文總結(jié)56-57
• 6.2 展望57-58
• 參考文獻(xiàn)58-62
• 致謝62-64
• 攻讀學(xué)位期間發(fā)表的學(xué)術(shù)論文目錄64

【參考文獻(xiàn)】

中國(guó)期刊全文數(shù)據(jù)庫(kù) 前1條

1 蘇杭;王勁林;;VoD系統(tǒng)的數(shù)據(jù)緩存策略研究[J];微計(jì)算機(jī)應(yīng)用;2009年11期

，

本文編號(hào)：994247