本文關(guān)鍵詞：GlusterFS分布式存儲(chǔ)系統(tǒng)在云渲染平臺(tái)中的應(yīng)用研究，，由筆耕文化傳播整理發(fā)布。

【摘要】：渲染是將模型生成圖像的過程,在渲染任務(wù)的整個(gè)過程中,渲染節(jié)點(diǎn)需要不斷的和存儲(chǔ)節(jié)點(diǎn)進(jìn)行數(shù)據(jù)交互,當(dāng)渲染系統(tǒng)中的集群規(guī)模越大時(shí),存儲(chǔ)系統(tǒng)的I/O并發(fā)數(shù)據(jù)處理負(fù)載越大。所以存儲(chǔ)系統(tǒng)的I/O性能和數(shù)據(jù)的可靠性對(duì)渲染系統(tǒng)的任務(wù)執(zhí)行具有非常大的影響,存儲(chǔ)性能低下將直接影響渲染任務(wù)的效率。本課題從渲染系統(tǒng)的計(jì)算特點(diǎn)出發(fā),構(gòu)建具有適用于渲染平臺(tái)的高性能存儲(chǔ)系統(tǒng),其主要的研究內(nèi)容如下:(1)云渲染平臺(tái)是24小時(shí)不間斷服務(wù)平臺(tái),從渲染平臺(tái)特點(diǎn)出發(fā),分析適合于云渲染平臺(tái)的高性能分布式存儲(chǔ)系統(tǒng),其需滿足平臺(tái)不停服彈性擴(kuò)展,且能實(shí)現(xiàn)平臺(tái)數(shù)據(jù)的高速讀寫需求。(2)從元數(shù)據(jù)中心服務(wù)器出發(fā),分析中心化和去中心化分布式存儲(chǔ)系統(tǒng)的架構(gòu)特點(diǎn)和數(shù)據(jù)操作特性,將GlusterFS分布式系統(tǒng)應(yīng)用于云渲染平臺(tái),研究如何通過靈活的模塊化設(shè)計(jì)和有效的彈性卷分布構(gòu)建出適用于云渲染平臺(tái)的存儲(chǔ)系統(tǒng),并對(duì)其進(jìn)行性能優(yōu)化。(3)GlusterFS文件系統(tǒng)提供了統(tǒng)一命名空間、高性能、高可用、高擴(kuò)展的數(shù)據(jù)存儲(chǔ)解決方案,但是只面向Linux和Unix的內(nèi)核模塊及軟件,本課題將研究通過標(biāo)準(zhǔn)文件協(xié)議訪問存儲(chǔ)系統(tǒng),并將CTDB與文件系統(tǒng)結(jié)合,實(shí)現(xiàn)更加簡便高效的高可用分布式存儲(chǔ)系統(tǒng)。(4)GlusterFS在諸多方面都具有突出的優(yōu)勢,但是由于結(jié)構(gòu)特點(diǎn),存儲(chǔ)系統(tǒng)本身不具備負(fù)載均衡功能,為了提高系統(tǒng)整體性能,將負(fù)載均衡技術(shù)LVS/DR應(yīng)用于系統(tǒng)中,滿足系統(tǒng)的大規(guī)模高并發(fā)數(shù)據(jù)訪問。目前各個(gè)渲染服務(wù)提供者都在研究嘗試各種存儲(chǔ)解決方案,如何設(shè)計(jì)出一個(gè)合理高效的存儲(chǔ)方案仍需要不斷的嘗試和實(shí)踐。本課題的研究內(nèi)容基于實(shí)際的應(yīng)用出發(fā),將GlusterFS存儲(chǔ)應(yīng)用于渲染領(lǐng)域,對(duì)其優(yōu)越性和可行性進(jìn)行實(shí)踐驗(yàn)證,并通過實(shí)踐提出一些性能優(yōu)化措施。但是對(duì)于一個(gè)高效、安全、可靠的存儲(chǔ)系統(tǒng)來說,本研究還不夠,系統(tǒng)中數(shù)據(jù)服務(wù)器節(jié)點(diǎn)的監(jiān)控、數(shù)據(jù)壓縮、數(shù)據(jù)一致性等仍需要繼續(xù)研究。
【關(guān)鍵詞】：云渲染 云存儲(chǔ) 分布式文件系統(tǒng) GlusterFS
【學(xué)位授予單位】：江蘇科技大學(xué)
【學(xué)位級(jí)別】：碩士
【學(xué)位授予年份】：2015
【分類號(hào)】：TP333
【目錄】：

• 摘要6-7
• Abstract7-12
• 第1章 緒論12-19
• 1.1 課題研究背景12-13
• 1.2 國內(nèi)外研究現(xiàn)狀13-16
• 1.3 技術(shù)方案選擇分析16-17
• 1.4 課題研究主要內(nèi)容17-18
• 1.5 論文的組織結(jié)構(gòu)18-19
• 第2章 云存儲(chǔ)技術(shù)19-27
• 2.1 云存儲(chǔ)結(jié)構(gòu)19-21
• 2.2 共享存儲(chǔ)模型21-23
• 2.2.1 NAS21-22
• 2.2.2 SAN22-23
• 2.2.3 NSA和SAN對(duì)比分析23
• 2.3 存儲(chǔ)網(wǎng)絡(luò)23-24
• 2.3.1 TCP/IP存儲(chǔ)網(wǎng)絡(luò)23-24
• 3.3.2 Infiniband RDMA24
• 2.4 網(wǎng)絡(luò)文件系統(tǒng)24-26
• 2.4.1 NFS24-25
• 2.4.2 CIFS25-26
• 2.5 本章小結(jié)26-27
• 第3章 分布式文件系統(tǒng)研究27-35
• 3.1 中心化存儲(chǔ)系統(tǒng)27
• 3.1.1 中心化存儲(chǔ)系統(tǒng)概述27
• 3.1.2 元數(shù)據(jù)27
• 3.2 去中心化存儲(chǔ)系統(tǒng)27-28
• 3.2.1 去中心化存儲(chǔ)系統(tǒng)概述27-28
• 3.2.2 亞馬遜無中心平臺(tái)28
• 3.3 MooseFS28-32
• 3.3.1 系統(tǒng)框架28-30
• 3.3.2 MooseFS的數(shù)據(jù)讀寫操作30-31
• 3.3.3 系統(tǒng)特征31-32
• 3.4 GlusterFS32-34
• 3.4.1 系統(tǒng)概述32-33
• 3.4.2 系統(tǒng)框架33-34
• 3.4.3 系統(tǒng)優(yōu)勢34
• 3.5 本章小結(jié)34-35
• 第4章 云渲染平臺(tái)分布式存儲(chǔ)系統(tǒng)設(shè)計(jì)35-61
• 4.1 云渲染平臺(tái)35-39
• 4.1.1 平臺(tái)框架及渲染任務(wù)流程35-36
• 4.1.2 用戶服務(wù)訪問接36
• 4.1.3 渲染任務(wù)管理平臺(tái)36-37
• 4.1.4 渲染集群37-38
• 4.1.5 渲染云存儲(chǔ)38-39
• 4.2 云渲染分布式存儲(chǔ)系統(tǒng)功能39-40
• 4.3 云渲染平臺(tái)分布式存儲(chǔ)框架設(shè)計(jì)40-41
• 4.4 GlusterFS分布式文件系統(tǒng)應(yīng)用設(shè)計(jì)41-51
• 4.4.1 GlusterFS可行性分析41-43
• 4.4.2 GlusterFS系統(tǒng)設(shè)計(jì)43-44
• 4.4.3 GlusterFS集群分布設(shè)計(jì)44-46
• 4.4.4 分布式彈性哈希算法46-51
• 4.5 基于GlusterFS的分布式存儲(chǔ)系統(tǒng)高可用性研究51-56
• 4.5.1 Libgfagi接.應(yīng)用51-54
• 4.5.2 GlusterFS高可用性實(shí)現(xiàn)方式54-55
• 4.5.3 CTDB結(jié)合GlusterFS的應(yīng)用55-56
• 4.6 基于GlusterFS的分布式存儲(chǔ)系統(tǒng)負(fù)載均衡研究56-59
• 4.6.1 LVS負(fù)載均衡技術(shù)56-57
• 4.6.2 LVS/DR模式57-59
• 4.7 性能優(yōu)化59-60
• 4.8 本章小結(jié)60-61
• 第5章 云渲染平臺(tái)GlusterFS分布式存儲(chǔ)系統(tǒng)實(shí)現(xiàn)與性能測試61-75
• 5.1 存儲(chǔ)環(huán)境硬件配置61
• 5.2 存儲(chǔ)環(huán)境部署61-65
• 5.2.1 CentOS操作系統(tǒng)61-63
• 5.2.2 GluserFS服務(wù)安裝與配置63-65
• 5.2.3 LVS/DR服務(wù)安裝65
• 5.3 GlusterFS性能優(yōu)化65-68
• 5.4 存儲(chǔ)訪問搭建68-69
• 5.5 GlusterFS系統(tǒng)測試69-71
• 5.5.1 實(shí)驗(yàn)環(huán)境69-70
• 5.5.2 存儲(chǔ)系統(tǒng)Ping_Pong測試70
• 5.5.3 存儲(chǔ)系統(tǒng)讀寫測試70-71
• 5.5.4 LVS負(fù)載均衡測試71
• 5.6 GlusterFS與MooseFS性能比對(duì)71-74
• 5.6.1 測試環(huán)境配置71-72
• 5.6.2 測試影響因素72
• 5.6.3 測試結(jié)果及性能分析72-74
• 5.7 本章小結(jié)74-75
• 總結(jié)75-76
• 參考文獻(xiàn)76-79
• 攻讀學(xué)位期間發(fā)表的學(xué)術(shù)論文79-80
• 致謝80

【參考文獻(xiàn)】

中國期刊全文數(shù)據(jù)庫 前3條

1 趙躍龍;謝曉玲;蔡詠才;王國華;劉霖;;一種性能優(yōu)化的小文件存儲(chǔ)訪問策略的研究[J];計(jì)算機(jī)研究與發(fā)展;2012年07期

2 張春明;芮建武;何婷婷;;一種Hadoop小文件存儲(chǔ)和讀取的方法[J];計(jì)算機(jī)應(yīng)用與軟件;2012年11期

3 王德政;申山宏;周寧寧;;云計(jì)算環(huán)境下的數(shù)據(jù)存儲(chǔ)[J];計(jì)算機(jī)技術(shù)與發(fā)展;2011年04期

中國碩士學(xué)位論文全文數(shù)據(jù)庫 前1條

1 江柳;HDFS下小文件存儲(chǔ)優(yōu)化相關(guān)技術(shù)研究[D];北京郵電大學(xué);2011年

  本文關(guān)鍵詞：GlusterFS分布式存儲(chǔ)系統(tǒng)在云渲染平臺(tái)中的應(yīng)用研究，由筆耕文化傳播整理發(fā)布。

本文編號(hào)：403146