Ceph對象文件系統(tǒng)添加任務(wù)遷移特性的研究
發(fā)布時間:2017-05-31 15:17
本文關(guān)鍵詞:Ceph對象文件系統(tǒng)添加任務(wù)遷移特性的研究,由筆耕文化傳播整理發(fā)布。
【摘要】:隨著云計算、移動互聯(lián)網(wǎng)等技術(shù)的興起與發(fā)展,每天新增信息的增長速度越來越快,人們對能夠提供大容量存儲的系統(tǒng)的需求越來越迫切。同時,由于越來越多的機密信息和個人隱私存儲于網(wǎng)絡(luò)存儲系統(tǒng)中,人們對存儲系統(tǒng)的安全性和可靠性也提出了更高的要求。然而,傳統(tǒng)的基于塊接口和文件接口的網(wǎng)絡(luò)存儲系統(tǒng)難以滿足新時代的存儲需求;趯ο蟮拇鎯ο到y(tǒng)應(yīng)運而生,它同時具備基于塊和文件接口的文件系統(tǒng)的優(yōu)點,可以有效的滿足當(dāng)前的存儲需求。 對象是基于對象接口的存儲系統(tǒng)的核心概念,由文件數(shù)據(jù)和文件物理層屬性信息組合而成的,具有自描述性,基于對象的接口可以提供更加豐富的語義信息,使得系統(tǒng)的自動化和智能化管理成為可能。對象存儲設(shè)備是對象文件系統(tǒng)最核心的硬件設(shè)備,有著較強的計算能力。然而,目前許多成熟的對象文件系統(tǒng)都沒有充分利用對象存儲設(shè)備的計算能力,Ceph就是這樣的對象文件系統(tǒng)。 本文主要是基于Ceph文件系統(tǒng),分析研究通過添加方法對象在Ceph系統(tǒng)中添加計算任務(wù)遷移的功能,以達(dá)到更加充分利用對象存儲設(shè)備的目的。通過本文研究發(fā)現(xiàn):添加了方法對象實現(xiàn)任務(wù)遷移的Ceph系統(tǒng)設(shè)備利用率更高、客戶端網(wǎng)絡(luò)負(fù)載有所緩解,且客戶端體驗更佳。本文的主要工作及成果有: (1)學(xué)習(xí)了對象存儲系統(tǒng)的理論及架構(gòu),分析了在對象存儲系統(tǒng)中添加主動存儲的可能性,并確定了本文的研究方向——在Ceph中添加計算任務(wù)遷移特性; (2)了解Ceph的起源及發(fā)展,分析了Ceph文件系統(tǒng)的架構(gòu),對Ceph集群工作原理做了簡單闡述; (3)對Ceph讀寫相關(guān)源碼進行了深入剖析,,重點研究了Ceph集群節(jié)點間消息通信、Ceph對象分布策略、Ceph數(shù)據(jù)一致性維護、數(shù)據(jù)讀及數(shù)據(jù)寫等源碼,厘清了整個讀寫請求的交互流程; (4)提出了在Ceph中添加方法對象實現(xiàn)任務(wù)遷移特性的方案,詳細(xì)介紹了讀寫任務(wù)遷移的實現(xiàn)方法并分析了實施過程中需要考慮的主要問題; (5)詳細(xì)描述了修改Ceph源碼實現(xiàn)任務(wù)遷移特性的步驟及重難點、詳細(xì)描述了三個有代表性的實驗并分析總結(jié)了Ceph改進后的效果。
【關(guān)鍵詞】:對象文件系統(tǒng) 對象存儲設(shè)備 方法對象 任務(wù)遷移 主動存儲
【學(xué)位授予單位】:武漢理工大學(xué)
【學(xué)位級別】:碩士
【學(xué)位授予年份】:2014
【分類號】:TP333
【目錄】:
- 摘要4-5
- ABSTRACT5-7
- 目錄7-10
- 第1章 緒論10-20
- 1.1 傳統(tǒng)存儲接口10-12
- 1.1.1 直連式存儲11
- 1.1.2 存儲區(qū)域網(wǎng)11-12
- 1.1.3 網(wǎng)絡(luò)附加存儲12
- 1.2 基于對象接口的文件系統(tǒng)12-16
- 1.2.1 對象文件系統(tǒng)架構(gòu)14-15
- 1.2.2 現(xiàn)有對象文件系統(tǒng)15-16
- 1.3 對象存儲的優(yōu)缺點及改進方向16-18
- 1.3.1 主動存儲16-17
- 1.3.2 對象存儲與主動存儲的結(jié)合17-18
- 1.4 本文主要研究內(nèi)容和組織結(jié)構(gòu)18-20
- 第2章 Ceph 文件系統(tǒng)研究20-30
- 2.1 起源及發(fā)展20-21
- 2.2 提供接口21-24
- 2.2.1 塊設(shè)備接口21-23
- 2.2.2 對象接口23-24
- 2.2.3 POSIX FS 接口24
- 2.3 系統(tǒng)主要模塊24-29
- 2.3.1 監(jiān)視器25-26
- 2.3.2 對象存儲集群26-27
- 2.3.3 元數(shù)據(jù)服務(wù)器27-28
- 2.3.4 客戶端28-29
- 2.3.5 網(wǎng)絡(luò)29
- 2.4 本章小結(jié)29-30
- 第3章 Ceph 讀寫相關(guān)源碼剖析30-49
- 3.1 Ceph 集群節(jié)點間消息通信30-33
- 3.2 Ceph 對象分布策略33-35
- 3.3 數(shù)據(jù)讀35-39
- 3.4 數(shù)據(jù)寫39-42
- 3.5 維護數(shù)據(jù)一致性操作42-47
- 3.5.1 OSD 中對象數(shù)據(jù)的一致性43-44
- 3.5.2 Monitor 維護集群信息的一致性44-47
- 3.6 Ceph 整體評價47-48
- 3.7 本章小結(jié)48-49
- 第4章 Ceph 中添加任務(wù)遷移特性的方案研究49-60
- 4.1 添加方法對象實現(xiàn)任務(wù)遷移49-51
- 4.2 添加/修改接口實現(xiàn)任務(wù)遷移51-54
- 4.2.1 讀接口修改51-53
- 4.2.2 寫接口修改53-54
- 4.3 任務(wù)遷移的實現(xiàn)方案54-56
- 4.3.1 讀任務(wù)遷移的實現(xiàn)方案54-55
- 4.3.2 寫任務(wù)遷移的實現(xiàn)方案55-56
- 4.4 實現(xiàn)任務(wù)遷移需要注意的問題56-59
- 4.4.1 新增消息的傳遞及處理問題56-57
- 4.4.2 方法對象的執(zhí)行問題57-59
- 4.6 本章小結(jié)59-60
- 第5章 計算任務(wù)遷移的實現(xiàn)及性能測試60-74
- 5.1 讀寫任務(wù)遷移特性實現(xiàn)的重難點介紹60-65
- 5.1.1 添加對應(yīng)的消息類型及操作參數(shù)60
- 5.1.2 實現(xiàn)客戶端讀寫遷移函數(shù)60-61
- 5.1.3 添加任務(wù)遷移特性的核心代碼61-65
- 5.2 性能測試65-73
- 5.2.1 實驗環(huán)境66
- 5.2.2 實驗及結(jié)果分析66-72
- 5.2.3 小結(jié)72-73
- 5.3 Ceph 添加任務(wù)遷移特性的優(yōu)點73
- 5.4 本章小結(jié)73-74
- 第6章 總結(jié)與展望74-76
- 6.1 總結(jié)74-75
- 6.2 展望75-76
- 致謝76-77
- 參考文獻77-79
【參考文獻】
中國期刊全文數(shù)據(jù)庫 前1條
1 靳超,鄭緯民,張悠慧;主動存儲系統(tǒng)結(jié)構(gòu)[J];計算機學(xué)報;2005年06期
本文關(guān)鍵詞:Ceph對象文件系統(tǒng)添加任務(wù)遷移特性的研究,由筆耕文化傳播整理發(fā)布。
本文編號:409908
本文鏈接:http://sikaile.net/kejilunwen/jisuanjikexuelunwen/409908.html
最近更新
教材專著