發(fā)布時間：2017-08-12 22:21

  本文關(guān)鍵詞：基于iSCSI的自動擴容云存儲系統(tǒng)的研究與實現(xiàn)

  更多相關(guān)文章： 云存儲 可寫入時間數(shù) 并發(fā)服務(wù) 自動擴容

【摘要】：云存儲是云計算領(lǐng)域一個熱門的發(fā)展方向,隨著互聯(lián)網(wǎng)的發(fā)展,互聯(lián)網(wǎng)上的數(shù)據(jù)量也是越來越大,云存儲越來越接近廣大網(wǎng)民的生活,與我們的生活工作息息相關(guān),我們時常把身邊重要的數(shù)據(jù)放在云網(wǎng)盤上防止意外丟失�，F(xiàn)在大多數(shù)的云網(wǎng)盤提供了基礎(chǔ)的云存儲服務(wù),用戶注冊使用后即可獲得一定的固定的存儲空間,但是隨著用戶數(shù)據(jù)量的增大,原有的存儲空間已不能再滿足用戶的需要,所以本課題在研究了目前行業(yè)內(nèi)的幾種主流云存儲機制之后,欲提出一套新的基于iSCSI的自動化擴容云存儲系統(tǒng),從客戶端到服務(wù)器都提供了一種動態(tài)的擴容策略。本文研究了設(shè)計私有云存儲系統(tǒng)的一些關(guān)鍵技術(shù)原理,如iSCSI、虛擬邏輯卷、Samba、Quota等,在這些開源技術(shù)之上搭建了一套便于實施的自動擴容私有云存儲系統(tǒng),在服務(wù)器節(jié)點之間的通信中,分析了常用的并發(fā)模型,充分利用了Epoll加多線程池并發(fā)模型,并與傳統(tǒng)的多進程方式進行對比。本系統(tǒng)采用遠程掛載的方式將遠程存儲掛載到本地空間,摒棄了空間上距離的概念。本系統(tǒng)采用了三層架構(gòu)的設(shè)計方案,底層是基礎(chǔ)設(shè)施層,提供存儲服務(wù),管理節(jié)點位于此層中,為上層數(shù)據(jù)節(jié)點層提供統(tǒng)一的存儲服務(wù);在上層是數(shù)據(jù)節(jié)點層,數(shù)據(jù)節(jié)點層為上層用戶提供數(shù)據(jù)訪問服務(wù),數(shù)據(jù)節(jié)點層在系統(tǒng)中占據(jù)重要的地位,其中Samba文件共享服務(wù)、Quota用戶空間配額、Lvm虛擬邏輯卷位于此層中,當(dāng)數(shù)據(jù)節(jié)點容量使用率達到一定的額度時,數(shù)據(jù)節(jié)點和管理節(jié)點通信,掛載管理節(jié)點提供的存儲空間與本地的存儲進行合并,實現(xiàn)在線擴容的目的。為了充分利用系統(tǒng)的資源利用率,提出了動態(tài)監(jiān)控掃描的擴容算法,根據(jù)用戶的可寫入時間數(shù)動態(tài)確定下次掃面時間,此外本文將服務(wù)端采用了基于Epoll和線程池的并發(fā)模式,最后文章對本系統(tǒng)進行了功能和性能測試,證明系統(tǒng)的可行性。
【關(guān)鍵詞】：云存儲 可寫入時間數(shù) 并發(fā)服務(wù) 自動擴容
【學(xué)位授予單位】：電子科技大學(xué)
【學(xué)位級別】：碩士
【學(xué)位授予年份】：2015
【分類號】：TP333
【目錄】：

• 摘要5-6
• ABSTRACT6-11
• 第一章 緒論11-16
• 1.1 研究工作的背景與意義11-12
• 1.2 云存儲擴容技術(shù)的國內(nèi)外研究歷史與現(xiàn)狀12-13
• 1.3 課題研究內(nèi)容13-14
• 1.4 本論文的結(jié)構(gòu)安排14-16
• 第二章 相關(guān)理論基礎(chǔ)16-26
• 2.1 iSCSI存儲技術(shù)16-18
• 2.1.1 iSCSI基本介紹16-17
• 2.1.2 iSCSI的工作過程17
• 2.1.3 數(shù)據(jù)流量的優(yōu)化17-18
• 2.2 Lvm虛擬邏輯卷18-19
• 2.2.1 Lvm概述18
• 2.2.2 與Lvm相關(guān)的幾個概念18-19
• 2.3 Samba共享文件系統(tǒng)19-20
• 2.3.1 Samba基本介紹19-20
• 2.3.2 Samba的應(yīng)用場景20
• 2.4 Quota配額20-21
• 2.4.1 Quota使用場景21
• 2.5 基于Epoll和線程池的并發(fā)服務(wù)21-24
• 2.5.1 Epoll模型簡介21
• 2.5.2 Epoll模型的工作模式21-22
• 2.5.3 Epoll模型的使用方法22-23
• 2.5.4 線程池技術(shù)介紹23-24
• 2.5.5 線程池的組成部分24
• 2.6 本章總結(jié)24-26
• 第三章 AES系統(tǒng)的分析與設(shè)計26-47
• 3.1 AES存儲系統(tǒng)的需求分析26-29
• 3.1.1 Saes需求分析26-27
• 3.1.2 Uaes需求分析27-29
• 3.2 自動擴容云存儲系統(tǒng)的總體設(shè)計29-31
• 3.2.1 設(shè)計思想29-30
• 3.2.2 總體架構(gòu)設(shè)計30-31
• 3.3 數(shù)據(jù)表的設(shè)計31-33
• 3.3.1 數(shù)據(jù)庫集群31
• 3.3.2 數(shù)據(jù)表設(shè)計31-33
• 3.4 并發(fā)處理的設(shè)計33-39
• 3.4.1 Epoll模型的應(yīng)用設(shè)計33-35
• 3.4.2 線程池數(shù)據(jù)結(jié)構(gòu)的設(shè)計35-39
• 3.5 動態(tài)監(jiān)控掃描算法的設(shè)計39-43
• 3.5.1 設(shè)計思想39-40
• 3.5.2 可寫入時間數(shù)的計算公式40-41
• 3.5.3 數(shù)據(jù)結(jié)構(gòu)的設(shè)計41-42
• 3.5.4 算法的改進42-43
• 3.6 節(jié)點擴容的設(shè)計43-45
• 3.6.1 分區(qū)的初始化設(shè)計44
• 3.6.2 互斥訪問44
• 3.6.3 配額擴容接.設(shè)計44-45
• 3.6.4 數(shù)據(jù)節(jié)點擴容接.設(shè)計45
• 3.7 本章總結(jié)45-47
• 第四章 自動擴容云存儲系統(tǒng)的實現(xiàn)47-66
• 4.1 數(shù)據(jù)庫接.層的實現(xiàn)47-50
• 4.1.1 MySQL集群的安裝配置47-48
• 4.1.2 數(shù)據(jù)庫操作接48-50
• 4.2 并發(fā)處理的實現(xiàn)50-56
• 4.2.1 Epoll模型的實現(xiàn)50-52
• 4.2.2 線程池的實現(xiàn)52-56
• 4.2.2.1 線程池創(chuàng)建52-53
• 4.2.2.2 線程池的初始化53
• 4.2.2.3 任務(wù)隊列添加任務(wù)53-54
• 4.2.2.4 線程處理函數(shù)54-55
• 4.2.2.5 線程池的銷毀55-56
• 4.3 動態(tài)監(jiān)控掃描算法的實現(xiàn)56-62
• 4.3.1 守護進程的創(chuàng)建56-57
• 4.3.2 創(chuàng)建用戶樹結(jié)構(gòu)57-58
• 4.3.3 用戶樹結(jié)構(gòu)的更新58-62
• 4.3.3.1 進程間的異步通信58-59
• 4.3.3.2 信號屏蔽處理59-60
• 4.3.3.3 小根堆的更新60-62
• 4.4 任務(wù)接.實現(xiàn)62-64
• 4.4.1 面向用戶的接62-63
• 4.4.2 面向存儲的接63
• 4.4.3 擴容模塊接63-64
• 4.5 本章總結(jié)64-66
• 第五章 系統(tǒng)測試與分析66-74
• 5.1 測試方法與指標(biāo)66
• 5.2 測試環(huán)境66-67
• 5.3 測試環(huán)境搭建67-69
• 5.3.1 基礎(chǔ)設(shè)施層68
• 5.3.2 中間服務(wù)層68-69
• 5.4 測試結(jié)果分析69-73
• 5.4.1 功能測試69-71
• 5.4.2 性能測試71-73
• 5.5 本章總結(jié)73-74
• 第六章 全文總結(jié)與展望74-76
• 6.1 本文的主要工作74
• 6.2 后續(xù)工作展望74-76
• 致謝76-77
• 參考文獻77-80

【參考文獻】

中國期刊全文數(shù)據(jù)庫 前1條

1 劉力力,樊建平;大型網(wǎng)絡(luò)服務(wù)系統(tǒng)性能評測[J];計算機研究與發(fā)展;2001年07期

中國碩士學(xué)位論文全文數(shù)據(jù)庫 前1條

1 劉雪;關(guān)于提高移動IP協(xié)議效率的研究[D];西安電子科技大學(xué);2013年

，

本文編號：663932