本文關(guān)鍵詞：PaaS云平臺自動(dòng)化部署和監(jiān)控的設(shè)計(jì)與實(shí)現(xiàn)

  更多相關(guān)文章： 云計(jì)算 PaaS 自動(dòng)化 部署 監(jiān)控 Cloud Foundry

【摘要】：隨著多年來虛擬化技術(shù)的不斷發(fā)展,云計(jì)算逐漸普及,現(xiàn)代1T企業(yè)的工程師們不再滿足于僅通過虛擬化技術(shù)來獲取具有計(jì)算能力的虛擬機(jī)節(jié)點(diǎn),而開始逐步將目光投向更加理想的應(yīng)用開發(fā)環(huán)境并最終實(shí)現(xiàn)無需運(yùn)維的終極目標(biāo)。Cloud Foundry就是在這樣的背景下應(yīng)運(yùn)而生的業(yè)界第一款開源的優(yōu)秀PaaS產(chǎn)品。本文結(jié)合當(dāng)前業(yè)界分布式系統(tǒng)的主流技術(shù)方向以及實(shí)驗(yàn)室實(shí)際項(xiàng)目中C1oud Foundry的各項(xiàng)運(yùn)行指標(biāo),提出Cloud Foundry平臺存在的部署困難、監(jiān)控不完善兩大問題,并針對性地設(shè)計(jì)與實(shí)現(xiàn)了一套基于Cloud Foundry的快速自動(dòng)化部署工具以及較為全面的云平臺監(jiān)控系統(tǒng)。這套系統(tǒng)實(shí)現(xiàn)了自動(dòng)化部署不依賴于底層基礎(chǔ)設(shè)施即服務(wù)平臺、通過解析Cloud Foundry發(fā)行包的具體結(jié)構(gòu)實(shí)現(xiàn)每個(gè)組件部署無冗余,以此達(dá)到了高效簡便的部署目的。針對監(jiān)控該系統(tǒng)提出并實(shí)現(xiàn)了非侵入式的涵蓋虛擬機(jī)、組件、容器進(jìn)程和應(yīng)用日志這四個(gè)層次的監(jiān)控方案,分別實(shí)現(xiàn)了監(jiān)控虛擬機(jī)及組件資源用量、監(jiān)控組件進(jìn)程及應(yīng)用容器狀態(tài)、保證進(jìn)程高可用及故障自動(dòng)恢復(fù)、應(yīng)用日志查詢與報(bào)警、資源用量超限預(yù)警和故障自動(dòng)報(bào)警以及可自定義的監(jiān)控度量,這四個(gè)層面自下而上地保證了云平臺及其應(yīng)用的穩(wěn)定可靠,有效降低了運(yùn)維的難度和復(fù)雜性、節(jié)省了運(yùn)維成本。本文所述的部署與監(jiān)控系統(tǒng)不僅在本文最后的實(shí)驗(yàn)部分表現(xiàn)良好,在實(shí)際的生產(chǎn)環(huán)境中也經(jīng)受住了檢驗(yàn),平臺部署快速高效運(yùn)行穩(wěn)定,運(yùn)行一年多來出現(xiàn)十余次故障報(bào)警均及時(shí)修復(fù)。
【關(guān)鍵詞】：云計(jì)算 PaaS 自動(dòng)化 部署 監(jiān)控 Cloud Foundry
【學(xué)位授予單位】：浙江大學(xué)
【學(xué)位級別】：碩士
【學(xué)位授予年份】：2016
【分類號】：TP277
【目錄】：

• 摘要4-5
• Abstract5-11
• 第1章 緒論11-19
• 1.1 平臺即服務(wù)技術(shù)背景與現(xiàn)狀11-15
• 1.1.1 云計(jì)算的背景11-12
• 1.1.2 PaaS云平臺部署與監(jiān)控現(xiàn)狀12-13
• 1.1.3 PaaS云平臺現(xiàn)有自動(dòng)化部署與監(jiān)控的缺陷13-15
• 1.2 自動(dòng)化部署與“四層”監(jiān)控技術(shù)15-17
• 1.3 本文的研究內(nèi)容17-18
• 1.4 本文的組織結(jié)構(gòu)18
• 1.5 本章小結(jié)18-19
• 第2章 相關(guān)技術(shù)綜述19-33
• 2.1 Cloud Foundry架構(gòu)簡介19-21
• 2.2 自動(dòng)化部署技術(shù)綜述21-25
• 2.2.1 自動(dòng)化部署的模式21-22
• 2.2.2 Puppet自動(dòng)化部署工具22-25
• 2.3 監(jiān)控技術(shù)綜述25-32
• 2.3.1 時(shí)間序列數(shù)據(jù)庫25
• 2.3.2 分布式鍵值存儲(chǔ)25-26
• 2.3.3 系統(tǒng)監(jiān)控26-29
• 2.3.4 進(jìn)程監(jiān)控29-30
• 2.3.5 應(yīng)用日志監(jiān)控30-31
• 2.3.6 應(yīng)用性能監(jiān)控31-32
• 2.4 本章小結(jié)32-33
• 第3章 Cloud Foundry自動(dòng)化部署系統(tǒng)設(shè)計(jì)與實(shí)現(xiàn)33-45
• 3.1 自動(dòng)化部署架構(gòu)設(shè)計(jì)33-36
• 3.1.1 自動(dòng)化部署實(shí)現(xiàn)目標(biāo)33
• 3.1.2 自動(dòng)化部署服務(wù)架構(gòu)33-35
• 3.1.3 自動(dòng)化部署的整體流程35-36
• 3.2 自動(dòng)化部署系統(tǒng)與BOSH部署對比36-40
• 3.2.1 相關(guān)組件與功能對比37-39
• 3.2.2 部署流程對比39-40
• 3.3 關(guān)鍵技術(shù)流程40-44
• 3.3.1 制作更新發(fā)行包時(shí)結(jié)構(gòu)解析40-42
• 3.3.2 部署過程結(jié)構(gòu)解析42-43
• 3.3.3 部署完成后的結(jié)構(gòu)解析43-44
• 3.4 自動(dòng)化部署系統(tǒng)的使用場景與價(jià)值44
• 3.5 本章小結(jié)44-45
• 第4章 自發(fā)現(xiàn)式虛擬機(jī)監(jiān)控與心跳監(jiān)測45-57
• 4.1 虛擬機(jī)層監(jiān)控設(shè)計(jì)目標(biāo)45-46
• 4.2 現(xiàn)有監(jiān)控系統(tǒng)分析46-48
• 4.3 虛擬機(jī)層監(jiān)控架構(gòu)設(shè)計(jì)48-50
• 4.4 服務(wù)發(fā)現(xiàn)與虛擬機(jī)注冊50-52
• 4.5 虛擬機(jī)層監(jiān)控關(guān)鍵技術(shù)52-56
• 4.5.1 監(jiān)控信息獲取子模塊52-53
• 4.5.2 基于NATS的消息轉(zhuǎn)發(fā)模塊53
• 4.5.3 基于etcd的心跳保持與服務(wù)發(fā)現(xiàn)子模塊53-54
• 4.5.4 基于BOSH的health monitor監(jiān)控組件改造54-55
• 4.5.5 OpenTSDB數(shù)據(jù)獲取55
• 4.5.6 自定義監(jiān)控?cái)?shù)據(jù)模塊55-56
• 4.6 本章小結(jié)56-57
• 第5章 組件進(jìn)程監(jiān)控與高可用改造57-64
• 5.1 組件進(jìn)程層監(jiān)控設(shè)計(jì)目標(biāo)57-58
• 5.2 組件進(jìn)程監(jiān)控架構(gòu)設(shè)計(jì)58-59
• 5.3 組件進(jìn)程監(jiān)控實(shí)現(xiàn)59-62
• 5.3.1 Monit API信息獲取及執(zhí)行模塊59-61
• 5.3.2 基于NATS的消息轉(zhuǎn)發(fā)模塊61-62
• 5.3.3 監(jiān)控服務(wù)端模塊與報(bào)警62
• 5.4 組件進(jìn)程高可用實(shí)現(xiàn)62-63
• 5.4.1 MySQL主從高可用改造62-63
• 5.4.2 Haproxy高可用改造63
• 5.5 本章小結(jié)63-64
• 第6章 應(yīng)用容器監(jiān)控與定制化應(yīng)用日志監(jiān)控64-69
• 6.1 應(yīng)用容器與日志監(jiān)控設(shè)計(jì)目標(biāo)64
• 6.2 應(yīng)用容器與日志監(jiān)控架構(gòu)設(shè)計(jì)64-65
• 6.3 應(yīng)用容器與日志監(jiān)控系統(tǒng)實(shí)現(xiàn)細(xì)節(jié)65-68
• 6.3.1 監(jiān)控服務(wù)端本身的監(jiān)控65-66
• 6.3.2 Cloud Foundry必要組件與必要資源檢測66
• 6.3.3 Cloud Foundry應(yīng)用容器監(jiān)控66-67
• 6.3.4 Cloud Foundry應(yīng)用日志監(jiān)控模塊67
• 6.3.5 自定義監(jiān)控?cái)?shù)據(jù)模塊67-68
• 6.4 本章小結(jié)68-69
• 第7章 試驗(yàn)結(jié)果與分析69-78
• 7.1 自動(dòng)化部署實(shí)驗(yàn)與分析69-73
• 7.1.1 部署環(huán)境介紹69-71
• 7.1.2 部署實(shí)驗(yàn)結(jié)果對比71-73
• 7.2 監(jiān)控實(shí)驗(yàn)與分析73-77
• 7.2.1 系統(tǒng)資源與虛擬機(jī)監(jiān)控實(shí)驗(yàn)73-74
• 7.2.2 組件進(jìn)程監(jiān)控實(shí)驗(yàn)74-76
• 7.2.3 應(yīng)用容器監(jiān)控與應(yīng)用日志監(jiān)控實(shí)驗(yàn)76-77
• 7.3 本章小結(jié)77-78
• 第8章 總結(jié)與展望78-80
• 參考文獻(xiàn)80-82
• 作者簡歷82-83
• 致謝83-84
• 附錄A 部署實(shí)現(xiàn)84-90
• A.1 部署服務(wù)器初始化84
• A.2 集群部署84-86
• A.3 組件狀態(tài)獲取86
• A.4 組件重啟等執(zhí)行命令86-87
• A.5 集群更新(擴(kuò)展、縮小)87
• A.6 節(jié)點(diǎn)硬件資源獲取87-88
• A.7 操作日志下載88
• A.8 特殊組件的安裝88-89
• A.9 異常處理89-90
• 附錄B Mysql高可用改造步驟90

【相似文獻(xiàn)】

中國期刊全文數(shù)據(jù)庫 前10條

1 曹曉剛;;Java虛擬機(jī)的10年[J];程序員;2005年07期

2 宋韜;盤細(xì)平;羅元柯;倪國軍;;Java虛擬機(jī)在嵌入式DSP系統(tǒng)上的實(shí)現(xiàn)[J];計(jì)算機(jī)應(yīng)用與軟件;2007年04期

3 劉黎波;;Java虛擬機(jī)攔截原理研究[J];科技風(fēng);2008年21期

4 劉治波;;Java虛擬機(jī)簡析[J];濟(jì)南職業(yè)學(xué)院學(xué)報(bào);2008年01期

5 郝帥;;Java虛擬機(jī)中相關(guān)技術(shù)的探討[J];成功(教育);2008年08期

6 李霞;;系統(tǒng)虛擬機(jī)關(guān)鍵技術(shù)研究[J];微型電腦應(yīng)用;2010年03期

7 鄭曉瓏;孔挺;;虛擬機(jī)的安全風(fēng)險(xiǎn)與管理[J];硅谷;2010年16期

8 李學(xué)昌;平淡;;為速度而戰(zhàn),虛擬機(jī)內(nèi)外兼修[J];電腦愛好者;2010年18期

9 王惠萍;張海龍;馮帆;王建華;;Java虛擬機(jī)使用及優(yōu)化[J];計(jì)算機(jī)與網(wǎng)絡(luò);2010年21期

10 鄭婷婷;武延軍;賀也平;;云計(jì)算環(huán)境下的虛擬機(jī)快速克隆技術(shù)[J];計(jì)算機(jī)工程與應(yīng)用;2011年13期

中國重要會(huì)議論文全文數(shù)據(jù)庫 前10條

1 孟廣平;;虛擬機(jī)漂移網(wǎng)絡(luò)連接方法探討[A];中國計(jì)量協(xié)會(huì)冶金分會(huì)2011年會(huì)論文集[C];2011年

2 段翼真;王曉程;;可信安全虛擬機(jī)平臺的研究[A];第26次全國計(jì)算機(jī)安全學(xué)術(shù)交流會(huì)論文集[C];2011年

3 李明宇;張倩;呂品;;網(wǎng)絡(luò)流量感知的虛擬機(jī)高可用動(dòng)態(tài)部署研究[A];2014第二屆中國指揮控制大會(huì)論文集（上）[C];2014年

4 林紅;;Java虛擬機(jī)面向數(shù)字媒體的應(yīng)用研究[A];計(jì)算機(jī)技術(shù)與應(yīng)用進(jìn)展——全國第17屆計(jì)算機(jī)科學(xué)與技術(shù)應(yīng)用（CACIS）學(xué)術(shù)會(huì)議論文集（上冊）[C];2006年

5 楊旭;彭一明;刑承杰;李若淼;;基于VMware vSphere 5虛擬機(jī)的備份系統(tǒng)實(shí)現(xiàn)[A];中國高等教育學(xué)會(huì)教育信息化分會(huì)第十二次學(xué)術(shù)年會(huì)論文集[C];2014年

6 沈敏虎;查德平;劉百祥;趙澤宇;;虛擬機(jī)網(wǎng)絡(luò)部署與管理研究[A];中國高等教育學(xué)會(huì)教育信息化分會(huì)第十次學(xué)術(shù)年會(huì)論文集[C];2010年

7 李英壯;廖培騰;孫夢;李先毅;;基于云計(jì)算的數(shù)據(jù)中心虛擬機(jī)管理平臺的設(shè)計(jì)[A];中國高等教育學(xué)會(huì)教育信息化分會(huì)第十次學(xué)術(shù)年會(huì)論文集[C];2010年

8 朱欣焰;蘇科華;毛繼國;龔健雅;;GIS符號虛擬機(jī)及實(shí)現(xiàn)方法研究[A];《測繪通報(bào)》測繪科學(xué)前沿技術(shù)論壇摘要集[C];2008年

9 于洋;陳曉東;俞承芳;李旦;;基于FPGA平臺的虛擬機(jī)建模與仿真[A];2007'儀表，自動(dòng)化及先進(jìn)集成技術(shù)大會(huì)論文集（一）[C];2007年

10 丁濤;郝沁汾;張冰;;內(nèi)核虛擬機(jī)調(diào)度策略的研究與分析[A];'2010系統(tǒng)仿真技術(shù)及其應(yīng)用學(xué)術(shù)會(huì)議論文集[C];2010年

中國重要報(bào)紙全文數(shù)據(jù)庫 前10條

1 ;虛擬機(jī)的生與死[N];網(wǎng)絡(luò)世界;2008年

2 本報(bào)記者 卜娜;高性能Java虛擬機(jī)將在中國云市場釋能[N];中國計(jì)算機(jī)報(bào);2012年

3 本報(bào)記者 邱燕娜;如何告別虛擬機(jī)管理煩惱[N];中國計(jì)算機(jī)報(bào);2012年

4 ;首批通過云計(jì)算產(chǎn)品虛擬機(jī)管理測評名單[N];中國電子報(bào);2014年

5 申琳;虛擬機(jī)泛濫 系統(tǒng)安全怎么辦[N];中國計(jì)算機(jī)報(bào);2008年

6 Tom Henderson邋沈建苗 編譯;虛擬機(jī)管理的五大問題[N];計(jì)算機(jī)世界;2008年

7 盆盆;真實(shí)的虛擬機(jī)[N];中國電腦教育報(bào);2004年

8 本版編輯　綜合 編譯整理 田夢;管理好虛擬機(jī)的全生命周期[N];計(jì)算機(jī)世界;2008年

9 李婷;中國研制出全球最快反病毒虛擬機(jī)[N];人民郵電;2009年

10 張弛;虛擬機(jī)遷移走向真正自由[N];網(wǎng)絡(luò)世界;2010年

中國博士學(xué)位論文全文數(shù)據(jù)庫 前10條

1 宋翔;多核虛擬環(huán)境的性能及可伸縮性研究[D];復(fù)旦大學(xué);2014年

2 王桂平;云環(huán)境下面向可信的虛擬機(jī)異常檢測關(guān)鍵技術(shù)研究[D];重慶大學(xué);2015年

3 周真;云平臺下運(yùn)行環(huán)境感知的虛擬機(jī)異常檢測策略及算法研究[D];重慶大學(xué);2015年

4 郭芬;面向虛擬機(jī)的云平臺資源部署與調(diào)度研究[D];華南理工大學(xué);2015年

5 周傲;高可靠云服務(wù)供應(yīng)關(guān)鍵技術(shù)研究[D];北京郵電大學(xué);2015年

6 代煒琦;云計(jì)算執(zhí)行環(huán)境可信構(gòu)建關(guān)鍵技術(shù)研究[D];華中科技大學(xué);2015年

7 陳彬;分布環(huán)境下虛擬機(jī)按需部署關(guān)鍵技術(shù)研究[D];國防科學(xué)技術(shù)大學(xué);2010年

8 劉海坤;虛擬機(jī)在線遷移性能優(yōu)化關(guān)鍵技術(shù)研究[D];華中科技大學(xué);2012年

9 劉謙;面向云計(jì)算的虛擬機(jī)系統(tǒng)安全研究[D];上海交通大學(xué);2012年

10 趙佳;虛擬機(jī)動(dòng)態(tài)遷移的關(guān)鍵問題研究[D];吉林大學(xué);2013年

中國碩士學(xué)位論文全文數(shù)據(jù)庫 前10條

1 潘飛;負(fù)載相關(guān)的虛擬機(jī)放置策略研究[D];杭州電子科技大學(xué);2011年

2 王建一;混合型桌面云高可用性研究與實(shí)現(xiàn)[D];華南理工大學(xué);2015年

3 周衡;云計(jì)算環(huán)境下虛擬機(jī)優(yōu)化調(diào)度策略研究[D];河北大學(xué);2015年

4 羅仲皓;基于OpenStack的私有云計(jì)算平臺的設(shè)計(jì)與實(shí)現(xiàn)[D];華南理工大學(xué);2015年

5 李子堂;面向負(fù)載均衡的虛擬機(jī)動(dòng)態(tài)遷移優(yōu)化研究[D];遼寧大學(xué);2015年

6 張煜;基于OpenStack的“實(shí)驗(yàn)云”平臺的研究與開發(fā)[D];西南交通大學(xué);2015年

7 曾文琦;面向應(yīng)用服務(wù)的云規(guī)模虛似機(jī)性能監(jiān)控與負(fù)載分析技術(shù)研究[D];復(fù)旦大學(xué);2013年

8 施繼成;面向多核處理器的虛擬機(jī)性能優(yōu)化[D];復(fù)旦大學(xué);2014年

9 游井輝;基于虛擬機(jī)動(dòng)態(tài)遷移的資源調(diào)度策略研究[D];華南理工大學(xué);2015年

10 方良英;云平臺的資源優(yōu)化管理研究與實(shí)現(xiàn)[D];南京師范大學(xué);2015年

，

本文編號：819652