【摘要】：Docker相較于傳統(tǒng)的虛擬機(jī),減少了Guest OS層的資源消耗,旨在提供更輕量級的基于進(jìn)程的軟件服務(wù),它也為開發(fā)人員提供了快速的開發(fā)、測試、實施的平臺環(huán)境。對于分布式Web平臺的發(fā)布,Docker也提供了集群化的管理發(fā)布方案。目前,在持續(xù)集成發(fā)布、容器內(nèi)資源性能日志全面監(jiān)控調(diào)度、容器資源的彈性伸縮和應(yīng)用的灰度發(fā)布方面,Docker還有很大提升空間。持續(xù)集成方面,雖然借助持續(xù)集成工具Jenkins可以實現(xiàn),但是相對于集成軟件的操作,這對用戶提出了較高的技術(shù)操作要求。另外,針對于集群內(nèi)應(yīng)用性能監(jiān)控和日志,一直是容器運維廠商的難題,這樣使得建立全方位監(jiān)控和日志的方案變得尤為重要。將容器的彈性伸縮和基于應(yīng)用的版本升級完美的應(yīng)用于平臺生產(chǎn)環(huán)境,實現(xiàn)容器應(yīng)用生命周期的管理,一直是制約容器推廣和應(yīng)用的難點。如何有效解決這些問題,本文設(shè)計和實現(xiàn)的基于Docker的分布式Web平臺將從持續(xù)集成、性能監(jiān)控、灰度發(fā)布和日志檢索方面進(jìn)行探索。本文的工作和創(chuàng)新點如下:首先,本項目設(shè)計的分布式Web平臺中的一鍵式持續(xù)集成有效的解決了分布式Web應(yīng)用的開發(fā)、測試、實施的環(huán)節(jié)環(huán)境不一致的問題,弱化了平臺的差異性,使開發(fā)、測試更專注于業(yè)務(wù)的實現(xiàn),簡化應(yīng)用發(fā)布周期。一鍵式持續(xù)集成實現(xiàn)了SVN代碼管理工具與Jenkins持續(xù)集成工具的有機(jī)集合,節(jié)約了大量維護(hù)成本,同時也降低了持續(xù)集成的操作難度。其次,本文針對使用Docker平臺后,容器應(yīng)用的資源性能數(shù)據(jù)采集、匯總和分析問題,提供了性能監(jiān)控方案。并利用Kubernetes的特性,將容器資源實時的使用率加入到應(yīng)用彈性伸縮的策略中,實現(xiàn)基于容器的資源監(jiān)控和動態(tài)的自適應(yīng)調(diào)整資源占用,做到了應(yīng)用的彈性伸縮自適應(yīng)。該方案能夠?qū)崟r地對應(yīng)用節(jié)點進(jìn)行彈性的控制,解決了Docker容器無法根據(jù)性能訪問自適應(yīng)的問題,使應(yīng)用可以靈活的提供服務(wù),同時在調(diào)度觸發(fā)上引入調(diào)度日志的審計,確保其調(diào)度的有效性。然后,對軟件項目的版本變更升級探索了灰度發(fā)布的機(jī)制。通過項目實踐中引入灰度發(fā)布,減少業(yè)務(wù)的中斷,提高客戶的產(chǎn)品滿意度。同時,也為開發(fā)人員和運維人員節(jié)省了大量升級等待時間,降低了版本升級過程中出錯率。最后,對容器內(nèi)大量性能信息和日志,建立了一體化的日志采集和分析平臺,實現(xiàn)了容器內(nèi)節(jié)點、應(yīng)用和調(diào)度界面化的資源管理。該平臺一方面提供了豐富的查詢接口,能夠適應(yīng)日志檢索的多維度查詢要求;另一方面降低了Docker容器資源的運維復(fù)雜性,節(jié)約了運維人力成本。本文對分布式Web平臺中的持續(xù)集成、性能監(jiān)控、灰度發(fā)布和日志檢索功能進(jìn)行了逐一測試,驗證了其有效性。該平臺的設(shè)計和實現(xiàn),為Docker虛擬化應(yīng)用以及軟件項目的持續(xù)集成、性能監(jiān)控、灰度發(fā)布和日志檢索提供了完美的解決方案,具有很強(qiáng)的現(xiàn)實意義。
【學(xué)位授予單位】：上海師范大學(xué)
【學(xué)位級別】：碩士
【學(xué)位授予年份】：2018
【分類號】：TP393.09

【相似文獻(xiàn)】

相關(guān)期刊論文 前10條

1 李莉;;日志易 利用人工智能從日志分析中尋求機(jī)會[J];創(chuàng)業(yè)邦;2018年01期

2 李靜;施勇;薛質(zhì);;基于蜜罐日志分析的主動防御研究[J];信息安全與通信保密;2009年03期

3 王二暖;康李;;Oracle中使用LogMiner進(jìn)行日志分析[J];電腦開發(fā)與應(yīng)用;2007年09期

4 王逸兮;馮浩;劉芬;;大規(guī)模查詢?nèi)罩痉治瞿Ｐ蜆?gòu)建機(jī)制[J];數(shù)字通信世界;2017年11期

5 錢衛(wèi);袁瑞冬;;集中管理服務(wù)日志[J];網(wǎng)絡(luò)安全和信息化;2017年06期

6 胡沐創(chuàng);;大數(shù)據(jù)日志分析平臺應(yīng)用探索與實踐[J];金融科技時代;2018年01期

7 ;SITEVIEW DeepLOG深度日志分析[J];網(wǎng)絡(luò)安全和信息化;2016年05期

8 周航;畢永軍;;日志分析技術(shù)在IT運維管理中的應(yīng)用[J];金融電子化;2017年03期

9 鄧海川;方旭升;;日志分析系統(tǒng)的任務(wù)調(diào)度體系結(jié)構(gòu)研究[J];科技信息;2013年05期

10 王參參;姜青云;李彤;;基于大數(shù)據(jù)的日志分析平臺在銀行中的研究與實現(xiàn)[J];網(wǎng)絡(luò)安全技術(shù)與應(yīng)用;2018年05期

相關(guān)會議論文 前10條

1 周濤;;基于數(shù)據(jù)挖掘的入侵檢測日志分析技術(shù)研究[A];第二屆中國科學(xué)院博士后學(xué)術(shù)年會暨高新技術(shù)前沿與發(fā)展學(xué)術(shù)會議程序冊[C];2010年

2 耿濤;;Web日志分析在電子數(shù)據(jù)取證中的應(yīng)用[A];第二十一次全國計算機(jī)安全學(xué)術(shù)交流會論文集[C];2006年

3 馬勇;趙學(xué)明;孫波;;基于Aprior算法的Web日志分析方法[A];第27次全國計算機(jī)安全學(xué)術(shù)交流會論文集[C];2012年

4 魏晨輝;張展;向琳;王書婷;左德承;;一種基于高端容錯計算機(jī)故障日志分析系統(tǒng)的設(shè)計與實現(xiàn)[A];第十四屆全國容錯計算學(xué)術(shù)會議(CFTC'2011)論文集[C];2011年

5 付偉;白永超;辛陽;;一種基于Hadoop和K-means的Web日志分析方案的設(shè)計[A];第十九屆全國青年通信學(xué)術(shù)年會論文集[C];2014年

6 朱金清;王建新;陳志泊;;基于APRIORI的層次化聚類算法及其在IDS日志分析中的應(yīng)用[A];第二十四屆中國數(shù)據(jù)庫學(xué)術(shù)會議論文集（研究報告篇）[C];2007年

7 胡雙雙;武斌;;基于攻擊圖的蜜網(wǎng)日志分析[A];第十九屆全國青年通信學(xué)術(shù)年會論文集[C];2014年

8 許丹青;劉奕群;岑榮偉;馬少平;茹立云;楊磊;;基于日志分析的中文輸入法用戶行為研究[A];第五屆全國青年計算語言學(xué)研討會論文集[C];2010年

9 陳晨;鄭康鋒;;一種基于支持向量機(jī)的蜜網(wǎng)系統(tǒng)日志分析方法[A];2011年通信與信息技術(shù)新進(jìn)展——第八屆中國通信學(xué)會學(xué)術(shù)年會論文集[C];2011年

10 朱江;詹微;林勇;梁翰中;;MOTOROLA BSC多元維模式[A];四川省通信學(xué)會2007年學(xué)術(shù)年會論文集[C];2007年

相關(guān)重要報紙文章 前10條

1 ;日志分析中的五個誤區(qū)[N];網(wǎng)絡(luò)世界;2004年

2 本報記者 趙明;新一代日志分析系統(tǒng)為企業(yè)運維減負(fù)[N];中國計算機(jī)報;2016年

3 中科院計算所 李洋;使用Webalizer進(jìn)行網(wǎng)絡(luò)流量日志分析[N];計算機(jī)世界;2006年

4 陳代壽;網(wǎng)管的四兩撥千斤[N];中國計算機(jī)報;2004年

5 ;Docker支持更深人的容器日志分析[N];中國信息化周報;2016年

6 IBM大數(shù)據(jù)專家 James Kobielus　范范 編譯;大數(shù)據(jù)日志分析借機(jī)器學(xué)習(xí)騰飛[N];網(wǎng)絡(luò)世界;2014年

7 王婷;IDC增值服務(wù)：網(wǎng)站日志分析[N];計算機(jī)世界;2001年

8 重慶 航行者;IIS的安全[N];電腦報;2002年

9 覃進(jìn)文;在Windows 2000&&2003下快速安裝Webalizer[N];中國電腦教育報;2003年

10 記者 聞丹巖;Cisco與世紀(jì)互聯(lián)讓利用戶[N];中國計算機(jī)報;2001年

相關(guān)博士學(xué)位論文 前1條

1 李志強(qiáng);基于網(wǎng)絡(luò)日志的用戶行為分析[D];北京理工大學(xué);2016年

相關(guān)碩士學(xué)位論文 前10條

1 李志盼;基于Docker的分布式Web平臺的研究與實現(xiàn)[D];上海師范大學(xué);2018年

2 鄭榮;統(tǒng)一日志系統(tǒng)中的日志獲取模塊與日志檢索模塊的設(shè)計與實現(xiàn)[D];南京大學(xué);2018年

3 羅磊;基于ElasticSearch與Storm的日志大數(shù)據(jù)服務(wù)平臺的設(shè)計與實現(xiàn)[D];安徽大學(xué);2018年

4 陳勇;銀行日志倉儲中心系統(tǒng)的設(shè)計與實現(xiàn)[D];湖南大學(xué);2017年

5 趙毅;一種教育云平臺的資源推薦方案[D];華中科技大學(xué);2016年

6 傅韌嶠;面向移動新聞的日志收集分析系統(tǒng)的設(shè)計與實現(xiàn)[D];北京交通大學(xué);2017年

7 許長福;日志數(shù)據(jù)分析系統(tǒng)的設(shè)計與實現(xiàn)[D];北京交通大學(xué);2017年

8 曾新勵;基于Hadoop平臺的分布式web日志分析系統(tǒng)的研究與實現(xiàn)[D];西南石油大學(xué);2017年

9 費秀宏;基于Kafka的日志處理平臺的研究[D];吉林大學(xué);2017年

10 賈周陽;面向大規(guī)模開源軟件的日志增強(qiáng)技術(shù)研究[D];國防科學(xué)技術(shù)大學(xué);2015年

本文編號：2806294