公有云環(huán)境下基于多模態(tài)神經(jīng)網(wǎng)絡(luò)的彈性資源管理系統(tǒng)
發(fā)布時(shí)間:2020-04-15 12:15
【摘要】:云計(jì)算市場(chǎng)主要采用按需付費(fèi)模式,這種模式需要云租戶在提交計(jì)算任務(wù)(例如MapReduce)之前,根據(jù)該任務(wù)的服務(wù)需求(例如完成任務(wù)的截止時(shí)間)來估算所需要租用的計(jì)算資源(例如用于執(zhí)行計(jì)算任務(wù)的虛擬機(jī))的數(shù)量。在虛擬機(jī)性能會(huì)發(fā)生波動(dòng)的公有云環(huán)境中,為了保障計(jì)算任務(wù)的按時(shí)完成以及減少租用計(jì)算資源的費(fèi)用,租戶需要自動(dòng)化的資源管理系統(tǒng),來根據(jù)計(jì)算任務(wù)的具體運(yùn)行情況實(shí)時(shí)調(diào)整租用資源的數(shù)量;诙嗄B(tài)神經(jīng)網(wǎng)絡(luò)的彈性資源管理系統(tǒng)可用于解決上述問題。該系統(tǒng)包含初始資源推薦模塊以及彈性資源管理模塊。初始資源推薦模塊會(huì)根據(jù)租戶計(jì)算任務(wù)的截止時(shí)間和工作量,為租戶推薦能按時(shí)完成任務(wù)且租用費(fèi)用最少的計(jì)算資源配置。在任務(wù)的計(jì)算過程中,彈性資源管理模塊的多模態(tài)神經(jīng)網(wǎng)絡(luò)能夠提取計(jì)算資源數(shù)量、計(jì)算資源利用率和任務(wù)計(jì)算速度等三個(gè)模態(tài)的特征,實(shí)時(shí)對(duì)任務(wù)完成時(shí)間進(jìn)行更加準(zhǔn)確的預(yù)測(cè)。這種預(yù)測(cè)模型能夠在虛擬機(jī)性能出現(xiàn)下降時(shí),及時(shí)捕捉到任務(wù)計(jì)算速度上的變化,調(diào)整預(yù)測(cè)結(jié)果。當(dāng)預(yù)測(cè)到計(jì)算任務(wù)的完成時(shí)間超過截止時(shí)間時(shí),該系統(tǒng)會(huì)增加計(jì)算資源的數(shù)量,提升任務(wù)的計(jì)算速度,最終保障任務(wù)按時(shí)完成。在阿里云中基于Hadoop計(jì)算框架開發(fā)實(shí)現(xiàn)了該系統(tǒng)。通過對(duì)該系統(tǒng)的實(shí)際測(cè)試表明:1)在確定初始計(jì)算資源數(shù)量時(shí),該系統(tǒng)的預(yù)測(cè)模型對(duì)于任務(wù)完成時(shí)間的預(yù)測(cè)準(zhǔn)確率為98.4%;2)與領(lǐng)域內(nèi)現(xiàn)有的其它資源管理系統(tǒng)相比,該系統(tǒng)可在保證任務(wù)按時(shí)完成的同時(shí),最多節(jié)省云租戶30.8%的計(jì)算資源租用成本。
【圖文】:
.1 用 20 個(gè)虛擬機(jī)運(yùn)行 200GB WordCount 任務(wù)的處理的弊端用量付費(fèi)的收費(fèi)政策,如果一開始就為計(jì)算任務(wù)分配在很短的時(shí)間內(nèi)完成。這樣,租戶租用計(jì)算資源的成源但運(yùn)行時(shí)間更長(zhǎng),這種策略下的租借成本要少。如要進(jìn)行實(shí)時(shí)彈性資源控制了。本文首先會(huì)證明,盡管更快,一開始分配過多的計(jì)算資源會(huì)導(dǎo)致租用成本ordCount 任務(wù),當(dāng)虛擬機(jī)單機(jī)的配置相同時(shí),,僅改變運(yùn)行該任務(wù)的成本會(huì)隨著虛擬機(jī)數(shù)量的增加而增加。務(wù)會(huì)導(dǎo)致租用成本上升。對(duì)于租戶來說,一開始只租數(shù)量的資源,然后在必要的時(shí)候增加額外計(jì)算資源是這也是本文中彈性資源管理系統(tǒng)所采用的資源分配
.1 用 20 個(gè)虛擬機(jī)運(yùn)行 200GB WordCount 任務(wù)的處理的弊端用量付費(fèi)的收費(fèi)政策,如果一開始就為計(jì)算任務(wù)分配在很短的時(shí)間內(nèi)完成。這樣,租戶租用計(jì)算資源的成源但運(yùn)行時(shí)間更長(zhǎng),這種策略下的租借成本要少。如要進(jìn)行實(shí)時(shí)彈性資源控制了。本文首先會(huì)證明,盡管更快,一開始分配過多的計(jì)算資源會(huì)導(dǎo)致租用成本ordCount 任務(wù),當(dāng)虛擬機(jī)單機(jī)的配置相同時(shí),僅改變運(yùn)行該任務(wù)的成本會(huì)隨著虛擬機(jī)數(shù)量的增加而增加務(wù)會(huì)導(dǎo)致租用成本上升。對(duì)于租戶來說,一開始只租數(shù)量的資源,然后在必要的時(shí)候增加額外計(jì)算資源是這也是本文中彈性資源管理系統(tǒng)所采用的資源分配
【學(xué)位授予單位】:華中科技大學(xué)
【學(xué)位級(jí)別】:碩士
【學(xué)位授予年份】:2019
【分類號(hào)】:TP393.07;TP183
【圖文】:
.1 用 20 個(gè)虛擬機(jī)運(yùn)行 200GB WordCount 任務(wù)的處理的弊端用量付費(fèi)的收費(fèi)政策,如果一開始就為計(jì)算任務(wù)分配在很短的時(shí)間內(nèi)完成。這樣,租戶租用計(jì)算資源的成源但運(yùn)行時(shí)間更長(zhǎng),這種策略下的租借成本要少。如要進(jìn)行實(shí)時(shí)彈性資源控制了。本文首先會(huì)證明,盡管更快,一開始分配過多的計(jì)算資源會(huì)導(dǎo)致租用成本ordCount 任務(wù),當(dāng)虛擬機(jī)單機(jī)的配置相同時(shí),,僅改變運(yùn)行該任務(wù)的成本會(huì)隨著虛擬機(jī)數(shù)量的增加而增加。務(wù)會(huì)導(dǎo)致租用成本上升。對(duì)于租戶來說,一開始只租數(shù)量的資源,然后在必要的時(shí)候增加額外計(jì)算資源是這也是本文中彈性資源管理系統(tǒng)所采用的資源分配
.1 用 20 個(gè)虛擬機(jī)運(yùn)行 200GB WordCount 任務(wù)的處理的弊端用量付費(fèi)的收費(fèi)政策,如果一開始就為計(jì)算任務(wù)分配在很短的時(shí)間內(nèi)完成。這樣,租戶租用計(jì)算資源的成源但運(yùn)行時(shí)間更長(zhǎng),這種策略下的租借成本要少。如要進(jìn)行實(shí)時(shí)彈性資源控制了。本文首先會(huì)證明,盡管更快,一開始分配過多的計(jì)算資源會(huì)導(dǎo)致租用成本ordCount 任務(wù),當(dāng)虛擬機(jī)單機(jī)的配置相同時(shí),僅改變運(yùn)行該任務(wù)的成本會(huì)隨著虛擬機(jī)數(shù)量的增加而增加務(wù)會(huì)導(dǎo)致租用成本上升。對(duì)于租戶來說,一開始只租數(shù)量的資源,然后在必要的時(shí)候增加額外計(jì)算資源是這也是本文中彈性資源管理系統(tǒng)所采用的資源分配
【學(xué)位授予單位】:華中科技大學(xué)
【學(xué)位級(jí)別】:碩士
【學(xué)位授予年份】:2019
【分類號(hào)】:TP393.07;TP183
【相似文獻(xiàn)】
相關(guān)期刊論文 前10條
1 楊海嘯;;光纜等啞資源管理系統(tǒng)提升研究[J];通訊世界;2019年12期
2 孫磊;白龍飛;薛其林;宋珍珍;;光纖資源管理系統(tǒng)構(gòu)想[J];山東通信技術(shù);2019年04期
3 吳健;;光纜傳輸資源管理系統(tǒng)分析[J];數(shù)字通信世界;2017年07期
4 陳大慶;;電子資源管理系統(tǒng)的發(fā)展及未來思考[J];大學(xué)圖書館學(xué)報(bào);2014年03期
5 陳雪斐;;國內(nèi)主流教育資源管理系統(tǒng)的比較研究[J];中國教育技術(shù)裝備;2014年18期
6 曹玉娜;濮榮強(qiáng);;教育資源管理系統(tǒng)共建共享問題研究[J];長(zhǎng)春大學(xué)學(xué)報(bào);2013年10期
7 張永琳;;電力通信資源管理系統(tǒng)的開發(fā)應(yīng)用[J];黑龍江科技信息;2013年20期
8 趙s
本文編號(hào):2628541
本文鏈接:http://sikaile.net/guanlilunwen/glzh/2628541.html
最近更新
教材專著