近年來大數(shù)據(jù)迅速發(fā)展,對數(shù)據(jù)的高速處理能力要求也越來越高。工程師們關注的實際業(yè)務的同時,云平臺的實際處理能力也受到越來越多的關注。目前,世界各大型互聯(lián)網公司均推出自己的云計算平臺,為自己同時對外提供服務。于此同時,國內政府研究機構也在搭建私有云平臺,用于處理保密性高的數(shù)據(jù)分析業(yè)務。隨著業(yè)務量的不斷提升,云平臺的各種問題也逐漸暴露出來,例如資源搶占,負載均衡,任務擁塞等問題。因此,如何進行任務調度和資源分配是當前云平臺領域亟待解決的重要問題。本文提出一種以任務優(yōu)先級、任務估計執(zhí)行時間為依據(jù)的多任務并發(fā)調度策略生成和選擇方法。設計和實現(xiàn)了云平臺多任務并發(fā)調度策略推薦系統(tǒng)。該系統(tǒng)能夠對PaaS云平臺的作業(yè)進行合理的切分,并能夠選擇作業(yè)原子任務執(zhí)行的最優(yōu)資源配比進行資源分配,選擇估計執(zhí)行時間最小的節(jié)點執(zhí)行作業(yè)的某一劃分。除此以外,針對任務估計執(zhí)行時間預測存在高誤差的問題,提出基于決策樹的誤差修正方法修正預測誤差。云平臺多任務并發(fā)調度策略推薦系統(tǒng)的設計與實現(xiàn)針對單線程的任務在不同機器硬件型號的CPU、內存、網卡等因素下的任務執(zhí)行時間分布測試;不同資源配比下的任務執(zhí)行時間分布的研究。通過研究任務切分...

【文章頁數(shù)】：83 頁

【學位級別】：碩士

【部分圖文】：

圖4-1任務形式化描述

圖4-1任務形式化描述圖4-2任務狀態(tài)形式化描述JobState是任務狀態(tài)列表，是對于任務狀態(tài)的形式化描述。JobId表示ID，state表示任務的狀態(tài)（包括提交、調度、執(zhí)行、執(zhí)行失敗等狀態(tài)atetime表示狀態(tài)監(jiān)測時間。.2任務管理功能模塊實現(xiàn)任務管理的模塊系....

圖4-2任務狀態(tài)形式化描述JobState是任務狀態(tài)列表，是對于任務狀態(tài)的形式化描述

-34-圖4-2任務狀態(tài)形式化描述JobState是任務狀態(tài)列表，是對于任務狀態(tài)的形式化描述。JobId表示ID，state表示任務的狀態(tài)（包括提交、調度、執(zhí)行、執(zhí)行失敗等狀態(tài)tetime表示狀態(tài)監(jiān)測時間。2任務管理功能模塊實現(xiàn)任務管理的模塊系統(tǒng)負責任務提交、任....

圖4-6鏡像形式化描述在圖4-6中Dockers表示鏡像列表，是鏡像的集合，每一個鏡像Docker的定義為Dockers集合中的的一個元素

哈爾濱工業(yè)大學工程碩士學位論文刪改查基本功能。用戶通過Web提交鏡像配置表單或JSON文件，后臺解自動化構建docker鏡像，并將鏡像信息存儲到Mysql數(shù)據(jù)庫中。通過鏡像或鏡像名可以查找鏡像，并可以選定鏡像進行刪除操作。本節(jié)介紹鏡像配監(jiān)測功能的數(shù)據(jù)描述、流程介....

圖4-7鏡像狀態(tài)形式化描述在圖4-7中，DockersState表示資源服務器節(jié)點的被創(chuàng)建的鏡像容器狀態(tài)信息集合，對于每一個鏡像容器的狀態(tài)其數(shù)據(jù)描述如上所示

哈爾濱工業(yè)大學工程碩士學位論文id表示創(chuàng)建鏡像的Id,由用戶創(chuàng)建添加，但要保證Id的唯一性，否者無法創(chuàng)建成功；cmd表示鏡像一旦被啟動要執(zhí)行的命令或者開啟的軟件；cpus表示鏡像默認分配的cpu核數(shù)；mem表示鏡像默認的運行內存；instances表示鏡像可允....

本文編號：4022024