基于Torque的異構集群平臺調度算法的設計與實現(xiàn)
本文關鍵詞:基于Torque的異構集群平臺調度算法的設計與實現(xiàn),由筆耕文化傳播整理發(fā)布。
【摘要】:隨著高性能計算產業(yè)的蓬勃發(fā)展,越來越多的研究機構和商業(yè)公司向這一領域投入大量的人力和物力資源。而集群作為高性能計算的一種重要方式,以其高可擴展性和高性價比等優(yōu)勢在高性能計算中占據(jù)越來越重要的地位。隨著GPU通用計算的發(fā)展,GPU異構集群正漸漸成為集群的主流架構。 Torque是一種非常常見的開源集群管理系統(tǒng),廣泛應用于高校和其他研究機構的集群環(huán)境中。Torque在資源管理方面很強大,支持超過1500個計算節(jié)點,幾乎支持全部的UNIX/Linux系操作系統(tǒng)并且在不斷更新。但是在作業(yè)調度方面,Torque比較薄弱,其調度算法過于簡單,同時也無法支持GPU作業(yè)的調度。本文設計并實現(xiàn)了一種面向異構集群的、基于自學習的動態(tài)負載均衡調度算法,,對Torque的調度功能進行了擴展。然后設計實現(xiàn)了圖像卷積算法和X.264視頻編碼這兩個GPU應用實例,對擴展后的Torque系統(tǒng)進行了測試,發(fā)現(xiàn)其能很好地支持GPU作業(yè)并且在性能上得到了很大的提升。
【關鍵詞】:異構集群 Torque GPU 任務調度
【學位授予單位】:西安電子科技大學
【學位級別】:碩士
【學位授予年份】:2014
【分類號】:TP38;TP301.6
【目錄】:
- 摘要3-4
- Abstract4-7
- 第一章 緒論7-13
- 1.1 論文背景7-9
- 1.1.1 高性能計算與集群7-8
- 1.1.2 GPU 異構集群8-9
- 1.2 相關技術及研究現(xiàn)狀9-10
- 1.2.1 集群管理系統(tǒng)的相關研究9
- 1.2.2 作業(yè)調度的相關研究9-10
- 1.3 本文的主要研究工作10
- 1.4 章節(jié)安排10-13
- 第二章 集群管理與作業(yè)調度概述13-23
- 2.1 主流集群管理系統(tǒng)的介紹13-15
- 2.1.1 CONDOR14
- 2.1.2 LVS14-15
- 2.1.3 COMS15
- 2.2 調度算法的介紹與分析15-19
- 2.2.1 作業(yè)調度過程16-17
- 2.2.2 常見的調度算法17-19
- 2.3 調度器的相關介紹19-21
- 2.3.1 集中式調度器19-20
- 2.3.2 分布式調度器20
- 2.3.3 分層式調度器20-21
- 2.4 本章小結21-23
- 第三章 支持 GPU 的 Torque 集群平臺的擴展23-41
- 3.1 Torque 概述23-24
- 3.2 構建基于 Torque 的異構集群平臺24-26
- 3.2.1 硬件平臺搭建24
- 3.2.2 軟件部署24-26
- 3.3 Torque 體系結構和工作流程分析26-29
- 3.3.1 Torque 體系結構26-28
- 3.3.2 Torque 工作流程分析28-29
- 3.4 Torque 的源碼分析29-36
- 3.4.1 關鍵數(shù)據(jù)結構分析29-32
- 3.4.2 調度模塊的分析32-36
- 3.4.3 Torque 作業(yè)調度的缺陷與不足36
- 3.5 支持 GPU 的 Torque 系統(tǒng)的擴展36-40
- 3.5.1 GPU 資源的獲取和保存36-39
- 3.5.2 作業(yè)請求 GPU 資源的解析39
- 3.5.3 節(jié)點篩選時增加對 GPU 資源的匹配39-40
- 3.6 本章小結40-41
- 第四章 面向異構集群的自學習調度算法設計與實現(xiàn)41-53
- 4.1 算法提出的背景及意義41
- 4.2 問題描述和相關定義41-42
- 4.2.1 問題描述41-42
- 4.2.2 相關概念的定義42
- 4.3 面向異構集群的自學習調度算法的設計42-44
- 4.4 關鍵問題及其解決方法44-52
- 4.4.1 負載信息的采集44-45
- 4.4.2 性能的統(tǒng)一化描述45-46
- 4.4.3 基于剩余性能的任務分配46-47
- 4.4.4 作業(yè)的跟蹤與記錄47-48
- 4.4.5 基于自學習的負載變化估計48-51
- 4.4.6 針對 GPU 作業(yè)的特殊考慮51-52
- 4.5 本章小結52-53
- 第五章 應用實例與性能評價53-59
- 5.1 實驗環(huán)境53-55
- 5.2 實驗用例與結果分析55-58
- 5.2.1 實驗用例55-56
- 5.2.2 實驗結果與分析56-58
- 5.3 本章小結58-59
- 第六章 總結與展望59-61
- 致謝61-63
- 參考文獻63-66
【相似文獻】
中國期刊全文數(shù)據(jù)庫 前7條
1 張洋;陳文波;李廉;李兵;程應娥;燕昊;;高性能集群作業(yè)管理系統(tǒng)TORQUE分析與應用實現(xiàn)[J];計算機工程與科學;2007年10期
2 邱麗芬;;Torque中實現(xiàn)連環(huán)爆炸效果[J];電腦知識與技術;2011年24期
3 呂嵐;;在Torque中實現(xiàn)武器丟棄[J];計算機與現(xiàn)代化;2010年03期
4 牛景波;陳洪;王慶;朱虹;趙琛;;基于農業(yè)模型的農業(yè)培訓系統(tǒng)設計與實現(xiàn)[J];微計算機信息;2010年33期
5 邱麗芬;;基于Torque的物品拾取丟棄機制[J];電腦知識與技術;2011年29期
6 張明昕;陳蓮英;陳小輝;;NWChem并行計算集群的組建[J];科技資訊;2009年32期
7 孔勇奇;;復雜環(huán)境下車輛動力模型計算機仿真與研究[J];微計算機信息;2011年05期
中國重要會議論文全文數(shù)據(jù)庫 前10條
1 ;Direct Torque Control of Permanent Magnet Synchronous Motor[A];第二十九屆中國控制會議論文集[C];2010年
2 ;Torque-ripple Minimization in Switched Reluctance Motors Using Sliding Mode Variable Structure Control[A];第二十九屆中國控制會議論文集[C];2010年
3 ;Field Weakening Operation Control Strategies of Interior Permanent Magnet Synchronous Motor for Electric Vehicles[A];中國自動化學會控制理論專業(yè)委員會A卷[C];2011年
4 ;The Rectangular Fluctuation Control of Improved Direct Torque Controlled Permanent Magnet Synchronous Machines Based on RBF Network[A];第二十七屆中國控制會議論文集[C];2008年
5 ;Powertrain Control Strategies for Hybrid Electric Vehicles[A];湖北省內燃機學會2009年學術年會論文集[C];2009年
6 ;Parameter Design and FEM Analysis for 3-phase 6/4 Poles Switched Reluctance Motor[A];中國自動化學會控制理論專業(yè)委員會A卷[C];2011年
7 ;Efficiency Improvement on PMSM Twelve Sectors DTC System[A];Proceedings of the 2011 Chinese Control and Decision Conference(CCDC)[C];2011年
8 ;A Direct Torque Controlled Permanent Magnetic Synchronous Motor System Based on the New Rotor Position Estimation[A];第二十六屆中國控制會議論文集[C];2007年
9 ;Efficiency Optimization of IPMSM for Urban Rail Traction Based on IPC[A];中國自動化學會控制理論專業(yè)委員會D卷[C];2011年
10 ;Total Cource Locomotion Control of Assist Walking Exoskeleton Leg[A];中國自動化學會控制理論專業(yè)委員會D卷[C];2011年
中國碩士學位論文全文數(shù)據(jù)庫 前10條
1 顧群;基于Torque的異構集群平臺調度算法的設計與實現(xiàn)[D];西安電子科技大學;2014年
2 陳占鋒;Torque游戲引擎及腳本技術的應用研究[D];重慶大學;2008年
3 張洋;校園網(wǎng)格系統(tǒng)的中間件研究與實現(xiàn)[D];蘭州大學;2008年
4 李媛;集群作業(yè)管理中間件的研究與實現(xiàn)[D];首都師范大學;2009年
5 謝磊;Web集群作業(yè)管理系統(tǒng)的設計與實現(xiàn)[D];中山大學;2013年
6 韓鵬;并行環(huán)境下動態(tài)負載平衡方法的研究與實現(xiàn)[D];東北大學;2010年
7 劉政;液力變矩器瞬態(tài)動力學理論與實驗研究[D];上海交通大學;2013年
8 周林波;基于DSP對永磁同步電機直接轉矩控制技術的研究[D];武漢科技大學;2010年
9 楊永昌;交流電機直接轉矩控制技術研究與仿真[D];電子科技大學;2011年
10 趙軍偉;異步起動永磁同步電動機齒槽轉矩的研究[D];山東大學;2012年
本文關鍵詞:基于Torque的異構集群平臺調度算法的設計與實現(xiàn),由筆耕文化傳播整理發(fā)布。
本文編號:358224
本文鏈接:http://sikaile.net/kejilunwen/jisuanjikexuelunwen/358224.html