當(dāng)前,以云計算模式的付費平臺正在快速發(fā)展與完善,系統(tǒng)的計算能力和存儲能力得到了很大提升。而伴隨著大數(shù)據(jù)時代的到來,無論是金融業(yè)的處理規(guī)模還是學(xué)術(shù)界間交流的增加都對云計算平臺的建設(shè)提上日程。如在電力巡檢科學(xué)研究中,目前各國都采取配合無人機的方式來建立起一個完善的基于云計算的科學(xué)工作流平臺,它可以快速、方便且準(zhǔn)確的按需求完成既定目標(biāo)。然而在科學(xué)工作流長期運行的過程中會不可避免地產(chǎn)生大量有用的中間數(shù)據(jù),如何處理并降低周期上的費用成為科學(xué)家們研究的熱點�；谶@樣的背景,本文在以下兩個方面做出了工作:第一,提出了一種基于多目標(biāo)的數(shù)據(jù)長期存儲優(yōu)化策略。由于科學(xué)工作流中的數(shù)據(jù)存在重復(fù)使用或相互分享的情況,系統(tǒng)需要選擇部分關(guān)鍵性數(shù)據(jù)存儲以備未來使用。但在長期存儲過程中因中間數(shù)據(jù)量級過大,僅僅依托云計算平臺海量的存儲能力會導(dǎo)致高昂的存儲費用。所以,本文將在確定存儲節(jié)點以后,使用分層存儲的策略以降低長周期下的存儲費用。具體策略是將需要存儲的節(jié)點數(shù)據(jù)按周期中使用頻率分層,高頻率放置高速存儲中,普通數(shù)據(jù)普通存儲,低頻歸檔化。并針對用戶的具體需求給出推薦性方案,與此同時注意產(chǎn)生的額外時延。實驗結(jié)果表明,該策略可...

【文章頁數(shù)】：63 頁

【學(xué)位級別】：碩士

【部分圖文】：

圖1.1論文框架圖

第一章緒論8標(biāo)準(zhǔn)，以及一些在后文中將會使用到的方法。第三章基于多目標(biāo)的數(shù)據(jù)長期存儲優(yōu)化策略。針對長期存儲過程中數(shù)據(jù)使用頻率變化規(guī)律，提出一種分層存儲降低存儲費用的策略。通過該方法可以進一步降低科學(xué)工作流在長周期下的費用開銷，并保證用戶對時間的滿意度。第四章關(guān)鍵節(jié)點動態(tài)確定與分配時....

圖2.2遺傳算法流程圖

第二章科學(xué)工作流存儲概述及相關(guān)方法介紹14的方法有很多，也不一定必須量化成具體數(shù)值。比如對于等級這樣的排名比較可以只讓系統(tǒng)做出優(yōu)劣性選擇即可。圖2.2遺傳算法流程圖Fig.2.2simpleGAflowchart3、選擇算法。前文中“有選擇的選出父代個體”中的“有選擇”即是選擇算....

圖3.2直接拓展三種價格參數(shù)結(jié)構(gòu)

安徽大學(xué)碩士論文19圖3.1一個簡單的線性工作流例子Fig.3.1Asimpleexampleoflinearworkflow圖3.2直接拓展三種價格參數(shù)結(jié)構(gòu)Fig.3.2Threepriceparameterstructures圖3.1和圖3.2是一個簡單的由五個節(jié)點組成的科學(xué)....

圖3.3長期存儲中使用頻率變化趨勢

第三章基于多目標(biāo)的數(shù)據(jù)長期存儲優(yōu)化策略20決的是多個價格參數(shù)下結(jié)果集相互影響而可能使得價格參數(shù)之間沒有對照性。簡單的來說，比如當(dāng)前有兩種價格參數(shù)P1和P2。若采用P1價格時，科學(xué)工作流使用CTT-SP算法需要存儲節(jié)點為[，]，而P2參數(shù)下則改變?yōu)閇，]。這時對于系統(tǒng)來說需要存儲的....

本文編號：3965358