【摘要】：運(yùn)行數(shù)據(jù)是大數(shù)據(jù)系統(tǒng)中增長最快、最為復(fù)雜也是最有價(jià)值的數(shù)據(jù)資源之一�；谶\(yùn)行數(shù)據(jù),軟件開發(fā)者可以分析關(guān)于軟件質(zhì)量和開發(fā)模型的重要信息。Spark作為一個(gè)分布式系統(tǒng),在運(yùn)行過程中會產(chǎn)生大量的運(yùn)行數(shù)據(jù),包括日志數(shù)據(jù)、監(jiān)控?cái)?shù)據(jù)以及任務(wù)圖數(shù)據(jù)。開發(fā)者可以基于運(yùn)行數(shù)據(jù)對系統(tǒng)進(jìn)行參數(shù)調(diào)優(yōu)。然而該系統(tǒng)所涉及的參數(shù)種類繁多、影響多樣且難以評估,若對系統(tǒng)了解不足,進(jìn)行參數(shù)調(diào)優(yōu)存在較大的困難。提出運(yùn)行數(shù)據(jù)歷史庫的概念,歷史庫中存儲的是以往運(yùn)行任務(wù)的特征信息以及運(yùn)行配置信息。同時(shí)提出了基于歷史庫搜索的參數(shù)優(yōu)化模型,并實(shí)驗(yàn)驗(yàn)證了本文提出的參數(shù)優(yōu)化模型對用戶任務(wù)性能提升具有較好的效果。

【相似文獻(xiàn)】

相關(guān)期刊論文 前10條

1 張文霖;;數(shù)據(jù)分析初體驗(yàn)[J];數(shù)據(jù);2013年05期

2 古福;;讓大數(shù)據(jù)分析更快速、更簡化[J];互聯(lián)網(wǎng)周刊;2013年11期

3 于宗民;;數(shù)據(jù)分析應(yīng)用的最大障礙[J];中國金融電腦;2007年08期

4 魏巍巍;;論數(shù)據(jù)分析在企業(yè)經(jīng)營管理中的重要性[J];產(chǎn)業(yè)與科技論壇;2012年12期

5 張文霖;;數(shù)據(jù)分析六步曲[J];數(shù)據(jù);2013年06期

6 戴未琰;;大數(shù)據(jù)分析概要[J];物聯(lián)網(wǎng)技術(shù);2013年08期

7 王海蘊(yùn);;大數(shù)據(jù)分析 市場成倍增長 深耕空間巨大[J];財(cái)經(jīng)界;2013年10期

8 ;大數(shù)據(jù)分析系列3:大數(shù)據(jù)分析如何權(quán)衡存儲[J];電腦與電信;2013年10期

9 馬_";;對大數(shù)據(jù)分析相關(guān)問題的思考[J];信息通信技術(shù);2013年06期

10 ;數(shù)據(jù)分析3.0[J];董事會;2014年01期

相關(guān)會議論文 前10條

1 申敏;;數(shù)據(jù)分析的原則和一般方法[A];2010年云南電力技術(shù)論壇論文集（文摘部分）[C];2010年

2 劉剛;;小學(xué)生數(shù)據(jù)分析觀念的培養(yǎng)[A];中華教育理論與實(shí)踐科研論文成果選編(第五卷)[C];2013年

3 石勇;;在銀行和金融數(shù)據(jù)分析中的評分方法[A];Data Analysis, Econo-physics and Risk Management--Proceedings of CCAST (World Laboratory) Workshop[C];2001年

4 吳一平;;基于數(shù)據(jù)分析的離校工作改進(jìn)[A];中國高等教育學(xué)會教育信息化分會第十二次學(xué)術(shù)年會論文集[C];2014年

5 呂大青;;送變電施工企業(yè)中數(shù)據(jù)分析的運(yùn)用[A];第二屆浙江中西部科技論壇論文集（第一卷）[C];2005年

6 李小花;李姝;;大數(shù)據(jù)分析在指揮信息系統(tǒng)中的應(yīng)用[A];2014第二屆中國指揮控制大會論文集（下）[C];2014年

7 范麗偉;唐煥文;唐一源;;空間獨(dú)立成分分析在fMRⅠ數(shù)據(jù)分析中的應(yīng)用[A];第九次全國生物物理大會學(xué)術(shù)會議論文摘要集[C];2002年

8 張軍;李婕;;中國國民休閑狀態(tài)變化研究——基于網(wǎng)上數(shù)據(jù)分析[A];第十五屆全國區(qū)域旅游學(xué)術(shù)開發(fā)研討會暨度假旅游論壇論文冊[C];2010年

9 徐小龍;王汝傳;姜波;;一種新的基于P2P的電信海量數(shù)據(jù)分析業(yè)務(wù)模式[A];普適計(jì)算及其軟件新技術(shù)——第三屆長三角計(jì)算機(jī)科技論壇文集[C];2006年

10 邵東華;;高速公路的平面控制復(fù)測與數(shù)據(jù)分析[A];第四屆“測繪科學(xué)前沿技術(shù)論壇”論文精選[C];2012年

相關(guān)重要報(bào)紙文章 前10條

1 匿銘;數(shù)據(jù)分析的“磨刀階段”[N];中華讀書報(bào);2013年

2 胡英;澳發(fā)布政府可信數(shù)據(jù)分析指導(dǎo)草案[N];人民郵電;2014年

3 鄭愛民;陜西加強(qiáng)消費(fèi)維權(quán)數(shù)據(jù)分析利用[N];中國工商報(bào);2014年

4 本報(bào)駐美國記者 吳成良;“數(shù)據(jù)分析”成了“金飯碗”[N];人民日報(bào);2014年

5 本報(bào)記者 楊群;大數(shù)據(jù)分析亮出專家的“自貿(mào)研判”[N];解放日報(bào);2014年

6 周桂生　湯建國;數(shù)據(jù)分析行業(yè)登陸湖南,帶來巨大商機(jī)[N];中國企業(yè)報(bào);2008年

7 朱文明 甫瀚公司咨詢專家;數(shù)據(jù)分析提升決策智慧[N];中國審計(jì)報(bào);2009年

8 ;國采中心空調(diào)協(xié)議供貨數(shù)據(jù)分析[N];政府采購信息報(bào);2010年

9 武虹 審計(jì)署駐沈陽特派辦;以數(shù)據(jù)分析為統(tǒng)領(lǐng)開展數(shù)字化審計(jì)工作[N];中國審計(jì)報(bào);2012年

10 杰弗尼;行走在大數(shù)據(jù)分析誤區(qū)旁的零售商[N];中國商報(bào);2013年

相關(guān)博士學(xué)位論文 前6條

1 劉岳;區(qū)域地球化學(xué)數(shù)據(jù)分析及成礦信息融合模型研究[D];中國地質(zhì)大學(xué);2015年

2 董媛香;基于軟集合的不完備不一致數(shù)據(jù)分析及決策方法研究[D];重慶大學(xué);2014年

3 張睿;數(shù)據(jù)分析在污染控制領(lǐng)域的節(jié)能優(yōu)化應(yīng)用[D];中國科學(xué)技術(shù)大學(xué);2014年

4 陳宜治;函數(shù)型數(shù)據(jù)分析若干方法及應(yīng)用[D];浙江工商大學(xué);2011年

5 郭廣報(bào);基于并行統(tǒng)計(jì)計(jì)算的金融數(shù)據(jù)分析[D];山東大學(xué);2012年

6 孫建強(qiáng);生物磁共振數(shù)據(jù)分析中的幾個(gè)問題[D];中國科學(xué)院研究生院（武漢物理與數(shù)學(xué)研究所）;2014年

相關(guān)碩士學(xué)位論文 前10條

1 周儒軍;基于Hadoop的分布式監(jiān)控平臺的研究與實(shí)現(xiàn)[D];華南理工大學(xué);2015年

2 施建輝;中職生職業(yè)道德認(rèn)識現(xiàn)狀調(diào)查研究[D];上海師范大學(xué);2015年

3 丁國輝;核磁共振數(shù)據(jù)分析中的兩個(gè)問題[D];中國科學(xué)院研究生院(武漢物理與數(shù)學(xué)研究所);2015年

4 張清;面向精準(zhǔn)廣告投放的數(shù)據(jù)分析與可視化系統(tǒng)設(shè)計(jì)與實(shí)現(xiàn)[D];山東大學(xué);2015年

5 周徐;基于分層采樣的DeepWeb數(shù)據(jù)分析方法研究[D];蘇州大學(xué);2015年

6 王佳琦;糾正性反饋對高中生英語冠詞習(xí)得的影響[D];內(nèi)蒙古師范大學(xué);2015年

7 顧星竹;基于Hadoop的PCF系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[D];南京大學(xué);2014年

8 張海洋;大數(shù)據(jù)的統(tǒng)計(jì)分析技術(shù)比較研究[D];南京大學(xué);2014年

9 王乾;論大數(shù)據(jù)分析的方法論意義[D];武漢科技大學(xué);2015年

10 劉麗霞;配方產(chǎn)品數(shù)據(jù)分析研究[D];中國海洋大學(xué);2008年

，

本文編號：2584463