本文選題：Hadoop　切入點：HDFS　出處：《四川大學(xué)學(xué)報(自然科學(xué)版)》2014年06期 　論文類型：期刊論文

【摘要】：針對在Hadoop分布式文件系統(tǒng)中,系統(tǒng)默認(rèn)的數(shù)據(jù)負(fù)載均衡算法在做負(fù)載均衡決策時只根據(jù)磁盤空間使用率這單一的衡量指標(biāo)無法準(zhǔn)確反映集群中各服務(wù)器實際的工作負(fù)載狀況這一缺陷,通過研究和分析Hadoop分布式文件系統(tǒng)本身的負(fù)載均衡機(jī)制和在其基礎(chǔ)上改進(jìn)的負(fù)載均衡算法,本文提出了一種基于多衡量指標(biāo)的負(fù)載均衡方法,定義了一個衡量指標(biāo)函數(shù),然后根據(jù)該函數(shù)計算集群中各數(shù)據(jù)服務(wù)器的負(fù)載量來對集群進(jìn)行負(fù)載決策.最后通過實驗結(jié)果表明,該方法有效地提高了Hadoop分布式文件系統(tǒng)中的負(fù)載均衡效果.
[Abstract]:In a Hadoop distributed file system, The default data load balancing algorithm can not accurately reflect the actual workload status of each server in the cluster according to the single measure of disk space utilization when making load balancing decision. By studying and analyzing the load balancing mechanism of Hadoop distributed file system and the improved load balancing algorithm based on it, a load balancing method based on multiple metrics is proposed, and a measurement index function is defined. Then the load of each data server in the cluster is calculated according to the function. Finally, the experimental results show that the proposed method can effectively improve the load balancing effect in Hadoop distributed file system.
【作者單位】： 四川大學(xué)計算機(jī)學(xué)院;
【基金】：國家自然科學(xué)基金(61173159)
【分類號】：TP333

【相似文獻(xiàn)】

相關(guān)期刊論文 前10條

1 陳登偉,魯智勇;網(wǎng)絡(luò)動態(tài)負(fù)載均衡算法分析[J];現(xiàn)代電子技術(shù);2003年21期

2 趙兵選;衛(wèi)星;樊少華;藺玉;;基于累積點播概率的負(fù)載均衡算法研究[J];電子技術(shù);2008年09期

3 李輝;張文博;王偉;;基于節(jié)點分組的異構(gòu)集群負(fù)載均衡算法[J];計算機(jī)應(yīng)用研究;2009年07期

4 黃開金;羅國明;陳良;;分布式散列表中的負(fù)載均衡算法研究[J];電子質(zhì)量;2010年12期

5 邱釗;陳明銳;;Web集群負(fù)載均衡算法比較[J];現(xiàn)代計算機(jī);2006年08期

6 陳勇;;一種高效的分布式反饋流量負(fù)載均衡算法[J];計算機(jī)工程;2009年02期

7 胡志剛;張艷平;;基于目標(biāo)約束的分層動態(tài)負(fù)載均衡算法[J];計算機(jī)應(yīng)用研究;2011年03期

8 周松泉;;一種改進(jìn)的集群動態(tài)負(fù)載均衡算法[J];計算機(jī)與現(xiàn)代化;2012年01期

9 李新紅;張敏菊;;負(fù)載均衡算法的應(yīng)用研究[J];軟件導(dǎo)刊;2012年08期

10 李永明;李冬;;基于綜合負(fù)載動態(tài)分組的負(fù)載均衡算法研究[J];鄭州輕工業(yè)學(xué)院學(xué)報(自然科學(xué)版);2012年06期

相關(guān)會議論文 前1條

1 張耀旭;肖征榮;;基于LTE-Advanced網(wǎng)絡(luò)自優(yōu)化的負(fù)載均衡算法[A];2011全國無線及移動通信學(xué)術(shù)大會論文集[C];2011年

相關(guān)重要報紙文章 前1條

1 本報記者　范毅波;安全的“平方”[N];網(wǎng)絡(luò)世界;2003年

相關(guān)碩士學(xué)位論文 前10條

1 熊紀(jì)濤;校園網(wǎng)絡(luò)中自適應(yīng)負(fù)載均衡算法研究[D];電子科技大學(xué);2008年

2 馮秀玲;云計算環(huán)境下的負(fù)載均衡算法的研究與設(shè)計[D];北京郵電大學(xué);2012年

3 童瑞霞;基于動態(tài)反饋機(jī)制的集群負(fù)載均衡算法研究[D];武漢理工大學(xué);2011年

4 楊瀟;海量安全卡設(shè)備的負(fù)載均衡研究與實現(xiàn)[D];清華大學(xué);2007年

5 魏欽磊;基于集群的動態(tài)反饋負(fù)載均衡算法的研究[D];重慶大學(xué);2013年

6 陳廣東;流媒體服務(wù)器集群負(fù)載均衡算法研究[D];華中師范大學(xué);2006年

7 李子民;基于LVS的集群動態(tài)負(fù)載均衡算法研究[D];電子科技大學(xué);2009年

8 張小倩;高速負(fù)載均衡算法的FPGA實現(xiàn)[D];電子科技大學(xué);2010年

9 馬衛(wèi);一種改進(jìn)的LVS集群負(fù)載均衡算法[D];華中師范大學(xué);2006年

10 丁逸;基于層次策略的動態(tài)負(fù)載均衡算法研究[D];東南大學(xué);2005年

，

本文編號：1557506