基于虛擬化平臺的Hadoop應(yīng)用I/O性能分析
發(fā)布時間:2024-01-03 13:31
MapReduce編程模型在大規(guī)模并行化應(yīng)用的設(shè)計和開發(fā)領(lǐng)域正在發(fā)揮越來越重要的作用.同時,Hadoop又是現(xiàn)在被廣泛使用的云平臺中數(shù)據(jù)密集型應(yīng)用開發(fā)的開源MapReduce實現(xiàn)方式.眾所周知,在云計算中最小的計算單元就是虛擬機,虛擬機有充分利用系統(tǒng)資源,使系統(tǒng)便于管理,提高系統(tǒng)可靠性和節(jié)省開銷等多種優(yōu)點.該文將通過一系列實驗對不同虛擬化平臺上Hadoop應(yīng)用的I/O性能進行評測分析,這些實驗的結(jié)果可以作為將來選擇虛擬機類型的標準,以便Hadoop應(yīng)用能夠在虛擬化平臺中獲得最好的I/O性能.
【文章頁數(shù)】:8 頁
【文章目錄】:
1 相關(guān)工作
1.1 相關(guān)研究
1.2 MapReduce/Hadoop
1.3 虛擬化軟件
1.3.1 虛擬化軟件分類
1.3.2 虛擬化軟件I/O調(diào)度技術(shù)
2 評測方法
2.1 測試方法和硬件配置
2.2 測試負載
2.2.1 Hadoop測試負載
2.2.2 TPCW
2.3 評測指標
3 測試結(jié)果分析
3.1 單機運行
3.2 完全分布式運行環(huán)境
3.3 混載分布式運行環(huán)境
4 工作總結(jié)
本文編號:3876469
【文章頁數(shù)】:8 頁
【文章目錄】:
1 相關(guān)工作
1.1 相關(guān)研究
1.2 MapReduce/Hadoop
1.3 虛擬化軟件
1.3.1 虛擬化軟件分類
1.3.2 虛擬化軟件I/O調(diào)度技術(shù)
2 評測方法
2.1 測試方法和硬件配置
2.2 測試負載
2.2.1 Hadoop測試負載
2.2.2 TPCW
2.3 評測指標
3 測試結(jié)果分析
3.1 單機運行
3.2 完全分布式運行環(huán)境
3.3 混載分布式運行環(huán)境
4 工作總結(jié)
本文編號:3876469
本文鏈接:http://sikaile.net/kejilunwen/jisuanjikexuelunwen/3876469.html
最近更新
教材專著