大數(shù)據(jù)計算與存儲分離技術實驗分析
發(fā)布時間:2023-05-07 17:05
隨著大數(shù)據(jù)的發(fā)展,傳統(tǒng)的集群混合部署模式逐漸暴露出管理難、資源競爭、性能相互制約等問題。計算與存儲分離部署方案不斷發(fā)展,開始呈現(xiàn)其優(yōu)勢,但是在解決計算與存儲資源彈性擴展、高容錯和高可靠問題上,且具備兼顧虛擬機和容器兩種部署方式的能力要求上,目前的方案都相形見絀;诖,提出并實現(xiàn)了一種基于Ceph的大數(shù)據(jù)平臺分離存儲方案,解耦了計算與存儲之間的綁定關系,同時實現(xiàn)了資源的彈性利用,并兼容了虛擬機和容器的兩種大數(shù)據(jù)部署方式。最后我們搭建了試驗環(huán)境對方案的功能及性能進行了測試,對上述能力進行了驗證。
【文章頁數(shù)】:5 頁
【文章目錄】:
1 引言
2 Hadoop計算與存儲分離
2.1 Hadoop計算與存儲分離概述
2.2 現(xiàn)有技術方案
2.2.1 Hadoop與HDFS分離部署方案
2.2.2 Hadoop與S3A分離部署方案
2.2.3 Hadoop Provided Storage分離部署方案
3 基于Ceph的Hadoop分離存儲方案
4 實驗與分析
4.1 功能測試
4.2 性能測試
5 結束語
本文編號:3810977
【文章頁數(shù)】:5 頁
【文章目錄】:
1 引言
2 Hadoop計算與存儲分離
2.1 Hadoop計算與存儲分離概述
2.2 現(xiàn)有技術方案
2.2.1 Hadoop與HDFS分離部署方案
2.2.2 Hadoop與S3A分離部署方案
2.2.3 Hadoop Provided Storage分離部署方案
3 基于Ceph的Hadoop分離存儲方案
4 實驗與分析
4.1 功能測試
4.2 性能測試
5 結束語
本文編號:3810977
本文鏈接:http://sikaile.net/kejilunwen/jisuanjikexuelunwen/3810977.html
最近更新
教材專著