隨著科研工作的推進(jìn),科研數(shù)據(jù)出現(xiàn)了海量的增長, PB級(jí)科研數(shù)據(jù)需要高效、穩(wěn)定的存儲(chǔ)系統(tǒng).傳統(tǒng)的數(shù)據(jù)存儲(chǔ)方案存在資源利用率差、集群擴(kuò)展性能低以及用戶界面操作不友好等問題,嚴(yán)重限制了數(shù)據(jù)在科研場(chǎng)景下的有效利用.依托中科院地球科學(xué)大數(shù)據(jù)專項(xiàng),本文設(shè)計(jì)并實(shí)現(xiàn)高效的存儲(chǔ)系統(tǒng)i-Harbor.該系統(tǒng)以對(duì)象存儲(chǔ)系統(tǒng)為核心架構(gòu),以開源的Ceph分布式存儲(chǔ)系統(tǒng)和MongoDB數(shù)據(jù)庫作為對(duì)象數(shù)據(jù)和元數(shù)據(jù)的存儲(chǔ)載體,設(shè)計(jì)通用的基于HTTP和FTP協(xié)議的數(shù)據(jù)接口,同時(shí)利用多副本和糾刪碼技術(shù)消除單點(diǎn)故障,配合Zabbix集群監(jiān)控系統(tǒng),實(shí)時(shí)定位平臺(tái)參數(shù)以及故障,提高平臺(tái)容災(zāi)性和安全性.此外,基于底層分布式結(jié)構(gòu)的特點(diǎn),集群可以隨意添加存儲(chǔ)節(jié)點(diǎn),提高了平臺(tái)的擴(kuò)展性.

【文章頁數(shù)】：7 頁


本文編號(hào)：3747855