本文關(guān)鍵詞：基于HDFS的創(chuàng)新知識云平臺存儲架構(gòu)的研究與設(shè)計

  更多相關(guān)文章： 創(chuàng)新知識 HDFS 小文件存儲 單點故障

【摘要】：針對現(xiàn)有存儲結(jié)構(gòu)無法滿足海量創(chuàng)新知識帶來的存儲及服務需求的問題,提出一種改進的HDFS(Hadoop Distributed File System)分布式存儲系統(tǒng)并應用到創(chuàng)新知識云平臺。首先引入包文件及分布式索引服務,改進HDFS小文件存儲的效率問題,然后通過優(yōu)化HDFS的命名空間備份及故障恢復服務,實現(xiàn)可用性更強、資源利用率更高的HDFS高可用架構(gòu)。通過系統(tǒng)的設(shè)計和實現(xiàn)證明優(yōu)化工作大大降低了命名節(jié)點的內(nèi)存壓力,提高了集群的可用性,并且改進的HDFS存儲系統(tǒng)可以滿足創(chuàng)新知識云平臺的存儲需求。
【作者單位】： 河北工業(yè)大學計算機科學與軟件學院;
【關(guān)鍵詞】： 創(chuàng)新知識 HDFS 小文件存儲 單點故障
【分類號】：TP333;TP393.09
【正文快照】： 0引言一直以來創(chuàng)新都是國內(nèi)外各行各業(yè)在場競爭中關(guān)注的重點之一,我國更是將科技創(chuàng)新作為國家的基本戰(zhàn)略。其中,建立創(chuàng)新平臺對創(chuàng)新知識進行全社會共享是促進創(chuàng)新發(fā)展過程中一個必不可少的環(huán)節(jié)。創(chuàng)新知識[1]的復雜性以及其量級帶來的是計算的復雜性和服務的動態(tài)性要求,這正與，

本文編號：692649