基于HDFS的創(chuàng)新知識云平臺存儲架構的研究與設計
發(fā)布時間:2017-08-18 04:20
本文關鍵詞:基于HDFS的創(chuàng)新知識云平臺存儲架構的研究與設計
更多相關文章: 創(chuàng)新知識 HDFS 小文件存儲 單點故障
【摘要】:針對現有存儲結構無法滿足海量創(chuàng)新知識帶來的存儲及服務需求的問題,提出一種改進的HDFS(Hadoop Distributed File System)分布式存儲系統(tǒng)并應用到創(chuàng)新知識云平臺。首先引入包文件及分布式索引服務,改進HDFS小文件存儲的效率問題,然后通過優(yōu)化HDFS的命名空間備份及故障恢復服務,實現可用性更強、資源利用率更高的HDFS高可用架構。通過系統(tǒng)的設計和實現證明優(yōu)化工作大大降低了命名節(jié)點的內存壓力,提高了集群的可用性,并且改進的HDFS存儲系統(tǒng)可以滿足創(chuàng)新知識云平臺的存儲需求。
【作者單位】: 河北工業(yè)大學計算機科學與軟件學院;
【關鍵詞】: 創(chuàng)新知識 HDFS 小文件存儲 單點故障
【分類號】:TP333;TP393.09
【正文快照】: 0引言一直以來創(chuàng)新都是國內外各行各業(yè)在場競爭中關注的重點之一,我國更是將科技創(chuàng)新作為國家的基本戰(zhàn)略。其中,建立創(chuàng)新平臺對創(chuàng)新知識進行全社會共享是促進創(chuàng)新發(fā)展過程中一個必不可少的環(huán)節(jié)。創(chuàng)新知識[1]的復雜性以及其量級帶來的是計算的復雜性和服務的動態(tài)性要求,這正與,
本文編號:692649
本文鏈接:http://sikaile.net/kejilunwen/jisuanjikexuelunwen/692649.html