【摘要】：為提高現(xiàn)代煤炭企業(yè)海量數(shù)據(jù)存儲的效率,設計了一種基于HDFS(Hadoop Distributed File System)的煤炭企業(yè)云存儲平臺。該平臺在分布式文件存儲系統(tǒng)中增加小文件處理模塊,可實現(xiàn)小文件的判斷以及合并處理,并將其應用于云存儲技術(shù),以提高煤炭企業(yè)海量數(shù)據(jù)的處理效率。介紹了云存儲平臺文件系統(tǒng)HDFS的架構(gòu)功能以及小文件模塊的實現(xiàn)方案,并在此基礎上重點闡述了云存儲平臺的基本配置和系統(tǒng)設計。
[Abstract]:In order to improve the efficiency of mass data storage in modern coal enterprises, a cloud storage platform of coal enterprises based on HDFS (Hadoop Distributed File System) is designed. The platform adds small file processing module to distributed file storage system, which can realize small file judgment and merge processing, and apply it to cloud storage technology, in order to improve the processing efficiency of massive data in coal enterprises. This paper introduces the architecture and function of file system HDFS of cloud storage platform and the realization scheme of small file module. On the basis of this, the basic configuration and system design of cloud storage platform are expounded emphatically.
【作者單位】： 湖南電子科技職業(yè)學院;
【分類號】：TP333

【相似文獻】

相關(guān)期刊論文 前10條

1 王巖;;網(wǎng)絡信息存儲平臺的開發(fā)與應用[J];網(wǎng)絡安全技術(shù)與應用;2013年10期

2 筱月;締造智能型網(wǎng)絡存儲平臺[J];中國計算機用戶;2003年28期

3 潘永東;;高校云存儲平臺建設的研究和規(guī)劃[J];電子技術(shù)與軟件工程;2013年23期

4 劉華日;陳志民;劉小波;葉志蟬;谷豐;;實驗中心信息存儲平臺的改進與應用[J];實驗室科學;2013年05期

5 ;富士通推出全新存儲平臺[J];互聯(lián)網(wǎng)周刊;2006年22期

6 方延風;;提高福建省臺灣文獻信息中心存儲平臺性能的思考[J];情報探索;2010年11期

7 ;存儲平臺三維擴展時代到來[J];中國金融電腦;2011年05期

8 ;存儲平臺三維擴展時代[J];微電腦世界;2011年08期

9 ;基于HP StorageWorks的綠色存儲平臺[J];計算機與網(wǎng)絡;2008年15期

10 馬天蔚;;150萬誰支撐——惠普為上海熱線計費系統(tǒng)搭建存儲平臺[J];每周電腦報;2001年61期

相關(guān)會議論文 前5條

1 蔡靈靈;張艷萍;;新華社統(tǒng)一存儲平臺的設計與實踐[A];中國新聞技術(shù)工作者聯(lián)合會五屆一次理事會暨學術(shù)年會論文集（上篇）[C];2009年

2 王猛;蔡靈靈;;異構(gòu)存儲平臺統(tǒng)一監(jiān)控的設計與實現(xiàn)[A];中國新聞技術(shù)工作者聯(lián)合會五屆一次理事會暨學術(shù)年會論文集（上篇）[C];2009年

3 郭嘉;;以云存儲平臺助力電力企業(yè)信息化[A];電力行業(yè)信息化優(yōu)秀論文集2013[C];2013年

4 陳志文;;數(shù)據(jù)集中安全存儲平臺研制[A];中國工程物理研究院科技年報(2012年版)[C];2012年

5 丁嵩;田敬;陳東;吳剛;代亞非;;UPStore:一個開放的P2P存儲平臺[A];第15屆全國信息存儲技術(shù)學術(shù)會議論文集[C];2008年

相關(guān)重要報紙文章 前10條

1 綦悠悠;黑龍江聯(lián)通打造網(wǎng)絡存儲平臺[N];人民郵電;2007年

2 江蘇省電力公司電力科學研究院 趙新冬 王勤 戴威;電力行業(yè)存儲平臺集中管理設計[N];中國信息化周報;2014年

3 聞風;浪潮搭建高品質(zhì)存儲平臺[N];政府采購信息報;2005年

4 ;富士通展示最新存儲平臺[N];人民郵電;2007年

5 日立數(shù)據(jù)系統(tǒng)公司(HDS)副總裁兼首席技術(shù)官 Hubert Yoshida;大數(shù)據(jù)存儲平臺必須具有彈性[N];中國計算機報;2012年

6 本報記者 張廣彬;存儲平臺 通用為王[N];計算機世界;2004年

7 本報記者 霍皓迪;建設永續(xù)運行的存儲平臺[N];通信產(chǎn)業(yè)報;2002年

8 蔡彭年;浪潮成功構(gòu)建電子繳稅入庫存儲平臺[N];中國稅務報;2007年

9 李佳師;微軟試水存儲平臺[N];中國電子報;2003年

10 電腦商報記者 劉一冰;“兼”濟天下 有“容”乃大[N];電腦商報;2010年

相關(guān)碩士學位論文 前10條

1 王雅山;云存儲平臺中加密數(shù)據(jù)的多關(guān)鍵字排序搜索技術(shù)研究[D];哈爾濱工業(yè)大學;2015年

2 張宇翔;指紋支付系統(tǒng)中海量指紋數(shù)據(jù)云存儲平臺的優(yōu)化設計與實現(xiàn)[D];浙江師范大學;2015年

3 牛茜;基于HDFS的云存儲平臺在企業(yè)信息管理系統(tǒng)中的應用研究[D];西安科技大學;2015年

4 余輝;面向微博輿情的Hadoop存儲平臺設計與實現(xiàn)[D];中國科學院大學(工程管理與信息技術(shù)學院);2016年

5 劉鑌瑩;聯(lián)通虛擬資源云存儲平臺設計與實現(xiàn)[D];電子科技大學;2016年

6 梁X;分布式教育云存儲平臺的設計與實現(xiàn)[D];華南理工大學;2016年

7 金晨;警務信息化系統(tǒng)中云存儲平臺的設計和實現(xiàn)[D];電子科技大學;2013年

8 郝偉;湖南移動網(wǎng)管集中云存儲平臺搭建與測試[D];中南大學;2010年

9 何穎鵬;非結(jié)構(gòu)化數(shù)據(jù)統(tǒng)一存儲平臺的設計與實現(xiàn)[D];浙江大學;2013年

10 田原;云存儲中存儲平臺與數(shù)據(jù)安全關(guān)鍵技術(shù)研究與實現(xiàn)[D];北京郵電大學;2015年

，

本文編號：2458342