本文關(guān)鍵詞：基于分布式的電力云存儲(chǔ)系統(tǒng)的研究與應(yīng)用

  更多相關(guān)文章： 電力系統(tǒng) 云存儲(chǔ) 分布式文件系統(tǒng) 負(fù)載均衡

【摘要】：隨著國(guó)家電網(wǎng)公司業(yè)務(wù)的拓展，辦公文件的數(shù)量也就隨之劇增，從而導(dǎo)致存儲(chǔ)效率低等問題的出現(xiàn)，使得文件管理變得異常繁瑣，因此對(duì)電力云存儲(chǔ)系統(tǒng)的研究具有很高的應(yīng)用價(jià)值，云存儲(chǔ)系統(tǒng)是在當(dāng)前廣泛討論的云計(jì)算概念上延伸和發(fā)展出來(lái)的，具有高可用性、高擴(kuò)展性、高可靠性等特點(diǎn)，可以將各種類型的存儲(chǔ)介質(zhì)整合在一起來(lái)提供數(shù)據(jù)存儲(chǔ)和業(yè)務(wù)訪問的功能。HDFS是開源云框架Hadoop的底層文件系統(tǒng)的實(shí)現(xiàn)，具有高容錯(cuò)性和高傳輸率等特點(diǎn)，可以以流的形式寫入或者讀取文件系統(tǒng)中的數(shù)據(jù)，從而解決了文件存儲(chǔ)和訪問速度的問題，并且實(shí)現(xiàn)海量數(shù)據(jù)的存儲(chǔ)和管理。在云存儲(chǔ)理論的研究和分析的基礎(chǔ)上，將實(shí)現(xiàn)一個(gè)基于分布式的電力云存儲(chǔ)系統(tǒng)，并使得該系統(tǒng)逐步成為國(guó)網(wǎng)公司重要的數(shù)據(jù)存儲(chǔ)平臺(tái)。 首先，分析和研究了當(dāng)前廣泛討論的云存儲(chǔ)模型以及其關(guān)鍵技術(shù)。詳細(xì)描述了開源云計(jì)算框架Hadoop的底層文件系統(tǒng)HDFS。 其次，在研究現(xiàn)有HDFS的基礎(chǔ)上，針對(duì)其在負(fù)載均衡機(jī)制和小文件處理上的弊端進(jìn)行了深入的探討和研究，，從而提出了新的負(fù)載均衡優(yōu)化策略和小文件存儲(chǔ)優(yōu)化策略，設(shè)計(jì)的加權(quán)負(fù)載均衡算法在系統(tǒng)資源分配過程中，綜合考慮各節(jié)點(diǎn)的性能指標(biāo)因素，從而讓集群中各個(gè)節(jié)點(diǎn)充分的發(fā)揮作用，實(shí)現(xiàn)負(fù)載均衡。在傳統(tǒng)小文件處理方案的基礎(chǔ)上，從小文件的存儲(chǔ)結(jié)構(gòu)和索引結(jié)構(gòu)上進(jìn)行優(yōu)化設(shè)計(jì)，大大提高了小文件在HDFS上的存儲(chǔ)和檢索效率。 最后，本課題在原有HDFS架構(gòu)的基礎(chǔ)上，并融合了第三章和第四章的優(yōu)化策略，實(shí)現(xiàn)了基于分布式的電力云存儲(chǔ)系統(tǒng)，該系統(tǒng)主要實(shí)現(xiàn)的功能有文件上傳、文件下載、文件共享、文件瀏覽等，本系統(tǒng)的實(shí)現(xiàn)對(duì)Hadoop分布式文件系統(tǒng)在電力企業(yè)中的深化應(yīng)用具有探索和指導(dǎo)意義。
【學(xué)位授予單位】：華北電力大學(xué)
【學(xué)位級(jí)別】：碩士
【學(xué)位授予年份】：2014
【分類號(hào)】：TP333

【相似文獻(xiàn)】

中國(guó)期刊全文數(shù)據(jù)庫(kù) 前10條

1 于翔;日立數(shù)據(jù)推出Lightning 9900 V系列存儲(chǔ)系統(tǒng)[J];微電腦世界;2002年11期

2 周可,張江陵,馮丹;基于數(shù)據(jù)塊的對(duì)等存儲(chǔ)系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[J];計(jì)算機(jī)工程與科學(xué);2003年03期

3 毛宇星;存儲(chǔ)系統(tǒng)未來(lái)發(fā)展的新趨勢(shì)[J];中國(guó)金融電腦;2004年03期

4 王洛;制造業(yè)存儲(chǔ)系統(tǒng)應(yīng)用選型[J];電子商務(wù)世界;2004年04期

5 李瑋;日立力推新存儲(chǔ)系統(tǒng)[J];微電腦世界;2004年11期

6 ;存儲(chǔ)系統(tǒng) 電信行業(yè)服務(wù)滿意獎(jiǎng)[J];每周電腦報(bào);2004年20期

7 ;存儲(chǔ)系統(tǒng) 金融行業(yè)服務(wù)滿意獎(jiǎng) 電信行業(yè)應(yīng)用卓越獎(jiǎng)[J];每周電腦報(bào);2004年20期

8 ;存儲(chǔ)系統(tǒng) 制造行業(yè)產(chǎn)品創(chuàng)新獎(jiǎng)[J];每周電腦報(bào);2004年20期

9 ;存儲(chǔ)系統(tǒng) 電信行業(yè)技術(shù)領(lǐng)先獎(jiǎng)[J];每周電腦報(bào);2004年20期

10 ;快速恢復(fù)免重安裝——山東師范大學(xué)完成圖書館存儲(chǔ)系統(tǒng)建設(shè)[J];每周電腦報(bào);2004年28期

中國(guó)重要會(huì)議論文全文數(shù)據(jù)庫(kù) 前10條

1 趙志剛;;存儲(chǔ)系統(tǒng)在企業(yè)信息化中的應(yīng)用[A];2005年安徽通信論文集[C];2006年

2 黃曉峰;張杰;;礦井信息中心存儲(chǔ)系統(tǒng)設(shè)計(jì)[A];安全高效礦井機(jī)電裝備及信息化技術(shù)——陜西省煤炭學(xué)會(huì)學(xué)術(shù)年會(huì)論文集（2011）[C];2011年

3 孫哲;李昌銀;;構(gòu)建核電高可用云存儲(chǔ)系統(tǒng)[A];2012電力行業(yè)信息化年會(huì)優(yōu)秀論文專輯[C];2012年

4 焦超;周天彤;李祥學(xué);李建華;;面向?yàn)?zāi)備的高性能可信存儲(chǔ)系統(tǒng)設(shè)計(jì)[A];第十一屆保密通信與信息安全現(xiàn)狀研討會(huì)論文集[C];2009年

5 汪位龍;;設(shè)計(jì)院存儲(chǔ)系統(tǒng)建設(shè)初探[A];中國(guó)公路學(xué)會(huì)計(jì)算機(jī)應(yīng)用分會(huì)2004年年會(huì)學(xué)術(shù)論文集[C];2004年

6 梅松竹;李宗伯;;Storage 7000系列混合存儲(chǔ)系統(tǒng)分析[A];2009年中國(guó)高校通信類院系學(xué)術(shù)研討會(huì)論文集[C];2009年

7 王克敏;張璽;胡江凱;王毅濤;;NWP資料歸檔方法及其存儲(chǔ)系統(tǒng)的應(yīng)用[A];中國(guó)氣象學(xué)會(huì)2006年年會(huì)“中尺度天氣動(dòng)力學(xué)、數(shù)值模擬和預(yù)測(cè)”分會(huì)場(chǎng)論文集[C];2006年

8 孫哲;李昌銀;;DeDu:基于云計(jì)算的冗余刪除存儲(chǔ)系統(tǒng)[A];電力行業(yè)新一代信息技術(shù)研討會(huì)論文集[C];2011年

9 高小伍;黨齊民;林晨;;校園網(wǎng)存儲(chǔ)系統(tǒng)的研究與實(shí)現(xiàn)[A];中國(guó)高等教育學(xué)會(huì)教育信息化分會(huì)第十次學(xué)術(shù)年會(huì)論文集[C];2010年

10 宮海林;郭長(zhǎng)國(guó);苑洪亮;王懷民;;支持事務(wù)的非結(jié)構(gòu)化數(shù)據(jù)聚合存儲(chǔ)系統(tǒng)GSL[A];2006年全國(guó)開放式分布與并行計(jì)算機(jī)學(xué)術(shù)會(huì)議論文集（三）[C];2006年

中國(guó)重要報(bào)紙全文數(shù)據(jù)庫(kù) 前10條

1 記者　 孫永杰;存儲(chǔ)：中低端應(yīng)用漸成熱點(diǎn)[N];中國(guó)電子報(bào);2005年

2 ;HP再度出擊 EMC腹背受敵[N];計(jì)算機(jī)世界;2000年

3 ;湖北移動(dòng)建設(shè)智能存儲(chǔ)系統(tǒng)[N];人民郵電;2002年

4 本報(bào)記者 郭平;同有飛驥自主研發(fā)統(tǒng)一存儲(chǔ)系統(tǒng)[N];計(jì)算機(jī)世界;2010年

5 ;浪潮存儲(chǔ)為北航網(wǎng)絡(luò)中心升級(jí)[N];人民郵電;2007年

6 ;解決方案面向誰(shuí)？[N];中國(guó)高新技術(shù)產(chǎn)業(yè)導(dǎo)報(bào);2001年

7 張峰 劉平;決戰(zhàn)存儲(chǔ)之巔[N];網(wǎng)絡(luò)世界;2003年

8 ;賽 迪 觀 市[N];中國(guó)計(jì)算機(jī)報(bào);2003年

9 雪梅;統(tǒng)一存儲(chǔ)發(fā)展新趨勢(shì)[N];人民郵電;2012年

10 宋家雨;山東建筑大學(xué)圖書館存儲(chǔ)系統(tǒng)建設(shè)[N];網(wǎng)絡(luò)世界;2007年

中國(guó)博士學(xué)位論文全文數(shù)據(jù)庫(kù) 前10條

1 陸承濤;存儲(chǔ)系統(tǒng)性能管理問題的研究[D];華中科技大學(xué);2010年

2 聶雪軍;內(nèi)容感知存儲(chǔ)系統(tǒng)中信息信息生命周期管理關(guān)鍵技術(shù)研究[D];華中科技大學(xué);2011年

3 羅東健;大規(guī)模存儲(chǔ)系統(tǒng)高可靠性關(guān)鍵技術(shù)研究[D];華中科技大學(xué);2011年

4 聶雪軍;內(nèi)容感知存儲(chǔ)系統(tǒng)中信息生命周期管理關(guān)鍵技術(shù)研究[D];華中科技大學(xué);2010年

5 王鵬;低密度奇偶校驗(yàn)碼應(yīng)用于存儲(chǔ)系統(tǒng)的關(guān)鍵技術(shù)研究[D];華中科技大學(xué);2013年

6 刁瑩;用數(shù)學(xué)建模方法評(píng)價(jià)存儲(chǔ)系統(tǒng)性能[D];哈爾濱工程大學(xué);2013年

7 符青云;面向大規(guī)模流媒體服務(wù)的高性能存儲(chǔ)系統(tǒng)研究[D];電子科技大學(xué);2009年

8 王玉林;多節(jié)點(diǎn)容錯(cuò)存儲(chǔ)系統(tǒng)的數(shù)據(jù)與緩存組織研究[D];電子科技大學(xué);2010年

9 田敬;對(duì)等存儲(chǔ)系統(tǒng)中的數(shù)據(jù)可用性與安全性研究[D];北京大學(xué);2007年

10 李懷陽(yáng);進(jìn)化存儲(chǔ)系統(tǒng)數(shù)據(jù)組織模式研究[D];華中科技大學(xué);2006年

中國(guó)碩士學(xué)位論文全文數(shù)據(jù)庫(kù) 前10條

1 許偉民;非編網(wǎng)存儲(chǔ)系統(tǒng)規(guī)劃與分析[D];廈門大學(xué);2008年

2 王宇德;進(jìn)化存儲(chǔ)系統(tǒng)的研究及其關(guān)鍵技術(shù)分析[D];華中科技大學(xué);2004年

3 雷小強(qiáng);基于閃存的混合式存儲(chǔ)系統(tǒng)研究[D];華中科技大學(xué);2011年

4 吳永發(fā);面向終端應(yīng)用的云存儲(chǔ)系統(tǒng)研究與設(shè)計(jì)[D];廣東工業(yè)大學(xué);2013年

5 胡偉明;云存儲(chǔ)系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[D];中國(guó)地質(zhì)大學(xué)（北京）;2013年

6 吉永光;樹型結(jié)構(gòu)存儲(chǔ)系統(tǒng)設(shè)計(jì)與層間緩存技術(shù)[D];華中科技大學(xué);2007年

7 戴澤福;高性能層次并行流存儲(chǔ)系統(tǒng)研究與實(shí)現(xiàn)[D];國(guó)防科學(xué)技術(shù)大學(xué);2007年

8 王強(qiáng);社交網(wǎng)站的群集存儲(chǔ)系統(tǒng)的研究與設(shè)計(jì)[D];上海交通大學(xué);2009年

9 馬墨峰;基于存儲(chǔ)局域網(wǎng)的存儲(chǔ)系統(tǒng)的實(shí)現(xiàn)[D];西北工業(yè)大學(xué);2001年

10 伍開文;低能耗存儲(chǔ)系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[D];華中科技大學(xué);2012年

本文編號(hào)：1213341